黑科技!加州理工學(xué)院團隊利用AR為盲人提供空間語音導(dǎo)航

信息化觀察網(wǎng)
編譯
世界衛(wèi)生組織估計,全球約有13億人患有某種形式的視力障礙。這些人中有2.17億人患有中度至重度視力障礙,而3600萬人屬于法定視力障礙者。

世界衛(wèi)生組織估計,全球約有13億人患有某種形式的視力障礙。這些人中有2.17億人患有中度至重度視力障礙,而3600萬人屬于法定視力障礙者。

最近發(fā)表的一篇名為《AR為盲人提供認知助手》的報告詳細介紹了三位加州理工學(xué)院科學(xué)家的工作,這些科學(xué)家正在深入探討使用AR并通過計算機視覺算法為盲人提供導(dǎo)航,當(dāng)盲人用戶進入一個房間時,這些物體會“說出自己的身份”。

由Markus Meister、Yang Liu和USC博士后學(xué)者Noelle Stiles組成的團隊利用了Microsoft HoloLens的功能,在現(xiàn)實世界的“場景”上創(chuàng)建數(shù)字網(wǎng)格,并使用了一款名為CARA(認知增強現(xiàn)實助手)的獨特軟件,能夠?qū)⑿畔⑥D(zhuǎn)換為音頻消息,讓每個物體都能發(fā)出聲音,當(dāng)用戶佩戴頭戴設(shè)備時,他們也能夠聽見這些聲音。

通過CARA,HoloLens將檢測周圍環(huán)境中的物體,然后使用立體式聲音讓物體發(fā)出聲音,告知用戶它們是什么物體。如果物體位于左側(cè),那么語音消息將會從AR耳機的左側(cè)發(fā)出,如果物體位于右側(cè),那么AR耳機的右側(cè)就會發(fā)出聲音。音調(diào)的高低會根據(jù)你與物體的距離而改變:物體越近,音調(diào)越高。

為了避免用戶受到太多信息的干擾,加州理工學(xué)院的團隊設(shè)計了幾種簡化體驗的模式。一種是“Spotlight Mode(聚光燈模式)”,用戶可以直接面向一個物體,然后該特定的物體會告訴用戶它是什么。另一種模式稱為“Scan Mode(掃描模式)”,CARA會掃描房間中的物體,然后每個物體依次從左到右告訴用戶它們是什么。

第三種模式“Target Mode(目標模式)”,允許用戶使用房間中的任何物體作為指導(dǎo)來幫助導(dǎo)航周圍環(huán)境。這種方法與在博物館使用語音導(dǎo)覽的體驗非常相似,但是你收到的是周圍環(huán)境的信息,而不是藝術(shù)品信息。你可以把它想象成有語音雷達。

在加州理工學(xué)院提供的視頻中,加州理工學(xué)院生物科學(xué)教授兼神經(jīng)生物學(xué)執(zhí)行干事Markus Meister表示:“所有的VR和AR技術(shù)都是從場景中獲取信息,然后將其轉(zhuǎn)換為其它用途。”

在加州理工學(xué)院的試驗期間,他們的7名盲人測試對象使用了HoloLens,目的是通過導(dǎo)航,到達Liu位于二樓的辦公室。戴上AR耳機后,測試對象會收到一條消息,說明導(dǎo)航已經(jīng)開始,然后按照“跟我走”的說明進行操作。

這幾名盲人對象只經(jīng)過了簡單的培訓(xùn),他們跟著導(dǎo)航走過了大廳、兩層樓梯和幾個拐角,并最終到達了Liu的辦公室,這表明他們的第一次嘗試沒有任何問題。

Tommy Marcellus并不是一名法定盲人,但如果不佩戴眼鏡的話,他就無法開車、在公園里散步,甚至沒有辦法工作。他告訴VRScout:“這種類型的技術(shù)為比我還不幸的盲人提供了額外的獨立性和安全性,并絕對會為他們開啟了無限的可能,”并補充道:“在我們看來,走在路邊和進入家門等一些簡單的動作都是很簡單的事情。如果你是一名法定盲人,我無法想象那是什么感覺。”

Marcellus則提出了這樣一個事實:這項技術(shù)并不能夠讓他在沒有眼鏡的情況下開車,看電影或在街上認出一位朋友,但他堅信AR可以取代盲杖,許多盲人仍然使用盲杖來“掃描”周圍的障礙物和方向標。“我們可以看到人們會戴著AR頭戴設(shè)備,而不是使用盲杖,這些設(shè)備也會變得更加準確。”Marcellus說道。

所以,這個團隊的目標是什么?Meister表示:“當(dāng)你想要為設(shè)備添加功能時,會受到一些限制,從本質(zhì)上來說,這是軟件方面的問題。”

加州理工學(xué)院做出的早期測試帶來了很多的承諾,但仍然有很多工作要做。下一階段的測試應(yīng)該探討HoloLens和CARA在人流量很多的大型公共場所的工作情況,例如購物中心、商店和游樂園等。

原文作者:Bobby Carlton

THEEND

最新評論(評論僅代表用戶觀點)

更多
暫無評論