HoloLens應(yīng)用模仿回聲定位幫助視障人士導(dǎo)航
大家對(duì)HoloLens這種MR頭顯的一般印象是黑科技、科幻片成真,但實(shí)際上HoloLens APP也是可以充滿溫情的,例如下面的這個(gè)應(yīng)用就可以幫助視覺障礙人群進(jìn)行室內(nèi)導(dǎo)航,原理?yè)?jù)說類似蝙蝠的回聲定位。
盡管實(shí)際體驗(yàn)過的人其實(shí)不多,但經(jīng)過一年多的普及,很多人至少已經(jīng)聽說過VR頭顯,而MR和HoloLens則仍然只有科技愛好者知道。這些設(shè)備誕生的根本原因還是在于為人們帶來(lái)更加方便的生活。人們探索VR和AR在醫(yī)療等方面的應(yīng)用,并考慮讓它們進(jìn)入日常生活中。
現(xiàn)在,一位波特蘭的HoloLens開發(fā)者Javier Davalos就展示了MR硬件在幫助視障人士方面的作用。
在開發(fā)者上傳到Y(jié)ouTube的視頻介紹中,Davalos使用HoloLens的音頻輔助正常地在室內(nèi)環(huán)境中走動(dòng)。我們知道HoloLens擁有掃描周圍3D環(huán)境構(gòu)建實(shí)時(shí)地圖的能力,Davalos就借助HoloLens的音頻提示確定方向和物品的距離等。這個(gè)應(yīng)用模仿了蝙蝠的回聲定位系統(tǒng),將檢測(cè)到的視覺信息轉(zhuǎn)化為容易理解的音頻波動(dòng),用戶聽到的聲音會(huì)因?yàn)榫嚯x物品的遠(yuǎn)近而發(fā)生變化。
首先,Davalos展示了一個(gè)單視場(chǎng)版本的應(yīng)用,它可以根據(jù)用戶前方的物品的不同而改變音頻。例如樓梯的這一層和另一層就聽起來(lái)不同。屋子里的其他物品也擁有自己獨(dú)有的聲音。這個(gè)系統(tǒng)可以讓人憑聲音分辨不同的物品。
然后就是立體模式,或者說你將擁有“兩只眼”,而我們知道雙目視覺可以識(shí)別出物體的遠(yuǎn)近了。這時(shí),來(lái)自兩個(gè)不同點(diǎn)的聲音會(huì)分別進(jìn)入用戶的左右耳,這樣我們甚至能聽出是不是到墻邊了或者前面是否是桌角等信息。總之就是精確度提升。
除了立體模式,Davalos還設(shè)計(jì)了簡(jiǎn)單的語(yǔ)音命令系統(tǒng),用戶可以聽到HoloLens SLAM系統(tǒng)測(cè)量物品長(zhǎng)度的結(jié)果,或者電子羅盤提供的方向信息,又或者讓HoloLens幫你數(shù)樓梯階數(shù)。
目前,Davalos還在完善這個(gè)HoloLens應(yīng)用,他還需要一些視障人士幫助他正確評(píng)估軟件功能。
未經(jīng)授權(quán),禁止轉(zhuǎn)載,違者必將追究法律責(zé)任。
文章點(diǎn)評(píng)
相關(guān)閱讀
-
微軟解鎖觀眾視角:HoloLens輕松拍攝MR視頻
微軟表示:混合現(xiàn)實(shí)(MR)視頻拍起來(lái)也不是那么困難嘛,不過,首先你得有HoloLens。...
- CEO辟謠:Magic Leap諜照并非原型機(jī)
- 現(xiàn)實(shí)與理想的落差 Magic Leap原型機(jī)諜照曝光
- 納米材料顯神威!Metalenses助力iGlass概念成真
- 畫個(gè)圈圈讓你消失:《傳送門MR》真神奇!
- 重現(xiàn)阿凡達(dá):腦機(jī)接口如何應(yīng)用于MR?