噓!別說話,Emteq通過肌電信號就能讀懂你的表情
作為英國排名前二十的大學,薩塞克斯大學提供一些對于未來VR的發(fā)展相當重要的本科課程。它的教育涉及神經(jīng)學,認知科學和生物醫(yī)學等多個領域。我們可以看到有很多VR技術人才來自這個校園,不過,本次我們不是來介紹學校的,我們是來討論技術的。這個技術就是Emteq開發(fā)的表情識別技術。
在薩賽克斯校園的一個小角落里,我們能找到薩賽克斯創(chuàng)新大樓。而專注開發(fā)表情識別技術的公司Emteq就設立在這里。Emteq的開發(fā)團隊在表情識別方面的確具有獨到之處,他們安置在VR頭顯上系統(tǒng)可以識別用戶的面部表情。與普通的紅外光學系統(tǒng)不同的是,他們的傳感器安置在直接與皮膚接觸的面罩上,這個系統(tǒng)可以直接讀取用戶面部的肌電活動、心率和皮膚反應等情況,然后將它們“翻譯”成表情動作。
也許比不上位置追蹤和眼球追蹤等技術,但表情識別同樣是VR科技的重要一環(huán)。尤其是在VR社交領域。在今年的Oculus Connect 3大會上,F(xiàn)acebook展示了一個VR社交原型應用,它也能在一定程度上用動畫傳達用戶的表情動作。但如果想要真正實現(xiàn)這一點,我們就需要表情識別技術了,而目前,這一領域還在早期開發(fā)階段。
同時,Emteq的技術的確還很原始,實際上他們的開發(fā)工作才進行了一年,不過,它已經(jīng)顯示出巨大的潛力。他們希望自己的技術能夠理解人類語境、情感脈絡和物理語境,他們需要將VR、AR和AI等技術進行結合。
Emteq稍微展示了一點他們開發(fā)的簡略的Demo,有的需要手勢有的不需要。他們展示用的機器是Oculus的DK2和CV1.他們表示自己的設備將以外接設備的形式出現(xiàn),可以兼容各種頭顯。他們還在考慮Vive平臺的Daydream平臺的兼容性。
首先展示的DK2上的Demo,它顯示出一個精確復制了工作人員表情的虛擬形象。他在右面的調試菜單調出通過傳感器獲得的實時反饋數(shù)據(jù),然后左面是一大堆供用戶選擇的表情,它們用來進行校準。之后,你需要做一些規(guī)定動作,讓系統(tǒng)讀取并用機器學習進行分析。
目前,每個表情需要花費30分鐘校準,不過團隊正在開發(fā)簡化的校準流程。在第一個展示中,我們看到工作人員坐在一個虛擬女性對面,她正在重復他的表情。目前的軟件有很多BUG,有時候虛擬角色會在復制大笑時顯示出痛苦的表情。不過大部分情況下,系統(tǒng)都運作良好。
另兩個Demo則展示了不同的應用場景。有一個是好萊塢特效拍攝,例如當時拍攝《阿凡達》時,工作人員需要在演員臉上安置多個追蹤點,然后采用類似Vive的Lighthouse那樣的追蹤技術識別其表情,這樣的方法識別起來的確精準,但非常復雜。
還有一個相當獨特,Emteq創(chuàng)建了自己的Facebook留言板,只要你看著帖子上具體的某句話,就可以將自己的表情轉換成emoji符號添加進去。
目前,他們的Faceteq技術還做不到實時,不過經(jīng)過完善,我們有希望使用到無需校準的實時表情傳遞。他們表示自己的系統(tǒng)會根據(jù)數(shù)據(jù)進行完善,它獲得了越多的數(shù)據(jù),就變得更加智能。
另外,他們還可以通過眼電描記法實現(xiàn)眼球追蹤,目前開發(fā)人員正在努力當中,這個技術也能夠進行精準快速的眼球追蹤,應用前景非常廣泛。
說到目前的技術應用,他們開發(fā)了一個治療應用,可以輔助治療一種類型的面癱。我們期待著這項技術能夠在今后大放異彩。
未經(jīng)授權,禁止轉載,違者必將追究法律責任。
文章點評
相關閱讀
-
最強眼球交互公司現(xiàn)已被谷歌正式收購
前段時間,VR之家曾介紹了一家叫做Eyefluence的公司,他們開發(fā)了一種革命性的人機交互UI。這個界面最大的特色在于你只需要移動眼球就能對計算機進行操作,它甚至免除了常見的凝視和眨眼操作。當然,這...
- 199元小米VR 全球首個第三方Daydream國內首發(fā)
- 可以扔掉鼠標了 Jaunt發(fā)布《羅盤》增強WebVR體驗
- Daydream非高端 谷歌新頭顯還支持眼球追蹤
- 變身全景視頻 Rift獨占內容《迷失》登陸GearVR
- NBA放出VR大禮:每周至少一個VR直播