噓!別說(shuō)話,Emteq通過(guò)肌電信號(hào)就能讀懂你的表情
作為英國(guó)排名前二十的大學(xué),薩塞克斯大學(xué)提供一些對(duì)于未來(lái)VR的發(fā)展相當(dāng)重要的本科課程。它的教育涉及神經(jīng)學(xué),認(rèn)知科學(xué)和生物醫(yī)學(xué)等多個(gè)領(lǐng)域。我們可以看到有很多VR技術(shù)人才來(lái)自這個(gè)校園,不過(guò),本次我們不是來(lái)介紹學(xué)校的,我們是來(lái)討論技術(shù)的。這個(gè)技術(shù)就是Emteq開(kāi)發(fā)的表情識(shí)別技術(shù)。
在薩賽克斯校園的一個(gè)小角落里,我們能找到薩賽克斯創(chuàng)新大樓。而專注開(kāi)發(fā)表情識(shí)別技術(shù)的公司Emteq就設(shè)立在這里。Emteq的開(kāi)發(fā)團(tuán)隊(duì)在表情識(shí)別方面的確具有獨(dú)到之處,他們安置在VR頭顯上系統(tǒng)可以識(shí)別用戶的面部表情。與普通的紅外光學(xué)系統(tǒng)不同的是,他們的傳感器安置在直接與皮膚接觸的面罩上,這個(gè)系統(tǒng)可以直接讀取用戶面部的肌電活動(dòng)、心率和皮膚反應(yīng)等情況,然后將它們“翻譯”成表情動(dòng)作。
也許比不上位置追蹤和眼球追蹤等技術(shù),但表情識(shí)別同樣是VR科技的重要一環(huán)。尤其是在VR社交領(lǐng)域。在今年的Oculus Connect 3大會(huì)上,F(xiàn)acebook展示了一個(gè)VR社交原型應(yīng)用,它也能在一定程度上用動(dòng)畫(huà)傳達(dá)用戶的表情動(dòng)作。但如果想要真正實(shí)現(xiàn)這一點(diǎn),我們就需要表情識(shí)別技術(shù)了,而目前,這一領(lǐng)域還在早期開(kāi)發(fā)階段。
同時(shí),Emteq的技術(shù)的確還很原始,實(shí)際上他們的開(kāi)發(fā)工作才進(jìn)行了一年,不過(guò),它已經(jīng)顯示出巨大的潛力。他們希望自己的技術(shù)能夠理解人類語(yǔ)境、情感脈絡(luò)和物理語(yǔ)境,他們需要將VR、AR和AI等技術(shù)進(jìn)行結(jié)合。
Emteq稍微展示了一點(diǎn)他們開(kāi)發(fā)的簡(jiǎn)略的Demo,有的需要手勢(shì)有的不需要。他們展示用的機(jī)器是Oculus的DK2和CV1.他們表示自己的設(shè)備將以外接設(shè)備的形式出現(xiàn),可以兼容各種頭顯。他們還在考慮Vive平臺(tái)的Daydream平臺(tái)的兼容性。
首先展示的DK2上的Demo,它顯示出一個(gè)精確復(fù)制了工作人員表情的虛擬形象。他在右面的調(diào)試菜單調(diào)出通過(guò)傳感器獲得的實(shí)時(shí)反饋數(shù)據(jù),然后左面是一大堆供用戶選擇的表情,它們用來(lái)進(jìn)行校準(zhǔn)。之后,你需要做一些規(guī)定動(dòng)作,讓系統(tǒng)讀取并用機(jī)器學(xué)習(xí)進(jìn)行分析。
目前,每個(gè)表情需要花費(fèi)30分鐘校準(zhǔn),不過(guò)團(tuán)隊(duì)正在開(kāi)發(fā)簡(jiǎn)化的校準(zhǔn)流程。在第一個(gè)展示中,我們看到工作人員坐在一個(gè)虛擬女性對(duì)面,她正在重復(fù)他的表情。目前的軟件有很多BUG,有時(shí)候虛擬角色會(huì)在復(fù)制大笑時(shí)顯示出痛苦的表情。不過(guò)大部分情況下,系統(tǒng)都運(yùn)作良好。
另兩個(gè)Demo則展示了不同的應(yīng)用場(chǎng)景。有一個(gè)是好萊塢特效拍攝,例如當(dāng)時(shí)拍攝《阿凡達(dá)》時(shí),工作人員需要在演員臉上安置多個(gè)追蹤點(diǎn),然后采用類似Vive的Lighthouse那樣的追蹤技術(shù)識(shí)別其表情,這樣的方法識(shí)別起來(lái)的確精準(zhǔn),但非常復(fù)雜。
還有一個(gè)相當(dāng)獨(dú)特,Emteq創(chuàng)建了自己的Facebook留言板,只要你看著帖子上具體的某句話,就可以將自己的表情轉(zhuǎn)換成emoji符號(hào)添加進(jìn)去。
目前,他們的Faceteq技術(shù)還做不到實(shí)時(shí),不過(guò)經(jīng)過(guò)完善,我們有希望使用到無(wú)需校準(zhǔn)的實(shí)時(shí)表情傳遞。他們表示自己的系統(tǒng)會(huì)根據(jù)數(shù)據(jù)進(jìn)行完善,它獲得了越多的數(shù)據(jù),就變得更加智能。
另外,他們還可以通過(guò)眼電描記法實(shí)現(xiàn)眼球追蹤,目前開(kāi)發(fā)人員正在努力當(dāng)中,這個(gè)技術(shù)也能夠進(jìn)行精準(zhǔn)快速的眼球追蹤,應(yīng)用前景非常廣泛。
說(shuō)到目前的技術(shù)應(yīng)用,他們開(kāi)發(fā)了一個(gè)治療應(yīng)用,可以輔助治療一種類型的面癱。我們期待著這項(xiàng)技術(shù)能夠在今后大放異彩。
未經(jīng)授權(quán),禁止轉(zhuǎn)載,違者必將追究法律責(zé)任。
文章點(diǎn)評(píng)
相關(guān)閱讀
-
最強(qiáng)眼球交互公司現(xiàn)已被谷歌正式收購(gòu)
前段時(shí)間,VR之家曾介紹了一家叫做Eyefluence的公司,他們開(kāi)發(fā)了一種革命性的人機(jī)交互UI。這個(gè)界面最大的特色在于你只需要移動(dòng)眼球就能對(duì)計(jì)算機(jī)進(jìn)行操作,它甚至免除了常見(jiàn)的凝視和眨眼操作。當(dāng)然,這...
- 199元小米VR 全球首個(gè)第三方Daydream國(guó)內(nèi)首發(fā)
- 可以扔掉鼠標(biāo)了 Jaunt發(fā)布《羅盤(pán)》增強(qiáng)WebVR體驗(yàn)
- Daydream非高端 谷歌新頭顯還支持眼球追蹤
- 變身全景視頻 Rift獨(dú)占內(nèi)容《迷失》登陸GearVR
- NBA放出VR大禮:每周至少一個(gè)VR直播