
卡內(nèi)基梅隆大學(xué)的研究人員研發(fā)了一項(xiàng)新技術(shù):添加聲音和振動(dòng)意識(shí),從而創(chuàng)造真正的情境感知計(jì)算。這個(gè)稱為Ubicoustics的系統(tǒng),為智能設(shè)備交互添加了額外的環(huán)境,使智能揚(yáng)聲器知道它是在廚房里,或是使智能傳感器知道你在隧道里而不是在馬路上。
卡內(nèi)基梅隆大學(xué)的人機(jī)交互研究所的研究員Chris Harrison說:“廚房里的智能揚(yáng)聲器無法弄清楚它是否在廚房里,更不用說知道一個(gè)人在廚房里做了什么。但是如果這些設(shè)備能夠理解周圍發(fā)生的事情,那么它們可能會(huì)更有幫助性。”
這個(gè)系統(tǒng)的實(shí)現(xiàn)是使用內(nèi)置揚(yáng)聲器來創(chuàng)建“基于聲音的活動(dòng)識(shí)別。”那么它們是如何做到這一點(diǎn)呢?這點(diǎn)非常有趣。
一位博士生Gierad Laput說:“我們的主要想法是利用娛樂業(yè)中常用的專業(yè)音效庫。它們清晰,標(biāo)簽清楚,分割良好,多樣化。此外,我們可以將它們轉(zhuǎn)換并投影到數(shù)百種不同的變體中,創(chuàng)建大量數(shù)據(jù),這非常適合培訓(xùn)深度學(xué)習(xí)模型。”
Laput表示,識(shí)別聲音并將聲音置于正確的環(huán)境中是一項(xiàng)挑戰(zhàn),在某種程度上,這是因?yàn)槎喾N聲音的存在可能會(huì)相互產(chǎn)生干擾。在他們的測(cè)試中,Ubicoustics的準(zhǔn)確率約為80%--這與人類準(zhǔn)確性相比具有競(jìng)爭(zhēng)力,但還不足以支持用戶應(yīng)用程序。更好的麥克風(fēng),更高的采樣率和不同的模型架構(gòu)都可以通過進(jìn)一步的研究來提高準(zhǔn)確性。
在另一篇論文中,國際人機(jī)交互設(shè)計(jì)協(xié)會(huì)的一位博士生Yang Zhang和Laput,Harrison介紹了他們的Vibrosight,它可以使用激光振動(dòng)測(cè)量法來檢測(cè)房間特定位置的振動(dòng)。類似于克格勃(蘇聯(lián)國家安全委員會(huì))曾用于檢測(cè)窗戶等反光表面上的振動(dòng)的基于光的設(shè)備,這使他們可以監(jiān)聽到產(chǎn)生振動(dòng)的對(duì)話內(nèi)容。
這個(gè)系統(tǒng)使用低功率激光和反射器來感測(cè)物體是處于打開還是關(guān)閉的狀態(tài),或者椅子或桌子是否被移動(dòng)過。傳感器可以同時(shí)監(jiān)控多個(gè)物體,并且,附著在物體上的標(biāo)簽不使用電力。假設(shè)有光線,那么單個(gè)激光就能監(jiān)視房間周圍或甚至不同房間內(nèi)的多個(gè)物體。
這項(xiàng)研究仍處于早期階段,但在未來,可能你在做菜的時(shí)候,機(jī)器人能夠聽到,并且根據(jù)它們的技能來提供幫助。