大多數(shù)家庭服務(wù)機(jī)器人都有提醒功能,提醒小孩起床,提醒老人吃藥。不過這種提醒很簡單,就是設(shè)置一個鬧鐘。
3
如果是那種沒辦法設(shè)置時間,就是提醒你一些日常的生活行為,比如提醒你倒完牛奶后要把牛奶瓶放回冰箱,把電腦電源開源關(guān)閉等等行為細(xì)節(jié),機(jī)器人又要如何完成這些提醒。
之前有簡單的比如滯留物檢測的算法,直接可以分析圖像當(dāng)中是否有物體遺忘。滯留物檢測是檢測確定的區(qū)域,不需要深度學(xué)習(xí),只需一些圖像處理的算法就可以檢測,這種在監(jiān)控場景下應(yīng)用的比較多,比如自動取款機(jī)邊,有人拿了錢忘了包包。
而如果加入深度學(xué)習(xí),則可完成更加復(fù)雜的場景應(yīng)用。目前這種還處在實驗室階段,比如康奈爾和斯坦福大學(xué)正在研究的一款名為Watch-Bot的機(jī)器人,可以通過深度學(xué)習(xí),在無需設(shè)置的情況下,可在恰當(dāng)?shù)臅r間和地點提醒主人該做什么事。該機(jī)器人由3D傳感器、攝像機(jī)、激光發(fā)射器和筆記本電腦組成,攝像機(jī)可以用來定位被遺忘的物體,激光發(fā)射器則可以用來提醒主人去做遺忘的事情。

研究者在5間廚房和8間辦公室中進(jìn)行了實驗。在這個過程中,Watch-Bot共拍攝了458段視頻,其中222段記錄了人們所遺忘的場景。研究員從中總結(jié)出人們?nèi)粘5纳盍?xí)慣和經(jīng)常性遺忘的事情,并將其編入Watch-Bot的程序中。
比如我們從冰箱里拿出牛奶盒,在倒完牛奶后忘記將牛奶盒放回冰箱,機(jī)器人通過3D傳感器和攝像頭首先會對人體進(jìn)行跟蹤,紀(jì)錄人手的運(yùn)動軌跡,將抓取到的深度圖像數(shù)據(jù)與提前編入程序中的模型訓(xùn)練數(shù)據(jù)進(jìn)行匹配,從而判斷人是否有遺忘將牛奶盒放回冰箱這一步驟。



這是一個復(fù)雜的過程,需要很大的數(shù)據(jù)量做訓(xùn)練,首先它是有監(jiān)督的訓(xùn)練,然后會用自己的概率模型做無監(jiān)督的訓(xùn)練,來做數(shù)據(jù)更新。
目前Watch-Bot對于主人日程安排的提醒的準(zhǔn)確率接近60%。它可以提醒主人將書放回書架,關(guān)閉電腦顯示器,將牛奶放回冰箱和將微波爐里加熱好的食物取出等。當(dāng)然,這些對于很多人來說可能并沒有什么實用性,不過對于一些神經(jīng)衰退如阿爾茨海默癥患者,或者是工作環(huán)境比較危險的工作者來說,適當(dāng)?shù)奶嵝堰€是很有必要的。