2017年7月20日下午，信和研究院舉辦“人工智能與金融的情感碰撞”主題培訓(xùn)活動(dòng)。執(zhí)行院長王建斌在會(huì)上首次向信和財(cái)富內(nèi)部相關(guān)部門揭開“人際互動(dòng)多模態(tài)AI反欺詐機(jī)器人”項(xiàng)目的神秘面紗，并由首席科學(xué)家——美國卡內(nèi)基梅隆大學(xué)楊瀅博士和新加坡國立大學(xué)張鹿鳴博士詳細(xì)介紹了本項(xiàng)目的理論基礎(chǔ)和技術(shù)。
“人際互動(dòng)多模態(tài)AI反欺詐機(jī)器人”是信和研究院在構(gòu)建類金融企業(yè)反欺詐能力方面的一次全新嘗試。與傳統(tǒng)類金融企業(yè)防范反欺詐的手段不同，信和研究院研發(fā)的“人際互動(dòng)多模態(tài)AI反欺詐機(jī)器人”并不單純使用授信數(shù)據(jù)進(jìn)行交叉校驗(yàn)，更關(guān)注授信對象在授信流程的臨場互動(dòng)中表現(xiàn)出的疑點(diǎn)，利用多維度的情感計(jì)算規(guī)則和算法識別授信對象的欺詐幾率并預(yù)警欺詐模式。
人的面部表情可以分為自主表情和不自主表情，并受腦部不同區(qū)域控制。情緒變化通常會(huì)引起表情、聲紋和肢體動(dòng)作的變化，例如激怒時(shí)說話的聲調(diào)提高、遲疑時(shí)說話速度減慢等。人缺乏對自己表情的監(jiān)測和反饋，因此通常不能完全控制和偽飾自己所有的行為。
“人際互動(dòng)多模態(tài)AI反欺詐機(jī)器人”可以識別人在授信過程中的面部肌肉表情單元，并將識別結(jié)果進(jìn)行編碼，即AU值。這些表情單元涵蓋了授信對象的眉毛、眼角、臉頰、嘴唇等面部細(xì)節(jié)特征。目前，機(jī)器人可以提取45種表情細(xì)節(jié)特征進(jìn)行編碼。
機(jī)器人提取并編碼AU值后，從授信對象的情緒、聲紋、生理、語義表達(dá)等方面提取用于監(jiān)測授信對象的幾何特征、外形特征、形變特征、運(yùn)動(dòng)特征和頻域特征，用于后續(xù)的情感映射。
特征提取工作完成后，機(jī)器人通過神經(jīng)網(wǎng)絡(luò)等深度學(xué)習(xí)算法，自動(dòng)演算情緒計(jì)算公式，將AU值的組合與情緒關(guān)聯(lián)，構(gòu)建從面部特征點(diǎn)到AU識別、從AU提取到情緒映射的監(jiān)測路徑，最終完成對授信對象的情緒監(jiān)控。
未來研究院的AI反欺詐機(jī)器人項(xiàng)目投產(chǎn)后，信和授信平臺(tái)可以通過手機(jī)APP內(nèi)置的影音采集能力，實(shí)時(shí)采集對授信對象在問答環(huán)節(jié)流程中的表情、聲紋、肢體動(dòng)作，并通過部署在云計(jì)算平臺(tái)上的機(jī)器人實(shí)時(shí)進(jìn)行情緒計(jì)算、監(jiān)測授信對象的欺詐可能性并提出欺詐模式的預(yù)警，從而實(shí)現(xiàn)智能決策。
