當(dāng)前AI對(duì)話(huà)機(jī)器人的創(chuàng)意能力已與人類(lèi)相當(dāng)。但作者也指出,他們只評(píng)價(jià)了涉及創(chuàng)造性評(píng)估的單項(xiàng)任務(wù)的表現(xiàn)。


《科學(xué)報(bào)告》9月14日發(fā)表的一項(xiàng)研究指出,大型語(yǔ)言模型(LLM)人工智能(AI)對(duì)話(huà)機(jī)器人在創(chuàng)造性思維任務(wù)上能夠超越大部分人類(lèi)。該任務(wù)要求受試者想出日常用品的替代用途,這是發(fā)散性思維的一個(gè)例子。不過(guò),得分最高的人類(lèi)受試者依然能超過(guò)對(duì)話(huà)機(jī)器人的最佳答案。
發(fā)散性思維通常是指與創(chuàng)造性相關(guān)的一類(lèi)思維過(guò)程,需要為特定任務(wù)想出各種不同創(chuàng)意或?qū)Σ?。發(fā)散性思維一般通過(guò)替代用途任務(wù)(AUT)進(jìn)行評(píng)估,受試者被要求在短時(shí)間內(nèi)想出某個(gè)日常用品的其他用途,越多越好。受試者的回答從4個(gè)類(lèi)別進(jìn)行打分:流利度、靈活性、原創(chuàng)性和精細(xì)度。
在這項(xiàng)研究中,ChatGPT3、ChatGPT4和Copy.Ai完成了4個(gè)物品,即繩子、盒子、鉛筆、蠟燭的AUT,芬蘭圖爾庫(kù)大學(xué)的Mika Koivisto和挪威卑爾根大學(xué)的Simone Grassini隨后將其與人類(lèi)的答案進(jìn)行了比較。
研究人員根據(jù)語(yǔ)義距離即回答與物品原始用途的相關(guān)度,和創(chuàng)造性回答的原創(chuàng)性打分。他們用一個(gè)計(jì)算方法在0~2的范圍里量化語(yǔ)義距離,同時(shí)讓不知道作答者身份的人類(lèi)打分者在1~5的范圍里客觀(guān)評(píng)價(jià)創(chuàng)造性。
平均而言,對(duì)話(huà)機(jī)器人的回答在語(yǔ)義距離(0.95相對(duì)于0.91)和創(chuàng)造性(2.91相對(duì)于2.47)的得分上顯著高于人類(lèi)的回答。人類(lèi)回答在這兩項(xiàng)的得分差距更大——最低分遠(yuǎn)低于A(yíng)I的回答,但最高分普遍比AI高。最佳人類(lèi)回答在8個(gè)評(píng)分項(xiàng)中的7項(xiàng)都超過(guò)了所有對(duì)話(huà)機(jī)器人的最佳回答。
這項(xiàng)研究結(jié)果表明,當(dāng)前AI對(duì)話(huà)機(jī)器人的創(chuàng)意能力已與人類(lèi)相當(dāng)。但作者也指出,他們只評(píng)價(jià)了涉及創(chuàng)造性評(píng)估的單項(xiàng)任務(wù)的表現(xiàn)。作者認(rèn)為,今后的研究或探索如何將AI融入創(chuàng)造性過(guò)程來(lái)提升人類(lèi)表現(xiàn)。
相關(guān)論文信息:
https://doi.org/10.1038/s41598-023-40858-3