專家近期展開的一項(xiàng)研究表明,ChatGPT所提供的建議,相比較人類專家提供的回復(fù)更平衡、更全面、更善解人意、更有幫助。
來自墨爾本大學(xué)和西澳大利亞大學(xué)的研究團(tuán)隊從十大熱門建議欄網(wǎng)站上,隨機(jī)挑選了50個社會困境問題。
該科研團(tuán)隊邀請了404名志愿者,盲測展示由專欄作家和ChatGPT所提供的答案,要求其回答哪個答案更平衡、更全面、更善解人意、更有幫助。
研究人員發(fā)現(xiàn),ChatGPT在五個隨機(jī)提出的問題中的每一個和所有查詢類別中都“明顯優(yōu)于”人類顧問,支持人工智能的偏好率在70%到85%之間。

兩項(xiàng)調(diào)查都顯示,許多人發(fā)現(xiàn)ChatGPT的建議比專業(yè)顧問的建議更平衡、更完整、更善解人意、更有幫助,而且總體上更好。在調(diào)查1的404名參與者和調(diào)查2的401名參與者中,大多數(shù)人在所有方面都投票贊成ChatGPT。
該研究還表明,ChatGPT參與者的答案比建議專欄作家的答案更長。在第二項(xiàng)研究中,研究人員縮短ChatGPT的回答內(nèi)容長度,確保其內(nèi)容長度和專欄作家回答相近。
第二項(xiàng)研究表明,雖然偏好率有所減少,但整體而言ChatGPT提供的回答更全面更優(yōu)秀。
盡管ChatGPT建議的質(zhì)量很高,但77%的受訪者依然表示,更喜歡人類專家給出的回答。
IT之家附上論文參考地址:
Howe Piers Douglas Lionel,Fay Nicolas,Saletta Morgan,Hovy Eduard,ChatGPT’s advice is perceived as better than that of professional advice columnists,2023,https://www.frontiersin.org/articles/10.3389/fpsyg.2023.1281255