研究發(fā)現(xiàn)：ChatGPT 回答編程問題的錯誤率超過 50%

 　　美國普渡大學(xué)的研究發(fā)現(xiàn)，OpenAI 開發(fā)的人工智能聊天機(jī)器人 ChatGPT 在回答軟件編程問題時，錯誤率超過一半，但仍能騙過三分之一的提問者。

　　該研究團(tuán)隊分析了 ChatGPT 對 517 個 Stack Overflow 網(wǎng)站上的問題的回答，評估了其正確性、一致性、全面性和簡潔性。他們還對回答進(jìn)行了語言和情感分析，并對 12 名志愿參與者進(jìn)行了問卷調(diào)查。研究報告的結(jié)論是：ChatGPT 的回答雖然語言風(fēng)格良好，但 52% 的回答是錯誤的，77% 是冗長的。參與者只有在回答中的錯誤很明顯時，才能識別出來。否則，他們會被 ChatGPT 的友好、權(quán)威和細(xì)致的語言風(fēng)格所誤導(dǎo)。

　　Stack Overflow 是一個專門為程序員提供問答服務(wù)的網(wǎng)站，被認(rèn)為是開發(fā)者獲取代碼片段和解決問題的重要來源。然而，該網(wǎng)站近年來也面臨著流量下降、內(nèi)容質(zhì)量下降和用戶信任下降等問題。據(jù) SimilarWeb 在 4 月份的一份報告顯示，自 2022 年 1 月以來，該網(wǎng)站每月流量下降了 6%，3 月份下降了 13.9%，而 ChatGPT 可能是導(dǎo)致其流量下降的原因之一。Stack Overflow 則否認(rèn)了 SimilarWeb 的評估，并表示其流量受到搜索算法和 ChatGPT 興趣激增的影響。

　　OpenAI 在其 ChatGPT 網(wǎng)站上承認(rèn)其軟件“可能會產(chǎn)生關(guān)于人、地點(diǎn)或事實的不準(zhǔn)確信息。”截至IT之家發(fā)稿，該公司暫未對普渡大學(xué)的研究作出回應(yīng)。