2024 年 5 月 26日 - 2:32 上午
26.6 C
Hong Kong
Home生活時尚科技生活研究指:ChatGPT回答編程問題 錯誤率達52%

研究指:ChatGPT回答編程問題 錯誤率達52%

ChatGPT用途廣泛,不少行業都會使用它辦事,而近日美國普渡大學的研究發現,ChatGPT回答編程問題的錯誤率高達52%。

研究團隊根據517個來自編程問答網站Stack Overflow的內容,向ChatGPT查詢有關編程的問題,以評估其正確性、一致性、全面性和簡潔性。此外,他們也對ChatGPT的回答作出語言和情感分析,並向12名參與者進行調查。

研究結果顯示,雖然ChatGPT的回答語言風格良好,但52%的回覆內容都是錯誤,且77%屬於冗長。此外,有約39% ChatGPT答案獲得參與者的信任,惟當中有77%答案其實是錯誤。
參與者只有在回答中的錯誤很明顯時,才能識別出來。否則,他們會很容易被ChatGPT友好、權威和細緻的語言風格所誤導。

必看文章

相關文章