ChatGPT用途廣泛，不少行業都會使用它辦事，而近日美國普渡大學的研究發現，ChatGPT回答編程問題的錯誤率高達52%。
研究團隊根據517個來自編程問答網站Stack Overflow的內容，向ChatGPT查詢有關編程的問題，以評估其正確性、一致性、全面性和簡潔性。此外，他們也對ChatGPT的回答作出語言和情感分析，並向12名參與者進行調查。
研究結果顯示，雖然ChatGPT的回答語言風格良好，但52%的回覆內容都是錯誤，且77%屬於冗長。此外，有約39% ChatGPT答案獲得參與者的信任，惟當中有77%答案其實是錯誤。
參與者只有在回答中的錯誤很明顯時，才能識別出來。否則，他們會很容易被ChatGPT友好、權威和細緻的語言風格所誤導。