【資料圖】

自生成式人工智能ChatGPT問世以來，眾多開發者試圖將其應用于編程輔助工具。然而，近期美國普渡大學的一項研究發現，ChatGPT在回答編程問題時的錯誤率超出預期。 據了解，ChatGPT在回答軟件編程問題時的錯誤率超過了50%，且這些錯誤巧妙到足以誤導三分之一的提問者。研究團隊對ChatGPT在Stack Overflow網站上回答的517個問題進行了分析，評估了其正確性、一致性、全面性和簡潔性，并對12名志愿者進行了問卷調查。 研究結果顯示，盡管ChatGPT的回答語言風格良好，但52%的回答是錯誤的，77%的回答過于冗長。同時，只有在回答中存在明顯錯誤時，參與實驗的志愿者才能察覺到問題，而在其他情況下，他們往往會被AI的友好且細致的語言風格所誤導。 這一發現無疑表明，對于開發者來說，當前階段的生成式AI作為編程輔助工具還有很長的路要走，甚至可能產生反效果。然而，值得注意的是，OpenAI早前已在官網上告知用戶，AI的回答可能會產生關于人、地點或事實的不準確信息。

關鍵詞：