研究发现：ChatGPT 回答编程问题的错误率超过 50%

图片地址：https://img.ithome.com/newsuploadfiles/2023/8/69ddb3a8-1498-4272-9844-a169492c876b.jpg?x-bce-process=image/format,f_auto

IT之家 8 月 8 日消息，美国普渡大学的研究发现，OpenAI 开发的人工智能聊天机器人 ChatGPT 在回答软件编程问题时，错误率超过一半，且能骗过三分之一的提问者。该研究团队分析了 ChatGPT 对 517 个 Stack Overflow 网站上的问题的回答，评估了其正确性、一致性、全面性和简洁性。他们还对回答进行了语言和情感分析，并对 12 名志愿参与者进行了问卷调查。研究报告的结论是：ChatGPT 的回答虽然语言风格良好，但 52% 的回答是错误的，77% 是冗长的。参与者只有在回答中的错误很明显时，才能识别出来。否则，他们会被 ChatGPT 的友好、权威和细致的语言风格所误导。Stack Overflow 是一个专门为程序员提供问答服务的网站，被认为是开发者获取代码片段和解决问题的重要来源。然而，该网站近年来也面临着流量下降、内容质量下降和用户信任下降等问题。据 SimilarWeb 在 4 月份的一份报