IT之家 8 月 8 日消息,美国普渡大学的研究发现,OpenAI 开发的人工智能聊天机器人 ChatGPT 在回答软件编程问题时,错误率超过一半,且能骗过三分之一的提问者。该研究团队分析了 ChatGPT 对 517 个 Stack Overflow 网站上的问题的回答,评估了其正确性、一致性、全面性和简洁性。他们还对回答进行了语言和情感分析,并对 12 名志愿参与者进行了问卷调查。研究报告的结论是:ChatGPT 的回答虽然语言风格良好,但 52% 的回答是错误的,77% 是冗长的。参与者只有在回答中的错误很明显时,才能识别出来。否则,他们会被 ChatGPT 的友好、权威和细致的语言风格所误导。Stack Overflow 是一个专门为程序员提供问答服务的网站,被认为是开发者获取代码片段和解决问题的重要来源。然而,该网站近年来也面临着流量下降、内容质量下降和用户信任下降等问题。据 SimilarWeb 在 4 月份的一份报
研究发现:ChatGPT 回答编程问题的错误率超过 50%
2023-08-08 11:42:51来源: IT之家
关注公众号
赞
你的鼓励是对作者的最大支持
- OpenAI曾讨论提高ChatGPT付费版价格,最高每月2000美元|钛媒体AGI2024-09-06 06:36:59
- 美国一市长候选人欲用 ChatGPT 治理城市,遭 OpenAI 封号2024-08-21 14:22:35
- ChatGPT 成 8 岁娃“导师”,各国中小学成 AI 坚实用户群体2024-08-19 14:09:13
- OpenAI 找回场子:chatgpt-4o-latest AI 模型力压谷歌 Gemini 1.5 Pro,多项跑分重夺第一2024-08-14 12:33:56
- OpenAI 移动版 ChatGPT 七月报告:净收入 2800 万美元,新增 200 万付费用户2024-08-08 09:06:33
- OpenAI 承认正研发 ChatGPT 文本水印,但面临挑战2024-08-05 07:12:17
- 苹果库克重申:年底前为 iOS / iPadOS 18、macOS 15 Sequoia 接入 ChatGPT2024-08-03 09:46:54
- OpenAI营收拆解:84%来自近1000万名ChatGPT付费用户,API仅占15%2024-07-17 13:10:18
- 商汤绝影王晓刚:端到端是智能驾驶的“ChatGPT 时刻” | 36氪专访2024-07-05 15:04:28
- macOS 版 ChatGPT 被指以纯文本存储 AI 对话,OpenAI 紧急更新修复2024-07-04 07:29:10
- 1欧盟 8 月新车销量创三年来最低水平,纯电汽车销量同比暴跌 43.9%
- 2AOC 推出 PD34 保时捷设计曲面显示器,搭载 240Hz QD-OLED 面板
- 3《我的世界》游戏明年 3 月起不再支持索尼 PSVR 头显
- 4国投交通在四川成立科技公司 注册资本3000万
- 5阿里通义万相视觉生成大模型升级,支持文生视频、图生视频等
- 6阿里通义千问开源 Qwen2.5 大模型,号称性能超越 Llama
- 7【IT之家开箱】石头扫拖机器人 G20S Ultra 图赏:双光源固态激光雷达,7.98cm 极薄机身
- 8如何一键投资A股的细分龙头?
- 9全球首款投掷战术相机 Pit Viper 360 登场:可传输全景热图像,售 4000 美元
- 10上海临港先进产业投资基金等成立汽车技术公司 注册资本1.5亿