ChatGPT 回答的编程问题错误率 52%,但 39% 人类程序员没看出来

更新时间:2024-05-25 17:57:46作者:无忧百科

ChatGPT 回答的编程问题错误率 52%,但 39% 人类程序员没看出来

IT之家 5 月 25 日消息,生成式 AI 已经成为开发利器,可以辅助开发者快速生成相关代码,让开发者从“敲代码”逐渐过渡到“审代码”,不过最新报告指出 ChatGPT 所回答的编程问题内容错误率高达 52%。

来自普渡大学的研究小组于 5 月初出席计算机-人交互大会,并提交了一份报告,检查了 ChatGPT 回答的 517 个 Stack Overflow 问题,发现错误率高达 52%。





调查结果显示,人类程序员在 35% 的情况下更喜欢 ChatGPT 的答案,认为其提供的内容更全面,且有清晰的语言风格;更糟糕的是,在 39% 的情况下,人类程序员并没有发现 ChatGPT 的错误答案。

虽然这只是对 ChatGPT 功能的一个方面进行的研究,但它确实表明,生成式人工智能机器人仍然容易犯很多错误,而人类可能无法发现这些错误。

IT之家附上参考地址:

本文标签: 代码  程序员  错误率  编程问题  ChatGPT  

为您推荐

ChatGPT 回答的编程问题错误率 52%,但 39% 人类程序员没看出来

ChatGPT 回答的编程问题错误率 52%,但 39% 人类程序员没看出来,代码,程序员,错误率,编程问题,chatgpt

2024-05-25 17:57

波音披露美国宇航员将搭乘“漏气”飞船上天 NASA:以前也这样干过

波音披露美国宇航员将搭乘“漏气”飞船上天 NASA:以前也这样干过,波音,火箭,弹药,火器,推进器,nasa,军工企业,星际飞船,美国宇航员,美国国家航空航天局

2024-05-25 17:57

魔兽世界账号密码已被修改?回应:系误发

魔兽世界账号密码已被修改?回应:系误发,暴雪,国服,微软,魔兽世界,炉石传说,多人游戏,网络游戏,不羁联盟,第九城市游戏

2024-05-25 17:57

百度或联手特斯拉,合作 Robotaxi;SpaceX 发动机测试发生爆炸;「Doge」表情原型柴犬去世 | 极客早知道

百度或联手特斯拉,合作 Robotaxi;SpaceX 发动机测试发生爆炸;「Doge」表情原型柴犬去世 | 极客早知道,柴犬,谷歌,百度,宠物,发动机测试,spacex,埃隆_马斯克,特斯拉(公司)

2024-05-25 17:57

博通推出 P1400GD 高速网卡:支持 400Gbps 网络、5nm 工艺

博通推出 P1400GD 高速网卡:支持 400Gbps 网络、5nm 工艺,gd,nm,芯片,gbps,高速网卡,博通有限

2024-05-25 17:57

广东江门:取消住房限售,以旧换新可退税

广东江门:取消住房限售,以旧换新可退税,措施,旧换新,江门市,广东省,商品住房,土地出让,住房限售

2024-05-25 17:51