研究发现:ChatGPT 回答编程问题的错误率超过 50%
2023-08-09 20:50:03    IT之家


【资料图】

IT之家 8 月 8 日消息,美国普渡大学的研究发现,OpenAI 开发的人工智能聊天机器人 ChatGPT 在回答软件编程问题时,错误率超过一半,但仍能骗过三分之一的提问者。

该研究团队分析了 ChatGPT 对 517 个 Stack Overflow 网站上的问题的回答,评估了其正确性、一致性、全面性和简洁性。他们还对回答进行了语言和情感分析,并对 12 名志愿参与者进行了问卷调查。研究报告的结论是:ChatGPT 的回答虽然语言风格良好,但 52% 的回答是错误的,77% 是冗长的。参与者只有在回答中的错误很明显时,才能识别出来。否则,他们会被 ChatGPT 的友好、权威和细致的语言风格所误导。

Stack Overflow 是一个专门为程序员提供问答服务的网站,被认为是开发者获取代码片段和解决问题的重要来源。然而,该网站近年来也面临着流量下降、内容质量下降和用户信任下降等问题。据 SimilarWeb 在 4 月份的一份报告显示,自 2022 年 1 月以来,该网站每月流量下降了 6%,3 月份下降了 13.9%,而 ChatGPT 可能是导致其流量下降的原因之一。Stack Overflow 则否认了 SimilarWeb 的评估,并表示其流量受到搜索算法和 ChatGPT 兴趣激增的影响。

OpenAI 在其 ChatGPT 网站上承认其软件“可能会产生关于人、地点或事实的不准确信息。”截至IT之家发稿,该公司暂未对普渡大学的研究作出回应。

关键词:

下一篇: 神农架在哪里 神农架简介
上一篇: 东方雨虹上半年净利润同比增长38.07%

摩洛哥南部地震致至少296人遇难 血液中心呼吁民众积极献血

被蜱虫咬属于意外险吗?赔偿要提供什么材料?

2023国际高桥极限运动邀请赛举行

筹集5693套保租房 开建4267套棚改房 宜昌5000余“新市民”圆了“安居梦”

富士X100V迭代款将更新 配备新镜头

持续推进长三角一体化,沪苏水域交通组织一体化若干措施发布

【青视点】剑指“中国休闲体育之城” 莱西打算这么干

长城汽车魏建军转型中很擅长做“毫不犹豫”的事

幻想传说修复弓(幻想传说x)

祝贺!中国女乒包揽四强!王艺迪逆转伊藤美诚,日本女乒全军覆没

烧瓷器的失败作品“嘴硬壶”意外成网红 山东买家288元买下 2000元不愿意转让

“种黄花这条路走对啦!”

火山引擎ByteHouse上线ELT能力,进一步降低企业数字化维护成本

iFixit拆毁了三星的新款GalaxyS22和S22Ultra智能手机

600元可亲吻? 莫把“沉浸式消费”玩成“沉沦式消费”

今日车轱辘是什么意思饭圈(车轱辘话什么意思)

公职人员被儿子举报出轨朋友妻子 官方回应:已被停职并立案调查

人工智能赋能可持续投资

探索数字化普惠金融新路径

通辽市奈曼旗300MW风电项目二标段37台风机吊装完成

安卓将迈入2TB时代!三星Galaxy S24 Ultra首发:售价过万

亚盛集团:8月31日融资净买入276.08万元,连续3日累计净买入734万元

南京新百4140万预付款背后 交易对手疑为控股股东关联方

sw2018破解版详细安装教程云魔方(solidworks魔方云学院)

江苏南通可提供东芝洗碗机维修服务地址在哪

公大研招网 公大

世茂股份:截止8月底未能按期支付债务累计84.8亿元

8月31日超讯通信涨停分析:智能制造,5G,智慧物流概念热股

捷途大圣对比长安CS55 PLUS,谁高颜高配强动力,更讨年轻人欢心?

新城发展:一年内到期债务256.16亿元,确保每一笔债务提前或到期偿付

主板纺织股(主板纺织上市企业名单2023)

宋祖儿前公司否认实名举报 称未参与艺人纳税申报

9月1日起实施!呼和浩特市三部门联合通知

供应链人士称Wi-Fi 7出货将于2024年放量

首张水上加油站危化品经营许可证颁发 崇川区18家相关企业计划年底前全部领证

北京市全力以赴确保“课前到书,人手一册”迎开学