研究发现:ChatGPT回答编程问题的错误率超过50%
(资料图片仅供参考)
IT之家 8 月 8 日消息,美国普渡大学的研究发现,OpenAI 开发的人工智能聊天机器人 ChatGPT 在回答软件编程问题时,错误率超过一半,但仍能骗过三分之一的提问者。
该研究团队分析了 ChatGPT 对 517 个 Stack Overflow 网站上的问题的回答,评估了其正确性、一致性、全面性和简洁性。他们还对回答进行了语言和情感分析,并对 12 名志愿参与者进行了问卷调查。研究报告的结论是: ChatGPT 的回答虽然语言风格良好,但 52% 的回答是错误的,77% 是冗长的 。参与者只有在回答中的错误很明显时,才能识别出来。否则,他们会被 ChatGPT 的友好、权威和细致的语言风格所误导。
Stack Overflow 是一个专门为程序员提供问答服务的网站,被认为是开发者获取代码片段和解决问题的重要来源。然而,该网站近年来也面临着流量下降、内容质量下降和用户信任下降等问题。据 SimilarWeb 在 4 月份的一份报告显示,自 2022 年 1 月以来,该网站每月流量下降了 6%,3 月份下降了 %,而 ChatGPT 可能是导致其流量下降的原因之一。Stack Overflow 则否认了 SimilarWeb 的评估,并表示其流量受到搜索算法和 ChatGPT 兴趣激增的影响。
OpenAI 在其 ChatGPT 网站上承认其软件“可能会产生关于人、地点或事实的不准确信息。”截至IT之家发稿,该公司暂未对普渡大学的研究作出回应。
关键词:
相关阅读
-
研究发现:ChatGPT回答编程问题的错误率...
IT之家8月8日消息,美国普渡大学的研究发现,OpenAI开发的人工智能聊天 -
2家公司公布非公开发行预案
2家公司公布非公开发行预案 -
受中国将恢复赴日团队游消息提振,日本...
App8月10日消息,受中国政府将恢复赴日团队游的消息提振,10日的东京股 -
勤勉致知励行致远什么意思(勤勉致知力...
勤勉致知的意思:努力学习,求取知识,达到完善自我。致:求得;知:知 -
中汽协:7月份汽车销量同比下降1.4% ...
【大河财立方消息】中汽协8月10日发布消息,7月汽车产销分别完成240 1 -
德龙激光:公司从2019年开始布局光模块...
有投资者向德龙激光提问,请问公司在光模块方面具体有什么设备,有哪些 -
马钢股份股吧 包钢股份最新消息
马钢股份股吧包钢股份最新消息马钢股份股吧是”马钢股份”,因为这... -
拜登签署对华投资限制令,涉及3大技术领域
当地时间8月9日,美国总统拜登正式签署行政命令,授权美国财政部门限制 -
香港特区政府欢迎成都大运会中国香港代...
人民网香港8月10日电(记者陈然)成都第31届世界大学生夏季运动会中国 -
塞力医疗:公司下属SPD及IVD业务、凝血...
塞力医疗发布股价异动公告,近期市场对公司医用耗材集约化运营服务(SP -
续航400km+,还有大空间,这款几何E萤火...
当下的纯电小型SUV市场,几何E萤火虫毫无疑问是年轻用户的最佳选择。 -
孙燕姿的励志故事(背后的故事孙燕姿)
1、因为张元说过他是孙燕姿的忠实fans。2、他跟何炅提过如果孙燕姿来可 -
静海区近2000人夜以继日连续作战 台头...
天津北方网讯:记者从静海区获悉,台头镇大清河北堤及围埝薄弱段共计5 -
传统金属加工转型先进制造
原标题:河南巩义铝板带箔产量占全国近30%——(引题)传统金属加工... -
什么是原始股 买原始股会被骗吗
原始股其实指的就是在公司上市之前所发行的股票。而投资原始股的成败取 -
WeWork下一站,破产,清算
2019年WeWork想要首次IPO的时候,前后融资了15轮,融资超过100亿美元, -
谷歌与环球音乐洽谈AI音乐版权事宜
环球音乐掌握全球约三分之一的音乐市场,该公司曾在四月份敦促流媒体平 -
文峰股份(601010.SH):耗资9996.67万元...
格隆汇8月10日丨文峰股份(601010 SH)公布,截至2023年8月9日,公司完成 -
笑得好甜!金智秀承认恋情后首现身
10日,金智秀承认恋情后现身于仁川机场,她穿着牛仔套装短裙,露出开朗 -
高质量发展调研行|湖北宜昌:发展绿色...
新华社武汉8月7日电题:湖北宜昌:发展绿色航运保护大美长江新华社记者