【太平洋科技快讯】近日,美国哥伦比亚大学Tow数字新闻研究中心发布了一项重要研究,揭示OpenAI的ChatGPT搜索工具在新闻搜索准确性方面存在严重问题。根据研究结果显示,ChatGPT在153次回答中,大部分回答存在完全或部分错误,仅有7次明确表示无法准确回答。具体数据为:错误回答89次,部分正确57次,完全正确仅47次。
哥伦比亚大学的研究人员选取了20家出版商的200条引文作为测试样本,其中40条引文来自禁止OpenAI爬虫抓取的网站。通过这种方法,研究人员对ChatGPT的搜索准确性进行了全面评估。
研究中记录了一些典型错误案例,如ChatGPT将《奥兰多哨兵报》的读者来信错误地归因于《时代周刊》的文章;在另一案例中,ChatGPT在确认海外媒体一篇关于濒危鲸鱼的文章引用时,错误地链接到了一家剽窃该文章的网站。
针对研究结果,OpenAI表示,由于缺乏Tow中心隐藏的测试数据和方法,解决错误归因具有挑战性。OpenAI认为这次研究是对其产品的非典型测试,并表示将继续优化搜索结果,以提高准确性。
今年早些时候,OpenAI与新闻行业进行了广泛合作,包括美联社、阿克塞尔·斯普林格、康泰纳仕等多家知名媒体和出版商。然而,此次研究结果的公布,无疑对这些合作伙伴对ChatGPT搜索工具的信任度产生了一定影响。
网友评论