Google 不孤单?Bing AI 遭爆错误百出,微软早有预料

Google 不孤单?Bing AI 遭爆错误百出,微软早有预料

Google 母公司 Alphabet Inc. 上周展演人工智慧(AI)聊天机器人“Bard”时被人抓到资讯有误,冲击股价下杀。最新研究发现,微软(Microsoft Corp.)上周利用内建于 Bing 搜寻引擎的 ChatGPT AI 技术分析财报时,也被发现资料有误。

微软2月7日邀请记者至华盛顿Redmond总部进行展演时,要求Bing的类ChatGPT技术分析服饰零售商Gap Inc.及加拿大瑜伽服生产商Lululemon Athletica Inc.的财报。然而,若将Bing AI的答案跟实际财报对照,却可发现这款聊天机器人漏掉一些数字,甚至有部分是“幻觉”(hallucination)。

独立搜寻研究员Dmitri Brereton 14日透过内容创作平台Substack贴文指出,Bing AI在微软展演时有部分答案完全是错的,却没人注意到。相反地,每个人都被Bing天花乱坠的宣传弄得团团转。

根据这篇文章,Bing AI分析Gap财报时指出,调整Yeezy Gap资产减损后的毛利率为37.4%,商品毛利率因为折扣增加、原物料价格上扬而较去年同期下降370个基点。

然而,Brereton发现,37.4%是未经调整的毛利率,正确的数值应是38.7%,而正确的商品毛利率(调整了减值损失后)应较去年同期下滑480个基点。

Bing AI并指出,Gap上季调整了减损及重整成本的营益率为5.9%,调整减损、重整成本及税务影响的每股稀释盈余为0.42美元。

Brereton发现,5.9%既非调整后的数字、也非未经调整数值,事实上,Gap财报根本找不到这个数字、完全是AI的幻觉。正确涵盖减损的营益率为4.6%、排除减损的营益率为3.9%。另外,每股稀释盈余也是幻觉、财报中并未出现;经调整后的正确每股稀释盈余为0.71美元、未经调整的数字为0.77美元。

Bing AI同时表示,Gap预测2022会计年度净营收成长率将达10~14%、营益率约为7%。然而,Brereton发现,Gap实际上预测净营收的下滑幅度将达5%

Bing AI比较Gap、Lululemon财报的表格更是错误百出,部分数字也是幻觉。举例来说,表格显示Lululemon的毛利率是58.7%,但Brereton直指数字是幻觉,财报根本找不到,正确的数值是55.9%。

CNBC 14日报道,AI专家将上述现象称做“幻觉”,指基于大型语言模型的工具有捏造事物的倾向。微软宣称,Bing AI刚开放48小时,就有超过100万人争相登录。

对此,微软一名发言人对CNBC表示,该公司确实知道上述问题,也预料到Bing AI势必会犯错。“我们已经分析了上述报告,将借此改善体验。”“我们知道工作尚未完成,也预测系统或许会在预览期间犯错,这是用户反馈如此重要的原因,我们可从中学习、让模型变得更好。”

(本文由 MoneyDJ新闻 授权转载;首图来源:Unsplash)

延伸阅读:

  • 3 分钟看懂 ChatGPT 在聊什么?也许你也能成为 AI 沟通大师

   特别声明    本页内容仅供参考,版权终归原著者所有,若有侵权,请联系我们删除。