(JY编译)新型生成式AI集成到各自的搜索引擎中,「聊天机器人」成为新的科技行业生产力工具,微软和谷歌试图在展示人工智能驱动的搜索的早期版本中相互较量;微软表示,在上周其New Bing推出最初的48小时内,有超过100万人注册试用该新一代AI驱动搜索引擎。
微软首席执行官萨蒂亚‧纳德拉(Satya Nadella)告诉《CNBC》新闻,这项技术可以输出完整的答案,读起来就像人类写的一样,「也许是发生在知识型工作领域的工业革命」。
但是对于那些关心答案的准确性的人来说,人工智能还有很多不足之处。
微软在记者面前的演示中,嵌入该公司必应搜索引擎(Bing)的类似ChatGPT的技术分析了来自Gap和Lululemon的财报。在将其答案与实际报告进行比较时,聊天机器人漏掉了一些数字。还有一些数字似乎是编造的。
独立搜索研究员德米特里-布雷顿(Dmitri Brereton)周一在Substack帖子中写道︰「Bing AI在演示中,回答的一些答案存在明显的事实偏差。但没有人注意到。相反,每个人都急着跳上了 Bing 炒作列车。」
布雷顿指出,除了财务错误之外,微软演示中关于吸尘器规格和前往墨西哥的旅行计划的答复中可能存在事实问题。他告诉《CNBC》新闻,他最初并没有想着找出错误,只是在他更仔细地观察以比较微软和谷歌的人工智能发布时才发现一些错误。
人工智能专家称这种现象为「幻觉」(hallucination),或者说基于大型语言模型的工具有简单制造东西的倾向。上周,谷歌推出了一个竞争性的人工智能工具,其中也有事实性错误,只是这些错误很快就被观众指出来。
OpenAI在去年11月向公众推出ChatGPT后,微软和谷歌都于将新型生成式人工智能纳入搜索引擎,并急于展示其在ChatGPT爆炸式增长后展示自己的进展。
OpenAI已经从微软那里获得了数十亿美元的融资,而像Stability AI和Hugging Face这样的竞争性初创公司也在私人融资中估值也飙升至10亿美元。
虽然谷歌一直不愿意在搜索引擎中加入人工智能生成的回复,并以声誉风险和安全问题为由,但微软在上周的公告中强调了向部分公众释放该技术的短期潜力。
纳德拉说︰「我认为重要的是不要待在实验室里。你必须把这些东西安全地拿出来。」
当天,微软的营销主管尤素福‧迈赫迪(Yusuf Mehdi)浏览了Gap的投资者关系网站,并要求Bing AI总结该零售商去年11月发布的第三季度财报中的「关键业绩」。迈赫迪还说︰「非常酷。节省了大量的时间。」
在演示Bing AI对企业盈利问题的回答时,出现了一些问题。以下是布雷顿发现了Bing AI的一些错误︰
- Gap Inc. 报告的毛利率为37.4%。但在排除与Yeezy Gap有关的费用后,调整后的毛利率为38.7%。
- Gap的营业利润率为4.6%,而不是Bing AI 给出的5.9%,这个数字在该公司的报告中没有出现过。
- 调整后的摊薄每股收益为0.71美元,而不是Bing AI说的0.42美元,这个数字也没有出现在文件中。 Gap报告的数字包括调整后的所得税收益约0.33美元。
- Gap公司在8月份撤消了其全年展望,并在第三季度报告中说,「第四季度的净销售额可能会同比下降个位数」。这将意味着全年的收入将下降,而不是Bing AI指的「低两位数的增长」。
而且布雷顿没有看到任何关于营业利润率或每股收益的未来前景的任何内容,但Bing AI却对此进行预测。
微软表示,其知道这些错误,它预计Bing AI会犯错误。
微软发言人告诉《CNBC》新闻︰「我们知道这份报告,并且已经分析了这些错误,努力改善这种体验。我们认识到仍有工作要做,并预计系统可能会在此预览期间出错,这就是为什么反馈至关重要,以便我们能够学习并帮助模型变得更好。」
在发布会上,微软副总裁优素福·马赫迪(Yusuf Mehdi)随后要求Bing AI将Gap的收益与Lululemon的报告进行比较。迈赫迪希望Bing AI把这两份报告中的信息整合到一个表格中。
马赫迪更直言︰「看看这有多神奇。就这样,在一个表中,我可以得到这个问题的答案。想想看,如果不是这样的话,这得花多少时间。」
表中有几个错误,首先是利润率。Lululemon的毛利率是55.9%,而不是Bing AI给出的58.7%。
该公司的营业利润率为19%,而不是Bing AI提到20.7%。另外,Lululemon报告的摊薄后每股收益为2美元,调整后每股收益为1.62美元。 Bing AI显示摊薄后为1.65美元。
此外,Gap有6.79亿美元的现金和现金等价物,而不是Bing AI给出的14亿美元。以及Gap有30.4亿美元的库存,而不是Bing AI提供的19亿美元。
Photo by Rubaitul Azad on unsplash