Google 不孤單?Bing AI 遭爆錯誤百出,微軟早有預料

作者 | 發布日期 2023 年 02 月 15 日 14:30 | 分類 AI 人工智慧 , Microsoft , 數位內容 line share follow us in feedly line share
Google 不孤單?Bing AI 遭爆錯誤百出,微軟早有預料


Google 母公司 Alphabet Inc. 上週展演人工智慧(AI)聊天機器人「Bard」時被人抓到資訊有誤,衝擊股價下殺。最新研究發現,微軟(Microsoft Corp.)上週利用內建於 Bing 搜尋引擎的 ChatGPT AI 技術分析財報時,也被發現資料有誤。

微軟2月7日邀請記者至華盛頓Redmond總部進行展演時,要求Bing的類ChatGPT技術分析服飾零售商Gap Inc.及加拿大瑜伽服生產商Lululemon Athletica Inc.的財報。然而,若將Bing AI的答案跟實際財報對照,卻可發現這款聊天機器人漏掉一些數字,甚至有部分是「幻覺」(hallucination)。

獨立搜尋研究員Dmitri Brereton 14日透過內容創作平台Substack貼文指出,Bing AI在微軟展演時有部分答案完全是錯的,卻沒人注意到。相反地,每個人都被Bing天花亂墜的宣傳弄得團團轉。

根據這篇文章,Bing AI分析Gap財報時指出,調整Yeezy Gap資產減損後的毛利率為37.4%,商品毛利率因為折扣增加、原物料價格上揚而較去年同期下降370個基點。

然而,Brereton發現,37.4%是未經調整的毛利率,正確的數值應是38.7%,而正確的商品毛利率(調整了減值損失後)應較去年同期下滑480個基點。

Bing AI並指出,Gap上季調整了減損及重整成本的營益率為5.9%,調整減損、重整成本及稅務影響的每股稀釋盈餘為0.42美元。

Brereton發現,5.9%既非調整後的數字、也非未經調整數值,事實上,Gap財報根本找不到這個數字、完全是AI的幻覺。正確涵蓋減損的營益率為4.6%、排除減損的營益率為3.9%。另外,每股稀釋盈餘也是幻覺、財報中並未出現;經調整後的正確每股稀釋盈餘為0.71美元、未經調整的數字為0.77美元。

Bing AI同時表示,Gap預測2022會計年度淨營收成長率將達10~14%、營益率約為7%。然而,Brereton發現,Gap實際上預測淨營收的下滑幅度將達5%

Bing AI比較Gap、Lululemon財報的表格更是錯誤百出,部分數字也是幻覺。舉例來說,表格顯示Lululemon的毛利率是58.7%,但Brereton直指數字是幻覺,財報根本找不到,正確的數值是55.9%。

CNBC 14日報導,AI專家將上述現象稱做「幻覺」,指基於大型語言模型的工具有捏造事物的傾向。微軟宣稱,Bing AI剛開放48小時,就有超過100萬人爭相登錄。

對此,微軟一名發言人對CNBC表示,該公司確實知道上述問題,也預料到Bing AI勢必會犯錯。「我們已經分析了上述報告,將藉此改善體驗。」「我們知道工作尚未完成,也預測系統或許會在預覽期間犯錯,這是用戶反饋如此重要的原因,我們可從中學習、讓模型變得更好。」

(本文由 MoneyDJ新聞 授權轉載;首圖來源:Unsplash

延伸閱讀: