Gemini 的數據分析能力未達 Google 宣稱水準
發佈時間:2024/07/01
為什麼重要
研究指出,Google 的 Gemini AI 模型在處理與分析大量數據的效能並未達到預期,降低 Google 在 AI 的影響力。
背景故事
近年來,生成式 AI 技術在業界引起廣泛關注,大家希望這項技術能夠提升數據處理和理解複雜問題的能力。
Google 曾經急於強調 Gemini 的上下文理解能力,並將其作為區別於其他生成式 AI 競爭對手的重要特點,還在廣告中大力宣傳這一點。
發生了什麼
根據 Techcrunch 報導,研究發現,Google 的 Gemini 1.5 Pro 和 1.5 Flash 在處理大數據方面的表現未達預期,正確回答大數據集問題的能力僅有 40% 至 50% 。
研究指出,儘管 Gemini 模型技術上能處理長文本,但實際上並不真正「理解」內容,其「上下文連貫性」被認為是不足的。
他們說什麼
UMass Amherst 的博士後研究員 Marzena Karpinska 表示,目前還沒有找到一種方法能夠證明模型可以「推理」或「理解」長文檔。
Google DeepMind 的研究副總裁 Oriol Vinyals 曾形容 Gemini 模型為「神奇」,顯示公司對這項技術充滿信心。
UC Santa Barbara 的博士生 Michael Saxon 提到,所有測試過的模型在圖像問答任務上表現都不好。他認為,為了解決生成式 AI 誇大其詞的問題,需要更好的基準測試和第三方評論。
Boston Consulting Group 的調查顯示,約一半的 C 級高管認為生成式 AI 不會顯著提升生產力,反映業界對生成式 AI 技術的懷疑態度。
提到的股票
概念股
編輯整理:Ruby Yu