挑戰 GPT-4、Gemini,傳微軟開發 MAI-1 新模型

作者 | 發布日期 2024 年 05 月 07 日 8:04 | 分類 AI 人工智慧 , Microsoft line share follow us in feedly line share
挑戰 GPT-4、Gemini,傳微軟開發 MAI-1 新模型


國外媒體《The Information》報導指出,微軟正在訓練一款新的大型語言模型,內部稱為 MAI-1,足以與 Google、OpenAI 等開發的模型競爭。

MAI-1 由近期加入微軟的 Inflection AI 執行長蘇萊曼(Mustafa Suleyman)負責監督開發,可能會在本月下旬的 Build 開發者大會公開預覽新模型,對此微軟拒絕發表任何評論。

微軟上個月釋出一款 Phi-3-mini 模型,以相對較小的資料集進行訓練,希望成為具成本效益的新選擇以吸引開發者採用。

《The Information》報導稱,MAI-1 將比微軟先前訓練的模型更大,擁有約 5,000 億參數,遠勝過 Phi-3-mini 的 38 億參數,也高於 Meta 和 Mistral AI 的 700 億參數開源模型,至於 OpenAI GPT-4 據悉多達 1 兆參數。

MAI-1 確切用途在微軟內部尚未定案,將取決於性能表現。為了訓練新模型,微軟已經預留配備 NVIDIA GPU 叢集的伺服器,並收集來自各種來源的訓練資料,包括 GPT-4 生成的文字和公開的網路資料。

隨著 Build 開發者大會即將到來,預期微軟將以 AI 為核心推出新產品,也讓外界對微軟 AI 藍圖越是期待。

(首圖來源:shutterstock)