5月即將到來 Llama 3 即將問世 OpenAI 該擔心了嗎

Posted on 11 4 月, 2024 By muddy

臉書(Meta)證實，重量級 AI 語言模型 Llama 3 即將在下個月內推出。這款開源模型將是目前最先進的開放式模型之一，將對當前領先的 OpenAI 等封閉式模型構成挑戰。

臉書執行長祖克柏指出，Llama 3 在參數規模上較前代 Llama 2 增加一倍，達到1400億參數。臉書正大量投資提升 Llama 3 的計算能力，到今年底將擁有35萬顆 H100 GPU，遠超訓練 GPT-4 所需的約2.5萬顆 GPU。

臉書採取開源策略發展 Llama 模型系列，期望吸引開源社群圍繞其之上建構更多應用。現已有不少以 Llama 2 為基礎而開發的高性能開源模型，部分已超越 GPT-3.5。此波開放運動料將進一步推動開源 AI 生態系的崛起，挑戰 OpenAI 等封閉模型的主導地位。