釋放Meta LLAMA 3的力量:一個開源GPT-4突破

Meta 開發了一個新的高質量人工評估集,包含 1,800 個提示,涵蓋 12 個關鍵使用案例,以確保 Llama 3 針對實際應用場景進行了優化,而不僅僅是基準測試。該模型與其他最先進的模型進行了測試,在人工評估中表現非常出色。

Llama 3 使用了一個更高效的分詞器,擁有 128,000 個詞彙表,並且是在超過 5 萬億個令牌上預訓練的 - 比 Llama 2 多 7 倍,包括 4 倍以上的代碼和超過 5% 的高質量非英語數據。400 億參數版本的性能與 GPT-4 相當。

Meta 已將 Llama 3 以開源方式發布,使開發者和研究人員可以自由使用。但是,由於地區法規的原因,歐盟和英國的用戶可能會面臨一些訪問限制或延遲。