Meta 发布最大的比肩 GPT-4 的开源 AI 模型 — Llama 3.1 405B

要点一览

• 最新的系列模型将上下文长度扩展到了 128K、增加了对 8 种语言的支持，并包括顶级开源模型 Llama 3.1 405B；
• Llama 3.1 405B 独树一帜，Meta 官方称其可与最好的闭源模型相媲美；
• 此次发布还提供了更多与模型配合使用的组件（包括参考系统）来将 Llama 打造为一个系统；
• 用户通过 WhatsApp 和 meta.ai 就可以体验 Llama 3.1 405B 了。

官网地址：llama.meta.com

Meta 公司发布的这款 AI 模型名为 Llama 3.1 405B ，它拥有 4050 亿个参数。参数数量越多，模型解决问题的能力通常就越强。虽然 Llama 3.1 405B 不是目前所有开源模型中参数最多的，但它是近年来最大的之一。它使用 16,000 个英伟达 H100 GPU 训练而成，并受益于更新的训练和开发技术。Meta 公司声称，即使与一些非开源的顶尖模型（比如 OpenAI 的 GPT-4o 和 Anthropic 的 Claude 3.5 Sonnet）相比，Llama 3.1 405B 的性能也同样出色（当然也存在一些限制）。

Llama 3.1 405B 可供下载或在云平台上使用，目前也可以在 WhatsApp 和 Meta.ai 的聊天机器人中体验。