LLaMA 65B
LLaMA 首代的 65B 型号,通过申请向研究者提供权重,最初仅限非商业研究。
FAMILY / META
Meta 的开放权重基础模型主线,从通用语言模型发展到原生多模态 MoE。
01 / RELEASE SEQUENCE
02 / GENERATIONS
LLaMA 首代的 65B 型号,通过申请向研究者提供权重,最初仅限非商业研究。
第二代 Llama 的 70B 型号,以专属社区许可支持研究与商业使用。
在 Llama 2 基础上继续训练的代码专用模型;34B 是最初发布的最大档位,70B 后续单独加入。
代表 2024 年 4 月同时发布的 8B 与 70B 两个独立规格,不使用单一参数量概括整组模型。
Llama 首个 405B 开放旗舰,并把全系列上下文扩展到 128K。
Llama 3.2 的轻量纯文本型号,适合移动与边缘设备,不等同于该代 11B/90B 视觉模型。
Llama 3.2 的 11B 与 90B 视觉型号,支持图像理解;轻量纯文本型号是另一分支。
用 70B 规模接近 Llama 3.1 405B 的指令能力,显著降低部署成本。
400B 总参数、128 专家的 Llama 4 高能力开放型号。
17B 激活参数、16 专家的多模态 MoE,支持文本与图像输入及最长 10M 上下文。