轻量模型

引言 Google在2026年2月发布了Gemma 3系列，这是其轻量级开源模型Gemma的第三代产品。Gemma系列一直定位为"可商用的轻量级模型"，面向端侧部署和本地运行场景。Gemma 3相比前代在性能、效率和生态上都有显著提升。本文将全面评测Gemma 3系列，特别是其在端侧设备上的表现。 产品线概览 Gemma 3系列包含5个规格： 模型 参数量 上下文 精度 定位 Gemma 3 27B 27B 128K FP16/INT8/INT4 桌面级旗舰 Gemma 3 12B 12B 128K FP16/INT8/INT4 笔记本主力 Gemma 3 7B 7B 64K FP16/INT8/INT4 通用端侧 Gemma 3 4B 4B 32K INT8/INT4 移动端 Gemma 3 1B 1B 8K INT4 IoT/嵌入式 核心架构 Gemma 3基于Google最新的Gemma 3架构改进： Transformer变体：采用Sliding Window Attention + Global Attention混合机制 RoPE位置编码：支持长上下文外推 分组查询注意力：减少推理计算量 INT4/INT8量化：原生支持多种精度 基准测试 Gemma 3 27B（端侧旗舰） 基准 Gemma 3 27B Llama 4 70B Qwen3.5 72B Mistral Large 3 MMLU-Pro 74.5% 76.2% 78.5% 75.8% HumanEval+ 82.5% 84.5% 87.2% 83.1% GPQA Diamond 48.3% 55.1% 58.3% 52.7% BBH 80.2% 82.1% 84.5% 82.3% Gemma 3 27B的性能接近Llama 4 70B和Qwen3.5 72B，但参数量仅为后者的1/3左右。这体现了Google在模型效率上的深厚功力。 ...

Google 的 Gemma 系列一直走"小而精"的路线。2026 年发布的 Gemma 3 系列包含 1B、4B、12B、27B 四个尺寸，定位于端侧与 Edge 部署。与 Gemini 4.0 的全面旗舰路线不同，Gemma 3 专注轻量场景。但在这个赛道上，它要面对 Qwen3.5-3B、Phi-4-mini 等强敌。本文将评估 Gemma 3 的真实能力与市场定位。 一、Gemma 3 系列概览 模型 参数量 上下文 多模态 许可证 定位 Gemma 3-1B 1.0B 32K 否 Gemma License 微型设备 Gemma 3-4B 3.8B 64K 是 Gemma License 手机/平板 Gemma 3-12B 12B 128K 是 Gemma License Edge/工作站 Gemma 3-27B 27B 128K 是 Gemma License 服务器 架构特点 GQA 注意力：分组查询注意力，平衡效率与质量 知识蒸馏：从 Gemini 3.5 Pro 蒸馏知识 Responsible AI：内置安全对齐训练 多模态统一：4B 以上版本原生支持图像输入 二、能力评测 通用能力 基准 Gemma3-27B Gemma3-12B Gemma3-4B Gemma3-1B MMLU-Pro 82.6 78.3 70.8 58.2 GPQA Diamond 64.8 58.5 52.1 38.7 MATH-500 65.4 58.7 50.3 35.2 HumanEval+ 86.3 81.5 79.2 65.8 与同级别竞品对比 4B 级别 基准 Gemma3-4B Qwen3.5-3B Phi-4-mini Llama4-Tiny MMLU-Pro 70.8 72.3 71.5 69.4 HumanEval+ 79.2 81.5 83.1 77.8 MATH-500 50.3 55.8 52.1 48.5 多语言 75.2 72.8 65.3 68.7 分析：Gemma3-4B 在综合能力上略弱于 Qwen3.5-3B 和 Phi-4-mini，但多语言能力（覆盖 140+ 语言）是独特优势。 ...