aoniAI Hub
返回模型列表

Gemma 4 26B-A4B

Google Gemma 4 系列 MoE 模型,25.8B 总参数 / 3.8B 激活,256K 上下文,支持文本和图像理解

参数量26B-A4B
模态Text, Image
精度NVFP4 · INT4
类型LLM

快速部署

部署模型

命令根据你的配置自动生成
sudo docker run -it --rm --pull always \
--runtime=nvidia --network host \
-e VLLM_USE_MODELSCOPE=True \
-v ~/models:/models \
vllm/vllm-openai:nightly-aarch64 vllm serve google/gemma-4-26B-A4B-it \
--port 8000 \
--max-model-len 16384 \
--gpu-memory-utilization 0.9

模型详情

发布者
Google
系列
Gemma 4
参数量
26B-A4B
上下文长度
262,144 tokens
许可证
Apache 2.0

输入和输出

输入: Text, Image / 输出: Text, Image

用途

  • 长上下文代理
  • 本地编码助手
  • 文档/图表理解
  • 研究助手

Jetson 兼容性

Thor 128GBThor 64GBOrin 64GBOrin 16GBOrin 8GB

标签

llmgooglemoelong-contextcodingagentic

Gemma 4 系列

模型参数量
Gemma 4 26B-A4B26B-A4B
Gemma 4 E2B5.1B-A2.3B
Gemma 4 E4B8B-A4.5B
Gemma 4 31B31B

模型路径

Gemma 4 26B-A4B | aoni AI Hub