Gemma 4 12B

Google 日本語画像入力
比較に入れる
パラメータ
12B
dense
いちばん小さい量子化
6.3GB
MLX 4bit
KV キャッシュ(8K・FP16)
0.38GB
公称コンテキスト 256K
乗るスペック
64/ 64
クラスタ構成を含む・8K

コンテキスト長と必要メモリ

横線は各スペックの利用可能メモリ。線より下なら乗る
4bit 前後6bit 前後8bit 前後16bit各ビット帯でいちばん小さい量子化・KV FP16
0GB10GB20GB30GB40GB50GB4K8K16K32K64K128K256Kコンテキスト長 →RTX 4090 24GB 23GBRTX 5090 32GB 31GBM5 Max 48GB 36GB

スペックごとの推定速度

decode tok/s・8K・乗る構成だけ・推奨量子化

Gemma 4 12B は、作業ごとにどのくらいか

  • AIエージェント軽量級(Claude Haiku 5.5・Gemini 3.8 Flash と同じくらい)。勝つ確率: Claude Opus 5.5 に 22%・Claude Sonnet 5.5 に 19%・Claude Haiku 5.5 に 49%(1 ベンチ・比べた相手 4 モデル)
  • コーディング軽量級未満(1 ベンチ・比べた相手 14 モデル)
  • 検索・調べもの数字なし(判定できません)
  • 知識・推論中位級未満。勝つ確率: Claude Sonnet 5.5 に 10%・Claude Haiku 5.5 に 13%(3 ベンチ・比べた相手 32 モデル)
  • 数学目印なし(1 ベンチ・比べた相手 6 モデル)
  • 日本語目印なし(1 ベンチ・比べた相手 7 モデル)
  • 画像理解目印なし(1 ベンチ・比べた相手 7 モデル)

同じベンチに数字のある2モデルを「対戦」とみなし、作業ごとにレーティングを付けています(チェスや LLM のアリーナと同じ考え方)。数字は各社の自己申告が中心で条件は揃っていないので、目安として見てください。

作業ごとの位置

Gemma 4 12Bクラウドモデル(点に乗せると名前)縦線は階層の目印(右ほど強い)
AIエージェントツールを使って作業を進める(ターミナル操作…最上位級中位級軽量級軽量級
コーディング実際のリポジトリのバグ修正、競技プログラミ…中位級軽量級軽量級未満
検索・調べものWeb を検索して答えを探し当てる数字なし
知識・推論専門知識の問題、難問最上位級中位級中位級未満
数学数学オリンピック級の問題目印なし
日本語日本語を含む多言語での知識問題目印なし
画像理解図表・写真を読んで答える目印なし

用途で変わる:チャット・コーディング・AIエージェント

チャット

コンテキスト 8K

短いやりとり。速く返ってくることが大事。数字は推定 decode tok/s と、その長さで乗る中で最も高精度な量子化

乗るスペック 9 / 9・最小構成で 13.8 GB(うち KV 0.4 GB)

M5 Ultra 256GB51.2MLX 8bitM5 Ultra 512GB51.2MLX 8bitRTX 4090 24GB47.3Q8_0RTX 5090 32GB45.6BF16RTX PRO 6000 Blac…45.6BF16M5 Max 64GB26.2MLX 8bitM5 Max 128GB26.2MLX 8bitRyzen AI Max+ 395…11.2Q8_0DGX Spark 128GB7.6BF16

コーディング

コンテキスト 64K

リポジトリのコードを読み込んで直す。数字は推定 decode tok/s と、その長さで乗る中で最も高精度な量子化

乗るスペック 9 / 9・最小構成で 14.2 GB(うち KV 0.8 GB)

M5 Ultra 256GB49.5MLX 8bitM5 Ultra 512GB49.5MLX 8bitRTX 4090 24GB46.0Q8_0RTX 5090 32GB44.9BF16RTX PRO 6000 Blac…44.9BF16M5 Max 64GB25.3MLX 8bitM5 Max 128GB25.3MLX 8bitRyzen AI Max+ 395…10.9Q8_0DGX Spark 128GB7.5BF16

AIエージェント

コンテキスト 128K

ツール呼び出しを繰り返し、履歴と結果がコンテキストに溜まる。数字は推定 decode tok/s と、その長さで乗る中で最も高精度な量子化

乗るスペック 9 / 9・最小構成で 14.7 GB(うち KV 1.3 GB)

M5 Ultra 256GB47.6MLX 8bitM5 Ultra 512GB47.6MLX 8bitRTX 4090 24GB44.5Q8_0RTX 5090 32GB44.1BF16RTX PRO 6000 Blac…44.1BF16M5 Max 64GB24.3MLX 8bitM5 Max 128GB24.3MLX 8bitRyzen AI Max+ 395…10.5Q8_0DGX Spark 128GB7.3BF16

コンテキスト長と推定 decode 速度

コンテキストが長いほど KV キャッシュを読む分だけ遅くなる。線が切れたところで乗らなくなる
M5 Max 64GBM5 Ultra 256GBRTX 4090 24GB
0204060801004K8K16K32K64K128K256Kコンテキスト長 →↑ decode tok/s(推定)チャット 8Kコーディング 64KAIエージェント 128K

用途ごとに見るベンチ

Gemma 4 12B はどのあたりか

  • Terminal-Bench 2.0:Gemma 4 12B の数字なし
  • τ²-Bench:5 モデル中 3 位。クラウドでいちばん近いのは Claude Opus 4.6(91.9)。それより下のクラウドはなし
  • SWE-bench Verified:Gemma 4 12B の数字なし
  • Humanity's Last Exam:25 モデル中 25 位。クラウドでいちばん近いのは Qwen3.7 Plus(34.7)。それより下のクラウドはなし
  • Artificial Analysis Intelligence Index:Gemma 4 12B の数字なし同じ条件

数字はベンダー自己申告などの出典の値で、条件(推論モード・ツールの有無など)は揃っていません。目安として見てください。

Terminal-Bench 2.0

6 モデル・各社の自己申告(条件はばらばら)

τ²-Bench

5 モデル・各社の自己申告(条件はばらばら)
Claude Opus 4.691.9Gemma 4 31B76.9Gemma 4 12B69.0 ◀ ここGemma 4 26B-A4B68.2Gemma 4 E4B42.2

SWE-bench Verified

10 モデル・各社の自己申告(条件はばらばら)

Humanity's Last Exam

25 モデル・各社の自己申告(条件はばらばら)

ツールありの数字しかない GLM-5.3・GLM-5.3-Flash・Claude Opus 5.5・GLM-5.3 (API)・Muse Spark Open 816B-A42B は除外

Claude Fable 5.160.9Claude Sonnet 5.556.9Kimi K3.1 Pro51.1Kimi K3.1 Pro (AP…51.1Claude Haiku 5.545.9Kimi K343.5Claude Sonnet 543.2DeepSeek V4 Pro (…42.7DeepSeek V4.1 Fla…42.6GLM-5.240.5Claude Opus 4.640.0DeepSeek V4 Pro37.7DeepSeek V4.1 Fla…36.8Qwen3.8 Flash-Next35.9Qwen3.7 Plus34.7Qwen3.8 27B30.8Qwen3.6 27B24.0Qwen3.6 35B-A3B21.4Gemma 4 31B19.5MiniMax M2.519.4gpt-oss-120b14.9gpt-oss-20b10.9Seed-OSS 36B10.1Gemma 4 26B-A4B8.7Gemma 4 12B5.2 ◀ ここ

Artificial Analysis Intelligence Index

26 モデル・全モデル同じ条件(第三者が測定)
Claude Opus 5.559.0GPT-6 Astra57.0GPT-6.1 Sol55.0Claude Sonnet 5.555.0GPT-6.1 Terra51.0Gemini 4 Argon50.0Claude Fable 5.149.0Kimi K3.1 Pro46.0Kimi K3.1 Pro (AP…46.0Muse Wonder44.0Claude Haiku 5.536.0Grok 4.735.0Qwen3.8 Max34.0DeepSeek V4.1 Fla…33.0GLM-5.332.0GLM-5.3 (API)32.0Gemini 3.8 Flash31.0GLM-5.3-Flash28.0GPT-6 Luna28.0Mistral Large 4 (…26.0Mistral Large 4 (…26.0Muse Spark Open 8…25.0DeepSeek V4 Pro (…23.0Qwen3.8 27B20.0Gemini 3.5 Flash-…12.0Gemma 4 31B4.0

スペックごとの判定

スペック判定推奨量子化必要メモリ利用可能最大コンテキスト推定 tok/s
RTX 5070 12GBllama.cpp 乗る Q4_K_M 8.8 GB 11.0 GB 144K 53.3
RTX 3060 12GBllama.cpp 乗る Q4_K_M 8.8 GB 11.0 GB 144K 31.5
M5 16GBMLX 乗る MLX 4bit 8.0 GB 12.0 GB 256K 12.0
M4 16GBMLX 乗る MLX 4bit 8.0 GB 12.0 GB 256K 9.4
RTX 5080 16GBllama.cpp 乗る Q6_K 11.4 GB 15.0 GB 256K 55.6
RTX 5070 Ti 16GBllama.cpp 乗る Q6_K 11.4 GB 15.0 GB 256K 52.6
RTX 5060 Ti 16GBllama.cpp 乗る Q6_K 11.4 GB 15.0 GB 256K 29.3
RTX 4080 SUPER 16GBllama.cpp 乗る Q6_K 11.4 GB 15.0 GB 256K 44.9
RTX 4070 Ti SUPER 16GBllama.cpp 乗る Q6_K 11.4 GB 15.0 GB 256K 41.6
RTX 4060 Ti 16GBllama.cpp 乗る Q6_K 11.4 GB 15.0 GB 256K 19.6
M5 Pro 24GBMLX 乗る MLX 8bit 13.8 GB 18.0 GB 256K 13.1
M5 24GBMLX 乗る MLX 8bit 13.8 GB 18.0 GB 256K 6.5
M4 Pro 24GBMLX 乗る MLX 8bit 13.8 GB 18.0 GB 256K 11.7
M4 24GBMLX 乗る MLX 8bit 13.8 GB 18.0 GB 256K 5.1
RTX 4090 24GBllama.cpp 乗る Q8_0 14.3 GB 23.0 GB 256K 47.3
RTX 3090 24GBllama.cpp 乗る Q8_0 14.3 GB 23.0 GB 256K 44.5
Radeon RX 7900 XTX 24GBllama.cpp 乗る Q8_0 14.3 GB 23.0 GB 256K 45.5
M5 32GBMLX 乗る MLX 8bit 13.8 GB 24.0 GB 256K 6.5
M4 32GBMLX 乗る MLX 8bit 13.8 GB 24.0 GB 256K 5.1
M2 Max 32GBMLX 乗る MLX 8bit 13.8 GB 24.0 GB 256K 17.1
M1 Max 32GBMLX 乗る MLX 8bit 13.8 GB 24.0 GB 256K 17.1
RTX 5090 32GBllama.cpp 乗る Q8_0 14.3 GB 31.0 GB 256K 73.7
M5 Max 36GBMLX 乗る MLX 8bit 13.8 GB 27.0 GB 256K 19.6
M4 Max 36GBMLX 乗る MLX 8bit 13.8 GB 27.0 GB 256K 17.5
M3 Max 36GBMLX 乗る MLX 8bit 13.8 GB 27.0 GB 256K 12.8
M5 Max 48GBMLX 乗る MLX 8bit 13.8 GB 36.0 GB 256K 26.2
M5 Pro 48GBMLX 乗る MLX 8bit 13.8 GB 36.0 GB 256K 13.1
M4 Max 48GBMLX 乗る MLX 8bit 13.8 GB 36.0 GB 256K 23.3
M4 Pro 48GBMLX 乗る MLX 8bit 13.8 GB 36.0 GB 256K 11.7
M3 Max 48GBMLX 乗る MLX 8bit 13.8 GB 36.0 GB 256K 17.1
RTX 6000 Ada 48GBllama.cpp 乗る Q8_0 14.3 GB 47.0 GB 256K 45.5
RTX A6000 48GBllama.cpp 乗る Q8_0 14.3 GB 47.0 GB 256K 37.7
M5 Max 64GBMLX 乗る MLX 8bit 13.8 GB 48.0 GB 256K 26.2
M5 Pro 64GBMLX 乗る MLX 8bit 13.8 GB 48.0 GB 256K 13.1
M4 Max 64GBMLX 乗る MLX 8bit 13.8 GB 48.0 GB 256K 23.3
M4 Pro 64GBMLX 乗る MLX 8bit 13.8 GB 48.0 GB 256K 11.7
M3 Max 64GBMLX 乗る MLX 8bit 13.8 GB 48.0 GB 256K 17.1
M2 Ultra 64GBMLX 乗る MLX 8bit 13.8 GB 48.0 GB 256K 34.2
M2 Max 64GBMLX 乗る MLX 8bit 13.8 GB 48.0 GB 256K 17.1
M1 Ultra 64GBMLX 乗る MLX 8bit 13.8 GB 48.0 GB 256K 34.2
M1 Max 64GBMLX 乗る MLX 8bit 13.8 GB 48.0 GB 256K 17.1
Ryzen AI Max+ 395 64GBllama.cpp 乗る Q8_0 14.3 GB 57.6 GB 256K 11.2
M5 Ultra 96GBMLX 乗る MLX 8bit 13.8 GB 72.0 GB 256K 51.2
M3 Ultra 96GBMLX 乗る MLX 8bit 13.8 GB 72.0 GB 256K 35.0
M3 Max 96GBMLX 乗る MLX 8bit 13.8 GB 72.0 GB 256K 12.8
M2 Max 96GBMLX 乗る MLX 8bit 13.8 GB 72.0 GB 256K 17.1
RTX PRO 6000 Blackwell 96GBllama.cpp 乗る Q8_0 14.3 GB 95.0 GB 256K 73.7
M5 Max 128GBMLX 乗る MLX 8bit 13.8 GB 96.0 GB 256K 26.2
M4 Max 128GBMLX 乗る MLX 8bit 13.8 GB 96.0 GB 256K 23.3
M3 Max 128GBMLX 乗る MLX 8bit 13.8 GB 96.0 GB 256K 17.1
M2 Ultra 128GBMLX 乗る MLX 8bit 13.8 GB 96.0 GB 256K 34.2
M1 Ultra 128GBMLX 乗る MLX 8bit 13.8 GB 96.0 GB 256K 34.2
DGX Spark 128GBllama.cpp 乗る Q8_0 14.3 GB 115 GB 256K 13.8
Ryzen AI Max+ 395 128GBllama.cpp 乗る Q8_0 14.3 GB 115 GB 256K 11.2
M2 Ultra 192GBMLX 乗る MLX 8bit 13.8 GB 144 GB 256K 34.2
M5 Ultra 256GBMLX 乗る MLX 8bit 13.8 GB 192 GB 256K 51.2
M3 Ultra 256GBMLX 乗る MLX 8bit 13.8 GB 192 GB 256K 35.0
HPE Private Cloud AI Small(RTX PRO 6000 ×4)llama.cpp 乗る Q8_0 14.3 GB 380 GB 256K 138
M5 Ultra 512GBMLX 乗る MLX 8bit 13.8 GB 384 GB 256K 51.2
M3 Ultra 512GBMLX 乗る MLX 8bit 13.8 GB 384 GB 256K 35.0
M5 Max 128GB ×2Thunderbolt 5(RDMA)・exo / MLX distributed 乗る MLX 8bit 14.8 GB 192 GB 256K 36.7
M5 Ultra 512GB ×2Thunderbolt 5(RDMA)・exo / MLX distributed 乗る MLX 8bit 14.8 GB 768 GB 256K 55.8
M5 Ultra 512GB ×4Thunderbolt 5(RDMA)・exo / MLX distributed 乗る MLX 8bit 16.8 GB 1536 GB 256K 58.4
DGX Spark 128GB ×2ConnectX-7(200GbE 直結)・vLLM(Ray・テンソル並列) 乗る BF16 29.8 GB 230 GB 256K 14.2

量子化ごとのサイズ

形式量子化サイズ実効 bitリポジトリ
BF16 BF16 22.3 GB 15.95 google/gemma-4-12B-it
GGUF Q4_K_M 6.6 GB 4.75 unsloth/gemma-4-12b-it-GGUF
GGUF Q6_K 9.1 GB 6.52 unsloth/gemma-4-12b-it-GGUF
GGUF Q8_0 11.8 GB 8.45 unsloth/gemma-4-12b-it-GGUF
MLX MLX 4bit 6.3 GB 4.49 lmstudio-community/gemma-4-12B-it-MLX-4bit
MLX MLX 6bit 9.1 GB 6.49 lmstudio-community/gemma-4-12B-it-MLX-6bit
MLX MLX 8bit 11.8 GB 8.48 lmstudio-community/gemma-4-12B-it-MLX-8bit

Hugging Face のファイルサイズ(本体の重みのみ)。実効 bit はサイズ ÷ 総パラメータ。

基本情報

パラメータ
12B(dense)
層数
48
KV を持つ層
40層×4,096要素(窓 1K)、8層×512要素
入力
テキスト・画像
ライセンス
apache-2.0
公開日
2026-05-23
配布元
google/gemma-4-12B-it

起動コマンドの例

mlx_lm.server --model lmstudio-community/gemma-4-12B-it-MLX-4bit
llama-server -hf unsloth/gemma-4-12b-it-GGUF:Q4_K_M -c 8192
ollama run hf.co/unsloth/gemma-4-12b-it-GGUF:Q4_K_M
vllm serve google/gemma-4-12B-it --max-model-len 8192

ECN 実測

このモデルの ECN 実測はまだありません。

ベンチマークと出典

ベンチマークスコア出典条件日付
MMLU-Pro 77.2 ベンダー instruction-tuned, vendor self-report (mode not specified in card) 2026-05-23
AIME 2026 77.5 ベンダー instruction-tuned, vendor self-report (mode not specified in card); no tools 2026-05-23
LiveCodeBench 72 ベンダー instruction-tuned, vendor self-report (mode not specified in card); LiveCodeBench v6 2026-05-23
GPQA Diamond 78.8 ベンダー instruction-tuned, vendor self-report (mode not specified in card) 2026-05-23
τ²-Bench 69 ベンダー instruction-tuned, vendor self-report (mode not specified in card); 'Tau2 (average over 3)' domains 2026-05-23
Humanity's Last Exam 5.2 ベンダー instruction-tuned, vendor self-report (mode not specified in card); no tools 2026-05-23
MMMLU(多言語) 83.4 ベンダー instruction-tuned, vendor self-report (mode not specified in card) 2026-05-23
MMMU-Pro 69.1 ベンダー instruction-tuned, vendor self-report (mode not specified in card) 2026-05-23