by Google DeepMind

Gemma 4 26B A4B.

multimodal open weights laptop+ 26B params 262K ctx
Cheapest input
$0.0675/M
on OpenRouter
Cheapest output
$0.225/M
on OpenRouter
Smallest GPU
1× Nvidia GeForce RTX 3090
$0.15/hr
Run it yourself

Cheapest hardware per quantisation.

Each row is one quantisation tier (the same weights compressed differently). Lower precision → lower VRAM → cheaper hardware, at the cost of small accuracy loss. $/Std. ist der günstigste aktuelle Preis. Ein Setup mit mehreren Karten nutzt eine echte Instanz dieser Größe, wenn eine vermietet wird; sonst ist es der Einzelkartenpreis mal Anzahl.

Quantisation Cheapest GPU config Total VRAM Live $/hr tokens/sec
FP16
FP16 — half precision (default)
96 GB $0.52/hr
geschätzt 2 × Einzelkartenpreis
Vast.ai · On-Demand
— Compare →
FP8
FP8 — 8-bit float (Hopper / Blackwell)
48 GB $0.26/hr
Vast.ai · On-Demand
18.1 Compare →
INT4
INT4 — 4-bit integer (~4× VRAM saving)
24 GB $0.15/hr
Akash Network · mit Token bezahlt
50.4 Compare →
Just need an API?
Skip the GPU rental and call a hosted endpoint instead. See access providers on the Overview tab →