by Together AI

Tev1 4B Experimental.

text open weights edge 5B params 33K ctx
Cheapest input
$0.042/M
on Together AI
Smallest GPU
1× Nvidia RTX A2000 Laptop GPU
Run it yourself

Cheapest hardware per quantisation.

Each row is one quantisation tier (the same weights compressed differently). Lower precision → lower VRAM → cheaper hardware, at the cost of small accuracy loss. Le $/h est le tarif le plus bas proposé maintenant. Une configuration multi-cartes utilise une vraie instance de cette taille quand elle est louée ; sinon c'est le tarif d'une carte multiplié par le nombre.

Quantisation Cheapest GPU config Total VRAM Live $/hr tokens/sec
FP16
FP16 — half precision (default)
16 GB $0.019/hr
Clore.ai · à la demande
24.0 Compare →
FP8
FP8 — 8-bit float (Hopper / Blackwell)
8 GB $0.022/hr
Clore.ai · à la demande
33.6 Compare →
INT4
INT4 — 4-bit integer (~4× VRAM saving)
4 GB — 57.7 Compare →
Just need an API?
Skip the GPU rental and call a hosted endpoint instead. See access providers on the Overview tab →