L4 vs RTX 4070 Super — сравнение характеристик и цен аренды

GPU 1

L4

24 ГБAda Lovelace
VS

GPU 2

RTX 4070 Super

Ada Lovelace12 ГБ

Выводы

Лучше для обучения моделей

L4

Сравнение характеристик

Характеристика L4 RTX 4070 Super
VRAM 24ГБ 12ГБ
VRAM bandwidth 300ГБ/с 504ГБ/с
CUDA-ядра 7 424 7 168
FP32 TFLOPS 30.3 35.5
FP16 TFLOPS 121.0 71.0
BF16 TFLOPS 121.0 71.0
FP8 TFLOPS 242.0 —
INT8 TOPS 242.0 —
TDP 72Вт 220Вт
Архитектура Ada Lovelace Ada Lovelace
Form factor PCIE PCIE
NVLink НетНет
MIG НетНет
ECC память ДаНет

Значения tokens/sec приблизительные — зависят от конфигурации сервера и настроек vLLM/TGI.

Аренда на CloudCompute

RTX 4070 Super

По запросу

Арендовать RTX 4070 Super