L4 vs RTX 4080 Super — сравнение характеристик и цен аренды

GPU 1

L4

24 ГБAda Lovelace
VS

GPU 2

RTX 4080 Super

Ada Lovelace16 ГБ

Выводы

Лучше для обучения моделей

L4

Сравнение характеристик

Характеристика L4 RTX 4080 Super
VRAM 24ГБ 16ГБ
VRAM bandwidth 300ГБ/с 736ГБ/с
CUDA-ядра 7 424 10 240
FP32 TFLOPS 30.3 52.2
FP16 TFLOPS 121.0 104.4
BF16 TFLOPS 121.0 104.4
FP8 TFLOPS 242.0 —
INT8 TOPS 242.0 —
TDP 72Вт 320Вт
SDXL img/s — 2.0
Архитектура Ada Lovelace Ada Lovelace
Form factor PCIE PCIE
NVLink НетНет
MIG НетНет
ECC память ДаНет

Значения tokens/sec приблизительные — зависят от конфигурации сервера и настроек vLLM/TGI.

Аренда на CloudCompute

RTX 4080 Super

По запросу

Арендовать RTX 4080 Super