A30 vs RTX 3080 Ti — сравнение характеристик и цен аренды

GPU 1

A30

24 ГБAmpere
VS

GPU 2

RTX 3080 Ti

Ampere12 ГБ

Выводы

Лучше для обучения моделей

A30

Сравнение характеристик

Характеристика A30 RTX 3080 Ti
VRAM 24ГБ 12ГБ
VRAM bandwidth 933ГБ/с 912ГБ/с
CUDA-ядра 3 584 10 240
FP32 TFLOPS 10.3 34.1
FP16 TFLOPS 165.0 68.2
BF16 TFLOPS 165.0 68.2
INT8 TOPS 330.0 —
TDP 165Вт 350Вт
SDXL img/s — 0.9
Архитектура Ampere Ampere
Form factor PCIE PCIE
NVLink ДаНет
MIG Да (4)Нет
ECC память ДаНет

Значения tokens/sec приблизительные — зависят от конфигурации сервера и настроек vLLM/TGI.