GPU 1

L40S

48 ГБ Ada Lovelace
VS

GPU 2

A100 PCIe 80GB

Ampere 80 ГБ

Выводы

Лучше для LLM-инференса

A100 PCIe 80GB

Лучше для обучения моделей

A100 PCIe 80GB

Сравнение характеристик

Характеристика L40S A100 PCIe 80GB
VRAM 48ГБ 80ГБ
VRAM bandwidth 864ГБ/с 1 935ГБ/с
CUDA-ядра 18 176 6 912
FP32 TFLOPS 91.6 19.5
FP16 TFLOPS 183.0 312.0
BF16 TFLOPS 183.0 312.0
FP8 TFLOPS 366.0
INT8 TOPS 366.0 624.0
TDP 350Вт 300Вт
Llama 3.1 8B FP16 tok/s 900 1 050
Llama 3.1 70B FP16 tok/s 110 120
Архитектура Ada Lovelace Ampere
Form factor PCIE PCIE
NVLink Нет Нет
MIG Нет Да (7)
ECC память Да Да

Значения tokens/sec приблизительные — зависят от конфигурации сервера и настроек vLLM/TGI.