NVIDIA · Ampere Architecture

Wypożycz NVIDIA A10G w chmurze

AWS-specific GPU common in cloud ML workloads. Good balance of compute and graphics.

VRAM 24 GB GDDR6
Przepustowość 600 GB/s
FP16 70.0 TFLOPS
FP32 35.0 TFLOPS
TDP 300W
Architektura Ampere

Brak danych cenowych dla tego modelu GPU. Sprawdź ponownie wkrótce.

Specyfikacje techniczne NVIDIA A10G

Producent NVIDIA
Architektura Ampere
VRAM 24 GB GDDR6
Przepustowość 600 GB/s
FP16 (Tensor) 70.0 TFLOPS
FP32 35.0 TFLOPS
TDP 300W
Rok wydania 2021
Segment Centrum danych
Typ pamięci GDDR6

Najlepsze do

Inference graphics rendering AI-accelerated workloads

Najczęściej Zadawane Pytania

Kiedy wydano NVIDIA A10G?

NVIDIA A10G to karta Ampere z 24 GB pamięci GDDR6, 600 GB/s przepustowości oraz 70 TFLOPS mocy obliczeniowej FP16. Została wprowadzona na rynek w 2021 i zużywa do 300W mocy.

W rzeczywistych obciążeniach podsystem pamięci jest zazwyczaj najważniejszym czynnikiem: 600 GB/s przepustowości wystarcza, aby utrzymać większość zadań dekodowania transformera bez niedoboru jednostek obliczeniowych, podczas gdy 24 GB VRAM wspiera szeroki zakres rozmiarów modeli, zwłaszcza po zastosowaniu kwantyzacji.

Check the NVIDIA A10G page for complete specifications and related GPU matchups.

Wydajność rdzeni tensorowych NVIDIA A10G

NVIDIA A10G to karta Ampere, oferująca 70 TFLOPS FP16 i 35 TFLOPS FP32 wraz z przepustowością pamięci 600 GB/s. To wystarczająca moc obliczeniowa, by obsłużyć nowoczesne treningi modeli i obciążenia obsługi w czasie rzeczywistym na poważną skalę.

Benchmarki pokazują, że NVIDIA A10G radzi sobie szczególnie dobrze na modelach typu transformator, gdzie rdzenie tensorowe są nasycone dużymi mnożeniami macierzy (MatMul). Modele dyfuzji, zadania mowy i wizji również wykazują znaczne przyspieszenia w porównaniu do starszych generacji. Dla produkcyjnej obsługi w czasie rzeczywistym wrażliwej na opóźnienia, NVIDIA A10G zwykle osiąga docelowe wartości tokenów na sekundę na dużych modelach językowych znacznie powyżej progu 30-50 tok/s, do którego dąży większość produktów.

The NVIDIA A10G page has the complete datasheet and side-by-side comparisons.

Czy NVIDIA A10G jest nadal aktualny w 2026?

NVIDIA A10G błyszczy w Inference, graphics rendering, AI-accelerated workloads. Karta z 24 GB VRAM i tensor cores generacji Ampere jest doskonałym dopasowaniem do zadań AI, które wymagają dużych rozmiarów batch i korzystają z nowoczesnego wsparcia mieszanej precyzji.

Jest to nadmiarowa moc dla prostych eksperymentów i za mała dla największych modeli frontier, ale pokrywa szeroki środek: dostrajanie otwartych transformatorów, trening modeli dyfuzyjnych, uruchamianie pipeline’ów batch serving w czasie rzeczywistym oraz wsparcie interaktywnych workflow wymagających więcej VRAM niż karta konsumencka.

Full specs, benchmarks, and comparisons are on the NVIDIA A10G page.

Porównaj z innymi GPU

Zobacz, jak NVIDIA A10G wypada na tle innych popularnych GPU w chmurze pod względem specyfikacji, cen i dostępności.