NVIDIA · Ampere Architecture

Sewa NVIDIA A100 SXM (40GB) di Cloud

Budget A100 variant with 40GB VRAM. Good for training models under 13B parameters and batch inference.

VRAM 40 GB HBM2e
Bandwidth 1,555 GB/s
FP16 312.0 TFLOPS
FP32 19.5 TFLOPS
TDP 400W
Arsitektur Ampere
Termurah On-Demand $0.80/hr
Rata-rata On-Demand $0.97/hr
Penyedia 2

Bandingkan Harga Cloud NVIDIA A100 SXM (40GB) — 2 Penyedia

On-Demand

NVIDIA A100 SXM (40GB) — On-Demand pricing
Penyedia Harga / GPU / jam Ketersediaan Catatan Aksi
Vast.ai United States $0.80/hr TERMURAH Available Marketplace avg Kunjungi Penyedia
RunPod United States $1.14/hr Available Secure Cloud, SXM Kunjungi Penyedia

Harga terakhir diverifikasi: April 13, 2026

Spesifikasi Teknis NVIDIA A100 SXM (40GB)

Produsen NVIDIA
Arsitektur Ampere
VRAM 40 GB HBM2e
Bandwidth 1,555 GB/s
FP16 (Tensor) 312.0 TFLOPS
FP32 19.5 TFLOPS
TDP 400W
Tahun Rilis 2020
Segmen Pusat data
Jenis Memori HBM2e

Terbaik Untuk

AI training fine-tuning inference on smaller models

Pertanyaan yang Sering Diajukan

Berapa tarif per jam yang paling terjangkau untuk NVIDIA A100 SXM (40GB)?

Tarif cloud NVIDIA A100 SXM (40GB) dengan harga terbaik yang kami pantau adalah $0.80 per jam di Vast.ai. Tarif tersebut mencerminkan penagihan on-demand; penyedia yang mendukung instance spot/preemptible menurunkan harga menjadi per jam — penghematan sekitar up to 60% untuk beban kerja yang dapat mentolerir gangguan.

Jika Anda dapat berkomitmen pada kapasitas yang dipesan, harapkan diskon tambahan up to 40%. Untuk eksperimen ad-hoc kami merekomendasikan on-demand; untuk anggaran pra-pelatihan multi-hari, campuran spot dan on-demand. Kutipan per jam dapat berubah mingguan saat penyedia bersaing, jadi periksa tabel langsung sebelum menjalankan proses jangka panjang.

Launch a NVIDIA A100 SXM (40GB) instance on Vast.ai at $0.80/hr, or try RunPod for alternative regions and availability.

Spesifikasi utama NVIDIA A100 SXM (40GB) untuk beban kerja transformer

Sekilas: NVIDIA A100 SXM (40GB) = arsitektur Ampere, memori 40 GB HBM2e, bandwidth 1,555 GB/s, TFLOPS FP16 312, TFLOPS FP32 19.5, 400W, 2020.

Spesifikasi tersebut menceritakan sebagian besar kisah untuk pembelajaran mesin: VRAM menentukan batas atas model, bandwidth membatasi inferensi produksi yang berat perhatian, dan TFLOPS menentukan throughput pra-pelatihan. NVIDIA A100 SXM (40GB) berada di kelas akselerator yang ditargetkan untuk beban kerja transformer modern — keseimbangan bandwidth/TFLOPS dioptimalkan untuk pra-pelatihan batch besar dan inferensi produksi daripada gaming.

Two tracked cloud providers currently offer NVIDIA A100 SXM (40GB): Vast.ai and RunPod. Vast.ai has the cheaper rate at $0.80/hr.

Berapa banyak gambar per detik yang dapat dihasilkan NVIDIA A100 SXM (40GB)?

Angka performa nyata untuk NVIDIA A100 SXM (40GB): 312 TFLOPS FP16 / 19.5 TFLOPS FP32 / 1,555 GB/s bandwidth / 40 GB VRAM.

Sebagai konteks, itu adalah amplop komputasi yang digunakan untuk melatih dan menyajikan sebagian besar LLM komersial dalam produksi hari ini. Apakah Anda menjalankan pelatihan tingkat riset atau inferensi latensi rendah sensitif, NVIDIA A100 SXM (40GB) umumnya mencapai amplop throughput yang diharapkan dari generasi Ampere, dengan angka spesifik dipengaruhi oleh ukuran batch, panjang urutan, dan pilihan kuantisasi.

Deploy NVIDIA A100 SXM (40GB) on Vast.ai (from $0.80/hr) or RunPod — check live availability and spin up in minutes.

Di mana pengembang dapat menjalankan beban kerja NVIDIA A100 SXM (40GB) tanpa biaya egress?

2 penyedia yang menawarkan NVIDIA A100 SXM (40GB) hari ini: RunPod, Vast.ai. Sumber on-demand termurah adalah Vast.ai pada $0.80 per jam; harga spot terendah adalah per jam pada .

Faktor seleksi dunia nyata meliputi: teknologi interkoneksi (NVLink vs. PCIe vs. InfiniBand), ketersediaan multi-node, penagihan per detik vs. per jam, biaya keluar, dan cakupan regional. Penyedia murah dengan biaya keluar tinggi bisa lebih mahal daripada penyedia yang lebih mahal dengan keluar gratis setelah Anda memperhitungkan perpindahan data.

Rent NVIDIA A100 SXM (40GB) from Vast.ai (from $0.80/hr) or RunPod — compare live pricing and deploy.

NVIDIA A100 SXM (40GB) vs opsi lebih murah untuk pelatihan model

Untuk apa NVIDIA A100 SXM (40GB) berguna? AI training, fine-tuning, inference on smaller models. Itu adalah penggunaan yang alami mengingat spesifikasinya: memori yang cukup (40 GB) untuk sebagian besar LLM modern, komputasi yang cukup untuk pelatihan skala besar, dan bandwidth yang cukup untuk menjaga latensi inferensi tetap rendah.

NVIDIA A100 SXM (40GB) bukanlah opsi termurah untuk model kecil, juga bukan opsi terbesar untuk pelatihan skala frontier — tetapi menempati volume tertinggi di tengah pasar akselerator AI, itulah sebabnya ia muncul di sebagian besar katalog cloud dengan harga $0.80 per jam atau lebih baik.

Rent NVIDIA A100 SXM (40GB) from Vast.ai (from $0.80/hr) or RunPod — compare live pricing and deploy.

Bandingkan dengan GPU Lain

Lihat bagaimana NVIDIA A100 SXM (40GB) dibandingkan dengan GPU cloud populer lainnya dalam spesifikasi, harga, dan ketersediaan.