NVIDIA · Ada Lovelace Architecture

Sewa NVIDIA L40S di Cloud

Versatile data center GPU balancing AI compute with graphics capabilities. Strong for inference workloads.

VRAM 48 GB GDDR6
Bandwidth 864 GB/s
FP16 366.0 TFLOPS
FP32 91.6 TFLOPS
TDP 350W
Arsitektur Ada Lovelace
Termurah On-Demand $0.55/hr
Rata-rata On-Demand $0.95/hr
Penyedia 7

Bandingkan Harga Cloud NVIDIA L40S — 7 Penyedia

On-Demand

NVIDIA L40S — On-Demand pricing
Penyedia Harga / GPU / jam Ketersediaan Catatan Aksi
Vast.ai United States $0.55/hr TERMURAH Available Marketplace avg Kunjungi Penyedia
Novita AI United States $0.55/hr TERMURAH Available Kunjungi Penyedia
Latitude.sh Brazil $0.61/hr Available GPU VM Kunjungi Penyedia
RunPod United States $0.86/hr Available Secure Cloud Kunjungi Penyedia
Massed Compute United States $0.86/hr Available Kunjungi Penyedia
DigitalOcean United States $1.57/hr Available Kunjungi Penyedia
Vultr United States $1.67/hr Available Kunjungi Penyedia

Spot / Preemptible

NVIDIA L40S — Spot / Preemptible pricing
Penyedia Harga / GPU / jam Ketersediaan Catatan Aksi
RunPod United States $0.79/hr TERMURAH Available Community Cloud Kunjungi Penyedia

Harga terakhir diverifikasi: April 13, 2026

Spesifikasi Teknis NVIDIA L40S

Produsen NVIDIA
Arsitektur Ada Lovelace
VRAM 48 GB GDDR6
Bandwidth 864 GB/s
FP16 (Tensor) 366.0 TFLOPS
FP32 91.6 TFLOPS
TDP 350W
Tahun Rilis 2023
Segmen Pusat data
Jenis Memori GDDR6

Terbaik Untuk

Inference fine-tuning video processing AI-accelerated graphics

Pertanyaan yang Sering Diajukan

Diskon apa yang bisa saya harapkan pada NVIDIA L40S dengan harga spot atau reserved?

Harapkan harga cloud NVIDIA L40S mulai dari $0.55 per jam on-demand. Menurut snapshot July 14, 2026 kami, opsi on-demand dengan harga terendah di pasar adalah Vast.ai, sementara RunPod menawarkan tarif spot terendah di $0.79 per jam — penghematan up to 60% untuk pekerjaan yang toleran terhadap gangguan. Kontrak reserved menambah diskon sekitar up to 40% untuk pemesanan multi-bulan.

Tagihan on-demand satu bulan tipikal bisa mencapai empat digit pada pemanfaatan penuh, itulah sebabnya layanan inferensi produksi biasanya beralih ke reserved dan pekerjaan eksperimental tetap di on-demand atau spot.

Top cloud providers offering NVIDIA L40S: Vast.ai (from $0.55/hr), Novita AI, and Latitude.sh. Start comparing live rates.

Berapa bandwidth memori NVIDIA L40S?

Sekilas: NVIDIA L40S = arsitektur Ada Lovelace, memori 48 GB GDDR6, bandwidth 864 GB/s, TFLOPS FP16 366, TFLOPS FP32 91.6, 350W, 2023.

Spesifikasi tersebut menceritakan sebagian besar kisah untuk pembelajaran mesin: VRAM menentukan batas atas model, bandwidth membatasi inferensi produksi yang berat perhatian, dan TFLOPS menentukan throughput pra-pelatihan. NVIDIA L40S berada di kelas akselerator yang ditargetkan untuk beban kerja transformer modern — keseimbangan bandwidth/TFLOPS dioptimalkan untuk pra-pelatihan batch besar dan inferensi produksi daripada gaming.

Top cloud providers offering NVIDIA L40S: Vast.ai (from $0.55/hr), Novita AI, and Latitude.sh. Start comparing live rates.

NVIDIA L40S performa AI generatif dunia nyata

366 TFLOPS FP16 dan 864 GB/s bandwidth memori menempatkan NVIDIA L40S tepat dalam kelas akselerator yang ditargetkan untuk beban kerja transformer modern. FP32 mencapai puncak di 91.6 TFLOPS, yang masih menangani sebagian besar komputasi ilmiah non-AI dengan nyaman.

Untuk pelatihan dari awal, throughput token kira-kira mengikuti TFLOPS FP16. Untuk inferensi produksi pada model dasar, throughput mengikuti bandwidth. Angka dunia nyata sangat bergantung pada tumpukan framework (PyTorch, TensorRT-LLM, vLLM), dan dapat bervariasi 30-50% tergantung seberapa agresif Anda melakukan kuantisasi.

The cheapest NVIDIA L40S right now is on Vast.ai at $0.55/hr; Novita AI and Latitude.sh also list it — pick the region and billing that fits your workload.

Penyedia mana yang memiliki wilayah NVIDIA L40S terbanyak?

NVIDIA L40S tercantum oleh 7 penyedia GPU cloud: DigitalOcean, Latitude.sh, Massed Compute, Novita AI, RunPod, Vast.ai, and others. Harga on-demand entry mulai dari $0.55 per jam melalui Vast.ai, sementara kapasitas spot mulai dari $0.79 per jam melalui RunPod.

Itu adalah pasar yang relatif padat, yang menjaga tarif tetap kompetitif tetapi juga berarti perbedaan tingkat penyedia dalam dukungan, waktu aktif, dan kebijakan keluar adalah kriteria keputusan yang sebenarnya. Penawaran GPU tanpa server (serverless) (jika tersedia) lebih lanjut mengurangi biaya dengan menagih hanya untuk detik inferensi yang benar-benar Anda gunakan.

Ready to deploy? Vast.ai has NVIDIA L40S from $0.55/hr. Novita AI and Latitude.sh also carry it.

Kasus penggunaan NVIDIA L40S — di mana keunggulannya?

Titik manis untuk NVIDIA L40S: Inference, fine-tuning, video processing, AI-accelerated graphics. Beban kerja tersebut memanfaatkan VRAM 48 GB dan arsitektur Ada Lovelace dengan baik dan tidak terhambat oleh batas komputasinya.

Jika Anda masih ragu apakah NVIDIA L40S tepat, lakukan benchmark beban kerja Anda yang sebenarnya di atasnya — dengan harga $0.55 per jam Anda dapat menjalankan instance uji, menjalankan pipeline Anda selama satu jam, dan membuat keputusan yang tepat berdasarkan data nyata.

Spin up NVIDIA L40S on Vast.ai for $0.55/hr, with Novita AI and Latitude.sh as strong alternatives — compare and deploy in minutes.

Bandingkan dengan GPU Lain

Lihat bagaimana NVIDIA L40S dibandingkan dengan GPU cloud populer lainnya dalam spesifikasi, harga, dan ketersediaan.