What is the memory bandwidth of NVIDIA L40S?

Réponse

At a glance: NVIDIA L40S = Ada Lovelace architecture, 48 GB GDDR6 memory, 864 GB/s bandwidth, 366 FP16 TFLOPS, 91.6 FP32 TFLOPS, 350W, 2023.

Those specs tell most of the story for machine learning: VRAM sets the model ceiling, bandwidth throttles attention-heavy production inference, and TFLOPS set pre-training throughput. NVIDIA L40S sits firmly in the class of accelerators targeted at modern transformer workloads — the bandwidth/TFLOPS balance is tuned for large-batch pre-training and production production inference rather than gaming.

Top cloud providers offering NVIDIA L40S: Vast.ai (from $0.55/hr), Novita AI, and Latitude.sh. Start comparing live rates.

Plus de FAQs sur NVIDIA L40S

Vast.ai contre Novita AI contre Latitude.sh contre RunPod contre Massed Compute contre DigitalOcean - Comparaison de fournisseurs de GPU (Avril 2026)

Comparaison côte à côte de Vast.ai contre Novita AI contre Latitude.sh contre RunPod contre Massed Compute contre DigitalOcean. Parcourez rapidement le financement maximal, les partages des bénéfices, les règles de risque, l'effet de levier, les plateformes, les instruments, les calendriers de paiement, les options de paiement, les permissions de trading et les restrictions KYC pour affiner votre liste de sociétés de trading propriétaire. Données mises à jour Avril 2026.

Vast.ai contre Novita AI contre Latitude.sh contre RunPod contre Massed Compute contre DigitalOcean - Comparaison de fournisseurs de GPU (Avril 2026)
Vast.ai
GPU instantanés. Tarification transparente.
Visit Vast.ai
Novita AI
Plateforme Cloud IA & Agent avec plus de 200 API de modèles, instances GPU et inférence sans serveur à grande échelle.
Visit Novita AI
Latitude.sh
Cloud GPU bare metal dans 23 emplacements mondiaux
Visit Latitude.sh
RunPod
Le cloud conçu pour l'IA — déployez et faites évoluer des charges de travail GPU, de l'inférence sans serveur aux clusters multi-nœuds instantanés à la demande.
Visit RunPod
Massed Compute
Cloud GPU avec support direct des ingénieurs
Visit Massed Compute
DigitalOcean
Cloud GPU simple et évolutif pour IA/ML
Visit DigitalOcean
Aperçu
Note Trustpilot 4.4 3.3 3.7 3.7 0 4.6
Siège social United States United States Brazil United States United States United States
Type de fournisseur Place de marché GPU Axé sur le GPU Bare Metal Axé sur le GPU Axé sur les GPU N/A
Idéal pour Entraînement IA inférence ajustement fin Stable Diffusion traitement par lots recherche service LLM IA générative Entraînement IA inférence ajustement fin IA générative recherche service LLM Stable Diffusion Formation IA inférence GPU bare metal ajustement fin recherche charges de travail dédiées IA générative Entraînement IA inférence ajustement fin Stable Diffusion traitement par lots rendu recherche service LLM IA générative Entraînement IA inférence rendu VFX IA générative ajustement fin HPC Stable Diffusion recherche Formation IA inférence ajustement fin déploiement LLM service LLM vision par ordinateur startups IA générative recherche
Matériel GPU
Modèles GPU B200 H200 H100 SXM H100 NVL A100 SXM A100 PCIe RTX 5090 RTX 5080 RTX 5070 Ti RTX 6000 Pro RTX 6000 Ada RTX 4500 Ada RTX A6000 RTX A5000 RTX A4000 L40S L40 A40 A10 RTX 4090 RTX 4080 RTX 4070 Ti RTX 4070 RTX 4060 Ti RTX 4060 RTX 3090 Ti RTX 3090 RTX 3080 Ti RTX 3080 RTX 3070 Ti RTX 3070 Tesla V100 Tesla T4 A2 GTX 1080 H100 SXM A100 SXM L40S RTX 4090 RTX 6000 Ada RTX 5090 RTX 3090 A30 RTX A5000 RTX A6000 L40S RTX 6000 Ada A100 SXM H100 SXM GH200 RTX PRO 6000 B300 B200 H200 H100 SXM H100 PCIe H100 NVL MI300X A100 SXM A100 PCIe RTX 5090 RTX PRO 6000 L40S L40 RTX 6000 Ada RTX 5000 Ada RTX A6000 RTX A5000 RTX 4090 RTX 4080 SUPER RTX 4080 RTX 4070 Ti RTX 3090 Ti RTX 3090 RTX 3080 Ti RTX 3080 RTX 3070 A40 A30 A2 L4 A30 RTX A5000 RTX A6000 L40S A100 SXM H100 PCIe H100 SXM H100 NVL RTX PRO 6000 H200 NVL RTX 4000 Ada RTX 6000 Ada L40S MI300X H100 SXM H200
VRAM max (Go) 192 80 96 288 141 192
Max GPUs/instance 8 8 8 8 8 8
Interconnexion NVLink, InfiniBand NVLink NVLink NVLink NVLink NVLink
Tarification
Prix de départ ($/h) $0.06/hr $0.11/hr $0.35/hr $0.06/hr $0.35/hr $0.76/hr
Granularité de facturation Par seconde Par seconde À l'heure Par seconde À la minute À la seconde
Spot/Préemptible Oui Oui Non Oui Non Non
Remises réservées Jusqu'à 50 % (réservation de 1 à 6 mois) N/A N/A 15-29 % (plans de 1 mois à 1 an) N/A N/A
Crédits gratuits Petit crédit de test à l'inscription Jusqu'à 10 000 $ pour les startups 200 $ via programme de parrainage Bonus de 5 $ à 500 $ après une première dépense de 10 $ Aucun 200 $ de crédit gratuit pendant 60 jours
Frais de sortie Varie selon l'hôte ($/To) Aucun (Gratuit) Aucun Aucun (Gratuit) Aucun Aucun (inclus dans le forfait)
Stockage Varie selon l'hôte ($/Go/heure, facturé tant que l'instance existe) Disque de conteneur (60 Go gratuits), disque de volume, volumes réseau NVMe local inclus (jusqu'à 4x 3,8 To), Stockage en bloc 0,10 $/Go/mois, Stockage système de fichiers 0,05 $/Go/mois Conteneur/Volume (0,10 $/Go/mois), Volume inactif (0,20 $/Go/mois), Stockage réseau (0,07 $/Go/mois 1To) NVMe local inclus avec les instances 500-720 Gio NVMe de démarrage (inclus), 5 Tio NVMe scratch sur les configurations plus grandes, volumes à 0,10 $/Gio/mois
Infrastructure
Régions Plus de 500 emplacements, plus de 40 centres de données États-Unis, UE, APAC, Amérique du Sud, Afrique, Moyen-Orient (plus de 20 emplacements) 23 emplacements : États-Unis (8 villes), Amérique latine (5), Europe (5), APAC (4), Mexico. GPU à Dallas, Francfort, Sydney, Tokyo 31 régions mondiales États-Unis (centres de données Tier III) New York (NYC2), Toronto (TOR1), Atlanta (ATL1), Richmond (RIC1), Amsterdam (AMS3)
SLA de disponibilité Pas de SLA formel (scores de fiabilité de l'hôte visibles) 99,9 % 99,9 % 99,99 % Tier III (conception 99,98 %) 99 %
Expérience Développeur
Frameworks PyTorch TensorFlow CUDA vLLM ComfyUI PyTorch TensorFlow CUDA cuDNN TensorRT Images optimisées ML PyTorch TensorFlow (installé par l'utilisateur) CUDA PyTorch TensorFlow JAX ONNX CUDA PyTorch TensorFlow CUDA cuDNN ComfyUI modèles ML préconfigurés PyTorch TensorFlow Jupyter Miniconda CUDA ROCm Hugging Face
Support Docker Oui Oui Oui Oui Oui Oui
Accès SSH Oui Oui Oui Oui Oui Oui
Carnets Jupyter Oui Oui Non Oui Non Oui
API / CLI Oui Oui Oui Oui Oui Oui
Temps de configuration Secondes N/A Secondes Instantané Minutes Minutes
Support Kubernetes Non Non Non Non Non Oui
Conditions Commerciales
Engagement minimum Aucun Aucun Aucun Aucun Aucun Aucun
Conformité SOC 2 Type 2 HIPAA RGPD CCPA SOC 2 Isolation mono-locataire DPA disponible SOC 2 Type II SOC 2 Type II HIPAA SOC 2 Type II SOC 3 HIPAA (avec BAA) CSA STAR Niveau 1
Vast.ai Novita AI Latitude.sh RunPod Massed Compute DigitalOcean

Explorer NVIDIA L40S