NVIDIA · Ada Lovelace Architecture

租用 NVIDIA L40S 云端 GPU

Versatile data center GPU balancing AI compute with graphics capabilities. Strong for inference workloads.

VRAM 48 GB GDDR6
带宽 864 GB/s
FP16 366.0 TFLOPS
FP32 91.6 TFLOPS
TDP 350W
架构 Ada Lovelace
最便宜的按需 $0.55/hr
按需平均价 $0.95/hr
供应商 7

NVIDIA L40S云端价格比较 — 7家供应商

按需

NVIDIA L40S — 按需 pricing
供应商 价格 / GPU / 小时 可用性 备注 操作
Vast.ai United States $0.55/hr 最便宜 Available Marketplace avg 访问供应商
Novita AI United States $0.55/hr 最便宜 Available 访问供应商
Latitude.sh Brazil $0.61/hr Available GPU VM 访问供应商
RunPod United States $0.86/hr Available Secure Cloud 访问供应商
Massed Compute United States $0.86/hr Available 访问供应商
DigitalOcean United States $1.57/hr Available 访问供应商
Vultr United States $1.67/hr Available 访问供应商

竞价 / 可抢占

NVIDIA L40S — 竞价 / 可抢占 pricing
供应商 价格 / GPU / 小时 可用性 备注 操作
RunPod United States $0.79/hr 最便宜 Available Community Cloud 访问供应商

价格最后验证时间:April 13, 2026

NVIDIA L40S 技术规格

制造商 NVIDIA
架构 艾达·洛芙莱斯
显存 48 GB GDDR6
带宽 864 GB/s
FP16(张量) 366.0 TFLOPS
FP32 91.6 TFLOPS
热设计功耗 350W
发布年份 2023
细分市场 数据中心
内存类型 GDDR6

适用场景

Inference fine-tuning video processing AI-accelerated graphics

常见问题

使用竞价或预留定价,NVIDIA L40S 可以享受多少折扣?

预计 NVIDIA L40S 云价格按需起价为 $0.55 每小时。根据我们的 July 13, 2026 快照,市场上最低价的按需选项是 Vast.ai,而 RunPod 提供最低的现货费率,为 $0.79 每小时——对于能容忍中断的作业节省了 up to 60%。预留合同对多月预订可再额外折扣约 ~up to 40%

典型的一个月按需账单在满负载时达到四位数,这也是生产推理服务通常迁移到预留,而实验工作保持按需或现货的原因。

Top cloud providers offering NVIDIA L40S: Vast.ai (from $0.55/hr), Novita AI, and Latitude.sh. Start comparing live rates.

NVIDIA L40S 的内存带宽是多少?

简要概览:NVIDIA L40S = Ada Lovelace 架构,48 GB GDDR6 显存,864 GB/s 带宽,366 FP16 TFLOPS,91.6 FP32 TFLOPS,350W,2023

这些规格涵盖了机器学习的大部分需求:显存决定模型上限,带宽限制注意力密集型生产推理,TFLOPS 决定预训练吞吐量。NVIDIA L40S 明确定位于现代变换器工作负载的加速器类别——其带宽与 TFLOPS 的平衡针对大批量预训练和生产推理进行了调优,而非游戏用途。

Top cloud providers offering NVIDIA L40S: Vast.ai (from $0.55/hr), Novita AI, and Latitude.sh. Start comparing live rates.

NVIDIA L40S 真实世界生成式 AI 性能

366 FP16 TFLOPS 和 864 GB/s 内存带宽使 NVIDIA L40S 明确属于面向现代变换器工作负载的加速器类别。FP32 峰值为 91.6 TFLOPS,仍能轻松处理大多数非 AI 科学计算。

从零开始训练时,令牌吞吐量大致与 FP16 TFLOPS 成正比。基础模型的生产推理吞吐量则与带宽相关。实际数字高度依赖框架堆栈(PyTorch、TensorRT-LLM、vLLM),且根据量化程度不同可变化 30-50%。

The cheapest NVIDIA L40S right now is on Vast.ai at $0.55/hr; Novita AI and Latitude.sh also list it — pick the region and billing that fits your workload.

哪个提供商拥有最多的 NVIDIA L40S 区域?

NVIDIA L40S 由 7 云 GPU 供应商列出:DigitalOcean, Latitude.sh, Massed Compute, Novita AI, RunPod, Vast.ai, and others。入门级按需价格起步于 $0.55 每小时,通过 Vast.ai 提供,而抢占式容量起步于 $0.79 每小时,通过 RunPod 提供。

这是一个相对拥挤的市场,保持价格竞争力,但也意味着供应商层面的支持、正常运行时间和出口政策差异才是真正的决策标准。无服务器 GPU 产品(如有)通过仅对实际使用的推理秒数计费,进一步降低成本。

Ready to deploy? Vast.ai has NVIDIA L40S from $0.55/hr. Novita AI and Latitude.sh also carry it.

NVIDIA L40S 使用案例 — 它在哪些方面表现出色?

NVIDIA L40S的最佳应用场景:Inference, fine-tuning, video processing, AI-accelerated graphics。这些工作负载充分利用了其48 GB显存和Ada Lovelace架构,并且不会因计算能力限制而成为瓶颈。

如果你仍不确定NVIDIA L40S是否合适,可以在其上基准测试你的实际工作负载——以$0.55每小时的价格,你可以启动测试实例,运行一小时的工作流程,并用真实数据做出明智决定。

Spin up NVIDIA L40S on Vast.ai for $0.55/hr, with Novita AI and Latitude.sh as strong alternatives — compare and deploy in minutes.

与其他 GPU 比较

查看 NVIDIA L40S 在规格、价格和可用性方面与其他热门云 GPU 的对比。