Apakah prestasi puncak FP16 NVIDIA L4?
Jawapan
Dilancarkan pada 2023, NVIDIA L4 adalah pemecut kelas Ada Lovelace dengan 24 GB GDDR6, lebar jalur memori 300 GB/s, dan pengiraan FP16 TFLOPS 121. FP32 mencapai puncak pada 30.3 TFLOPS dan kad menggunakan sehingga 72W.
Dalam istilah praktikal: cukup VRAM untuk memuatkan model dalam julat parameter ~24B dalam FP16 (lebih besar dengan kuantisasi), cukup lebar jalur untuk mengelakkan lapisan perhatian kekurangan memori, dan cukup pengiraan untuk melatih transformer pada saiz kelompok yang memenuhi pengoptimum moden.
Get NVIDIA L4 on RunPod starting at $0.39/hr — live pricing and fast provisioning.
Lebih Banyak FAQ tentang NVIDIA L4
Ulasan Penyedia GPU RunPod & Fakta Utama (Jun 2026)
Gambaran ringkas RunPod: pembiayaan maksimum, pembahagian keuntungan, peraturan penurunan nilai, leverage, instrumen, jadual pembayaran, kaedah pembayaran, kebenaran dagangan dan KYC. Data disahkan Jun 2026.
|
RunPod
Awan yang dibina untuk AI — lancarkan dan skala beban kerja GPU dari inferens tanpa pelayan ke kluster multi-node segera atas permintaan.
|
|
|---|---|
| Gambaran Keseluruhan | |
| Penilaian Trustpilot | 3.5 |
| Ibu Pejabat | United States |
| Jenis Penyedia | Fokus GPU |
| Terbaik Untuk | Latihan AI inferens penalaan halus Stable Diffusion pemprosesan kelompok rendering penyelidikan perkhidmatan LLM AI generatif |
| Perkakasan GPU | |
| Model GPU | B300 B200 H200 H100 SXM H100 PCIe H100 NVL MI300X A100 SXM A100 PCIe RTX 5090 RTX PRO 6000 L40S L40 RTX 6000 Ada RTX 5000 Ada RTX A6000 RTX A5000 RTX 4090 RTX 4080 SUPER RTX 4080 RTX 4070 Ti RTX 3090 Ti RTX 3090 RTX 3080 Ti RTX 3080 RTX 3070 A40 A30 A2 L4 |
| Maksimum VRAM (GB) | 288 |
| Maksimum GPU/Satu Instans | 8 |
| Sambungan | NVLink |
| Harga | |
| Harga Mula ($/jam) | $0.06/hr |
| Ketelitian Pengebilan | Per saat |
| Spot/Preemptible | Ya |
| Diskaun Terpelihara | 15-29% (pelan 1 bulan hingga 1 tahun) |
| Kredit Percuma | Bonus $5-$500 selepas perbelanjaan pertama $10 |
| Yuran Egress | Tiada (Percuma) |
| Penyimpanan | Kontena/Isipadu ($0.10/GB/bulan), Isipadu Tidak Aktif ($0.20/GB/bulan), Penyimpanan Rangkaian ($0.07/GB/bulan 1TB) |
| Infrastruktur | |
| Wilayah | 31 wilayah global |
| SLA Masa Beroperasi | 99.99% |
| Pengalaman Pembangun | |
| Rangka Kerja | PyTorch TensorFlow JAX ONNX CUDA |
| Sokongan Docker | Ya |
| Akses SSH | Ya |
| Jupyter Notebooks | Ya |
| API / CLI | Ya |
| Masa Persediaan | Segera |
| Sokongan Kubernetes | Tidak |
| Terma Perniagaan | |
| Komitmen Minimum | Tiada |
| Pematuhan | SOC 2 Jenis II |
RunPod