…
Cloud-Mietpreis, Rechenleistung pro Dollar und technische Daten im direkten Vergleich.
Im interaktiven Vergleich öffnen →| Daten / Preis | L40S | A100 SXM 80GB |
|---|---|---|
| Speicher | 48 GB GDDR6 | 80 GB HBM2ebesser |
| Speicherbandbreite | 864 GB/s | 2,039 GB/sbesser |
| FP16 / BF16 (dense) | 0.362 PFbesser | 0.312 PF |
| FP8 (dense) | 0.733 PF | — |
| FP4 (dense) | — | — |
| INT8 (dense) | 0.733 PFbesser | 0.624 PF |
| TF32 (dense) | 0.183 PFbesser | 0.156 PF |
| FP32 (dense) | 0.0916 PFbesser | 0.0195 PF |
| FP64 (dense) | 0.0014 PF | 0.0195 PFbesser |
| Leistungsaufnahme | 350 W | 400 W |
| Architektur | Ada Lovelace (2023) | Ampere (2020) |
| Niedrigster On-Demand-Preis | $0.69besser | $0.81 |
| Median On-Demand | $1.50besser | $2.35 |
| Niedrigster Spot-Preis | $0.38besser | $0.90 |
| FP16/BF16 $ pro PFLOP·h | $1.91besser | $2.58 |
| Anbieter | 15 | 17 |
Die L40S hat 1.2× mehr dichte FP16/BF16-Rechenleistung als die A100 SXM 80GB. Die A100 SXM 80GB hat 2.4× mehr Speicherbandbreite als die L40S. Der reale Geschwindigkeitsgewinn hängt von der Last ab: Training und Prefill skalieren mit der Rechenleistung, LLM-Decoding dagegen vor allem mit der Speicherbandbreite.
Derzeit ist die L40S pro Einheit Rechenleistung günstiger: $1.91 vs. $2.58 pro PFLOP-Stunde zu den niedrigsten On-Demand-Preisen.
Eine GPU rund um die Uhr zum niedrigsten On-Demand-Preis kostet etwa $504 pro Monat für die L40S und $588 für die A100 SXM 80GB.
Die A100 SXM 80GB hat mehr Speicher: 80 GB vs. 48 GB.