…
Cloud-Mietpreis, Rechenleistung pro Dollar und technische Daten im direkten Vergleich.
Im interaktiven Vergleich öffnen →| Daten / Preis | H100 PCIe | H100 SXM |
|---|---|---|
| Speicher | 80 GB HBM2e | 80 GB HBM3 |
| Speicherbandbreite | 2,000 GB/s | 3,350 GB/sbesser |
| FP16 / BF16 (dense) | 0.756 PF | 0.989 PFbesser |
| FP8 (dense) | 1.51 PF | 1.98 PFbesser |
| FP4 (dense) | — | — |
| INT8 (dense) | 1.51 PF | 1.98 PFbesser |
| TF32 (dense) | 0.378 PF | 0.495 PFbesser |
| FP32 (dense) | 0.051 PF | 0.067 PFbesser |
| FP64 (dense) | 0.051 PF | 0.067 PFbesser |
| Leistungsaufnahme | 350 W | 700 W |
| Architektur | Hopper (2022) | Hopper (2022) |
| Niedrigster On-Demand-Preis | $1.98 | $1.66besser |
| Median On-Demand | $2.50besser | $3.09 |
| Niedrigster Spot-Preis | $2.00 | $0.79besser |
| FP16/BF16 $ pro PFLOP·h | $2.62 | $1.68besser |
| Anbieter | 5 | 27 |
Die H100 SXM hat 1.3× mehr dichte FP16/BF16-Rechenleistung als die H100 PCIe. Die H100 SXM hat 1.7× mehr Speicherbandbreite als die H100 PCIe. Der reale Geschwindigkeitsgewinn hängt von der Last ab: Training und Prefill skalieren mit der Rechenleistung, LLM-Decoding dagegen vor allem mit der Speicherbandbreite.
Derzeit ist die H100 SXM pro Einheit Rechenleistung günstiger: $1.68 vs. $2.62 pro PFLOP-Stunde zu den niedrigsten On-Demand-Preisen.
Eine GPU rund um die Uhr zum niedrigsten On-Demand-Preis kostet etwa $1,445 pro Monat für die H100 PCIe und $1,212 für die H100 SXM.
Beide haben 80 GB VRAM; die H100 SXM hat mehr Bandbreite.