…
Prezzo di noleggio cloud, capacità di calcolo per dollaro e specifiche a confronto.
Apri nel comparatore interattivo →| Specifica / prezzo | V100 SXM2 32GB | A100 SXM 40GB |
|---|---|---|
| Memoria | 32 GB HBM2 | 40 GB HBM2migliore |
| Banda di memoria | 900 GB/s | 1,555 GB/smigliore |
| FP16 / BF16 (denso) | 0.125 PF | 0.312 PFmigliore |
| FP8 (denso) | — | — |
| FP4 (denso) | — | — |
| INT8 (denso) | — | 0.624 PF |
| TF32 (denso) | — | 0.156 PF |
| FP32 (denso) | 0.0157 PF | 0.0195 PFmigliore |
| FP64 (denso) | 0.0078 PF | 0.0195 PFmigliore |
| Potenza | 300 W | 400 W |
| Architettura | Volta (2018) | Ampere (2020) |
| On demand più basso | $0.15migliore | $0.54 |
| Mediana on demand | $2.03 | $1.99migliore |
| Spot più basso | $0.42migliore | $0.55 |
| FP16/BF16 $ per PFLOP·h | $1.19migliore | $1.71 |
| Provider | 2 | 8 |
La A100 SXM 40GB ha calcolo FP16/BF16 denso 2.5× superiore alla V100 SXM2 32GB. La A100 SXM 40GB ha banda di memoria 1.7× superiore alla V100 SXM2 32GB. Gli incrementi di velocità reali dipendono dal carico di lavoro: training e prefill scalano con la capacità di calcolo, mentre il decoding degli LLM scala soprattutto con la banda di memoria.
In questo momento la V100 SXM2 32GB costa meno per unità di calcolo: $1.19 vs $1.71 per PFLOP-ora ai prezzi on demand più bassi.
Far girare una GPU 24 ore su 24 al prezzo on demand più basso costa circa $109 al mese per la V100 SXM2 32GB e $391 per la A100 SXM 40GB.
La A100 SXM 40GB ha più memoria: 40 GB vs 32 GB.