…
H100 PCIe vs H100 SXM
Precio de alquiler en la nube, cómputo por dólar y especificaciones, lado a lado.
Abrir en el comparador interactivo →
H100 PCIe$1.98mínimo bajo demanda por GPU·h
$2.62 por PFLOP·h · 5 proveedoresH100 SXM$1.66mínimo bajo demanda por GPU·h
$1.68 por PFLOP·h · 27 proveedoresQué las diferencia realmente
- La H100 SXM tiene 1.3× más rendimiento FP16/BF16 denso que la H100 PCIe (0.756 PF vs 0.989 PF).
- La H100 SXM tiene 1.7× más ancho de banda de memoria que la H100 PCIe (2,000 vs 3,350 GB/s), lo que suele limitar la generación de tokens en LLM. Memoria: 80 GB vs 80 GB.
- La H100 SXM es un 16% más barata por hora que la H100 PCIe con los precios bajo demanda más bajos ($1.98 vs $1.66).
- Por unidad de cómputo, la H100 SXM es la mejor opción: $1.68 vs $2.62 por PFLOP-hora de FP16/BF16 denso.
| Especificación / precio | H100 PCIe | H100 SXM |
|---|---|---|
| Memoria | 80 GB HBM2e | 80 GB HBM3 |
| Ancho de banda de memoria | 2,000 GB/s | 3,350 GB/smejor |
| FP16 / BF16 (denso) | 0.756 PF | 0.989 PFmejor |
| FP8 (denso) | 1.51 PF | 1.98 PFmejor |
| FP4 (denso) | — | — |
| INT8 (denso) | 1.51 PF | 1.98 PFmejor |
| TF32 (denso) | 0.378 PF | 0.495 PFmejor |
| FP32 (denso) | 0.051 PF | 0.067 PFmejor |
| FP64 (denso) | 0.051 PF | 0.067 PFmejor |
| Consumo | 350 W | 700 W |
| Arquitectura | Hopper (2022) | Hopper (2022) |
| Mínimo bajo demanda | $1.98 | $1.66mejor |
| Mediana bajo demanda | $2.50mejor | $3.09 |
| Mínimo spot | $2.00 | $0.79mejor |
| FP16/BF16 $ por PFLOP·h | $2.62 | $1.68mejor |
| Proveedores | 5 | 27 |
H100 PCIe vs H100 SXM: preguntas
¿Es la H100 PCIe más rápida que la H100 SXM?
La H100 SXM tiene 1.3× más cómputo FP16/BF16 denso que la H100 PCIe. La H100 SXM tiene 1.7× más ancho de banda de memoria que la H100 PCIe. La aceleración real depende de la carga de trabajo: el entrenamiento y el prefill escalan con el cómputo, mientras que la decodificación de LLM escala sobre todo con el ancho de banda de memoria.
¿Cuál es más barata por FLOP, la H100 PCIe o la H100 SXM?
Ahora mismo la H100 SXM es más barata por unidad de cómputo: $1.68 vs $2.62 por PFLOP-hora con los precios bajo demanda más bajos.
¿Cuánto cuesta alquilar una H100 PCIe frente a una H100 SXM durante un mes?
Mantener una GPU funcionando las 24 horas al precio bajo demanda más bajo cuesta unos $1,445 al mes con la H100 PCIe y $1,212 con la H100 SXM.
¿Cuál tiene más memoria, la H100 PCIe o la H100 SXM?
Ambas tienen 80 GB de VRAM; la H100 SXM tiene más ancho de banda.