What is High-Bandwidth Memory (HBM)? HBM vs. GDDR
3-Second Blueprint (English)
- Unlike planar DDR or GDDR chips, HBM stacks DRAM dies vertically and connects them to a base logic die using through-silicon vias.
- Mounting HBM directly adjacent to the GPU with a 1024-bit bus in HBM3 shortens data travel paths, lowering latency and power draw.
- Massive memory bandwidth and compact thermal efficiency make HBM indispensable for training and running large language models on GPUs.
High-Bandwidth MemoryThrough-Silicon Vias3D DRAM Stacking1024-Bit Memory Bus
3-Sekunden-Fazit (Deutsch)
- Anders als planares DDR oder GDDR stapelt HBM mehrere DRAM-Dies vertikal und verbindet sie über Through-Silicon Vias mit Logikchips.
- Die Platzierung direkt neben der GPU samt 1024-Bit-Bus bei HBM3 verkürzt Signalwege drastisch und senkt Latenz sowie Stromverbrauch.
- Hohe Speicherbandbreite und Energieeffizienz machen HBM zur Schlüsseltechnologie für das Training und die Inferenz großer KI-Modelle.
High-Bandwidth MemoryThrough-Silicon Vias3D-DRAM-Stapelung1024-Bit-Speicherbus
Note / Hinweis: Blueprints are AI-generated educational summaries (0% Politics · 0% Religion · 0% Brainrot) and do not constitute medical, legal, or financial advice. / KI-generierte Zusammenfassung zu Bildungszwecken – ersetzt keine medizinische, rechtliche oder finanzielle Fachberatung.