Brain-Score 90/100 TECH Eye on Tech · 3:15

What is High-Bandwidth Memory (HBM)? HBM vs. GDDR

3-Second Blueprint (English)

  1. Unlike planar DDR or GDDR chips, HBM stacks DRAM dies vertically and connects them to a base logic die using through-silicon vias.
  2. Mounting HBM directly adjacent to the GPU with a 1024-bit bus in HBM3 shortens data travel paths, lowering latency and power draw.
  3. Massive memory bandwidth and compact thermal efficiency make HBM indispensable for training and running large language models on GPUs.
High-Bandwidth MemoryThrough-Silicon Vias3D DRAM Stacking1024-Bit Memory Bus

3-Sekunden-Fazit (Deutsch)

  1. Anders als planares DDR oder GDDR stapelt HBM mehrere DRAM-Dies vertikal und verbindet sie über Through-Silicon Vias mit Logikchips.
  2. Die Platzierung direkt neben der GPU samt 1024-Bit-Bus bei HBM3 verkürzt Signalwege drastisch und senkt Latenz sowie Stromverbrauch.
  3. Hohe Speicherbandbreite und Energieeffizienz machen HBM zur Schlüsseltechnologie für das Training und die Inferenz großer KI-Modelle.
High-Bandwidth MemoryThrough-Silicon Vias3D-DRAM-Stapelung1024-Bit-Speicherbus

Note / Hinweis: Blueprints are AI-generated educational summaries (0% Politics · 0% Religion · 0% Brainrot) and do not constitute medical, legal, or financial advice. / KI-generierte Zusammenfassung zu Bildungszwecken – ersetzt keine medizinische, rechtliche oder finanzielle Fachberatung.