How word vectors encode meaning
3-Second Blueprint (English)
- Language models split input text into tokens and map each token to a high-dimensional numeric vector called an embedding.
- Training aligns semantic concepts and attributes with distinct geometric directions in this high-dimensional vector space.
- Linear vector arithmetic captures relational analogies, such as adding (woman − man) to uncle to land near the vector for aunt.
Word EmbeddingsHigh-Dimensional VectorsTokenizationVector Arithmetic
3-Sekunden-Fazit (Deutsch)
- Sprachmodelle zerlegen Text in Tokens und ordnen jedem Token einen hochdimensionalen Zahlenvektor (Embedding) zu.
- Beim Training werden semantische Eigenschaften bestimmten geometrischen Richtungen im hochdimensionalen Vektorraum zugeordnet.
- Lineare Vektorarithmetik bildet Analogien ab: Addiert man (Frau − Mann) zum Vektor für Onkel, landet man nahe bei Tante.
Wort-EmbeddingsHochdimensionale VektorenTokenisierungVektorarithmetik
Note / Hinweis: Blueprints are AI-generated educational summaries (0% Politics · 0% Religion · 0% Brainrot) and do not constitute medical, legal, or financial advice. / KI-generierte Zusammenfassung zu Bildungszwecken – ersetzt keine medizinische, rechtliche oder finanzielle Fachberatung.