Was ist ein Knowledge Graph? Er ist nicht dasselbe wie eine Vektordatenbank
Ein Knowledge Graph ist eine Wissensrepräsentation, die „Entitäten" und die „Beziehungen zwischen ihnen" als Netz organisiert. Nimmt man etwa das Trip...
Admin •
20
Was ist Knowledge Distillation? Wie große Modelle ihr Handwerk an kleine weitergeben
Knowledge Distillation ist eine Technik, mit der das „dunkle Wissen" eines großen Modells an ein kleines weitergegeben wird: Zuerst erzeugt ein gewalt...
Admin •
33
Was ist Model Pruning? Unwichtige Verbindungen kappen, ohne dass das Modell versagt
Model Pruning ist Subtraktion am großen Modell: Man findet die Gewichte, die nahe null liegen und das Ergebnis kaum beeinflussen, löscht sie oder setz...
Admin •
46
Was ist Red Teaming? Warum man KI absichtlich angreift, statt sie nur zu testen
Red Teaming bedeutet, Menschen in die Rolle von Angreifern zu versetzen: Sie versuchen gezielt, eine KI zu Fehlverhalten zu verleiten, ihr verweigerte...
Admin •
75
Was ist Prompt Caching? Warum gleiche Anfänge nicht neu berechnet werden
Prompt Caching ist ein Sparmechanismus in den APIs großer Sprachmodelle: Taucht derselbe Anfangsblock in einem Gespräch oder in gleichartigen Anfragen...
Admin •
87
Was ist Text-Chunking? Zu klein fehlen Teile, zu groß wird es ungenau
Text-Chunking bedeutet, ein langes Dokument in kleine Stücke zu schneiden, bevor es in einer Wissensdatenbank landet: Statt ein ganzes Buch, einen Ver...
Admin •
114
Was ist die Zeit bis zum ersten Token? Warum das erste Wort so lange braucht
Die Zeit bis zum ersten Token, meist TTFT (Time To First Token) abgekürzt, ist die Wartezeit zwischen dem Absenden und dem Moment, in dem ein Modell s...
Admin •
132
Was ist Model Collapse? Warum Modelle durch eigene Daten enger werden
Model Collapse bedeutet: Wird ein Modell wiederholt mit Daten trainiert, die frühere Modelle erzeugt haben, wird seine Ausgabeverteilung von Runde zu ...
Admin •
136