Ein KI-Systemdesign, bei dem LLMs in iterativen Schleifen arbeiten, um Aktionen zu planen, auszuführen und zu bewerten, um komplexe Aufgaben zu bewältigen.
KI-AgentAgents
Ein autonomes KI-System, das seine Umgebung wahrnehmen, Entscheidungen treffen und Aktionen ausführen kann, um mithilfe von Werkzeugen und Schlussfolgerungen vorgegebene Ziele zu erreichen.
AlignmentSafety
Das Forschungsfeld, das sicherstellt, dass KI-Systeme sich gemäß menschlichen Werten und Absichten verhalten und schädliche oder unbeabsichtigte Verhaltensweisen vermeiden.
AufmerksamkeitsmechanismusFundamentals
Ein Bestandteil in Transformer-Modellen, der es dem Netzwerk ermöglicht, sich bei der Generierung jedes Ausgabe-Tokens auf relevante Teile des Inputs zu konzentrieren.
Chain-of-Thought (CoT)Prompting
Eine Prompting-Technik, die LLMs dazu anregt, komplexe Probleme in Zwischenschritte der Argumentation zu zerlegen, bevor sie zu einer Antwort gelangen.
SegmentierungArchitecture
Der Prozess der Aufteilung von Dokumenten in kleinere Segmente für Embedding und Retrieval in RAG-Systemen.
ClaudeModels
Eine Familie von KI-Assistenten, entwickelt von Anthropic, konzipiert mit dem Schwerpunkt auf Sicherheit, Hilfsbereitschaft und ehrlichem Verhalten.
CodegenerierungApplications
Die Verwendung von LLMs zum automatischen Schreiben, Vervollständigen oder Transformieren von Programmiercode basierend auf natürlicher Sprachbeschreibung oder existierendem Code.
KontextfensterFundamentals
Die maximale Anzahl von Token, die ein LLM in einer einzelnen Interaktion verarbeiten kann, welche bestimmt, wie viel Text es während einer Konversation „speichern“ kann.
EinbettungFundamentals
Eine numerische Vektordarstellung von Text, Bildern oder anderen Daten, die die semantische Bedeutung in einem von neuronalen Netzen verarbeitbaren Format erfasst.
Wenige-Beispiele-LernenPrompting
Eine Technik, bei der Beispiele im Prompt enthalten sind, um das Antwortformat und den Stil des Modells ohne zusätzliches Training zu steuern.
FeinabstimmungTraining
Der Prozess der weiteren Schulung eines vortrainierten Modells auf domänenspezifischen Daten, um seine Leistung für bestimmte Aufgaben oder Domänen zu verbessern.
FunktionsaufrufAgents
Eine LLM-Funktionalität zur Erzeugung strukturierter Outputs, die externe Funktionen oder APIs auslösen und so die Integration mit Tools und Diensten ermöglichen.
GeminiModels
Die Familie multimodaler KI-Modelle von Google, die in der Lage sind, Text, Bilder, Audio und Video zu verstehen und zu generieren.
Eine Familie großer Sprachmodelle, die von OpenAI entwickelt wurde, darunter GPT-3.5 und GPT-4, bekannt für starke Allzweckfähigkeiten.
LeitplankenSafety
Technische Kontrollen, die das Verhalten von KI-Systemen einschränken, um schädliche Ausgaben zu verhindern, Richtlinien durchzusetzen oder Qualitätsstandards aufrechtzuerhalten.
HalluzinationSafety
Wenn ein großes Sprachmodell (LLM) plausibel klingende, aber sachlich falsche oder erfundene Informationen generiert, die nicht in seinen Trainingsdaten verankert sind.
Großes Sprachmodell (LLM)Fundamentals
Ein Typ von Modell Künstlicher Intelligenz, das auf großen Mengen von Textdaten trainiert wurde, um menschenähnlichen Text zu verstehen und zu generieren, fähig zu Aufgaben wie Übersetzung, Zusammenfassung und Konversation.
LlamaModels
Eine Familie von Open-Weight LLMs, die von Meta veröffentlicht wurden und es Forschern und Unternehmen ermöglichen, Modelle lokal auszuführen und zu optimieren.
LoRA (Low-Rank Adaptation)Training
Eine effiziente Fine-Tuning-Technik, die kleine trainierbare Matrizen zu einem eingefrorenen Modell hinzufügt, wodurch der Speicherbedarf und die Rechenanforderungen drastisch reduziert werden.
MistralModels
Ein europäisches KI-Unternehmen und seine Familie effizienter Open-Weight-Modelle, die für ihre starke Leistung im Verhältnis zu ihrer Größe bekannt sind.
Multimodale KIApplications
KI-Systeme, die in der Lage sind, mehrere Arten von Daten, wie Text, Bilder, Audio und Video, gleichzeitig zu verarbeiten und zu generieren.
Prompt EngineeringPrompting
Die Praxis, Texteingaben für große Sprachmodelle (LLMs) zu entwerfen und zu optimieren, um gewünschte Ausgaben zu erzielen, einschließlich Techniken wie Few-Shot Learning und Chain-of-Thought.
Prompt InjectionSafety
Eine Sicherheitslücke, bei der bösartige Anweisungen, die in Benutzereingaben eingebettet sind, das beabsichtigte Verhalten des Systems überschreiben oder manipulieren.
QuantisierungTraining
Eine Technik zur Reduzierung der Modellgröße, indem Gewichte mit geringerer Präzision (z. B. 4-Bit anstelle von 16-Bit) bei minimalem Genauigkeitsverlust dargestellt werden.
RAG (Retrieval Augmented Generation)Architecture
Eine Architektur, die LLM-Antworten verbessert, indem sie relevante Informationen aus externen Wissensquellen abruft, bevor sie eine Antwort generiert.
RLHF (Reinforcement Learning from Human Feedback)Training
Eine Trainingsmethode, die menschliche Präferenzen nutzt, um große Sprachmodelle (LLMs) zu optimieren, wodurch sie hilfreicher, harmloser und ehrlicher werden.
Semantische SucheApplications
Eine Suchtechnik, die die Bedeutung und Absicht hinter Abfragen versteht, anstatt nur Schlüsselwörter abzugleichen, basierend auf Embeddings.
SystemaufforderungPrompting
Anweisungen, die einem LLM anfänglich gegeben werden und dessen Rolle, Verhalten, Einschränkungen und Antwortformat für eine Konversationssitzung definieren.
TemperaturPrompting
Ein Parameter zur Steuerung der Zufälligkeit in LLM-Ausgaben, wobei niedrigere Werte deterministischere Antworten erzeugen und höhere Werte die Kreativität erhöhen.
TokenFundamentals
Die Basiseinheit Text, die LLMs verarbeiten, typischerweise ein Wort, ein Subwort oder ein Zeichen, je nach Tokenisierungsverfahren.
TransformerFundamentals
Eine 2017 eingeführte neuronale Netzwerkarchitektur, die Selbstaufmerksamkeitsmechanismen zur Verarbeitung sequentieller Daten nutzt und die Grundlage moderner LLMs bildet.
VektordatenbankArchitecture
Eine spezialisierte Datenbank, die für das Speichern und Abfragen hochdimensionaler Embedding-Vektoren optimiert ist und eine schnelle semantische Ähnlichkeitssuche ermöglicht.