Besen – chatgpz.de – KI-Tools & Praxiswissen https://chatgpz.de Unabhängige Tests, Anleitungen und Hintergründe zu KI-Tools. Sat, 21 Dec 2024 05:00:43 +0000 de-DE hourly 1 https://wordpress.org/?v=6.4.2 234900186 Ein neuer Ansatz zur KI-Sicherheit: Layer Enhanced Classification (LEC) | von Sandi Besen | Dez. 2024 https://chatgpz.de/machine-learning/ein-neuer-ansatz-zur-ki-sicherheit-layer-enhanced-classification-lec-von-sandi-besen-dez-2024/ https://chatgpz.de/machine-learning/ein-neuer-ansatz-zur-ki-sicherheit-layer-enhanced-classification-lec-von-sandi-besen-dez-2024/#respond Sat, 21 Dec 2024 05:00:42 +0000 http://chatgpz.de/machine-learning/ein-neuer-ansatz-zur-ki-sicherheit-layer-enhanced-classification-lec-von-sandi-besen-dez-2024/ [ad_1]

LEC übertrifft erstklassige Modelle wie GPT-4o, indem es die Effizienz eines ML-Klassifikators mit dem Sprachverständnis eines LLM kombiniert

Stellen Sie sich vor, Sie sitzen in einem Sitzungssaal, diskutieren über die transformativste Technologie unserer Zeit – künstliche Intelligenz – und stellen fest, dass wir ohne zuverlässigen Sicherheitsgurt auf einer Rakete sitzen. Die Bletchley-Erklärung, die während des von der britischen Regierung veranstalteten und von 29 Ländern unterstützten AI Security Summit vorgestellt wurde, spiegelt diese Stimmung perfekt wider (1):

„Es besteht die Möglichkeit schwerwiegender, sogar katastrophaler Schäden, ob vorsätzlich oder unbeabsichtigt, die sich aus den wichtigsten Fähigkeiten dieser KI-Modelle ergeben.“

Quelle: Dalle3

Jedoch, Bestehende KI-Sicherheitsansätze zwingen Unternehmen zu einem nicht gewinnbaren Kompromiss zwischen Kosten, Geschwindigkeit und Genauigkeit. Herkömmliche Klassifikatoren für maschinelles Lernen haben Schwierigkeiten, die Feinheiten der natürlichen Sprache zu erfassen, und LLMs sind zwar leistungsstark, verursachen jedoch einen erheblichen Rechenaufwand – sie erfordern zusätzliche Modellaufrufe, die die Kosten für jede KI-Sicherheitsüberprüfung in die Höhe treiben.

Unser Workforce (Mason Sawtell, Sandi Besen, Tula Masterman, Jim Brown) führt einen neuartigen Ansatz namens LEC (Layer Enhanced Classification) ein.

Bild von: Sandi Besen, Tula Masterman, Mason Sawtell, Jim Brown

Wir beweisen, dass LEC die Recheneffizienz eines Klassifikators für maschinelles Lernen mit dem ausgefeilten Sprachverständnis eines LLM kombiniert – Sie müssen sich additionally nicht zwischen Kosten, Geschwindigkeit und Genauigkeit entscheiden. LEC übertrifft erstklassige Modelle wie GPT-4o und Modelle, die speziell für die Identifizierung unsicherer Inhalte und sofortige Injektionen geschult wurden. Was noch besser ist: Wir glauben, dass LEC modifiziert werden kann, um nicht KI-sicherheitsrelevante Textklassifizierungsaufgaben wie Sentimentanalyse, Absichtsklassifizierung, Produktkategorisierung und mehr zu bewältigen.

Die Auswirkungen sind tiefgreifend. Ganz gleich, ob Sie ein Technologieführer sind, der sich im komplexen Umfeld der KI-Sicherheit zurechtfindet, ein Produktmanager, der potenzielle Risiken mindert, oder eine Führungskraft, die eine verantwortungsvolle Innovationsstrategie entwirft, unser Ansatz bietet eine skalierbare und anpassungsfähige Lösung.

Abbildung 1: Ein Beispiel einer angepassten Modellinferenzpipeline zur Einbeziehung von LEC-Klassifikatoren. Bild von: Sandi Besen, Tula Masterman, Mason Sawtell, Jim Brown

Weitere Particulars finden Sie im vollständiges Papier’s Vorabdruck auf Arxiv(2) oder in Tula Mastermans zusammengefasster Artikel über das Papier.

Verantwortungsvolle KI ist zu einer entscheidenden Priorität für Technologieführer im gesamten Ökosystem geworden – von Modellentwicklern wie Anthropic, OpenAI, Meta, Google und IBM bis hin zu Unternehmensberatungsfirmen und KI-Dienstleistern. Je schneller die Einführung von KI voranschreitet, desto wichtiger wird ihre Bedeutung.

Unsere Forschung konzentriert sich speziell auf zwei zentrale Herausforderungen der KI-Sicherheit: Inhaltssicherheit und schnelle Erkennung von Injektionen. Inhaltssicherheit bezieht sich auf den Prozess der Identifizierung und Verhinderung der Erstellung schädlicher, unangemessener oder potenziell gefährlicher Inhalte, die Risiken für Benutzer darstellen oder gegen ethische Richtlinien verstoßen könnten. Bei der sofortigen Injektion werden Versuche erkannt, KI-Systeme zu manipulieren, indem Eingabeaufforderungen erstellt werden, die darauf abzielen, Sicherheitsmechanismen zu umgehen oder das Modell zu unethischen Ausgaben zu zwingen.

Um den Bereich der ethischen KI voranzutreiben, haben wir die Fähigkeiten von LEC auf reale, verantwortungsvolle KI-Anwendungsfälle angewendet. Wir hoffen, dass diese Methodik weit verbreitet wird und dazu beiträgt, jedes KI-System weniger anfällig für Ausbeutung zu machen.

Wir haben einen Datensatz zur Inhaltssicherheit mit 5.000 Beispielen kuratiert, um LEC sowohl hinsichtlich der binären (2 Kategorien) als auch der Mehrklassenklassifizierung (>2 Kategorien) zu testen. Wir haben den SALAD Information-Datensatz von OpenSafetyLab (3) zur Darstellung unsicherer Inhalte und den „LMSYS-Chat-1M“-Datensatz von LMSYS zur Darstellung sicherer Inhalte (4) verwendet.

Bei der binären Klassifizierung ist der Inhalt entweder „sicher“ oder „unsicher“. Bei der Klassifizierung nach mehreren Klassen werden Inhalte entweder als „sicher“ kategorisiert oder einer bestimmten Kategorie „unsicher“ zugeordnet.

Wir verglichen mit LEC trainierte Modelle mit GPT-4o (weithin als Branchenführer anerkannt), Llama Guard 3 1B und Llama Guard 3 8B (Spezialmodelle, die speziell für die Bewältigung von Inhaltssicherheitsaufgaben geschult wurden). Wir haben festgestellt, dass die Modelle, die LEC verwenden, alle Modelle übertrafen, die wir mit nur 20 Trainingsbeispielen für die Binärklassifizierung und 50 Trainingsbeispielen für die Mehrklassenklassifizierung verglichen haben.

Das leistungsstärkste LEC-Modell erreichte einen gewichteten F1-Rating (misst, wie intestine ein System das Treffen korrekter Vorhersagen bei gleichzeitiger Minimierung von Fehlern ausbalanciert) von 0,96 einer maximalen Punktzahl von 1 bei der binären Klassifizierungsaufgabe, verglichen mit der Punktzahl von GPT-4o von 0,82 oder der Punktzahl von LlamaGuard 8B von 0,71.

Das bedeutet, dass Sie mit LEC mit nur 15 Beispielen ein Modell trainieren können, um Branchenführer bei der Identifizierung sicherer oder unsicherer Inhalte zu einem Bruchteil des Rechenaufwands zu übertreffen.

Zusammenfassung der Ergebnisse zur Inhaltssicherheit. Bild von: Sandi Besen, Tula Masterman, Mason Sawtell, Jim Brown

Wir haben einen Immediate-Injection-Datensatz mithilfe des SPML-Chatbot-Immediate-Injection-Datensatzes kuratiert. Wir haben den SPML-Datensatz aufgrund seiner Vielfalt und Komplexität bei der Darstellung realer Chatbot-Szenarien ausgewählt. Dieser Datensatz enthielt Paare von System- und Benutzeraufforderungen, um Benutzeraufforderungen zu identifizieren, die versuchen, die Systemaufforderung zu umgehen oder zu manipulieren. Dies ist besonders related für Unternehmen, die öffentlich zugängliche Chatbots einsetzen, die nur dazu gedacht sind, Fragen zu bestimmten Domänen zu beantworten.

Wir haben mit LEC trainierte Modelle mit GPT-4o (einem Branchenführer) und deBERTa v3 Immediate Injection v2 (einem Modell, das speziell für die Identifizierung von Immediate-Injektionen trainiert wurde) verglichen. Wir haben festgestellt, dass die Modelle, die LEC verwenden, sowohl GPT-4o mit 55 Trainingsbeispielen als auch das Spezialmodell mit nur 5 Trainingsbeispielen übertrafen.

Das leistungsstärkste LEC-Modell erreichte einen gewichteten F1-Rating von 0,98 bei einem maximalen Rating von 1 im Vergleich zum GPT-4o-Rating von 0,92 oder dem deBERTa v2 Immediate Injection v2-Rating von 0,73.

Das bedeutet, dass Sie mit LEC mit nur fünf Beispielen ein Modell trainieren können, um Branchenführer bei der Erkennung von Immediate-Injection-Angriffen zu übertreffen.

Zusammenfassung der Ergebnisse der sofortigen Injektion. Bild von: Sandi Besen, Tula Masterman, Mason Sawtell, Jim Brown

Die vollständigen Ergebnisse und Particulars zur Experimentierimplementierung finden Sie im Arxiv-Preprint.

Da Unternehmen zunehmend KI in ihre Abläufe integrieren, ist die Gewährleistung der Sicherheit und Integrität KI-gesteuerter Interaktionen geschäftskritisch geworden. LEC bietet eine robuste und versatile Möglichkeit, sicherzustellen, dass potenziell unsichere Informationen erkannt werden – was zu einer Reduzierung des Betriebsrisikos und einem erhöhten Vertrauen der Endbenutzer führt. Es gibt mehrere Möglichkeiten, LEC-Modelle in Ihr KI-Sicherheits-Toolkit zu integrieren, um unerwünschte Schwachstellen bei der Verwendung Ihrer KI-Instruments zu verhindern, einschließlich während der LM-Inferenz, vor/nach der LM-Inferenz und sogar in Multi-Agent-Szenarien.

Während der LM-Inferenz

Wenn Sie ein Open-Supply-Modell verwenden oder Zugriff auf das Innenleben des Closed-Supply-Modells haben, können Sie LEC als Teil Ihrer Inferenzpipeline für KI-Sicherheit nahezu in Echtzeit verwenden. Dies bedeutet, dass die Generierung jeglicher Ausgabe angehalten werden kann, wenn Sicherheitsbedenken auftreten, während Informationen durch das Sprachmodell übertragen werden. Ein Beispiel dafür, wie dies aussehen könnte, ist in Abbildung 1 zu sehen.

Vorher/Nachher LM-Inferenz

Wenn Sie keinen Zugriff auf das Innenleben des Sprachmodells haben oder die Prüfung auf Sicherheitsbedenken als separate Aufgabe durchführen möchten, können Sie vor oder nach dem Aufruf eines Sprachmodells ein LEC-Modell verwenden. Dadurch ist LEC mit Closed-Supply-Modellen wie den Claude- und GPT-Familien kompatibel.

Durch die Integration eines LEC-Klassifikators in Ihre Bereitstellungspipeline können Sie verhindern, dass potenziell schädliche Inhalte an Ihr LM weitergeleitet werden, und/oder eine Prüfung auf schädliche Inhalte durchgeführt wird, bevor eine Ausgabe an den Benutzer zurückgegeben wird.

Verwendung von LEC-Klassifikatoren mit Agenten

Agentische KI-Systeme können bestehende unbeabsichtigte Aktionen verstärken, was zu einem verstärkenden Effekt unbeabsichtigter Folgen führt. LEC-Klassifikatoren können zu verschiedenen Zeitpunkten in einem Agentenszenario verwendet werden, um den Agenten davor zu schützen, schädliche Ausgaben zu empfangen oder zu erzeugen. Durch die Einbeziehung von LEC-Modellen in Ihre Agentenarchitektur können Sie beispielsweise:

  • Überprüfen Sie, ob die Anfrage in Ordnung ist, um mit der Bearbeitung zu beginnen
  • Stellen Sie sicher, dass ein aufgerufener Device-Aufruf nicht gegen KI-Sicherheitsrichtlinien verstößt (z. B. durch die Generierung unangemessener Suchthemen für eine Stichwortsuche).
  • Stellen Sie sicher, dass die an einen Agenten zurückgegebenen Informationen nicht schädlich sind (z. B. sind die von der RAG-Suche oder der Google-Suche zurückgegebenen Ergebnisse „sicher“).
  • Validierung der endgültigen Antwort eines Agenten, bevor diese an den Benutzer zurückgegeben wird

So implementieren Sie LEC basierend auf dem Zugriff auf Sprachmodelle

Unternehmen mit Zugriff auf die interne Funktionsweise von Modellen können LEC direkt in die Inferenzpipeline integrieren und so eine kontinuierliche Sicherheitsüberwachung während des gesamten Content material-Generierungsprozesses der KI ermöglichen. Bei der Verwendung von Closed-Supply-Modellen über API (wie im Fall von GPT-4) haben Unternehmen keinen direkten Zugriff auf die zugrunde liegenden Informationen, die zum Trainieren eines LEC-Modells erforderlich sind. In diesem Szenario kann LEC vor und/oder nach Modellaufrufen angewendet werden. Beispielsweise kann vor einem API-Aufruf die Eingabe auf unsichere Inhalte überprüft werden. Nach dem Anruf kann die Ausgabe validiert werden, um sicherzustellen, dass sie mit den Sicherheitsprotokollen des Unternehmens übereinstimmt.

Unabhängig davon, für welche Artwork und Weise Sie sich für die Implementierung von LEC entscheiden, bietet Ihnen die Nutzung seiner leistungsstarken Fähigkeiten eine überlegene Inhaltssicherheit und einen sofortigen Injektionsschutz als bestehende Techniken und das zu einem Bruchteil der Zeit und Kosten.

Layer Enhanced Classification (LEC) ist der Sicherheitsgurt für das KI-Raketenschiff, auf dem wir uns befinden.

Das Wertversprechen ist klar: Die KI-Sicherheitsmodelle von LEC können regulatorische Risiken mindern, zur Gewährleistung des Markenschutzes beitragen und das Vertrauen der Benutzer in KI-gesteuerte Interaktionen stärken. Es läutet eine neue Ära der KI-Entwicklung ein, in der Genauigkeit, Geschwindigkeit und Kosten keine konkurrierenden Prioritäten darstellen und KI-Sicherheitsmaßnahmen sowohl zur Inferenzzeit, vor der Inferenzzeit als auch nach der Inferenzzeit angegangen werden können.

In unseren Inhaltssicherheitsexperimenten die leistungsstärkste Das LEC-Modell erreichte einen gewichteten F1-Rating von 0,96 von 1 bei der binären Klassifizierung, übertrifft die Punktzahl von GPT-4o deutlich von 0,82 und die Punktzahl von LlamaGuard 8B von 0,71 – und das wurde erreicht mit nur 15 Trainingsbeispielen. Ähnlich verhält es sich bei der sofortigen Injektionserkennung: Unser Prime-LEC-Modell erreichte einen gewichteten F1-Wert von 0,98, verglichen mit dem GPT-4o von 0,92 und deBERTa v2 Immediate Injection v2 liegt bei 0,73 und wurde mit nur 55 Trainingsbeispielen erreicht. Diese Ergebnisse zeigen nicht nur eine überlegene Leistung, sondern unterstreichen auch die bemerkenswerte Fähigkeit von LEC, mit minimalen Trainingsdaten eine hohe Genauigkeit zu erreichen.

Obwohl sich unsere Arbeit auf die Verwendung von LEC-Modellen für KI-Sicherheitsanwendungsfälle konzentrierte, gehen wir davon aus, dass unser Ansatz für eine größere Vielfalt von Textklassifizierungsaufgaben verwendet werden kann. Wir ermutigen die Forschungsgemeinschaft, unsere Arbeit als Sprungbrett zu nutzen, um zu erkunden, was sonst noch erreicht werden kann – um neue Wege für intelligentere, sicherere und vertrauenswürdigere KI-Systeme zu eröffnen.

[ad_2]

]]>
https://chatgpz.de/machine-learning/ein-neuer-ansatz-zur-ki-sicherheit-layer-enhanced-classification-lec-von-sandi-besen-dez-2024/feed/ 0 6006
Die Schnittstelle von Gedächtnis und Erdung in KI-Systemen | von Sandi Besen | Jul, 2024 https://chatgpz.de/machine-learning/die-schnittstelle-von-gedaechtnis-und-erdung-in-ki-systemen-von-sandi-besen-jul-2024/ https://chatgpz.de/machine-learning/die-schnittstelle-von-gedaechtnis-und-erdung-in-ki-systemen-von-sandi-besen-jul-2024/#respond Wed, 24 Jul 2024 20:27:22 +0000 https://chatgpz.de/machine-learning/die-schnittstelle-von-gedaechtnis-und-erdung-in-ki-systemen-von-sandi-besen-jul-2024/ [ad_1]

Im Kontext von Sprachmodellen und agentenbasierter KI sind Gedächtnis und Erdung wichtige und aufstrebende Forschungsfelder. Und obwohl sie in einem Satz oft eng nebeneinander stehen und oft miteinander verbunden sind, erfüllen sie in der Praxis unterschiedliche Funktionen. In diesem Artikel möchte ich die Verwirrung um diese beiden Begriffe aufklären und zeigen, welche Rolle das Gedächtnis bei der allgemeinen Erdung eines Modells spielen kann.

Quelle: Dalle3, Beschreibung: Gespaltene Teile des Gehirns stellen Erinnerung und Erdung im Stil eines freundlichen Cartoons dar

In meinem letzten Artikel haben wir über die Wichtige Rolle des Gedächtnisses in der agentenbasierten KI. Das Gedächtnis in Sprachmodellen bezieht sich auf die Fähigkeit von KI-Systemen, relevante Informationen zu behalten und abzurufen, was zu ihrer Fähigkeit beiträgt, logisch zu denken und kontinuierlich aus ihren Erfahrungen zu lernen. Das Gedächtnis kann in vier Kategorien eingeteilt werden: Kurzzeitgedächtnis, Langzeitgedächtnis, Langzeitgedächtnis und Arbeitsgedächtnis.

Das klingt kompliziert, aber lassen Sie es uns einfach aufschlüsseln:

Kurzzeitgedächtnis (KZG):

Das KTM speichert Informationen für einen sehr kurzen Zeitraum, der Sekunden bis Minuten betragen kann. Wenn Sie einem Sprachmodell eine Frage stellen, muss es Ihre Nachrichten lange genug speichern, um eine Antwort auf Ihre Frage zu generieren. Genau wie Menschen haben Sprachmodelle Schwierigkeiten, sich zu viele Dinge gleichzeitig zu merken.

Millers Gesetzbesagt, dass „das Kurzzeitgedächtnis ein Bestandteil des Gedächtnisses ist, der eine kleine Menge an Informationen in einem aktiven, leicht verfügbaren Zustand für einen kurzen Zeitraum, typischerweise einige Sekunden bis eine Minute, speichert. Die Dauer des Kurzzeitgedächtnisses scheint zwischen 15 und 30 Sekunden zu liegen, und die Kapazität des Kurzzeitgedächtnisses ist begrenzt und wird oft auf etwa 7±2 Elemente geschätzt.“

Wenn Sie additionally ein Sprachmodell fragen: „Zu welchem ​​Style gehört das Buch, das ich in meiner vorherigen Nachricht erwähnt habe?“, muss es sein Kurzzeitgedächtnis nutzen, um auf aktuelle Nachrichten zu verweisen und eine relevante Antwort zu generieren.

Implementierung:

Der Kontext wird in externen Systemen gespeichert, beispielsweise in Sitzungsvariablen oder Datenbanken, die einen Teil des Konversationsverlaufs enthalten. Jede neue Benutzereingabe und Assistentenantwort wird an den vorhandenen Kontext angehängt, um einen Konversationsverlauf zu erstellen. Während der Inferenz wird der Kontext zusammen mit der neuen Abfrage des Benutzers an das Sprachmodell gesendet, um eine Antwort zu generieren, die die gesamte Konversation berücksichtigt. Dies Forschungsbericht bietet einen tieferen Einblick in die Mechanismen, die das Kurzzeitgedächtnis ermöglichen.

Kurz- und Langzeitgedächtnis (SLTM):

SLTM speichert Informationen für einen moderaten Zeitraum, der von Minuten bis Stunden reichen kann. Beispielsweise können Sie innerhalb derselben Sitzung dort weitermachen, wo Sie in einem Gespräch aufgehört haben, ohne den Kontext wiederholen zu müssen, da er als SLTM gespeichert wurde. Dieser Prozess ist auch ein externer Prozess und kein Teil des Sprachmodells selbst.

Implementierung:

Sitzungen können mithilfe von Kennungen verwaltet werden, die Benutzerinteraktionen im Laufe der Zeit verknüpfen. Kontextdaten werden so gespeichert, dass sie über Benutzerinteraktionen hinweg innerhalb eines definierten Zeitraums bestehen bleiben, z. B. in einer Datenbank. Wenn ein Benutzer die Konversation fortsetzt, kann das System den Konversationsverlauf aus vorherigen Sitzungen abrufen und ihn während der Inferenz an das Sprachmodell weitergeben. Ähnlich wie beim Kurzzeitgedächtnis wird jede neue Benutzereingabe und jede Assistentenantwort an den vorhandenen Kontext angehängt, um den Konversationsverlauf aktuell zu halten.

Langzeitgedächtnis (LTM):

LTM speichert Informationen für einen vom Administrator festgelegten Zeitraum, der unbegrenzt sein kann. Wenn wir beispielsweise einen KI-Tutor entwickeln würden, wäre es für das Sprachmodell wichtig zu verstehen, in welchen Fächern der Schüler gute Leistungen erbringt, wo er noch Schwierigkeiten hat, welche Lernstile für ihn am besten geeignet sind und vieles mehr. Auf diese Weise kann das Modell relevante Informationen abrufen, um seine zukünftigen Unterrichtspläne zu erstellen. Eichhörnchen-KI ist ein Beispiel für eine Plattform, die das Langzeitgedächtnis nutzt, um „personalisierte Lernpfade zu erstellen, gezielt zu unterrichten und bei Bedarf emotionale Interventionen bereitzustellen“.

Implementierung:

Informationen können in strukturierten Datenbanken, Wissensgraphen oder Dokumentspeichern gespeichert werden, die bei Bedarf abgefragt werden. Relevante Informationen werden basierend auf der aktuellen Interaktion und dem bisherigen Verlauf des Benutzers abgerufen. Dies bietet Kontext für das Sprachmodell, das mit der Antwort des Benutzers oder der Systemaufforderung zurückgegeben wird.

Arbeitsspeicher:

Der Arbeitsspeicher ist eine Komponente des Sprachmodells selbst (im Gegensatz zu den anderen Speichertypen, die externe Prozesse sind). Er ermöglicht es dem Sprachmodell, Informationen zu speichern, zu bearbeiten und zu verfeinern – und verbessert so die Denkfähigkeit des Modells. Dies ist wichtig, da sich das Verständnis der Aufgabe und die Schritte, die es zur Ausführung unternehmen muss, während das Modell die Anfrage des Benutzers verarbeitet, ändern kann. Sie können sich den Arbeitsspeicher als Notizblock des Modells für seine Gedanken vorstellen. Wenn beispielsweise ein mehrstufiges mathematisches Downside wie (5 + 3) * 2 vorliegt, muss das Sprachmodell in der Lage sein, die (5+3) in den Klammern zu berechnen und diese Informationen zu speichern, bevor die Summe der beiden Zahlen mit 2 multipliziert wird. Wenn Sie sich tiefer mit diesem Thema befassen möchten, finden Sie die Papier „TransformerFAM: Suggestions consideration is working reminiscence“ bietet einen neuen Ansatz zur Erweiterung des Arbeitsgedächtnisses und ermöglicht es einem Sprachmodell, Eingaben/Kontextfenster unbegrenzter Länge zu verarbeiten.

Implementierung:

Mechanismen wie Aufmerksamkeitsebenen in Transformatoren oder versteckte Zustände in rekurrierenden neuronalen Netzwerken (RNNs) sind für die Aufrechterhaltung von Zwischenberechnungen verantwortlich und bieten die Möglichkeit, Zwischenergebnisse innerhalb derselben Inferenzsitzung zu manipulieren. Während das Modell Eingaben verarbeitet, aktualisiert es seinen internen Zustand, was stärkere Denkfähigkeiten ermöglicht.

Alle vier Speichertypen sind wichtige Komponenten für die Erstellung eines KI-Methods, das Informationen über verschiedene Zeiträume und Kontexte hinweg effektiv verwalten und nutzen kann.

Tabelle der Speichertypen in KI-Systemen, Quelle: Sandi Besen

Die Antworten eines Sprachmodells sollten im Kontext des Gesprächs immer Sinn ergeben – sie sollten nicht nur aus einer Ansammlung von Tatsachenbehauptungen bestehen.. Grounding misst die Fähigkeit eines Modells, eine Ausgabe zu produzieren, die kontextbezogen related und sinnvoll ist. Der Prozess des Grounding eines Sprachmodells kann eine Kombination aus Sprachmodelltraining, Feinabstimmung und externen Prozessen (einschließlich Gedächtnis!) sein.

Coaching und Feinabstimmung des Sprachmodells

Die Daten, mit denen das Modell anfangs trainiert wird, machen einen wesentlichen Unterschied darin, wie fundiert das Modell ist. Das Coaching eines Modells mit einem großen Korpus unterschiedlicher Daten ermöglicht es ihm, Sprachmuster, Grammatik und Semantik zu lernen, um das nächste relevante Wort vorherzusagen. Das vorab trainierte Modell wird dann anhand domänenspezifischer Daten feinabgestimmt, was ihm hilft, relevantere und genauere Ergebnisse für bestimmte Anwendungen zu generieren, die tieferes domänenspezifisches Wissen erfordern. Dies ist besonders wichtig, wenn das Modell bei bestimmten Texten, mit denen es während seines anfänglichen Trainings möglicherweise nicht konfrontiert wurde, gute Ergebnisse erzielen soll. Obwohl unsere Erwartungen an die Fähigkeiten eines Sprachmodells hoch sind, können wir nicht erwarten, dass es bei etwas, das es noch nie zuvor gesehen hat, gute Ergebnisse erzielt. Genauso wie wir von einem Schüler nicht erwarten würden, dass er bei einer Prüfung intestine abschneidet, wenn er den Stoff nicht gelernt hat.

Externer Kontext

Wenn Sie das Modell mit kontextspezifischen Echtzeitinformationen oder aktuellen Informationen versorgen, bleibt es auch auf dem Boden der Tatsachen. Dafür gibt es viele Methoden, beispielsweise die Integration mit externen Wissensdatenbanken, APIs und Echtzeitdaten. Diese Methode wird auch als Retrieval Augmented Era (RAG) bezeichnet.

Speichersysteme

Gedächtnissysteme in der KI spielen eine entscheidende Rolle dabei, sicherzustellen, dass das System auf der Grundlage seiner zuvor ausgeführten Aktionen, gewonnenen Erkenntnisse, seiner Leistung im Laufe der Zeit und seiner Erfahrungen mit Benutzern und anderen Systemen geerdet bleibt. Die vier zuvor im Artikel beschriebenen Gedächtnistypen spielen eine entscheidende Rolle dabei, die Fähigkeit eines Sprachmodells zu erden, kontextbewusst zu bleiben und relevante Ergebnisse zu liefern. Gedächtnissysteme arbeiten Hand in Hand mit Erdungstechniken wie Coaching, Feinabstimmung und externer Kontextintegration, um die Gesamtleistung und Relevanz des Modells zu verbessern.

Gedächtnis und Erdung sind miteinander verbundene Elemente, die die Leistung und Zuverlässigkeit von KI-Systemen verbessern. Während das Gedächtnis es der KI ermöglicht, Informationen über verschiedene Zeiträume hinweg zu behalten und zu verarbeiten, stellt die Erdung sicher, dass die Ausgaben der KI kontextbezogen related und aussagekräftig sind. Durch die Integration von Gedächtnissystemen und Erdungstechniken können KI-Systeme ein höheres Maß an Verständnis und Effektivität bei ihren Interaktionen und Aufgaben erreichen.

[ad_2]

]]>
https://chatgpz.de/machine-learning/die-schnittstelle-von-gedaechtnis-und-erdung-in-ki-systemen-von-sandi-besen-jul-2024/feed/ 0 2573