Forschungsarbeiten – chatgpz.de – KI-Tools & Praxiswissen http://chatgpz.de Unabhängige Tests, Anleitungen und Hintergründe zu KI-Tools. Sun, 07 Dec 2025 12:00:33 +0000 de-DE hourly 1 https://wordpress.org/?v=6.4.2 234900186 Lesen von Forschungsarbeiten im Zeitalter der LLMs http://chatgpz.de/machine-learning/lesen-von-forschungsarbeiten-im-zeitalter-der-llms/ http://chatgpz.de/machine-learning/lesen-von-forschungsarbeiten-im-zeitalter-der-llms/#respond Sun, 07 Dec 2025 12:00:33 +0000 https://chatgpz.de/machine-learning/lesen-von-forschungsarbeiten-im-zeitalter-der-llms/ [ad_1]

Ein interessantes Gespräch auf X darüber, wie schwierig es wird, mit neuen Forschungsarbeiten Schritt zu halten, da deren Zahl ständig zunimmt. Ehrlich gesagt besteht allgemeiner Konsens darüber, dass es unmöglich ist, mit der gesamten Forschung Schritt zu halten, die derzeit im KI-Bereich stattfindet, und wenn wir nicht in der Lage sind, mitzuhalten, verpassen wir viele wichtige Informationen. Der Kernpunkt des Gesprächs warfare: Für wen schreiben wir, wenn Menschen es nicht lesen können, und wenn es LLMs sind, die die Zeitungen tatsächlich lesen, welches ist das ideale Format für sie?

Das hat mich zum Nachdenken gebracht und mich an einen Artikel erinnert, den ich 2021 über die Instruments geschrieben habe, die ich früher verwendet habe Forschungsarbeiten effektiv lesen und wie ich damals Zeitungen gelesen habe. Das warfare die Zeit vor ChatGPT, und mir wurde klar, wie sehr sich das Lesen von Papier seitdem für mich verändert hat.

Deshalb teile ich heute mit, wie ich Forschungsarbeiten lese, sowohl manuell als auch mit KI-Unterstützung. Ich hoffe, dass einige dieser Ideen oder Instruments Ihnen dabei helfen können, einen Ablauf zu schaffen, der für Sie funktioniert, wenn auch Sie von der Geschwindigkeit überwältigt werden. Ich habe keine wirkliche Antwort darauf, wie ein ideales Papierformat im LLM-Zeitalter aussehen sollteaber ich kann zumindest mitteilen, was bisher für mich funktioniert hat.

Der manuelle Weg – Drei-Durchgangs-Methodenstil

Es gab eine Zeit, in der das Lesen ausschließlich manuell erfolgte und wir entweder Papiere ausdruckten und sie lasen oder dies über einen E-Reader taten. Während dieser Zeit wurde ich mit einem Aufsatz von S. Keshav über das Thema bekannt gemacht Drei-Cross-Methode. Ich bin mir sicher, dass auch Sie darauf gestoßen sind. Es ist eine einfache, aber elegante Artwork, eine Arbeit zu lesen, indem der Prozess in drei Schritte unterteilt wird.

Zusammenfassung der 3-Cross-Methode | Bild vom Autor

Wie in der Abbildung oben gezeigt, können Sie mit der Methode mit drei Durchgängen steuern, wie tief Sie gehen möchten, basierend auf Ihrem Ziel und der Zeit, die Sie haben. Folgendes beinhaltet jeder Durchgang:

  1. Der erste Durchgang ermöglicht einen schnellen Blick aus der Vogelperspektive. Sie scannen das Papier, um seine Hauptidee zu verstehen und zu prüfen, ob es related ist. Ziel ist es, die Frage zu beantworten 5 Cs Am Ende Ihrer Lektüre: die Kategorie der Arbeit, ihre Beitragob die Annahmen sind richtigDie Klarheit des Schreibens und der Kontext der Arbeit. Dies sollte nicht länger als 5–10 Minuten dauern.
  2. Der zweite Durchgang kann bis zu einer Stunde dauern und geht etwas tiefer. Sie können Notizen und Kommentare machen, aber die Korrekturen vorerst überspringen. Sie müssen sich in erster Linie auf die Zahlen und Grafiken konzentrieren und versuchen, den Zusammenhang zwischen den Ideen zu erkennen.
  3. Der dritte und letzte Durchgang braucht Zeit. Inzwischen wissen Sie, dass die Arbeit related ist, additionally lesen Sie sie in dieser Part sorgfältig durch. Sie sollten in der Lage sein, das gesamte Argument nachzuvollziehen, die Schritte zu verstehen und die Arbeit im Geiste nachzubilden. Hier hinterfragen Sie auch die Annahmen und prüfen, ob die Ideen Bestand haben.

Auch heute noch versuche ich, so weit wie möglich, mit der Drei-Durchgänge-Methode zu beginnen. Ich fand es nicht nur für Forschungsarbeiten nützlich, sondern auch für lange technische Blogs und Artikel.

Die Chatbot-Zusammenfassungsart – Vanilla-Stil

Bitten Sie einen LLM, die Arbeit mit der 3-Durchgangs-Methode zusammenzufassen | Bild vom Autor

Heutzutage ist es einfach, einen Artikel in einen LLM-basierten Chatbot einzureichen und um eine kurze Zusammenfassung zu bitten. Daran ist nichts auszusetzen, aber ich habe das Gefühl, dass die meisten KI-Zusammenfassungen schnell sind und manchmal die Ideen verflachen.

Aber ich habe nur wenige Eingabeaufforderungen gefunden, die besser funktionieren als die Vanilla.“Fassen Sie dieses Papier zusammen”-Eingabe. Beispielsweise können Sie den LLM bitten, die Zusammenfassung in einem Drei-Durchlauf-Stil auszugeben, der gleichen Methode, die wir im vorherigen Abschnitt besprochen haben und die eine viel bessere Ausgabe liefert.

Give me a three-pass fashion take a look at this paper.
Cross 1: a fast skim of what the paper is about.
Cross 2: the primary concepts and why they matter.
Cross 3: the deeper particulars I ought to take note of.

Eine weitere Eingabeaufforderung, die intestine funktioniert, ist ein einfacher Downside-Idee-Beweis-Stil:

Inform me:
• what downside the paper tries to unravel
• the primary thought they use
• how they help it
• what the outcomes imply.

Oder wenn ich überprüfen möchte, wie eine Arbeit im Vergleich zu früheren Arbeiten abschneidet, kann ich fragen:


Give me the primary thought of the paper and in addition level out its limits or issues 
to watch out about

Sie können den Chat jederzeit fortsetzen und nach weiteren Particulars fragen, wenn Ihnen die erste Antwort oberflächlich vorkommt. Aber das Hauptproblem ist für mich immer noch dasselbe: Man muss zwischen den Registerkarten wechseln, um sich das Papier anzusehen und dann die Erklärung zu vergleichen, und beide befinden sich an unterschiedlichen Stellen. Für mich wird dieses ständige Hin und Her zu einem Reibungspunkt. Es muss einen besseren Weg geben, der sowohl die Quelle als auch die KI-Unterstützung auf derselben Leinwand hält, und das bringt uns zum nächsten Teil.

Der Weg der Spezialtools – die Benutzeroberfläche ist wichtig

Deshalb machte ich mich daran, Instruments zu erkunden, die LLM-Unterstützung bieten und gleichzeitig eine bessere Benutzeroberfläche und ein reibungsloseres Leseerlebnis bieten. Hier sind drei, die ich persönlich verwendet habe. Dies ist keine erschöpfende Liste, sondern nur diejenigen, die meiner Erfahrung nach intestine funktionieren, ohne das grundlegende Leseerlebnis zu ersetzen. Außerdem werde ich bei jedem Instrument auf die Funktionen hinweisen, die mir am besten gefallen.

1. alphaXiv

AlphaXiv ist das Instrument, das ich schon lange verwende, weil es viele nützliche Dinge direkt in die Plattform integriert hat. Es ist einfach, hier einen Artikel zu finden, entweder über den Feed oder indem man einen beliebigen arXiv-Hyperlink nimmt und ersetzt arxiv mit alphaxiv. Sie erhalten eine übersichtliche Benutzeroberfläche und eine Reihe KI-gestützter Instruments, die direkt auf dem Papier platziert sind. Es gibt ein bekanntes Chat-Fenster, aber ansonsten können Sie es tun hervorheben Klicken Sie auf einen beliebigen Teil des Papiers und stellen Sie direkt dort eine Frage. Sie können mit dem auch Kontext aus anderen Artikeln abrufen @ Besonderheit. Wenn Sie tiefer gehen möchten, werden verwandte Artikel, der GitHub-Code, die Artwork und Weise, wie andere die Arbeit zitieren, sowie kleine Literaturhinweise zum Thema angezeigt. Es gibt auch eine KI-Audio-Vorlesungsfunktion, aber ich verwende sie nicht oft.

Schnittstelle von alphaXiv mit verschiedenen verfügbaren Instruments | Bild vom Autor

Mein Lieblingsteil ist der Weblog-Stil-Modus. Es gibt mir eine einfache, lesbare Model des Papiers, die mir bei der Entscheidung hilft, ob ich es vollständig lesen sollte oder nicht. Dadurch bleiben die Zahlen und die Struktur erhalten, quick so, als würde ich aus einer Zeitung einen Weblog machen.

Weblog-Model des Papiers, erstellt von alphaXiv | Bild vom Autor
  • So versuchen Sie es: Ersetzen arxiv mit alphaxiv in einem beliebigen arXiv-Hyperlink oder öffnen Sie ihn direkt von der Web site unter alphaxiv.org.

2. Papiere

Wie entdeckt man neue Papiere? Bei mir geschieht das über ein paar Publication, aber meistens über einige prominente X-Accounts. Das Downside besteht jedoch darin, dass es viele solcher Konten gibt und es daher viel Rauschen gibt und es schwieriger geworden ist, den Signalen zu folgen. Papiere fasst Gespräche über einen Aufsatz und andere damit zusammenhängende Aufsätze an einem Ort zusammen und macht die Entdeckung zu einem Teil des Leseflusses selbst.

Papiers ist ein relativ neues Instrument, verfügt aber bereits über einige großartige Funktionen. Beispielsweise können Sie nicht nur Gespräche über die Arbeit führen, sondern auch eine Wiki-Stil Sehen Sie sich die Inhalte in zwei Formaten an – technisch und barrierefrei, sodass Sie das Format entsprechend Ihrer Vertrautheit mit dem Thema auswählen können. Es gibt auch eine Abstammung Ansicht, die die Eltern und Kinder der Zeitung zeigt, sodass Sie sehen können, was die Arbeit geprägt hat und was danach kam. Und es gibt auch eine Mindmap-Funktion (denken Sie an NotebookLM), die ziemlich nett ist.

Mindmap, Abstammung, Wiki-Ansicht und der X-Feed für einen Artikel werden nebeneinander angezeigt Papiers.ai | Bild vom Autor

Ich wollte hier darauf hinweisen, dass mir das Instrument geholfen hat paper not discovered Bei einigen Papieren ist ein Fehler aufgetreten, oder bei einigen fehlte der X-Einzug. Bei den prominenten Zeitungen hat es jedoch funktioniert. Ich habe mich umgesehen und in einem X-Thread herausgefunden, dass Papiere derzeit auf Anfrage indiziert werden, additionally denke ich, dass das die Erklärung ist. Da es sich jedoch um ein neues Instrument handelt und die Angebote mir sehr intestine gefallen, bin ich mir sicher, dass sich dieser Teil mit der Zeit verbessern wird.

  • So versuchen Sie es: Ersetzen arxiv mit papiers in einem beliebigen arXiv-Hyperlink oder öffnen Sie ihn direkt von der Web site unter papiers.

3. Lumi

Lumi ist ein Open-Supply-Instrument der Menschen + KI-Forschung Gruppe bei Google und wie viele ihrer Arbeiten verfügt es über eine beeindruckende und durchdachte Benutzeroberfläche. Lumi hebt die wichtigsten Teile des Papiers hervor und platziert kurze Zusammenfassungen am Seitenrand, sodass Sie immer das Originalpapier zusammen mit der von der KI generierten Zusammenfassung lesen können. Sie können auch auf eine beliebige Referenz klicken und gelangen direkt zum genauen Satz in der Arbeit. Das Besondere an Lumi ist, dass es nicht nur den Textual content erklärt, sondern Sie können auch ein Bild auswählen und Lumi bitten, es ebenfalls zu erklären.

Der einzige Nachteil ist, dass es derzeit funktioniert arXiv Artikel unter einer Inventive-Commons-Lizenz, aber ich würde es gerne so erweitern, dass es ganz arXiv abdeckt und vielleicht sogar das Hochladen von PDFs anderer Artikel ermöglicht.

In Lumi | sind sowohl Optionen zum Erklären von Textual content als auch zum Erklären von Bildern verfügbar Bild vom Autor

Andere erwähnenswerte Instruments

Während ich hauptsächlich die oben genannten Instruments verwende, gibt es einige andere, die mir auf jeden Fall über den Weg gelaufen sind, und ich möchte Sie ermutigen, sie auszuprobieren, wenn sie zu Ihrem Lesestil passen, wie zum Beispiel: Sie sind nicht zu meiner Hauptauswahl geworden, aber sie haben einige gute Ideen und könnten je nach Ihrem Lesestil intestine für Sie funktionieren.

  • OpenRead ist eine großartige Possibility zum Lesen von Aufsätzen und zum Durchführen einer Literaturrecherche. Es gibt einige tolle Add-ons wie das Vergleichen von Papieren, Papierdiagramme um verbundene Papiere anzuzeigen und a Papier-Espresso Funktion, die eine prägnante, einseitige Zusammenfassung des Papiers liefert.
Lesen einer Zeitung in der OpenRead Schnittstelle mit den anderen verfügbaren Lesemodi, die neben | angezeigt werden Screenshot des Autors

Hierbei ist zu beachten, dass OpenRead ein kostenpflichtiges Instrument ist, es jedoch eine Freemium-Model gibt.

  • SciSpace ist ein sehr vielseitiges Instrument und Sie können nicht nur mit einer Arbeit chatten, sondern auch semantische Literaturrecherchen durchführen, tief in die Recherche einsteigen, Arbeiten schreiben und sogar Visualisierungen für Ihre Arbeit erstellen. Es gibt noch viele andere Dinge, die Sie in ihrer Suite erkunden können. Wie OpenRead ist es auch ein kostenpflichtiges Instrument mit eingeschränkten Funktionen, die im kostenlosen Kontingent verfügbar sind.
  • Tageszeitungen von HuggingFace ist eine großartige Possibility, wenn Sie Trendpapiere sehen möchten, um Trendpapiere zu sehen. Eine weitere nette Geste an ihm ist, dass Sie auf HuggingFace sofort die Modelle, Datensätze und Leerzeichen sehen können, in denen ein bestimmter Artikel zitiert wird (falls vorhanden), und auch mit den Autoren chatten können.
Ein Screenshot von Day by day Papers von HuggingFace, der die Anzeige von Zeitungen für zeigt 2. Dezember 2025 | Bild vom Autor

Abschluss

Der Großteil meiner Lektüre ist Teil der Literaturrecherche für meinen Weblog und eine Mischung aus den drei oben genannten Strategien. Ich gehe Papiere immer noch gerne manuell durch, aber wenn ich weiter gehen, zusammenhängende Papiere sehen oder etwas detaillierter verstehen möchte, helfen mir die drei genannten Instruments sehr. Mir ist bewusst, dass es noch viele weitere KI-gestützte Instruments zum Lesen von Aufsätzen gibt, aber genau wie das Sprichwort Zu viele Köche verderben den Breiich bleibe gerne bei ein paar und springe nicht zwischen Favoriten hin und her, es sei denn, es gibt eine wirklich herausragende Funktion.

[ad_2]

]]>
http://chatgpz.de/machine-learning/lesen-von-forschungsarbeiten-im-zeitalter-der-llms/feed/ 0 14622
LLM -Forschungsarbeiten von 2025 sollten Sie lesen http://chatgpz.de/data-analytics/llm-forschungsarbeiten-von-2025-sollten-sie-lesen/ http://chatgpz.de/data-analytics/llm-forschungsarbeiten-von-2025-sollten-sie-lesen/#respond Sun, 15 Jun 2025 18:17:20 +0000 https://chatgpz.de/data-analytics/llm-forschungsarbeiten-von-2025-sollten-sie-lesen/ [ad_1]

2025 als Jahr hat mehrere Durchbrüche in Bezug auf große Sprachmodelle (LLMs) beheimatet. Die Technologie hat in quick allen vorstellbaren Domäne ein Zuhause gefunden und wird zunehmend in herkömmliche Workflows integriert. Da es so viel passiert, ist es eine große Aufgabe, bedeutende Erkenntnisse im Auge zu behalten. Dieser Artikel würde Ihnen helfen, Sie mit den beliebtesten LLM -Forschungsarbeiten vertraut zu machen, die dieses Jahr herausgekommen sind. Dies würde Ihnen helfen, mit den neuesten Durchbrüchen in der KI auf dem Laufenden zu bleiben.

High 10 LLM -Forschungsarbeiten

Die Forschungsarbeiten wurden von Sugging Face, einer On-line-Plattform für KI-bezogene Inhalte, erhalten. Die für die Selektion verwendete Metrik ist der UPVOTES -Parameter auf dem Umarmungsgesicht. Das Folgende sind 10 der am besten aufgenommenen Forschungsstudienpapiere von 2025:

1. Mutarjim: Förderung der bidirektionalen arabisch-englischen Übersetzung

Mutarjim

Kategorie: Verarbeitung natürlicher Sprache
Mutarjim ist ein kompaktes, aber leistungsstarkes 1,5B-Parametersprachenmodell für die bidirektionale arabisch-englische Übersetzung, die auf Kuwain-1.5b basiert, die eine modernste Leistung gegen signifikant größere Modelle erzielt und den Tarjama-25-Benchmark einführt.
Ziele: Das Hauptziel ist es, ein effizientes und genaues Sprachmodell zu entwickeln, das für die bidirektionale arabisch-englische Übersetzung optimiert ist. Es befasst sich mit Einschränkungen der aktuellen LLMs in dieser Domäne und führt einen robusten Benchmark für die Bewertung ein.

Ergebnis:

  1. Mutarjim (1,5B-Parameter) erzielte eine hochmoderne Leistung auf der Tarjama-25-Benchmark für arabisch-englische Übersetzung.
  2. Unidirektionale Varianten wie Mutarjim-ar2en übertrafen das bidirektionale Modell.
  3. Die fortgesetzte Part vor dem Coaching verbesserte die Übersetzungsqualität signifikant.

Volles Papier: https://arxiv.org/abs/2505.17894

2. Technischer Bericht QWEN3

Qwen

Kategorie: Verarbeitung natürlicher Sprache
In diesem technischen Bericht wird QWEN3 vorgestellt, eine neue Reihe von Llms Mit integriertem Denken und nicht denkenden Modi, unterschiedlichen Modellgrößen, verbesserten mehrsprachigen Fähigkeiten und hochmodernen Leistung in verschiedenen Benchmarks.
Objektiv: Das Hauptziel des Papiers ist es, die QWEN3 LLM-Serie einzuführen, die die Leistung, Effizienz und mehrsprachige Funktionen verbessern soll, insbesondere durch Integration flexibler Denken und nicht denkenden Modi und Optimierung der Ressourcenverbrauch für verschiedene Aufgaben.

Ergebnis:

  1. Empirische Bewertungen zeigen, dass QWEN3 über verschiedene Benchmarks in verschiedenen Benchmarks führen.
  2. Das Flaggschiff QWEN3-235B-A22B-Modell erreichte bei Aime’24 und 70.7 auf LiveCododebench V5 85,7.
  3. QWEN3-235B-A22B-Base übertraf Deepseek-V3-Base bei 14 von 15 Bewertungsbenchmarks.
  4. Eine starke Destillation struggle sehr effizient und erforderte ungefähr 1/10 der GPU-Stunden im Vergleich zum direkten Verstärkungslernen.
  5. Qwen3 Erweiterte mehrsprachige Unterstützung von 29 auf 119 Sprachen und Dialekte, die die globale Zugänglichkeit und das interlingliche Verständnis verbessern.

Volles Papier: https://arxiv.org/abs/2505.09388

3. Wahrnehmung, Vernunft, Denken und Plan: Eine Umfrage zu großen multimodalen Argumentationsmodellen

Eine Umfrage zu LMRMs

Kategorie: Multimodal
Dieses Papier bietet eine umfassende Untersuchung großer multimodaler Argumentationsmodelle (LMRMs), in dem eine vierstufige Entwicklungs-Roadmap für multimodale Argumentationsforschung dargestellt wird.
Objektiv: Das Hauptziel ist es, die aktuelle Landschaft des multimodalen Denkens zu klären und die Gestaltung multimodaler Argumentationssysteme der nächsten Era zu informieren, die umfassende Wahrnehmung, präzises Verständnis und tiefes Denken in verschiedenen Umgebungen in der Lage sind.

Ergebnis: Die experimentellen Ergebnisse der Umfrage belegen die aktuellen LMRM-Einschränkungen in der AVQA-Aufgabe (Audio-Video-Frage Antwortbeantwortung). Zusätzlich, Gpt-4o Bewertet 0,6% für den BrowseComp-Benchmark und verbessert sich auf 1,9% mit Searching-Instruments, was eine schwache Werkzeuginteraktive zeigt.

Volles Papier: https://arxiv.org/abs/2505.04921

4. Absolute Null: Verstärkte Selbstspielreden mit Nulldaten

Absolute Null

Kategorie: Verstärkungslernen
In diesem Artikel wird Absolute Zero eingeführt, ein neuartiges Verstärkungslernen mit überprüfbarem Paradigma (RLVR). Es ermöglicht Sprachmodelle, autonome Argumentationsaufgaben autonom zu generieren und zu lösen, wodurch Selbstverbesserung erreicht wird, ohne sich auf externe Daten zu menschlichen Kursen zu verlassen.
Objektiv: Das Hauptziel ist es, ein sich selbst entwickeltes Argumentationssystem zu entwickeln, das die Skalierbarkeitsbeschränkungen von menschlich kurierten Daten überwindet. Durch das Lernen, Aufgaben vorzuschlagen, die den Lernfortschritt maximieren und seine Argumentationsfähigkeiten verbessern.

Ergebnis:

  1. AZR erzielt die Gesamtleistung des neuesten Stand der Technik (SOTA) bei Coding- und mathematischen Argumentationsaufgaben.
  2. Insbesondere erreicht AZR-Coder-7b eine Gesamtwertbewertung von 50,4 und übertrifft frühere beste Modelle um 1,8 absolute Prozentpunkte bei kombinierten Mathematik- und Codierungsaufgaben ohne kuratierte Daten.
  3. Die Leistungsverbesserungen skalieren mit Modellgröße: 3B-, 7B- und 14B -Codierer -Modelle erzielen Gewinne von +5,7, +10,2 bzw. +13,2 Punkten.

Volles Papier: https://arxiv.org/abs/2505.03335

5. Seed1.5-VL Technischer Bericht

Seed1.5-Vl

Kategorie: Multimodal
In diesem Bericht wird Seed1.5-VL eingeführt, ein kompaktes Sehvermögensmodell, das für das multimodale Verständnis und die Argumentation des allgemeinen Zwecks entwickelt wurde.
Objektiv: Das Hauptziel ist es, das allgemeine multimodale Verständnis und Argumentation im Allgemeinen voranzutreiben, indem die Mangel an hochwertigen Visionsprachenanmerkungen angesprochen und großflächige multimodale Modelle mit asymmetrischen Architekturen effizient trainiert werden.

Ergebnis:

  1. Seed1.5-VL erzielt eine hochmoderne Leistung (SOTA) mit 38 von 60 bewerteten öffentlichen Benchmarks.
  2. Es zeichnet sich in Dokumentverständnis, Erdung und Agentenaufgaben aus.
  3. Das Modell erreicht eine MMMU -Punktzahl von 77,9 (Denkmodus), was ein wichtiger Indikator für die multimodale Argumentationsfähigkeit ist.

Volles Papier: https://arxiv.org/abs/2505.07062

6. Verschiebung der KI-Effizienz von modellzentriert auf datenzentrierte Komprimierung

KI verlagern

Kategorie: Maschinelles Lernen
Dieses Positionspapier setzt sich für eine Paradigmenverschiebung der KI-Effizienz von modellzentriert bis datenzentrierten Komprimierung ein und konzentriert sich auf die Token-Komprimierung, um den wachsenden rechnerischen Engpass von langen Token-Sequenzen in großen KI-Modellen zu beheben.
Objektiv: Das Papier zielt darauf ab, die AI-Effizienzforschung neu zu positionieren, indem er argumentiert, dass sich der dominierende Rechenumfang von Modellgröße zu den quadratischen Kosten der Selbstbekämpfung über lange Token-Sequenzen verlagert hat, was einen Fokus auf datenorientierte Token-Komprimierung erfordert.

Ergebnis:

  1. Die Token -Komprimierung wird quantitativ gezeigt, um die Rechenkomplexität quadratisch und die Speicherverwendung linear mit der Reduzierung der Sequenzlängen zu reduzieren.
  2. Empirische Vergleiche zeigen, dass ein einfaches zufälliges Token, das oft überraschend überraschend übertrifft, akribisch konstruierte Token -Kompressionsmethoden übertrifft.

Volles Papier: https://arxiv.org/abs/2505.19147

7. aufkommende Eigenschaften in einheitlichen multimodalen Vorbetrieben

Einheitliche multimodale Vorbildung

Kategorie: Multimodal
Bagel ist ein Open-Supply-Fundamentmodell für ein einheitliches multimodales Verständnis und eine einheitliche Erzeugung, die aufkommende Fähigkeiten im komplexen multimodalen Denken aufweist.

Objektiv: Das Hauptziel ist es, die Lücke zwischen akademischen Modellen und proprietären Systemen im multimodalen Verständnis zu schließen.

Ergebnis:

  1. Bagel übertrifft vorhandene Open-Supply-Unified-Modelle sowohl in der multimodalen Erzeugung als auch im Verständnis über Commonplace-Benchmarks.
  2. Bei den Benchmarks im Bildverständnis erzielte Bagel auf MMBench eine Punktzahl von 85,0 und 69,3 auf MMVP.
  3. Für die Erzeugung der Textual content-zu-Picture-Erzeugung erzielte Bagel auf dem Geneval-Benchmark einen Gesamtwert von 0,88.
  4. Das Modell zeigt fortschrittliche aufkommende Fähigkeiten im komplexen multimodalen Denken.
  5. Die Integration der Argumentation der Kette der Gedanken (COT) verbesserte Bagels Intelligentbench-Rating von 44,9 auf 55,3.

Volles Papier: https://arxiv.org/abs/2505.14683

8. Minimax-Speech: Intrinsic Null-Shot-Textual content-zu-Sprache mit einem lernbaren Lautsprecher-Encoder

Minmax-Sprache

Kategorie: Verarbeitung natürlicher Sprache
Minimax-Speech ist ein autoregressives Transformator-basiertes Textual content-zu-Sprach-Modell (TTS), das einen lernbaren Sprecher-Encoder und einen Fluss-Vae verwendet, um qualitativ hochwertige, ausdrucksstarke Null-Shot- und One-Shot-Sprachklone über 32 Sprachen zu erreichen.

Objektiv: Das primäre Ziel ist es, ein TTS-Modell zu entwickeln, das mit hoher Constancy-Sprachklone aus dem nicht trennenden Referenz-Audio in der Lage ist.

Ergebnis:

  1. Minimax-Speech erzielte modernste Ergebnisse der objektiven Sprachklonierungsmetrik.
  2. Das Modell sicherte sich mit einer ELO -Punktzahl von 1153 die oberste Place in der Rangliste der künstlichen Enviornment.
  3. Bei mehrsprachigen Bewertungen übertraf die Minimax-Speech in Sprachen mit komplexen Tonstrukturen die mehrsprachige V2 von elfLabs.
  4. Die Movement-Vae-Integration verbesserte die TTS-Synthese, wie ein Take a look at-Zh-Null-Shot von 0,748 belegt wurde.

Volles Papier: https://arxiv.org/abs/2505.07916

9. Jenseits von ‚Aha!‘

Darüber hinaus "Aha"

Kategorie: Verarbeitung natürlicher Sprache
In diesem Artikel wird eine systematische Methode eingeführt, mit der große Argumentationsmodelle (LRMs) mit grundlegenden Meta-Fähigkeiten ausgerichtet sind. Dies verwendet selbst überprüfbare synthetische Aufgaben und eine dreistufige Verstärkungslernpipeline.

Objektiv: Um die Unzuverlässigkeit und Unvorhersehbarkeit von aufstrebenden „AHA-Momenten“ in LRMs zu überwinden, indem sie sie ausdrücklich auf Meta-Fähigkeiten des Domänen-Common-Arguments ausrichten (Abzug, Induktion und Entführung).

Ergebnis:

  1. Ausrichtung der Meta-Fähigkeit (Stufe A + B), die auf unsichtbare Benchmarks übertragen wurde, wobei das zusammengeführte 32B-Modell einen Anstieg der Gesamtgenauigkeit von 3,5percentder Gesamtgenauigkeit (48,1%) im Vergleich zur Anweisungsbasis (44,6%) in Mathematik, Codierung und naturwissenschaftlichen Benchmarks aufwies.
  2. Domänenspezifische RL aus dem von Meta-Fähigkeit ausgerichteten Checkpoint (Stufe C) steigerte die Leistung; Das 32B-Domänen-RL-Meta-Modell erzielte einen Gesamtdurchschnitt von 48,8%, was einen absoluten Gewinn von 4,2% gegenüber dem Anleitungsbasis von 32B (44,6%) und einen Gewinn von 1,4% gegenüber direkten RL aus Anlehnungmodellen (47,4%) entspricht.
  3. Das meta-Fähigkeit-ausgerichtete Modell zeigte eine höhere Häufigkeit von gezielten kognitiven Verhaltensweisen.

Volles Papier: https://arxiv.org/abs/2505.10554

10. Lernen des Modellkettens für Sprachmodell

Modelllernenkette

Kategorie: Verarbeitung natürlicher Sprache
In diesem Artikel wird „Chain-of-Mannequin“ (COM) eingeführt, ein neuartiges Lernparadigma für Sprachmodelle (LLMs), das kausale Beziehungen als Kette in verborgene Zustände integriert und eine verbesserte Skalierungseffizienz und Inferenzflexibilität ermöglicht.

Objektiv: Das Hauptziel besteht darin, die Einschränkungen bestehender LLM -Skalierungsstrategien zu begehen, die häufig von Grund auf ein Coaching und eine feste Parameterskala aktivieren, indem ein Framework entwickelt wird, das progressive Modellskalierung, elastische Inferenz und effizienteres Coaching und Tuning für LLM ermöglicht.

Ergebnis:

  1. Die Colm -Familie erzielt eine vergleichbare Leistung mit Commonplace -Transformatormodellen.
  2. Die Kettenerweiterung zeigt Leistungsverbesserungen (z. B. Tinyllama-V1.1 mit Enlargement zeigte eine Verbesserung der durchschnittlichen Genauigkeit um 0,92%).
  3. Colm-Air beschleunigt sich erheblich vorab (z. B. Colm-Air erreichte quick 1,6x bis 3,0 x schneller und bis zu 27x beschleunigt, wenn sie mit Minferenz kombiniert wurden).
  4. Die Kettenstimmung steigert die Kleberleistung durch Feinabstimmung nur eine Teilmenge von Parametern.

Volles Papier: https://arxiv.org/abs/2505.11820

Abschluss

Was aus all diesen LLM -Forschungsarbeiten abgeschlossen werden kann, ist, dass Sprachmodelle jetzt für eine Vielzahl von Zwecken ausgiebig verwendet werden. Ihr Anwendungsfall hat sich von der Textgenerierung erheblich interessiert (die ursprüngliche Arbeitsbelastung, für die sie konzipiert wurde). Die Forschungen basieren auf der Fülle von Rahmenbedingungen und Protokollen, die um LLMs entwickelt wurden. Es lenkt darauf auf die Tatsache, dass der größte Teil der Forschung in KI, maschinellem Lernen und ähnlichen Disziplinen durchgeführt wird, was es noch mehr notwendig macht, dass man über sie auf dem Laufenden bleibt.

Mit den beliebtesten LLM-Forschungsarbeiten, die Ihnen jetzt zur Verfügung stehen, können Sie ihre Erkenntnisse integrieren, um modernste Entwicklungen zu erstellen. Während die meisten von ihnen die bereits bestehenden Techniken verbessern, liefern die erzielten Ergebnisse radikale Transformationen. Dies gibt einen vielversprechenden Ausblick für weitere Forschung und Entwicklungen im ohnehin boomenden Bereich der Sprachmodelle.

Ich bin spezialisiert auf die Überprüfung und Verfeinerung von KI-gesteuerten Forschungen, technischen Dokumentationen und Inhalten im Zusammenhang mit aufstrebenden KI-Technologien. Meine Erfahrung umfasst das KI -Modelltraining, die Datenanalyse und das Abrufen von Informationen, sodass ich Inhalte herstellen kann, die sowohl technisch genau als auch zugänglich sind.

Melden Sie sich an, um weiter zu lesen und Experten-Kuratinhalte zu genießen.

[ad_2]

]]>
http://chatgpz.de/data-analytics/llm-forschungsarbeiten-von-2025-sollten-sie-lesen/feed/ 0 9990