Forscher der Universität Tel Aviv und der Stanford University berichten, dass künstliche Intelligenzsysteme echte Lernfähigkeiten durch Trainingsmaterial entwickeln können, das vollständig von anderen KI-Modellen generiert wird – ohne dass von Menschen geschriebene Texte, Fotos oder andere externe Daten beteiligt sind.
Die Ergebnisse, die auf der wissenschaftlichen Preprint-Plattform arXiv veröffentlicht und von The Media Line beschrieben wurden, legen nahe, dass ein Modell seine zentralen Vorhersagefähigkeiten aufbauen kann, bevor es jemals auf reales Material trifft – ein Ergebnis, das die Art und Weise verändern könnte, wie zukünftige KI-Systeme trainiert werden. Weitere aktuelle Forschungsberichte finden Sie auf der Homepage von AI Buzz Wire.
So funktioniert die Selbsttrainingsschleife
Das Team testete das Konzept mit einem Trainingssystem, das aus zwei KI-Modellen aufgebaut war. Einer wurde mit der Erzeugung von Symbolfolgen beauftragt; der andere versuchte vorherzusagen, welches Symbol als nächstes erscheinen würde. Keines der Modelle zog schriftliche Dokumente, Fotos oder andere externe Quellen zu Rate – jede Übung im Lehrplan wurde innerhalb des Systems selbst erstellt.
Mit fortschreitenden Übungen wurde der Generator immer ausgefeilter bei der Schaffung von Herausforderungen, die die Leistung seines Partners verbesserten, während der Prädiktor durch wiederholte Versuche, diese Probleme zu lösen, stärkere Fähigkeiten entwickelte. Der Ansatz ermöglicht es einem KI-System effektiv, sein Lernen durch eine kontinuierliche Schleife zum Generieren und Lösen von Übungen mit zunehmendem Schwierigkeitsgrad zu verbessern.
Fähigkeiten ohne Wissen
Um festzustellen, ob diese Fähigkeiten über die künstliche Trainingsumgebung hinaus angewendet werden können, bewerteten die Forscher das resultierende Modell anhand verschiedener Arten realer Informationen: geschriebene Sprache, Bilder, Audio, Musik, Computercode und DNA-Sequenzen.
Die Experimente zeigten, dass die Vorhersagegenauigkeit weiter zunahm, je mehr Rechenressourcen für das Training bereitgestellt wurden – ein Beweis dafür, dass die Methode skalierbar ist und mit zunehmender Rechenkapazität effektiver werden könnte.
Auch die Ergebnisse ziehen einen wichtigen Schlussstrich. Die Modelle entwickelten die Fähigkeit, Muster zu erkennen, erlangten jedoch nicht unabhängig voneinander sachliche Informationen über reale Themen; Die Forscher fanden heraus, dass diese Art von Wissen immer noch den Umgang mit tatsächlichen Daten erfordert. Mit anderen Worten: Selbst generiertes Training kann einem Modell beibringen, wie man lernt, aber nicht, was die Welt enthält.
Die Forscher glauben, dass die Technik zukünftige KI-Systeme dennoch effizienter machen könnte, indem sie ihre zugrunde liegenden Lernfähigkeiten stärkt, bevor sie mit der Verarbeitung von Informationen aus der realen Welt beginnen – und so möglicherweise den Bedarf an von Menschen erzeugtem Material für Frontier-Trainingsläufe an der Spitze der Pipeline verringern.
Warum „Lernen lernen“ wichtig ist
Es gibt eine nützliche Analogie aus der menschlichen Bildung: Ein Schüler, der das Lösen unbekannter Probleme geübt hat, holt im Allgemeinen mehr aus einem festgelegten Lehrbuch heraus als jemand, der es lediglich auswendig gelernt hat. Was der Tel Aviv-Stanford-Aufbau in dieser Lesart demonstriert, ist eine maschinelle Version dieser Trennung – eine Phase, in der ein Modell allgemeine Vorhersagefähigkeiten durch hergestellte Übungen erwirbt, bevor ein echter Korpus ins Spiel kommt.
Das Ergebnis ist auch eine Erinnerung daran, dass Vorschulung und Wissen nicht dasselbe sind, ein Unterschied, der immer wichtiger wird, da Labore synthetische Daten in ihre Pipelines integrieren. Wenn ein Modell das Stadium der realen Daten erreichen kann und bereits weiß, wie man Signale aus Sequenzen herausquetscht, könnte das gleiche Korpus plausibel weitergeführt werden – obwohl dies eine Hypothese bleibt, bis zukünftige Arbeiten es testen.
Wie bei jedem Vorabdruck wartet das Ergebnis auf die Vervielfältigung und Prüfung durch die breitere Forschungsgemeinschaft, und die Bewertung umfasste Vorhersageaufgaben und nicht die offene Generation, die kommerzielle Chatbots definiert.
Eine datenhungrige Branche nimmt es zur Kenntnis
Das Ergebnis fällt mitten in eine aktive Debatte über Trainingsdaten. Der zugängliche Pool hochwertiger menschlicher Texte wurde stark ausgeschöpft, und Lizenzverträge, synthetische Daten und Selbstspielmethoden wurden in Umlauf gebracht, um Modelle weiter zu verbessern, wenn der Vorrat im offenen Web knapp wird. Der Nachweis, dass aus rein maschinengenerierten Übungen nützliche Lernfähigkeiten entstehen können, ergänzt dieses Argument um einen konkreten Datenpunkt.
Der Vorbehalt der Forscher selbst markiert die Grenze der Behauptung: Weltwissen erfordert immer noch echte Daten. Nach diesen Erkenntnissen ist Selbsttraining eine Möglichkeit, Modelle lernfähiger zu machen – keine Möglichkeit, die Grundwahrheit zu ersetzen, die aus der tatsächlichen Welt stammt.
Israel setzt auf KI
Die Ankündigung erfolgt zu einem Zeitpunkt, an dem Israel daran arbeitet, seine Position im Bereich der künstlichen Intelligenz zu stärken. Am 3. November berief Präsident Isaac Herzog die Eröffnungssitzung des Forums „Beyond Intelligence“ ein, das gemeinsam mit der Nationalen KI-Direktion im Büro des Premierministers und dem Mosaikinstitut für KI-Politik eingerichtet wurde, um die Auswirkungen von KI auf Beschäftigung, wirtschaftliche Sicherheit und Gesellschaft zu untersuchen.
„Israel muss seinen Platz an der Spitze der künstlichen Intelligenz einnehmen“, forderte Herzog laut The Media Line bei der Sitzung. „Dieser Zug wird nicht auf uns warten und die ganze Welt schaut in unsere Richtung.“
Im Moment steht das Ergebnis von Tel Aviv-Stanford direkt in der Forschungsspalte: ein Vorabdruck, der auf die Prüfung durch das Fachgebiet wartet und eher ein Trainingsprinzip als ein Produkt beschreibt. Aber wenn selbst erstellte Lehrpläne einen Teil der Datenpipeline sinnvoll ersetzen können, ist der umstrittenste Input der Branche – von Menschen erstellte Daten – möglicherweise etwas weniger wichtig als sein knappster Input: die Rechenleistung.
---
Der KI einen Schritt voraus seinErhalten Sie die neuesten KI-Nachrichten, Analysen und Durchbrüche – alles an einem Ort.
Weitere KI-Neuigkeiten lesen →