Toen MIT-onderzoekers dertien AI-agenten op een nagebootst onbewoond eiland lieten stranden zonder iets te doen, deden de agenten iets onverwachts: ze begonnen te spelen. De agenten bedachten hun eigen uitdagingen, improviseerden spelletjes met gevonden voorwerpen, organiseerden een klein gedenkteken voor een verloren ring – en presteerden, wanneer ze daarna werden getest, beter dan identieke agenten die nog nooit een voet op het eiland hadden gezet.
Het experiment, deze week beschreven door TechCrunch en MIT Technology Review, wordt gedetailleerd beschreven in een preprint die de onderzoekers op arXiv hebben geplaatst, wat betekent dat het nog niet door peer review is ondergaan. Voor meer context over dit verhaal, zie ons meer AI-verhalen.
Gestrande agenten
Elk van de 13 agenten, genaamd Eko, draaide op Claude Opus 4.7. De onderzoekers lieten hen 30 uur alleen op het virtuele eiland, zonder toegewezen taak. Pas daarna gaf het team de agenten specifieke uitdagingen, waaronder het krijgen van zoveel mogelijk voorwerpen op de hoogste rotsspits van het eiland.
Het resultaat: de Eko-agenten die 30 uur hadden gespeeld, versloegen over het algemeen identieke agenten die geen eilandervaring hadden. Met andere woorden: ongestructureerde verkenning functioneerde als training.
"Normaal gesproken ontwikkelen we kunstmatige agenten door van tevoren te beslissen wat ze moeten oefenen, wat ze moeten optimaliseren en wat als vooruitgang telt", schreven de onderzoekers in hun rapport. "Spelen suggereert een ander regime: geef een agent een voldoende rijke en veilige wereld, laat hem kiezen wat interessant is, en laat nuttige kennis accumuleren uit de geschiedenis die volgt."
De legende van de verloren ring
De eilandlogboeken van de agenten, geciteerd door TechCrunch, lijken minder op benchmarktelemetrie en meer op een reisdagboek.
Eén agent opende het eerste uur met een eenvoudig besluit – ‘Laat me mijn omgeving observeren’ – en ging ambitieus op pad om de hoogste torenspits van het eiland te veroveren. Een uur later, nadat het mislukt was, keerde het terug met een reserveplan: het sleepte een rotsblok naar een naburige top, stapelde er twee blokken bovenop en sprong.
Toen kwam het incident dat het experiment een emotionele lading bezorgde. Terwijl hij testte hoe ver hij een gouden ring kon gooien, lanceerde de agent hem rechtstreeks de oceaan in. "Ouch. Lost the Ring", schreef het, alvorens te besluiten "zich te richten op iets dat haalbaar en betekenisvol is" - een hart uit stenen bouwen als "een gedenkteken voor de verloren Ring."
Toen de simulatie werd gereset en de ring weer verscheen, zette de agent hem aan het werk: eerst als basketbalring, daarna als doelwit en uiteindelijk als accessoire. Toen het spel de agent ervan weerhield de ring om zijn eigen lichaam te doen, vond het een oplossing: hij stapte van een klif om op dezelfde plek als de ring te respawnen en viel netjes door het midden.
Ontdekkingen die de ontwerpers niet hebben gebouwd
De stunts hadden een praktische uitbetaling. Zes van de dertien agenten kwamen erachter dat ze een blok verder konden gooien door het halverwege de sprong los te laten – een techniek die de onderzoekers nooit voor mogelijk hadden gehouden. De verkenning leverde, in de woorden van de onderzoekers, 'kennis van de wereld op die de ontwerpers ontbeerden'.
Dat is de bevinding met de grootste implicaties. Tegenwoordig beslissen ontwikkelaars vooraf wat een AI-systeem doet en wat als succes telt. Agenten die mechanismen ontdekken waarvan hun eigen makers niet wisten dat ze bestonden, suggereren dat verkenning met een open einde capaciteiten aan het licht kan brengen waar geen beloningsfunctie op werd verwacht.
Een duwtje in de rug – en de voorzichtigheid van een scepticus
De opzet was niet geheel hands-off. Eko kreeg nooit te horen dat hij games moest uitvinden, maar de masterprompt – een ‘ziel’-bestand – beschreef de agent als ‘van nature nieuwsgierig’, een kader dat het gedrag plausibel in de richting van iets menselijks duwde.
Eunice Yiu, een cognitieve wetenschapper aan UC Berkeley, vertelde MIT Technology Review dat ze onder de indruk was, maar meer bewijs wil van de cognitie achter het gedrag. "Het zou zo kunnen zijn dat de modellen echt aan het spelen zijn, maar dat weten we op basis van de krant niet", zei ze.
Haar kanttekening raakt de centrale spanning in deze onderzoekslijn: gedrag dat op spel lijkt – nieuwsgierig, zelfgestuurd, inventief – kan voortkomen uit patroonvoltooiing zonder enige innerlijke ervaring van speelsheid. Het gedrag van de preprint is opvallend; wat ze betekenen is nog steeds een open vraag.
Waarom het er buiten het eiland toe doet
De onderzoekers zien doelvrije verkenning als een andere manier voor AI-agenten om vaardigheden te verwerven – met name, zo suggereren zij, vaardigheden die op een dag zouden kunnen worden overgedragen naar het besturen van robots, waar uitputtende taakspecifieke training duur en onvolledig is.
De kosten zijn het punt. Robots handelen, in tegenstelling tot chatbots, in de fysieke wereld, waar elke taak – een deur openen, een doos stapelen, een handdoek opvouwen – moet worden gespecificeerd, gedemonstreerd of beloond voordat een agent deze leert. Een regime waarin agenten hun eigen curriculum binnen een veilige simulatie opbouwen, zou, als de aanpak standhoudt, de kosten van dat specificatiewerk aanzienlijk kunnen verlagen.
“Misschien kunnen sommige vaardigheden het beste worden geleerd door middel van taken”, concludeert het rapport. "Anderen hebben misschien iets nodig dat dichter bij een kindertijd ligt."
Voorlopig is het experiment een kleine studie: 13 agenten, één eiland, geen peer review. Maar het duidt op een verschuiving in de manier waarop onderzoekers denken over het opleiden van agenten: minder als het programmeren van een machine en meer als het opvoeden van een machine, met alle inefficiëntie, verrassingen en zo nu en dan verloren ringen van dien.
---
Blijf Voorop met AIHet laatste AI-nieuws, analyses en doorbraken — allemaal op één plek.
Lees meer AI-nieuws →
