Společnost Runway představila Solaris, první model v nové kategorii, kterou společnost nazývá „Interface World Models“ – systémy umělé inteligence, které generují uživatelská rozhraní živě, snímek po snímku, namísto spouštění kódu. Namísto překladu návrhu do aplikace Solaris vykresluje samotné rozhraní v rozlišení 720p a reaguje přímo na kliknutí, přetažení a hlasové příkazy, když s ním komunikujete.

Oznámení, které podrobně popisuje The Decoder, znamená ostrý zlom od toho, jak software normálně funguje. Dnes o tom, co se stane na obrazovce, rozhoduje operační systém a aplikace zůstává stejná, dokud vývojář nedodá aktualizaci. Solaris navrhuje opak: rozhraní, které existuje pouze tak dlouho, dokud se generuje, a neustále se přizpůsobuje osobě, která jej používá. For more context on this story, see our ongoing latest AI developments.

Jak funguje model světa rozhraní

Solaris je postaven na videomodelu Runway Gen-4.5 a sleduje směr, který společnost začala s GWM-1, svým dřívějším univerzálním světovým modelem. Pod kapotou spolupracují dva systémy: jazykový model rozhoduje o tom, jak by se mělo rozhraní změnit v reakci na to, co uživatel dělá, zatímco model světa vykresluje každý snímek.

Výsledek vypadá a chová se jako aplikace, ale nic neběží v tradičním slova smyslu. Neexistuje žádný soubor rozvržení, žádný front-end kód, žádná kompilovaná binární data – pouze generativní model vytvářející další snímek na základě vašeho posledního kliknutí.

Dráha pro případy použití se mění

Dráha uvádí několik scénářů, kde by vygenerované rozhraní mohlo nahradit pevné rozhraní.

Při online nakupování se samotný obchod stává rozhraním. Namísto procházení statické mřížky produktů může nakupující přetáhnout košili na svůj obrázek a vyzkoušet si ji. Obchod by již nebyl pevným uspořádáním, které by každý návštěvník viděl stejně, ale prostředím, které se přizpůsobí každému uživateli.

Pro vizualizaci produktu je hlavním tématem konverzační manipulace s předměty: řekněte „pohni stolem“ nebo „změňte barvu pohovky“ a scéna okamžitě zareaguje. Runway vidí tento vhodný nákup nábytku a plánování interiéru, kde vidět změnu překonává představu.

Společnost také poukazuje na tutoriály a učení. Namísto chatbota, který odpovídá textem, by Solaris mohl ukázat další krok vizuálně v kontextu – příkladem společnosti je ukázka spalování, která se mění v závislosti na použitých materiálech.

Větší nárok společnosti Runway: Aplikace zmizí

Pod ukázkami je provokativní teze. Runway tvrdí, že „aplikace“ jako pevná jednotka softwaru zmizí. Chcete-li něco udělat dnes, znamená to otevřít správnou předpřipravenou aplikaci – jednu pro nakupování, jednu pro zprávy, jednu pro rezervace. Pokud operační systém dokáže na požádání generovat správné rozhraní, existuje mnohem méně důvodů třídit software do pevného katalogu.

Pro tuto technologii existuje sekundární publikum: samotní agenti AI. Společnost Runway poznamenává, že agenti stále selhávají v úkolech, jako je rezervace hotelů, protože jsou vyškoleni v pevných rozvrženích a klopýtnou, když se od nich skutečný web odchyluje. Agent, který pracuje uvnitř generovaných, modelem srozumitelných rozhraní, by této křehkosti nečelil. Runway explicitně rámuje Interface World Models jako cvičiště pro agenty.

Úlovky: Text, spolehlivost a dostupnost

Solaris zatím drží ve výzkumné koloně značné problémy.

Stabilní a čitelný text zůstává pro generativní video modely těžkým problémem – a rozhraní jsou plná textu. Tlačítka, ceny, adresy a vyhledávací pole, to vše závisí na přesných řetězcích, kde halucinovaná postava je rozbitý produkt.

Otevřenými otázkami jsou také dlouhé sezení a spolehlivost. Dekodér si všímá jemného, ​​ale vážného rizika: generované rozhraní, které je špatné, ale přesvědčivě vypadající, může být horší než žádné rozhraní, protože uživatel nemá žádný způsob, jak rozeznat rozdíl mezi vykreslenou cenou a skutečnou.

Dostupnost je dalším nevyřešeným problémem. Vygenerované rozhraní nemá žádnou základní strukturu pro čtení asistenční technologie, takže čtečky obrazovky – primární způsob, jak nevidomí uživatelé procházejí software – nemají s čím pracovat.

Prozkoumejte zatím

Runway nedodává Solaris jako produkt. Společnost hledá partnery pro uvedení na trh a nabízí včasný přístup prostřednictvím registračního formuláře, přičemž systém umísťuje jako průzkum toho, jak by mohl software vypadat, když jsou rozhraní generována spíše než programována.

Načasování není náhodné. Světové modely jako kategorie rychle dozrály a velké laboratoře závodily v simulaci realistických prostředí pro robotiku, hraní her a tvorbu videa. Nasměrování stejného stroje na softwarové povrchy je přirozeným rozšířením – a takové, které staví Runway, nejlépe známou nástroji pro generování videa, které používají filmaři, do přímé koncepční soutěže s etablováním softwaru pro produktivitu.

Zda někdo skutečně chce rozhraní, která se neustále mění, je otázka, kterou Runway nechává otevřenou. Softwarové konvence – nákupní košík, vyhledávací panel, nastavení – existují, protože jsou předvídatelné. Rozhraní, které se znovu objevuje pro každého uživatele, vyměňuje tuto předvídatelnost za přizpůsobivost a teprve se uvidí, zda to uživatelé vnímají jako kouzlo nebo jako chaos.

Jasný je směr jízdy. Stejné modely světa vytvořené pro simulaci fyzické reality pro video jsou nyní zaměřeny na softwarovou realitu – a Runway sází na to, že další rozhraní není vůbec navrženo, ale vytvořeno.

---

Stay Ahead of AI

Get the latest AI news, analysis, and breakthroughs — all in one place.

Read more AI news →