Runway חשפה את Solaris, הדגם הראשון בקטגוריה חדשה שהחברה מכנה "Interface World Models" - מערכות בינה מלאכותית שמייצרות ממשקי משתמש בזמן אמת, פריים אחר פריים, במקום להריץ קוד. במקום לתרגם עיצוב לאפליקציה, Solaris מעבד את הממשק עצמו ב-720p ומגיב ישירות ללחיצות, גרירות ופקודות קוליות בזמן שאתה מתקשר איתו.

ההכרזה, מכוסה בפירוט על ידי The Decoder, מסמנת הפסקה חדה מהאופן שבו התוכנה פועלת בדרך כלל. כיום, מערכת הפעלה מחליטה מה קורה על המסך, ואפליקציה נשארת זהה עד שמפתח שולח עדכון. סולאריס מציעה את ההיפך: ממשק שקיים רק כל עוד הוא מופק ומותאם באופן רציף לאדם המשתמש בו. For more context on this story, see our ongoing latest AI developments.

איך עובד מודל עולם ממשק

Solaris בנויה על מודל הווידאו Gen-4.5 של Runway ועוקבת אחר הכיוון שהחברה התחילה עם GWM-1, הדגם העולמי המוקדם שלה לשימוש כללי. מתחת למכסה המנוע, שתי מערכות משתפות פעולה: מודל שפה מחליט כיצד הממשק צריך להשתנות בתגובה למה שהמשתמש עושה, בעוד שהמודל העולמי מעבד כל פריים.

התוצאה נראית ומתנהגת כמו אפליקציה, אבל שום דבר לא פועל במובן המסורתי. אין קובץ פריסה, אין קוד קצה, אין בינארי מהידור - רק מודל מחולל המייצר את המסגרת הבאה בהתבסס על הקליק האחרון שלך.

מסלול ה-Use Cases מתנדנד

המסלול מפרט כמה תרחישים שבהם ממשק שנוצר יכול להחליף ממשק קבוע.

בקניות באינטרנט, החנות עצמה הופכת לממשק. במקום לגלוש ברשת מוצר סטטית, קונה יכול לגרור חולצה לתמונה שלו כדי לנסות אותה. החנות כבר לא תהיה פריסה קבועה שכל מבקר רואה אותה בצורה דומה, אלא סביבה שמתאימה לכל משתמש.

להדמיה של מוצר, המגרש הוא מניפולציה של אובייקטים בשיח: אמור "הזיז את השולחן" או "שנה את צבע הספה", והסצנה מגיבה באופן מיידי. Runway רואה רהיטים הולמים את קניות ותכנון פנים, שבו לראות שינוי דופק לדמיין אותו.

החברה מצביעה גם על הדרכות ולמידה. במקום צ'טבוט שיענה עם טקסט, Solaris תוכל להראות את השלב הבא חזותית בהקשר - הדוגמה של החברה היא הדגמת בעירה שמשתנה בהתאם לחומרים המעורבים.

הטענה הגדולה יותר של Runway: האפליקציה נעלמת

מתחת להדגמות יש תזה פרובוקטיבית. Runway טוען שה"אפליקציה" כיחידה קבועה של תוכנה תיעלם. לעשות משהו היום פירושו לפתוח את האפליקציה הבנויה מראש - אחת לקניות, אחת להודעות, אחת להזמנות. אם מערכת הפעלה יכולה לייצר את הממשק הנכון לפי דרישה, הנימוק אומר, יש הרבה פחות סיבה למיין תוכנה לקטלוג קבוע.

יש קהל משני לטכנולוגיה: סוכני AI עצמם. Runway מציין שסוכנים עדיין נכשלים במשימות כמו הזמנת מלונות מכיוון שהם מאומנים על פריסות קבועות ומועדים כאשר אתר אינטרנט אמיתי סוטה מהם. סוכן שפועל בתוך ממשקים שנוצרו ומובנים במודל לא יתמודד עם השבריריות הזו. מסלול ממסגר במפורש את מודלים עולמיים של ממשק כמגרש אימונים לסוכנים.

המלכודות: טקסט, אמינות ונגישות

לעת עתה, בעיות משמעותיות מחזיקות את סולאריס בחוזקה בעמודת המחקר.

טקסט יציב וקריא נותר בעיה קשה עבור דגמי וידאו גנרטיביים - והממשקים מלאים בטקסט. כפתורים, מחירים, כתובות ושדות חיפוש תלויים כולם במחרוזות מדויקות, כאשר דמות הזויה היא מוצר שבור.

גם פגישות ארוכות ואמינות הן שאלות פתוחות. המפענח מציין סיכון עדין אך רציני: ממשק שנוצר שהוא שגוי אך בעל מראה משכנע יכול להיות גרוע יותר מאין ממשק כלל, מכיוון שלמשתמש אין דרך להבחין בין מחיר מעובד לבין מחיר אמיתי.

נגישות היא עוד בעיה לא פתורה. לממשק שנוצר אין מבנה בסיסי לטכנולוגיה מסייעת לקריאה, כך שלקוראי מסך - הדרך העיקרית שבה משתמשים עיוורים מנווטים בתוכנה - אין מה לעבוד איתו.

מחקר לעת עתה

מסלול לא שולח את Solaris כמוצר. החברה מחפשת שותפים להשקה ומציעה גישה מוקדמת באמצעות טופס הרשמה, הממצבת את המערכת כחקירה של איך תוכנה יכולה להיראות כאשר ממשקים נוצרים ולא מתוכנתים.

העיתוי אינו מקרי. דגמי העולם התבגרו במהירות כקטגוריה, כאשר מעבדות גדולות דוהרות כדי לדמות סביבות ריאליסטיות לרובוטיקה, משחקים ויצירת וידאו. הצבעה של אותה מכונות על משטחי תוכנה היא הרחבה טבעית - וכזו שמכניסה את Runway, הידועה בעיקר בכלי ייצור וידאו המשמשים יוצרי סרטים, לתחרות רעיונית ישירה עם מפעל תוכנות הפרודוקטיביות.

האם מישהו באמת רוצה ממשקים המשתנים כל הזמן היא שאלה שהמסלול משאיר פתוח. מוסכמות תוכנה - עגלת הקניות, סרגל החיפוש, ציוד ההגדרות - קיימות כי הן ניתנות לחיזוי. ממשק שממציא את עצמו מחדש עבור כל משתמש מחליף את יכולת הניבוי הזו להתאמה, ונשאר לראות אם המשתמשים חווים את זה כקסם או כאוס.

מה שברור הוא כיוון הנסיעה. אותם דגמי עולם שנבנו כדי לדמות מציאות פיזית לווידאו מכוונים כעת למציאות התוכנה - ו-Runway מהמר שהממשק הבא לא מתוכנן כלל, אלא נוצר.

---

Stay Ahead of AI

Get the latest AI news, analysis, and breakthroughs — all in one place.

Read more AI news →