Runway는 회사가 "인터페이스 월드 모델"이라고 부르는 새로운 범주의 첫 번째 모델인 Solaris를 공개했습니다. 이는 코드를 실행하는 대신 프레임별로 라이브로 사용자 인터페이스를 생성하는 AI 시스템입니다. 디자인을 앱으로 변환하는 대신 Solaris는 인터페이스 자체를 720p로 렌더링하고 상호 작용할 때 클릭, 드래그 및 음성 명령에 직접 응답합니다.
The Decoder에서 자세히 다룬 이 발표는 소프트웨어가 일반적으로 작동하는 방식에서 급격한 변화를 나타냅니다. 오늘날 운영 체제는 화면에서 일어나는 일을 결정하며 개발자가 업데이트를 제공할 때까지 앱은 동일하게 유지됩니다. 솔라리스는 그 반대를 제안합니다. 즉, 생성되는 동안에만 존재하고 이를 사용하는 사람에게 지속적으로 적응하는 인터페이스를 제안합니다. 이 이야기에 대한 자세한 내용은 AI 뉴스를 참조하세요.
인터페이스 세계 모델의 작동 방식
Solaris는 Runway의 Gen-4.5 비디오 모델을 기반으로 구축되었으며 회사가 초기 범용 월드 모델인 GWM-1로 시작한 방향을 따릅니다. 내부적으로는 두 시스템이 협력합니다. 언어 모델은 사용자가 수행하는 작업에 따라 인터페이스가 어떻게 변경되어야 하는지 결정하고, 월드 모델은 각 프레임을 렌더링합니다.
결과는 앱처럼 보이고 작동하지만 전통적인 의미에서는 아무것도 실행되지 않습니다. 레이아웃 파일, 프런트엔드 코드, 컴파일된 바이너리가 없습니다. 단지 마지막 클릭을 기반으로 다음 프레임을 생성하는 생성 모델만 있을 뿐입니다.
사용 사례 활주로가 피칭 중입니다.
Runway에는 생성된 인터페이스가 고정된 인터페이스를 대체할 수 있는 여러 시나리오가 나열되어 있습니다.
온라인 쇼핑에서는 매장 자체가 인터페이스가 됩니다. 쇼핑객은 정적인 제품 그리드를 탐색하는 대신 셔츠를 자신의 사진 위로 드래그하여 입어볼 수 있습니다. 상점은 더 이상 모든 방문자가 똑같이 보는 고정된 레이아웃이 아니라 각 사용자에게 적응되는 환경이 될 것입니다.
제품 시각화의 경우 피치는 객체를 대화식으로 조작하는 것입니다. "테이블을 이동하세요" 또는 "소파 색상을 변경하세요"라고 말하면 장면이 즉시 반응합니다. Runway는 변화를 상상하는 것보다 눈으로 보는 것이 가구 쇼핑과 인테리어 계획에 딱 맞는 모습을 보여줍니다.
회사는 또한 튜토리얼과 학습을 강조합니다. 텍스트로 응답하는 챗봇 대신 Solaris는 시각적으로 다음 단계를 맥락에 따라 보여줄 수 있습니다. 회사의 예는 관련 재료에 따라 변경되는 연소 시연입니다.
Runway의 더 큰 주장: 앱이 사라집니다
데모 아래에는 도발적인 논문이 있습니다. 런웨이는 소프트웨어의 고정 단위인 '앱'이 사라질 것이라고 주장한다. 오늘 작업을 완료한다는 것은 사전 구축된 올바른 애플리케이션(쇼핑용, 메시지용, 예약용)을 여는 것을 의미합니다. 운영 체제가 요구에 따라 올바른 인터페이스를 생성할 수 있다면 소프트웨어를 고정된 카탈로그로 분류할 이유가 훨씬 적어진다는 것입니다.
이 기술에 대한 2차 독자층은 바로 AI 에이전트입니다. Runway는 에이전트가 고정 레이아웃에 대해 교육을 받고 실제 웹 사이트가 레이아웃에서 벗어날 때 비틀거리기 때문에 호텔 예약과 같은 작업에서 여전히 실패한다고 지적합니다. 생성되고 모델이 이해하는 인터페이스 내에서 작동하는 에이전트는 이러한 취약성에 직면하지 않을 것입니다. Runway는 인터페이스 세계 모델을 에이전트를 위한 훈련장으로 명시적으로 구성합니다.
중요한 점: 텍스트, 신뢰성 및 접근성
현재로서는 심각한 문제로 인해 Solaris가 연구 칼럼에 확고하게 자리잡고 있습니다.
안정적이고 읽기 쉬운 텍스트는 생성 비디오 모델에서 여전히 어려운 문제로 남아 있으며 인터페이스는 텍스트로 가득 차 있습니다. 버튼, 가격, 주소 및 검색 필드는 모두 정확한 문자열에 따라 달라지며 환각에 빠진 캐릭터는 깨진 제품입니다.
긴 세션과 신뢰성 역시 공개 질문입니다. 디코더는 미묘하지만 심각한 위험을 지적합니다. 생성된 인터페이스가 잘못되었지만 설득력 있게 보이는 것은 인터페이스가 전혀 없는 것보다 더 나쁠 수 있습니다. 왜냐하면 사용자는 렌더링된 가격과 실제 가격의 차이를 알 수 없기 때문입니다.
접근성은 또 다른 해결되지 않은 문제입니다. 생성된 인터페이스에는 보조 기술을 읽을 수 있는 기본 구조가 없으므로 시각 장애인이 소프트웨어를 탐색하는 주요 방법인 스크린 리더는 사용할 수 없습니다.
지금은 연구하세요
Runway는 Solaris를 제품으로 배송하지 않습니다. 회사는 출시를 위한 파트너를 찾고 있으며 등록 양식을 통해 조기 액세스를 제공하여 프로그래밍이 아닌 인터페이스가 생성될 때 소프트웨어가 어떤 모습일 수 있는지 탐색하는 시스템으로 포지셔닝합니다.
타이밍은 우연이 아닙니다. 세계 모델은 로봇 공학, 게임 및 비디오 생성을 위한 현실적인 환경을 시뮬레이션하기 위해 경쟁하는 주요 연구실을 통해 카테고리로서 빠르게 성숙해졌습니다. 소프트웨어 표면에서 동일한 기계를 가리키는 것은 자연스러운 확장이며, 영화 제작자가 사용하는 비디오 생성 도구로 가장 잘 알려진 Runway를 생산성 소프트웨어 확립과 직접적인 개념 경쟁으로 두는 것입니다.
실제로 계속 변화하는 인터페이스를 원하는 사람이 있는지 여부는 Runway가 열어둔 질문입니다. 장바구니, 검색 창, 설정 도구 등 소프트웨어 규칙은 예측 가능하기 때문에 존재합니다. 모든 사용자를 위해 스스로를 재창조하는 인터페이스는 예측 가능성과 적응성을 맞바꾸며, 사용자가 이를 마법처럼 경험할지 아니면 혼돈으로 경험할지는 두고 볼 일입니다.
분명한 것은 여행의 방향이다. 비디오의 물리적 현실을 시뮬레이션하기 위해 구축된 동일한 세계 모델은 이제 소프트웨어 현실을 가리키고 있으며 Runway는 다음 인터페이스가 전혀 설계되지 않고 생성될 것이라고 확신합니다.
---
AI 최신 소식최신 AI 뉴스, 분석 및 혁신을 한 곳에서 확인하세요.
AI 뉴스 더 보기 →