Solaris: 첫 인터페이스 월드 모델 공개

Runway가 화면을 프레임 단위로 생성하면서 클릭·드래그·텍스트 입력에 실시간 반응하는 ‘인터페이스 월드 모델’ Solaris를 공개했다. 정해진 화면과 코드 대신 생성 모델이 인터페이스와 상호작용을 함께 만든다는 연구 발표다.

Runway의 Solaris는 화면을 미리 만들어 둔 페이지들의 집합으로 다루지 않는다. 사용자가 클릭하거나 드래그하고 문장을 입력할 때마다 다음 프레임을 생성해, 시각적 장면과 그 안의 반응을 함께 이어 가는 ‘인터페이스 월드 모델’로 소개됐다. 회사는 이를 통해 앱과 웹사이트의 화면이 고정된 구현물이 아니라 실시간으로 변화하는 인터랙티브 환경이 될 수 있다고 설명한다.

공개 사례는 메뉴를 고르는 방식보다 장면 속 대상에 직접 작용하는 방식을 보여 준다. 가상 의류 매장에서는 사용자가 셔츠를 집어 자신의 모습 위로 옮겨 입어 보고, 가구가 있는 공간에서는 테이블을 옮기거나 소파 색을 바꾸도록 지시할 수 있다. 샐러드를 만드는 장면에서는 재료를 그릇으로 끌어다 놓는 행동이 다음 상태를 만든다. Solaris는 이런 입력을 다음 프레임의 조건으로 사용한다.

기술적으로 Solaris는 Runway의 Gen-4.5 비디오 생성 모델을 바탕으로 상호작용 이해와 실시간 응답에 맞춰 조정됐다. Runway는 프레임을 순차적으로 생성하는 자기회귀 방식, 여러 단계의 확산 과정을 소수 단계로 줄이는 증류, 장시간 상호작용에서 품질을 유지하기 위한 자체 출력 학습을 결합했다고 밝혔다. 언어 모델은 사용자의 요청을 해석하고 장면 변화의 방향을 정하며, Solaris는 그 결과를 시각적으로 렌더링하는 역할을 맡는다.

다만 현재 강점은 주변의 지속적 움직임, 클릭·드래그, 장면 전환에 있으며, 안정적이고 읽기 쉬운 텍스트 생성, 긴 세션의 시각·의미 일관성, 접근성 기술 및 기존 소프트웨어 스택과의 통합은 남은 과제로 제시됐다. Runway는 파트너들과 공개 출시를 준비 중이며 얼리 액세스 신청을 받고 있다.

Maru