Runway Solaris: приложения, которые генерируются кадр за кадром

Runway предлагает переосмыслить сам принцип работы приложений. Вместо того чтобы загружать заранее запрограммированный интерфейс с набором предусмотренных экранов, Solaris непрерывно генерирует то, что пользователь видит на дисплее. Каждый клик, жест перетаскивания, ввод текста или описание желаемого действия становится условием для создания следующего визуального состояния. 38

Поэтому Solaris — не просто конструктор приложений без кода. Runway пытается применить к интерфейсам подход world model — модели мира, которая воспринимает экран как развивающуюся визуальную среду, а не как результат выполнения фиксированной программной реализации.

Что такое Runway Solaris

Runway представила Solaris 31 августа как экспериментальную Interface World Model, то есть «модель мира для интерфейсов». Её ключевая идея — отказаться от привычной цепочки: разработчик пишет HTML, CSS и JavaScript, а браузер отображает результат. Вместо этого система сразу генерирует видимую часть интерфейса.

Работа может начинаться с визуального образца — например, изображения продукта, предметной сцены или фирменной среды. Затем модель формирует вокруг него интерфейс и меняет сцену по мере взаимодействия. Разработчику не обязательно заранее описывать каждое состояние приложения отдельным экраном: Solaris пытается самостоятельно синтезировать то, что должно появиться дальше.

Такой подход особенно важен для визуально насыщенных интерфейсов. При переводе изображения или сложной сцены в код часть исходной информации может потеряться. Solaris, напротив, оставляет визуальную сцепленность сцены главным результатом генерации — по замыслу Runway, это должно помогать сохранять более естественное поведение во время взаимодействия.

Как Solaris создаёт интерактивный интерфейс

Система разделяет две задачи: понимание намерения пользователя и визуализацию результата.

1. Пользователь задаёт команду или совершает действие. Это может быть клик по объекту, перетаскивание элемента, ввод текста или просьба изменить сцену на естественном языке.
2. Языковая модель интерпретирует намерение. Она определяет, что должно произойти дальше, нужно ли изменить текущую сцену и как описать требуемое поведение визуальной модели. 38
3. Модель мира интерфейса создаёт новое состояние. Вместо готовой веб-страницы Solaris генерирует следующий визуальный кадр с учётом действия и предыдущих кадров.
4. Цикл повторяется. Каждое новое действие становится частью контекста для следующих кадров, поэтому интерфейс может развиваться непрерывно, а не переключаться между заранее подготовленным набором экранов.

Визуальная часть Solaris построена на технологии генерации видео Runway Gen-4.5. Документация Runway описывает Gen-4.5 как модель для преобразования текста или изображения в видео; Solaris использует эту основу в интерактивном авторегрессионном режиме. 46

Что должно обеспечить работу в реальном времени

Создавать новое визуальное состояние после каждого действия значительно сложнее, чем сгенерировать короткий видеоролик. Поэтому Solaris использует несколько методов, призванных сократить задержку и сохранить качество при длительной сессии.

Последовательная генерация кадров

Кадры создаются авторегрессионно: каждый следующий зависит от предыдущих. Благодаря этому после действия пользователя система продолжает текущую сцену, а не начинает несвязанную генерацию с нуля.

Ускорение через дистилляцию

Runway сообщает, что переносит знания медленной диффузионной модели — «учителя» — в более быструю модель, которой требуется лишь небольшое число шагов шумоподавления. Цель такого подхода — снизить вычислительные затраты на каждый ответ, сохранив приемлемое качество для интерактивного режима.

Обучение на собственных результатах

Компания также сообщает, что обучала быструю модель на созданных ею же результатах. Это должно уменьшить ухудшение качества в длинной цепочке зависимых кадров, где небольшие ошибки со временем могут накапливаться.

Runway называет среди целевых показателей задержку взаимодействия менее примерно половины секунды, согласованность на протяжении всей сессии и визуальное качество на уровне 720p. Это исследовательские ориентиры, а не гарантия того, что каждый сценарий Solaris будет соответствовать им.

Как Solaris сравнивали с интерфейсами, созданными кодом

Runway сообщает об исследовании с участием 250 человек и примерно 7 500 парных оценок по 30 примерам взаимодействия. Участники сравнивали интерфейсы Solaris с интерфейсами, созданными в виде кода с помощью Claude Opus 5.

Согласно опубликованным Runway результатам, участники выбирали Solaris:

• в 61% случаев — за следование инструкции;
• в 71% случаев — за естественность поведения.

Эти цифры указывают, что в некоторых сценариях с визуальным взаимодействием сгенерированный интерфейс может восприниматься как более цельный или интуитивный. Но они не доказывают, что Solaris в целом лучше традиционного программного обеспечения. Исследование оценивает субъективное восприятие взаимодействия, а не надёжность, корректность, безопасность, стоимость, сопровождаемость, производительность или доступность. В предоставленных материалах также нет независимого подтверждения полной методологии и статистического анализа исследования.

Главные ограничения Solaris

Та же технология, которая придаёт Solaris гибкость, создаёт серьёзные инженерные и продуктовые проблемы.

Текст остаётся нестабильным

Разборчивый и точный текст — давняя проблема генерации изображений и видео в реальном времени. Интерфейс может выглядеть убедительно, но при этом неправильно отображать подписи, числа, пункты меню или инструкции. Runway называет генерацию текста нерешённой задачей и рассматривает возможный гибридный вариант: использовать модели изображений для насыщенных текстом статичных эпизодов, а видеомодели — для непрерывного взаимодействия.

Убедительный интерфейс может ошибаться

Визуально правдоподобный экран не означает, что содержащаяся в нём информация достоверна. Сейчас Solaris в основном опирается на исходное изображение и предоставленные reference-материалы, поэтому может уверенно показать неправильный ответ, характеристику продукта или визуальное представление. Runway относит к дальнейшим направлениям исследований работу с проверенными данными, документами и более богатым набором источников.

Длинные сессии могут нарушать целостность сцены

Каждое состояние зависит от цепочки ранее сгенерированных состояний и решений модели. Поэтому при открытом и продолжительном использовании ошибки могут накапливаться. Сохранение согласованности сцены, свойств объектов, инструкций и истории взаимодействий на протяжении долгой сессии остаётся активной исследовательской задачей.

Генерация каждого кадра требует ресурсов

Обычный сайт передаёт устройству код и медиаресурсы, после чего браузер отрисовывает страницу. Solaris постоянно выполняет генеративную работу, чтобы создать видимый результат. Runway утверждает, что её оптимизации делают этот процесс существенно дешевле стандартной диффузии видео, однако генерация кадр за кадром всё равно требует больше вычислений, чем показ фиксированной кодовой страницы. Заявленная цель прототипа по качеству изображения — 720p.

Доступность и интеграция с программами пока не решены

Одно сгенерированное изображение не предоставляет автоматически структурированную семантику, на которую рассчитывают программы экранного доступа и другие вспомогательные технологии. У него также нет встроенного предсказуемого состояния, структуры событий и проверяемого интерфейса, необходимых многим программным системам.

Аналитики называют отсутствие обычного DOM и слоя доступности одним из главных препятствий для использования такого подхода в системах, где особенно важны доступность, аудит и воспроизводимость.

Доступен ли Solaris

Solaris представили как экспериментальное исследование, а не как широко доступную production-платформу для создания приложений. По опубликованным сообщениям, речь идёт о предварительном доступе или доступе по запросу, а не о полноценном публичном продукте-конструкторе.

Поэтому сегодняшнее значение Solaris прежде всего концептуальное и исследовательское. Проект демонстрирует возможное направление развития интерфейсов, но пока не подтверждает, что команды смогут использовать его как готовую замену приложениям, созданным обычными инженерными методами.

Чем Solaris отличается от GWM-1

Solaris связан с более широкой программой Runway по созданию моделей мира, но решает другую задачу. Компания описывает GWM-1 как универсальный симулятор реального времени для окружений, аватаров и роботизированных манипуляций. Solaris переносит ту же идею на программные интерфейсы: «миром» становится приложение или сайт, а действия пользователя управляют его развитием. 12

В этом смысле Solaris расширяет фокус Runway — от генерации медиа к созданию интерактивных визуальных сред. Интерфейс здесь не просто видео для просмотра: это сцена, которая реагирует на действия и заново генерируется по мере продолжения взаимодействия.

Почему Runway считает проект важным

Новый путь к созданию программ

Если такой подход станет достаточно надёжным, авторы смогут описывать визуальную среду, продукты, цели и правила поведения на естественном языке, не реализуя вручную каждый возможный сценарий. Это особенно интересно для пространственных, визуальных и исследовательских интерфейсов, где обычные сетки и фиксированные макеты могут быть слишком ограничивающими.

Цена гибкости — отказ от части явной программной логики в пользу генерации. Для production-софта всё равно потребуются предсказуемость, тестируемость, целостность данных, доступность и интеграция с другими системами. Пока Solaris не показала, что способна заменить традиционные инженерные практики в этих областях.

Новый слой взаимодействия для ИИ-агентов

Solaris также указывает на возможный способ работы ИИ-агентов с незнакомыми визуальными средами. Вместо полной зависимости от фиксированных API или жёстко заданных сценариев агент мог бы воспринимать интерфейс как динамический мир: совершать действие, наблюдать за новым состоянием и продолжать работу на его основе.

Это особенно важно для агентов, которым приходится взаимодействовать с интерфейсами, не рассчитанными на известную схему автоматизации. Но пока это исследовательское направление. Надёжные структурированные API и обычные доступные интерфейсы сохраняют существенные преимущества там, где нужны аудит, точность и воспроизводимое выполнение операций.

Главное

Solaris стоит воспринимать как исследовательский прототип генеративных программных интерфейсов, а не как конец эпохи программного кода. Её главная идея заключается в том, что интерфейс становится непосредственным результатом работы модели: это последовательность сгенерированных ИИ кадров, управляемая языковой моделью и действиями пользователя.

Исследование Runway показывает, что людям иногда больше нравится такой способ взаимодействия — прежде всего с точки зрения естественности и следования инструкциям. Но точность текста, достоверность информации, согласованность длинных сессий, стоимость генерации, доступность и интеграция — это не второстепенная полировка, а базовые требования к продукту. Solaris наглядно показывает, каким может стать интерфейсный world model, и одновременно объясняет, почему обычный код пока так трудно заменить.