Meta расширяет возможности Ray‑Ban Display: нейронное «рукописное» сообщение, запись экрана и инструменты для разработчиков

Функция работает вместе с Meta Neural Band — браслетом на запястье, который улавливает микродвижения руки и переводит их в текстовые команды.

Пользователь может буквально "писать" буквы пальцем — например, на столе или в воздухе — а система преобразует эти движения в напечатанный текст. По данным Meta, функция теперь поддерживается в основных мессенджерах, включая:

• Instagram
• WhatsApp
• Messenger
• стандартные приложения сообщений на Android и iOS

Это позволяет отвечать на сообщения не доставая смартфон, что является важным шагом к полноценному hands‑free взаимодействию с носимыми устройствами.

Запись дисплея: видео того, что видит пользователь

В обновлении также появилась функция display recording — запись того, что происходит в очках.

Видео объединяет сразу три источника:

• изображение с камеры (точку зрения пользователя)
• интерфейс и информацию на встроенном дисплее линзы
• звук окружающей среды

В результате получается одно готовое видео, которое показывает полный опыт использования очков, а не только сырой видеопоток камеры.

Это может быть полезно для создателей контента, разработчиков демонстраций приложений и обычных пользователей, которые хотят делиться моментами, снятыми от первого лица.

Субтитры в реальном времени

Meta также расширяет функцию Live Captions — автоматическую транскрипцию речи прямо на дисплее очков.

Текст появляется в поле зрения пользователя и помогает следить за разговором. Это особенно важно для людей с нарушениями слуха или в шумной среде.

Система может распознавать речь:

• в личных разговорах
• во время голосовых звонков

Функция поддерживается в звонках через WhatsApp, Messenger и Instagram.

Таким образом дисплей очков становится инструментом не только для уведомлений, но и для улучшения коммуникации и доступности.

Расширенная пешеходная навигация

Еще одно практическое улучшение — расширение функции пешей навигации.

Теперь она работает по всей территории США, а также поддерживает маршруты в крупных международных городах, включая:

• Лондон
• Париж
• Рим

Подсказки отображаются прямо на дисплее очков, поэтому пользователю не нужно постоянно смотреть на телефон.

В очки придет новый AI‑модуль Muse Spark

Meta также планирует интегрировать в экосистему очков свою более мощную модель искусственного интеллекта Muse Spark.

Модель должна сделать Meta AI более контекстной и естественной в диалогах, позволяя быстрее реагировать на вопросы и взаимодействовать с окружающей средой.

По сообщениям СМИ, Muse Spark появится в Ray‑Ban Display позже в этом году, что может существенно расширить возможности голосового помощника прямо в очках.

Developer Preview: открытие платформы для приложений

Одним из самых стратегически важных шагов стало открытие developer preview — раннего доступа для разработчиков.

Теперь они могут создавать приложения для дисплея очков двумя способами:

• расширять существующие мобильные приложения iOS или Android
• создавать веб‑приложения, адаптированные для интерфейса очков

Meta отмечает, что разработчики смогут использовать привычные инструменты и фреймворки для отображения контекстной информации прямо в поле зрения пользователя.

Это первый шаг к формированию экосистемы приложений для носимых устройств, подобной той, что когда‑то возникла вокруг магазинов приложений смартфонов.

Почему это важно для стратегии Meta

В совокупности обновление закрывает ключевые элементы, необходимые для полноценной платформы носимых вычислений:

• Ввод: нейронное «рукописное» управление жестами
• Вывод: визуальная информация на встроенном дисплее
• Контекст: камера и AI помогают анализировать окружающий мир
• Практичность: навигация, субтитры и мессенджеры для повседневных задач
• Экосистема: инструменты разработчикам для создания новых сервисов

Все это показывает, что Meta стремится превратить Ray‑Ban Display из экспериментального устройства в повседневный AI‑интерфейс, который буквально носится на лице. Благодаря новым способам ввода, развитию искусственного интеллекта и открытию платформы для сторонних разработчиков, умные очки постепенно начинают выглядеть как ранняя версия новой вычислительной платформы.