Apple добавляет искусственный интеллект в Vision Pro: что нового в visionOS 2.4

Apple расширяет возможности Vision Pro, добавляя функции искусственного интеллекта в грядущем обновлении операционной системы. Компания подтвердила, что её платформа генеративного ИИ Apple Intelligence появится на гарнитуре расширенной реальности в составе visionOS 2.4. Бета-версия программного обеспечения уже доступна разработчикам, а публичный релиз запланирован на апрель.

Как и в случае с iPhone и Mac, обновления Apple Intelligence для Vision Pro будут выпускаться поэтапно. Первый набор включает несколько знакомых функций, в основном сосредоточенных на генерации текста и изображений. Компания рассматривает добавление таких возможностей, как переписывание, проверка орфографии и изложение текста, в качестве ключевых компонентов для работы непосредственно на устройстве.

Apple с самого начала позиционировала Vision Pro как устройство для «пространственных вычислений». Несмотря на наличие функций для видео, игр и других развлечений, компания стремится выделить систему среди предшественников в области расширенной реальности, представляя её как продолжение настольных вычислений или, как охарактеризовал TechCrunch в своём обзоре, «бесконечный рабочий стол».

На данный момент набор текста на гарнитуре является неоднозначным процессом. Стандартный метод ввода требует от пользователя смотреть на букву и затем сжимать два пальца вместе для её выбора. Хотя это и реализовано хорошо, такой способ становится неудобным при необходимости написать более одного-двух слов. Голосовой ввод частично решает эту проблему, а недавнее усовершенствование Siri с помощью ИИ обещает улучшить возможности голосового помощника на Vision Pro в будущем.

Apple рассчитывает, что сочетание голосового ввода и инструментов генеративного ИИ для написания текста обеспечит более плавный опыт использования и убедит большее количество пользователей Vision Pro интегрировать гарнитуру в свои рабочие процессы. Как минимум, такие функции, как ввод сообщений и умные ответы на электронную почту, упрощают взаимодействие с различными приложениями, не отвлекая пользователя от текущей задачи.

Другим дополнением является Image Playground, который привносит генерацию изображений в рамках обновления visionOS 2.4. Эта функция интегрирована непосредственно в приложение Photos для visionOS, позволяя пользователям создавать изображения с помощью голосовых команд.

Вместе с visionOS 2.4 Apple также выпустила приложение Vision Pro для iPhone, которое появится в iOS 18.4, также находящейся в стадии бета-тестирования. Приложение служит нескольким целям. Прежде всего, оно позволяет просматривать контент для visionOS, такой как телешоу и фильмы, который затем можно перенести на гарнитуру. Эта функция, по-видимому, является частичным ответом на ограничения, связанные с ношением гарнитуры, как с точки зрения личного комфорта, так и времени работы от батареи.

Когда iPhone разблокирован и находится поблизости от гарнитуры, новое приложение также можно использовать для управления гостевыми учётными записями. Vision Pro будет уведомлять владельца, когда кто-то пытается войти в систему в качестве гостя. Через новое приложение также доступно потоковое изображение того, что видит гость в гарнитуре.