Накануне ежегодной конференции разработчиков Google во вторник Apple официально объявила о ряде новых улучшений специальных возможностей, основанных на Apple Intelligence, включая повествование, голосовое управление, распознавание в реальном времени, генерацию видеосубтитров в реальном времени и другие функции. Apple также заявила, что после запуска этого обновления пользователи Vision Pro смогут управлять адаптированной инвалидной коляской с помощью зрения.
Apple заявила, что функция повествования, оснащенная возможностями распознавания изображений Apple Intelligence, может более точно анализировать содержимое экрана и предоставлять подробные описания. Например, он может идентифицировать счета, автоматически передавать подробную информацию, такую как суммы и сроки годности, а также может более четко и подробно описывать фотографии и различные личные документы.
Теперь пользователи могут включить функцию распознавания в реальном времени с помощью iPhone, использовать камеру мобильного телефона для идентификации объектов на экране и продолжать запрашивать более актуальную информацию. Люди с плохим зрением могут настроить функцию усилителя на кнопки управления и использовать высококонтрастный интерфейс для просмотра контента. В то же время они могут быстро вызывать связанные функции с помощью голосовых команд, таких как увеличение экрана и включение вспышки.
Это обновление голосовых команд не ограничивается приложениями усилителей. Пользователи могут использовать естественный язык для описания своих потребностей и напрямую работать с содержимым, отображаемым на экране. Например, скажите «Нажмите, чтобы открыть путеводитель по высококачественным ресторанам» в Apple Maps или дайте такие команды, как «Открыть фиолетовую папку» в приложении «Файлы».
Apple также оптимизировала функцию чтения. Новая версия ридера позволяет легко обрабатывать сложные документы, такие как научные статьи с многоколоночной разметкой, иллюстрациями и таблицами.
Пользователи могут получать сводки контента, созданные искусственным интеллектом, а также читать исходный текст, сохраняя при этом собственные шрифты и настройки цвета. Оптимизированный ридер может адаптироваться к потребностям различных групп людей, например, людей с дислексией и плохим зрением.
Кроме того, Apple добавила функцию создания субтитров для видео с помощью искусственного интеллекта, которая может автоматически генерировать субтитры для видео без встроенных субтитров, включая видео, снятые локально на телефоне, видео, пересланные родственниками и друзьями и т. д. Эта функция подходит для всех платформ iPhone, iPad, Mac, AppleTV и Apple Vision Pro. Пользователи также могут настроить стиль отображения субтитров.
Apple также анонсировала новое адаптационное решение: пользователи Vision Pro могут управлять совместимыми инвалидными колясками с помощью зрения. Эта функция может стабильно работать в различных условиях освещения без повторной калибровки. Эта функция является первой, адаптированной к интеллектуальным приводным системам Tolt и LUCI в США, и поддерживает методы Bluetooth и проводного подключения периферийных устройств.
Apple упомянула, что функция напоминания о распознавании имени для людей с нарушениями слуха теперь поддерживает 50 языков. Когда кто-то называет имя пользователя, устройство вовремя напомнит ему; ТВ-система также запустит режим отображения крупного шрифта. В то же время слуховой аппарат, настроенный для iPhone, еще больше оптимизирует процесс ретрансляции между устройствами.
Apple заявила, что вышеупомянутые новые специальные возможности будут официально представлены позднее в этом году и, скорее всего, будут запущены вместе с новой системой iOS27.