Apple представляет функции универсального доступа на базе ИИ и управление Vision Pro для инвалидных колясок

Apple анонсировала масштабное расширение функций универсального доступа во всей своей линейке устройств: позднее в этом году в VoiceOver, «Лупу», «Управление голосом» (Voice Control) и Accessibility Reader появятся новые инструменты на базе Apple Intelligence. Обновления также привносят новую функцию для Apple Vision Pro, позволяющую пользователям управлять совместимыми электрическими инвалидными колясками с помощью отслеживания движений глаз, наряду с генерацией субтитров прямо на устройстве для видео без субтитров.

Для пользователей с полной или частичной потерей зрения функции VoiceOver и «Лупа» получили существенные улучшения. Новый инструмент Image Explorer («Исследователь изображений») использует Apple Intelligence для предоставления детальных системных описаний визуального контента — от личных фотографий до отсканированных счетов и чеков. Обновления функции «Живое распознавание» (Live Recognition) интегрируются напрямую с кнопкой Action (Действие) на поддерживаемых моделях iPhone. Это позволяет пользователю навести камеру на объект или сцену, задать вопрос о том, что находится в видоискателе, и получить подробный звуковой ответ. Пользователи также могут задавать уточняющие вопросы для получения более специфического визуального контекста.

«Лупа» также получила аналогичные инструменты генеративного анализа и теперь поддерживает голосовые запросы, позволяя пользователям просто произносить команды вроде «приблизить» или «включить фонарик».

Навигация также становится значительно интуитивнее благодаря обновлениям функции «Управление голосом». Вместо того чтобы заставлять пользователей запоминать точные названия кнопок или номера сетки, система теперь понимает описания элементов на экране на естественном языке. Пользователь, работающий со сложным или плохо размеченным интерфейсом, может просто сказать то, что он видит, отдав устройству команду «нажать на гид по лучшим ресторанам» или «нажать на фиолетовую папку». Этот гибкий метод ввода призван помочь пользователям с физическими ограничениями ориентироваться в приложениях, даже если элементы интерфейса должным образом не помечены для универсального доступа.

Apple также улучшает возможности чтения для людей с дислексией или слабым зрением. Reader для универсального доступа был обновлен для обработки очень сложных исходных материалов, легко справляясь с научными статьями, содержащими несколько колонок, встроенные изображения и таблицы данных. Он может создавать краткие сводки по запросу, чтобы читатель мог уловить основные концепции статьи перед чтением полного текста. Новый встроенный инструмент перевода позволяет пользователям читать тексты на иностранных языках на родном языке, не теряя при этом оригинальное пользовательское форматирование, шрифты или цвета.

Потребление медиаконтента получает практическое обновление благодаря внедрению генерируемых субтитров. Хотя профессиональный потоковый контент обычно включает скрытые субтитры, субтитры для разговорной речи редко доступны в личных видео, записанных на iPhone, клипах, публикуемых в социальных сетях, или других онлайн-видео без субтитров. Новая система использует технологию распознавания речи на устройстве для автоматической расшифровки разговорной речи в таких роликах. Поскольку обработка происходит локально на устройстве, генерация субтитров остается конфиденциальной, обеспечивая вывод текста в реальном времени на iPhone, iPad, Mac, Apple TV и Vision Pro.

Помимо программного обеспечения, Apple расширяет границы своего оборудования для пространственных вычислений, позволяя гарнитуре Vision Pro управлять электрическими инвалидными колясками. Функция, разработанная для пользователей, которые не могут управлять традиционным джойстиком, использует высокоточные камеры гарнитуры для отслеживания движения глаз в качестве альтернативного элемента управления движением. Apple отмечает, что система надежно работает в различных условиях освещения и не требует частой калибровки. На момент запуска эта возможность будет поддерживать Bluetooth- и проводные соединения для альтернативных систем управления Tolt и LUCI в Соединенных Штатах, с планами по расширению совместимости с другими производителями в будущем.

Что касается аксессуаров, Apple объединила усилия с дизайнером Бэйли Хикава (Bailey Hikawa) и компанией PopSockets для выпуска держателя и подставки Hikawa Grip & Stand для iPhone. Доступный уже сейчас в Apple Store, этот адаптивный аксессуар с поддержкой MagSafe был создан в сотрудничестве с сообществами людей с ограниченными возможностями, чтобы помочь пользователям с нарушениями хвата или подвижности. Apple также анонсировала несколько небольших улучшений универсального доступа на своих платформах. Vision Pro получает функцию «Метки движения в транспорте» (Vehicle Motion Cues), помогающую снизить проявления укачивания у пассажиров движущегося транспорта, а также новые элементы управления жестами лица и дополнительные функции взаимодействия на основе движений глаз. В Apple TV появится поддержка более крупного текста на экране, в то время как пользователи с физическими двигательными нарушениями смогут подключать и настраивать контроллер Sony Access для игр на iPhone, iPad и Mac.

Apple заявляет, что новые функции универсального доступа и интеграции с Apple Intelligence станут доступны на поддерживаемых устройствах позднее в этом году.