Apple раскрывает подробности функций Apple Intelligence нового поколения

Apple сегодня представила следующее поколение Apple Intelligence, добавив новые функции на базе искусственного интеллекта в приложения «Фото», «Сафари», «Пароли», Image Playground, «Сообщения», «Почта», «Телефон», «Календарь», «Быстрые команды», «Дом», а также в инструменты универсального доступа.

В компании заявляют, что новые функции доступны для тестирования разработчикам уже сегодня, а пользователям станут доступны этой осенью. Эта же архитектура Apple Intelligence нового поколения лежит в основе ИИ Siri, которую Apple выпускает для разработчиков прямо сейчас, а пользователям предоставит в виде бета-версии позднее в этом году.

Редактирование фотографий

В приложении «Фото» Apple добавляет новые инструменты редактирования на базе своих моделей обработки изображений. Функция пространственного переформирования (Spatial Reframing) позволяет пользователям изменять композицию фотографии после ее съемки путем сдвига перспективы с генерацией нового контента только там, где это необходимо.
Новый инструмент «Расширение» (Extend) позволяет увеличить изображение, чтобы добавить пространства вокруг объекта, выровнять горизонт или изменить соотношение сторон без обрезки важных частей фотографии. Apple сообщает, что функция «Очистка» (Clean Up) также была улучшена для более эффективного удаления лишних объектов с помощью качественного и реалистичного заполнения фона. Фотографии, отредактированные с помощью Apple Intelligence, будут содержать скрытый водяной знак SynthID, указывающий на то, что они были обработаны с использованием ИИ.

Сафари и Пароли

По информации Apple, браузер Safari получает инструменты, использующие Apple Intelligence и при этом сохраняющие конфиденциальность данных просмотров. Браузер может автоматически упорядочивать открытые вкладки по соответствующим темам, например группировать вкладки, посвященные планированию поездки на выходные.

Функция «Уведомить меня» (Notify Me) позволяет пользователям попросить Safari следить за изменениями на веб-странице, такими как поступление товара в продажу или снижение цен. Пользователи могут описать, за чем именно должен следить Safari, и браузер отправит уведомление, когда обнаружит соответствующее изменение.

Приложение «Пароли» теперь может автоматически исправлять слабые или скомпрометированные пароли одним касанием. По заявлению Apple, приложение использует Apple Intelligence и Safari для навигации по поддерживаемым веб-сайтам, входа в систему и обновления соответствующих учетных записей до надежных паролей.

В Safari также появляется функция «Опишите расширение» (Describe an Extension), которая позволяет пользователям создавать собственные расширения для браузера, просто описав желаемый результат. В Apple отмечают, что Safari может генерировать расширение прямо на панели инструментов — например, кнопку для сохранения и оценки рецептов.

Image Playground

Приложение Image Playground создается заново на базе новой генеративной модели, которая работает в среде Private Cloud Compute и способна создавать фотореалистичные изображения. Созданные изображения будут автоматически содержать скрытый водяной знак SynthID, идентифицирующий их как сгенерированные искусственным интеллектом.
Пользователи могут изменять изображения, описывая изменения или касаясь, обводя либо выделяя кистью объект для его перемещения или изменения размера. Image Playground также может генерировать изображения для «Сообщений», обоев экрана блокировки и постер-карточек контактов с возможностью выбора соотношения сторон для различных задач.

Сообщения, Почта, Телефон и Календарь

В «Сообщениях» появляются подсказки в одно касание, основанные на контексте беседы — например, создание напоминания или заметки. Если собеседник запрашивает фотографии, «Сообщения» могут предложить выполнить поиск по медиатеке «Фото» с использованием ключевых слов, мест и людей. По заявлению Apple, предложения в «Почте» также станут функциональнее и получат поддержку действий, работающих со сторонними приложениями.

Функция умного ответа (Smart Reply) в «Почте» и «Сообщениях» теперь может учитывать индивидуальный стиль письма пользователя.

В приложении «Телефон» функция контекста вызова (Call Context) может выводить на экран полезную информацию — например, код подтверждения или номер бронирования — во время звонка в компанию. В Apple подчеркивают, что система анализирует только то, кому звонит пользователь, а не содержание разговора, и работает полностью на самом устройстве.

«Календарь» позволяет добавлять или изменять события на основе описаний, составленных на естественном языке. По мере того как пользователь вводит текст, «Календарь» распознает контакты и места, а также формирует название для события.

Быстрые команды и Дом

В приложение «Быстрые команды» добавляется функция «Опишите команду» (Describe a Shortcut), способная превратить текстовое описание пользователя в готовую автоматизацию. В Apple отмечают, что пользователи могут вносить изменения с помощью описаний, если захотят скорректировать созданную команду. В качестве примеров приводятся установка утреннего будильника на основе первого события в календаре на следующий день, открытие рабочих приложений в определенном расположении окон при подключении iPad к клавиатуре Magic Keyboard или включение света на крыльце при получении уведомления о доставке еды.

В приложении «Дом» система Apple Intelligence может группировать связанные уведомления от аксессуаров в единую обновляемую активность. Для камер с поддержкой защищенного видео HomeKit (HomeKit Secure Video) приложение «Дом» может генерировать описания для различных фрагментов видео, искать на записях с камер определенные события — например, доставку посылок — и выводить наиболее примечательные фрагменты в верхней части поисковой выдачи.

Универсальный доступ и другие обновления

Apple сообщает, что функции универсального доступа также получают улучшения благодаря Apple Intelligence. Пользователям VoiceOver станут доступны более детальные описания изображений, а функция «Живое распознавание» (Live Recognition) позволит нажимать кнопку Action на iPhone, чтобы задавать вопросы об окружающем мире. Приложение «Лупа» получает аналогичные вспомогательные возможности исследования в высококонтрастном интерфейсе.

Пользователи голосового управления (Voice Control) смогут описывать экранные кнопки и элементы управления вместо того, чтобы запоминать точные метки или номера. Функция «Читалка универсального доступа» (Accessibility Reader) получит поддержку более сложных исходных материалов и сможет предоставлять сводки и перевод по запросу.

Среди других обновлений — автоматическая проверка орфографии на уровне системы, интеллектуальные предложения названий файлов и папок на основе их содержимого, улучшенное качество Genmoji, а также возможность описывать изменения для Genmoji. Функция Workout Buddy добавляет поддержку испанского языка, больше фитнес-данных для мотивационных инсайтов, а также поддержку на Apple Watch без необходимости находиться рядом с iPhone.

Архитектура и доступность

В Apple заявляют, что новые возможности используют базовые модели Apple Foundation Models нового поколения, созданные совместно с Google и ее моделями Gemini для интеграции возможностей Apple Intelligence. Модели работают как на самом устройстве, так и на серверах с использованием технологии Private Cloud Compute. По словам Apple, при обработке запросов через Private Cloud Compute персональные данные не сохраняются и не передаются ни самой Apple, а сторонние эксперты могут продолжать верификацию системы.

Новые функции доступны для тестирования начиная с сегодняшнего дня в рамках программы Apple Developer Program. Публичная бета-версия станет доступна в следующем месяце через программу Apple Beta Software Program, а пользователи поддерживаемых устройств с настроенным поддерживаемым языком получат к ним доступ этой осенью с выходом iOS 27, iPadOS 27, macOS 27, watchOS 27 и visionOS 27.

Apple Intelligence поддерживает английский, датский, нидерландский, французский, немецкий, итальянский, норвежский, португальский, испанский, шведский, турецкий, вьетнамский, упрощенный китайский, традиционный китайский, японский и корейский языки, хотя некоторые функции могут быть доступны не во всех регионах или не на всех языках.

Apple Intelligence в iOS 27, iPadOS 27, macOS 27, watchOS 27 и visionOS 27 будет доступна на моделях iPhone 16 и новее, iPhone 15 Pro, iPhone 15 Pro Max, iPad mini с процессором A17 Pro, моделях iPad с M1 или новее, MacBook Neo с процессором A18 Pro, моделях Mac с M1 или новее, Apple Vision Pro, Apple Watch Series 10 и новее, Apple Watch Ultra 2 и новее, а также Apple Watch SE 3 при сопряжении с находящимся поблизости iPhone с поддержкой Apple Intelligence.

Некоторые функции, включая генерацию изображений, имеют суточные лимиты использования, поскольку они зависят от серверных моделей. В Apple заявляют, что расширенный доступ предоставляется с большинством тарифных планов подписки iCloud+, которые также включают поддержку Apple Intelligence для совместимых камер Home.