В iOS 18 Visual Intelligence работала только с камерой, но в iOS 26 ее возможности значительно расширились — да-да, скоро опции Apple будут напоминать волшебное зеркало из сказок. Теперь можно сделать скриншот экрана и использовать Visual Intelligence для идентификации объектов, поиска изображений и получения дополнительной информации через ChatGPT.
«Спросите и найдите»: что нового появилось в Visual Intelligence на iOS 26
В iOS 26 функция Visual Intelligence получила несколько новых плюшек — теперь она более конкурентоспособна на рынке. Теперь она работает не только с камерой, но и с содержимым экрана.
www.macrumors.com
Так что же нового?
Чтобы воспользоваться Visual Intelligence для скриншотов, нужно сделать снимок экрана (зажать кнопку увеличения громкости и боковую кнопку), выйти из интерфейса разметки, если он отображается, и выбрать нужные опции.
Функция Highlight to Search позволяет проводить поиск по изображению конкретного объекта на скриншоте, даже если на нем изображено несколько предметов. Хотя стандартным поисковым движком остается Google Images, Apple намеренно показала, что ее технология не привязана к одному сервису. Во время демонстрации функция уверенно работала, к примеру, с Etsy.
Новая версия Visual Intelligence умеет не просто анализировать изображения, а интеллектуально распознавать отдельные элементы на них. Просто нажмите на любой выделенный объект — и система мгновенно предоставит о нем информацию.
Хотя технология напоминает функцию распознавания объектов в приложении «Фото», здесь есть принципиальное отличие:
- Интерактивность: можно взаимодействовать с каждым распознанным элементом
- Глубокая интеграция: система не просто идентифицирует объект, а сразу запускает визуальный поиск по нему
- Контекстное понимание: анализирует связь между объектами на изображении
Если нет необходимости выделять один объект на скриншоте, можно просто нажать на кнопку Ask, чтобы задать вопрос о том, что вы видите. Вопросы будут передаваться в ChatGPT, который предоставит информацию. Кнопка Search запрашивает дополнительную информацию в Google Search.
Кроме того, Visual Intelligence теперь поддерживает быстрое распознавание новых типов объектов, таких как:
- Искусство
- Книги
- Достопримечательности
- Природные объекты
- Скульптура
К слову, раньше функция могла предоставлять информацию о животных и растениях.
Если использовать Visual Intelligence для объекта, который она может распознать, появится небольшая светящаяся иконка. Нажав на нее, можно увидеть информацию о том, что находится в поле зрения. Эта опция работает как с живым видом с камеры, так и с сделанным снимком.
Visual Intelligence доступна только на устройствах, поддерживающих Apple Intelligence, включая модели iPhone 15 Pro и iPhone 16. Она активируется длительным нажатием на кнопку управления камерой на устройствах с управлением камерой, или с помощью кнопки действия или переключения в центре управления.
iOS 26 сейчас находится на стадии бета-тестирования, но официальный релиз состоится уже осенью.