Apple на шаг приблизила будущее: голосовой помощник Siri теперь сможет просматривать содержимое экрана на iPhone и взаимодействовать с ним! Благодаря новому API под названием App Intent, Siri можно попросить ответить на вопросы. Например, спросить, что изображено на фото или о чем эта статья. Ассистент увидит контент на экране и сможет отправить его в ChatGPT.
Эта функция уже доступна во второй бета-версии iOS 18.2 и будет в стабильной версии, выход которой ожидается в декабре. С ее помощью Siri сможет «видеть» текст, изображения и другие данные на экране iPhone, анализировать их и, при запросе пользователя, пересылать нужные данные в другие приложения для более сложной обработки.
Пока что эта функция доступна только на английском языке и не работает в России, но Apple уже предоставила API разработчикам, чтобы те могли подготовить свои приложения к официальному релизу iOS 18.2.
Источник фото: apple.com
