Как использовать Click to Do для выполнения действий с использованием ИИ для текста и изображений в Windows 11

В Windows 11 функция «Click to Do» — это инструмент искусственного интеллекта, разработанный для быстрого выполнения различных действий в зависимости от содержимого экрана. Он распознает текст и изображения, на которые вы нажимаете, и предлагает соответствующие контекстные действия. В этом руководстве я опишу шаги по началу использования этой функции на вашем ПК с Copilot+.

Что такое Click to Do в Windows 11?

Функция Click to Do позволяет быстрее выполнять действия, основываясь на содержимом экрана, как внутри, так и вне функции Windows Recall .

Эта функция работает следующим образом: делается снимок экрана, и с помощью искусственного интеллекта анализируется и распознается текст и изображения, на основе которых можно выполнить какие-либо действия. Однако она не определяет содержимое текста и изображения.

Кроме того, Click to Do может видеть только приложения, находящиеся на экране, а не те, которые свернуты и не отображаются.

Анализ скриншотов выполняется локально на компьютере, и их содержимое покинет ваш компьютер только тогда, когда вы решите выполнить действия, требующие подключения к интернету, например, поиск в сети или обращение к Copilot.

Важно отметить, что действия, которые вы можете выполнить с помощью функции Click to Do, доступны в зависимости от выбранного элемента, возможностей устройства и вашего региона, поскольку не все опции доступны на каждом рынке.

Функция Click to Do доступна в режиме предварительного просмотра через каналы Release Preview, Beta и Dev программы Windows Insider, но официально она станет доступна с обновлением Windows 11 May 2025 Update .

Каковы системные требования?

Функция Click to Do — это эксклюзивная функция для ПК Copilot+, оснащенных нейронным процессором (NPU) с производительностью более 40 TOPS, минимум 16 ГБ оперативной памяти, восемью ядрами процессора и твердотельным накопителем объемом не менее 256 ГБ.

Эта функция будет доступна только для ПК Copilot+ с новейшими процессорами Qualcomm, такими как серия Snapdragon X, и новейшими чипами искусственного интеллекта от AMD и Intel, поскольку для их работы требуется нейронный процессор с производительностью не менее 40 TOPS.

На обычных компьютерах включить эту функцию не удастся.

В этом руководстве я расскажу, как начать использовать функцию Click to Do в Windows 11.

Как использовать функцию Click to Do в Windows 11

Прежде чем начать использовать функцию Click to Do, необходимо подтвердить и включить ее вручную (при необходимости), после чего вы сможете выполнять действия на основе элементов на экране.

Включить функцию «Кликни и выполни» в Windows 11

Чтобы включить (или отключить) функцию «Click to Do» на вашем компьютере с Copilot+, выполните следующие действия:

1. Откройте «Параметры» в Windows 11.

    

    

2. Нажмите на «Конфиденциальность и безопасность» .

3. Нажмите на страницу «Что нужно сделать ».

   

4. (Вариант 1) Включите переключатель « Click to Do» , чтобы активировать функцию ИИ.

   

5. (Вариант 2) Выключите переключатель « Click to Do», чтобы отключить функцию ИИ.

   

После выполнения этих шагов вы сможете начать использовать функцию искусственного интеллекта для выполнения различных действий в зависимости от выбранного контента, отображаемого на экране.

Доступ к Click to Do вне функции вызова

Доступ к функции искусственного интеллекта можно получить несколькими способами. Например, вы можете:

• Найдите его в меню «Пуск» как приложение.
• Используйте сочетание клавиш «клавиша Windows + щелчок мыши».
• Воспользуйтесь сочетанием клавиш «Windows + Q» .
• Доступ к функции «Выполнить щелчком мыши» можно получить на панели инструментов «Ножницы».

После выполнения этих шагов вы сможете выполнять различные действия в зависимости от сделанного вами выбора.

Открыть Click to DO в Windows 11 / Изображение: Мауро Хукулак

При запуске приложения вы заметите анимацию на экране, а панель инструментов появится в верхней части экрана.

На панели инструментов есть поле поиска, позволяющее использовать естественный язык для поиска чего угодно на экране. Вы даже можете использовать свой голос для выполнения поиска. Кнопка «Вызвать» позволяет открыть снимок с другими функциями ИИ.

Доступ к функции «Нажмите, чтобы сделать» внутри функции «Восстановление».

Чтобы воспользоваться функцией «Нажмите, чтобы сделать» в приложении «Recall», выполните следующие действия:

1. Откройте меню «Пуск» .

2. Найдите приложение Recall и нажмите на первый результат, чтобы открыть его.

3. Выберите снимок.

4. Включите кнопку «Показать действие по клику» в элементах управления внизу страницы (если применимо).

   

После выполнения этих шагов вы можете выделить текст или изображение, чтобы получить доступ к действиям, выполняемым одним щелчком мыши.

Нажмите, чтобы выполнить действия с текстом.

При запуске приложения Click to Do и выделении текста вам станут доступны следующие параметры:

• Копировать: Копирует выделенный текст в буфер обмена.
• Открыть с помощью: Открывает выделенный текст в текстовом редакторе, доступном на вашем компьютере.
• Поиск в интернете: Выполняет поиск по выбранному тексту с помощью Microsoft Edge и Bing.
• Ask Copilot: Отправляет выбранный текст в текстовую подсказку приложения Copilot.
• Свернуть: Создает краткое изложение выбранного текста.
• Создание маркированного списка: Создайте список, используя маркеры, выделенный текст.
• Переписать: Изменить тон выделенного текста на неформальный или упорядоченный, или же, в зависимости от вашего выбора, его можно уточнить.

Эта функция также может распознавать веб-ссылку и делать её кликабельной, или, если вы щёлкнете по ссылке правой кнопкой мыши, вы сможете использовать опцию «Открыть веб-сайт» .

Нажмите, чтобы выполнить действия с выделенным текстом / Изображение: Мауро Хукулак

Функции «Сводка», «Создание маркированного списка» и «Переписывание текста» доступны при выборе 10 и более слов. Для использования этих функций требуются токены искусственного интеллекта, то есть для их работы необходимо войти в систему с помощью учетной записи Microsoft.

Нажмите, чтобы изменить параметры перезаписи выделенного текста / Изображение: Мауро Хуцулак

Нажмите, чтобы выполнить действия с изображениями.

При запуске Click to Do и выборе изображения вам станут доступны следующие параметры:

• Копировать: Копирует изображение в буфер обмена.
• Сохранить как: Сохранить изображение на компьютер.
• Поделиться: Открывает интерфейс для обмена файлами.
• Открыть с помощью: Откройте изображение с помощью такого приложения, как Paint, «Ножницы» или «Фотографии».
• Ask Copilot: Отправляет изображение в текстовое поле приложения Copilot.
• Визуальный поиск с помощью Bing: Выполните визуальный поиск с помощью Bing.
• Размытие фона с помощью фотографий: Размыть фон с помощью фотографий.
• Удаление объектов с помощью приложения «Фотографии»: Удаление ненужных объектов на изображении с помощью приложения «Фотографии».
• Удаление фона с помощью Paint: Удаление фона изображения с помощью Paint.

Если некоторые из опций отсутствуют, убедитесь, что на вашем устройстве установлены последние обновления для приложений «Фотографии» и «Рисунок».

Нажмите, чтобы выполнить действия по выбору изображения / Изображение: Мауро Хуцулак

Нажмите, чтобы перейти к настройкам конфиденциальности

При использовании функции Click to Do первоначальный анализ с помощью ИИ происходит локально на компьютере, и никакие данные не передаются в Microsoft. 

Если вы решите отправить изображение из Click to Do в приложение, система создаст временный файл в указанном %HOMEPATH%\AppData\Local\Tempместе, но в конечном итоге он будет удален по завершении процесса.

Функции «Сводка», «Создание маркированного списка» и «Переписывание» используют небольшую языковую модель под названием Phi Silica, которая работает локально на вашем компьютере.

Если вы выберете варианты поиска в интернете, открытия веб-сайта или визуального поиска с помощью Bing, данные будут отправлены в облако.

Если вы выберете опцию «Задать вопрос Copilot» , текст или изображение не будут отправлены в облако, но информация покинет ваш компьютер после того, как вы отправите контент в Copilot.