Microsoft представила оновлення для свого інструменту Copilot Vision, доступне для користувачів Windows Insiders, яке надає штучному інтелекту можливість бачити весь вміст екрана вашого комп’ютера. Раніше цей інструмент міг одночасно відстежувати лише два застосунки та аналізувати зв’язки між ними, проте тепер він здатний охоплювати весь робочий стіл або будь-яке конкретне вікно браузера чи програми, що відображається, повідомляють у Microsoft.
Щоб дізнатись останні новини, слідкуйте за нашим каналом Google News онлайн або через застосунок.
На відміну від функції Recall, яка автоматично робить періодичні знімки того, що відбувається на екрані, Copilot Vision працює подібно до демонстрації екрана під час відеоконференції: користувач може активувати цю можливість, натиснувши іконку окулярів у застосунку Copilot і обравши конкретний робочий стіл, який необхідно відобразити.

Copilot Vision здатен аналізувати відображений вміст, пропонувати ідеї та відповідати на ваші запитання в голосовому режимі, як пояснюють у Microsoft. Завдяки цьому інструменту можна отримувати поради щодо вдосконалення творчих проєктів, допомогу у покращенні резюме або підказки під час освоєння нових ігор.
Microsoft вперше почала тестувати Copilot Vision минулого року, коли ця функція була здатна розпізнавати, на що саме користувач дивиться під час перегляду веб-сторінок у браузері Edge. Окрім того, Copilot Vision має можливість відповідати на запити, аналізуючи зображення, що надходять з камери мобільного телефону користувача.
&pp=ygUOQ29waWxvdCBWaXNpb24%3D
Спершу Microsoft випробовувала Copilot Vision як інструмент для аналізу вебсторінок у браузері Edge або зображень із камери смартфона. Тепер ця технологія трансформується у повноцінного асистента, здатного взаємодіяти з будь-яким контентом на екрані. Нагадаю, Microsoft також продовжує тестування функції, яка дає змогу Copilot автоматично створювати текстові описи зображень.
Читайте також:
- Як використовувати Microsoft PowerToys
- Майбутнє співпраці OpenAI і Microsoft під питанням через суперечки щодо AI
