Copilot Vision umožňuje zdieľanie obrazovky s AI vo Windowse

Microsoft predstavil funkciu Copilot Vision pre operačný systém Windows, ktorá umožňuje AI asistentovi Copilot interagovať priamo s obrazovkou používateľa, a teda sa posúva z pôvodného obmedzenia na prehliadač Edge na celé prostredie Windows, čím poskytuje používateľom oveľa viac možností pri práci s rôznymi aplikáciami a úlohami. Zatiaľ je však funkcia limitovaná pre Insider používateľov v USA, avšak Microsoft plánuje postupné rozšírenie dostupnosti po ukončení testovacej fázy. 

Copilot Vision umožňuje používateľom zdieľať svoju obrazovku s AI asistentom, ktorý následne poskytuje kontextové rady a odporúčania na základe aktuálne zobrazeného obsahu. Napríklad, pri práci v aplikácii Adobe Photoshop môže Copilot ponúknuť navigáciu a tipy priamo v rámci aplikácie, čím zjednodušuje proces učenia a zvyšuje efektivitu práce. ​Pomôcť môže aj pri navigácii v hrách ako napríklad Minecraft. Samozrejme, Copilot Vision vyžaduje aktívny súhlas používateľa na zdieľanie obrazovky, čím sa zabezpečuje ochrana súkromia a kontrola nad tým, kedy a ako asistent pristupuje k obsahu obrazovky. ​

Okrem toho Microsoft integruje Copilot Vision aj do mobilných aplikácií pre iOS a Android, čo umožňuje používateľom využívať asistenta na analýzu reálneho sveta prostredníctvom kamery smartfónu, podobne ako to chystá Gemini v jeho Advanced pláne. Táto funkcia umožňuje napríklad identifikáciu objektov alebo poskytovanie informácií o okolí.

Microsoft začal testovať aj vyhľadávanie súborov pomocou Copilota vo Windowse, čo umožňuje pýtať sa AI na obsah súborov uložených v počítači. Vyhľadávanie má podporovať súbory vo formátoch .docx, .xlsx, .pptx, .txt, .pdf a .json, pričom Copilot dokáže jednoducho a rýchlo nájsť dokumenty, na ktorých ste pracovali.