Copilot Vision, der er Microsofts AI-assistent, der kan fortolke, hvad der vises på din skærm og hjælpe dig med at bruge apps, er nu tilgængelig gratis i Edge-browseren, annoncerede Mustafa Suleyman, administrerende direktør for Microsoft AI, på Bluesky.
Vision er en 'samtalebaseret oplevelse', som Microsoft kalder det. Det betyder, at du bruger det ved at tale ud i luften og derefter vente på, at Copilot svarer.
Suleyman siger, at hvis du vælger at aktivere funktionen, kan Copilot Vision 'bogstaveligt talt se det, du ser på skærmen'. Han foreslår for eksempel, at man kan lade Copilot Vision guide én igennem en opskrift, mens man laver mad, eller få den til at 'afkode' stillingsopslag og straks gå i gang med skræddersyet forberedelse til jobsamtaler eller brainstorme på en ansøgning.
Ifølge en supportside fra Microsoft kan'“Copilot Vision fremhæve dele af skærmen for at hjælpe dig med at finde relevant information', men den klikker ikke på links eller foretager handlinger på dine vegne.
Mere omfattende funktioner i Copilot Vision er stadig begrænset til Copilot Pro-abonnenter. Med et abonnement udvides Vision-funktionerne ud over Edge, så du kan bede den hjælpe dig med funktioner i Photoshop eller videoredigeringssoftware - eller guide dig igennem et spil som Minecraft, hvilket den tidligere i måneden gjorde for Tom Warren fra The Verge.
For at prøve Copilot Vision i Edge-browseren, skal du selv aktivere det med en prompt, og når du har givet tilladelse, kan du åbne Copilot-sidepanelet, mens du er på en hjemmeside, klikke på mikrofon-ikonet, og din Vision-session starter, hvilket indikeres med en lyd og en ændring i browserens nuance.
The Verge skriver dog, at det kan tage et par forsøg, før Edge spørger, om man vil aktivere funktionen. Og når man kan aktivere og starte en Vision-session, dukker kontrolfunktionerne ikke altid op. Derfor kan du være nødt til at gøre en række forsøg for at være på den sikre side.
Ifølge Microsoft gemmer virksomheden Copilots svar til dig, men indsamler ikke dine input, billeder eller sideindhold under en Vision-session. Når du vil stoppe med at dele din skærm med Copilot, kan du enten afslutte sessionen eller lukke browservinduet.
