Copilot Vision: saiba como usar assistente de IA que consegue ler sua tela

Disponível para Windows, dispositivos móveis e no Microsoft Edge, ferramenta de inteligência artificial tem diversas funcionalidades úteis para o dia a dia; veja como usar O Copilot Vision é uma ferramenta integrada ao Microsoft Copilot que une visão computacional e inteligência artificial contextual para oferecer assistência interativa. O software ‘enxerga’ a tela do usuário e analisa sites, imagens e vídeos, além de responder às perguntas feitas e fornecer visões sobre o conteúdo em destaque. Esse assistente está disponível gratuitamente no navegador Microsoft Edge e em aparelhos Windows, Android e iPhone (iOS). O Microsoft Copilot também faz a comparação ou extração de dados de dois aplicativos abertos simultaneamente, otimizando tarefas do dia a dia e possibilitando a economia de tempo de trabalho. A seguir, veja como usar o Copilot Vision em cada um desses dispositivos.
🔎 Copilot no Microsoft Word: 5 formas de usar a IA para auxiliar a escrita
🔔Canal do TechTudo no WhatsApp: acompanhe as principais notícias, tutoriais e reviews
Copilot Vision: saiba como aproveitar função que lê o que está na tela do seu PC
Christina Morillo/Pexels
📝Como a Inteligência Artificial é implementada em Chatbots? Veja no Fórum TechTudo
O que é o Copilot Vision?
Tela inicial do Copilot Vision
Reprodução/Gisele Veríssimo
O Copilot Vision é um recurso do Microsoft Copilot baseado em modelos de inteligência artificial multimodal, com capacidades de processamento e análise visual por meio de IA. Ele permite que os usuários interajam com conteúdo visual de suas telas, como fotos, capturas de tela ou elementos como páginas na web, usando comandos de texto ou voz para obter mais informações sobre o que está sendo exibido.
Para que serve o Copilot Vision?
O software serve como um ajudante em diversas tarefas, como a análise de informações, resolução de problemas ou obtenção de explicações sobre o que aparece na tela. Ele pode, por exemplo, analisar capturas de tela, fotos ou gráficos para identificar textos, descrever cenas, reconhecer objetos ou até sugerir ações com base no contexto visual.
Além disso, ele conecta informações entre dois aplicativos abertos simultaneamente, ajudando a comparar dados ou automatizar tarefas. É possível também receber dicas em jogos, traduzir textos em PDFs, planejar viagens com base em e-mails ou programar ações repetitivas com o Copilot Vision. É importante ressaltar que o compartilhamento de tela não está disponível na versão para desktop ou dispositivos móveis, apenas no Microsoft Edge.
Como usar o Copilot Vision?
No Windows
Pressione Win + C ou clique no ícone do Copilot na barra de tarefas para abrir o Copilot. Em seguida, capture ou envie uma imagem. Para isso, basta clicar em “+”. Agora, basta fazer sua pergunta por comando de voz ou textual. Você pode solicitar, por exemplo, que a IA descreva a imagem ou que dê dicas de como melhorar aspectos de uma foto.
Use o Copilot Vision no seu dispositivo Windows
Reprodução/Gisele Veríssimo
Em dispositivos móveis
Baixe o aplicativo Microsoft Copilot disponível na App Store e na Google Play Store. Escolha a ‘voz’ da IA e clique na opção desejada sobre a permissão do uso do aplicativo No ícone ‘+’ escolha entre enviar ou tirar uma foto, ou ainda selecionar um arquivo. Digite sua pergunta e aguarde a análise gerada pela IA.
Uso do Copilot Vision no celular: análise de foto
Reprodução/Gisele Veríssimo
No teste realizado pelo TechTudo, o Copilot Vision examinou uma foto e, ao ser perguntado sobre o significado da tatuagem, identificou que se tratava de um desenho ornamental e explicou o sentido. Além disso, reconheceu um tecido com imagens que se referem à astrologia, que também foi mencionado pelo software.
No Microsoft Edge
Análise de página da Amazon feita pelo Copilot Vision
Reprodução/Gisele Veríssimo
Abra o Microsoft Edge e ative o Microsoft Copilot clicando no ícone do Copilot (no canto superior direito da barra lateral) ou pressione Ctrl + Shift + . (ponto). Vá em configurações > privacidade e libere o acesso à página da web atual, selecionando a opção ‘pistas de contexto’. Também é possível escolher imagens e documentos para a análise clicando em ‘+’.
Neste teste, o Microsoft Copilot teve acesso ao conteúdo da página da Amazon que estava aberta no navegador. Após digitar ‘smartwatch custo benefício’, a IA buscou por nomes, preços, recursos e avaliações dos smartwatches exibidos na tela no momento, selecionando aparelhos de grandes marcas como Xiaomi, Samsung e Amazfit.
Com informações de Microsoft (1, 2), The Verge e Geeky Gadgets
Mais do TechTudo
Veja também: 6 concorrentes do ChatGPT que você deveria testar
6 concorrentes do ChatGPT que você deveria testar