App do Gemini agora lê a tela do seu computador; veja como funciona

O Google anunciou uma atualização para o aplicativo Gemini no macOS que adiciona um modo de voz que consegue entender o que está sendo exibido na tela do computador. Com a novidade, a inteligência artificial pode responder a perguntas, resumir informações e editar textos com base no conteúdo visível, sem que o usuário precise copiar e colar trechos no chatbot.

O recurso é ativado ao pressionar e segurar a tecla fn do Mac enquanto o usuário fala. A partir daí, o Gemini pode analisar o contexto do aplicativo aberto e executar ações no local em que o cursor está posicionado. Assim, é possível pedir para resumir anotações de uma reunião, reescrever um e-mail ou organizar um documento sem trocar de janela.

A atualização também aprimora o ditado por voz, removendo automaticamente pausas e expressões como "hã" e "ah" para gerar um texto mais limpo. Segundo o Google, a leitura da tela é opcional e pode ser desativada para que o usuário decida quando a IA poderá analisar o conteúdo exibido.

A proposta é tornar a interação com a IA mais fluida, reduzindo a necessidade de alternar entre aplicativos para copiar informações ou abrir uma janela dedicada do chatbot. 

Quem pode usar a nova experiência de voz do Gemini?

A nova experiência de voz começou a ser distribuída para todos os usuários do aplicativo Gemini no macOS.