O Gemini para Android está recebendo dois novos recursos que permitirão aos usuários fazer perguntas sobre a tela atual do smartphone. Chamadas de ‘Perguntar sobre esta tela’ e ‘Perguntar sobre este vídeo’, essas ferramentas capturam uma captura de tela e processam o conteúdo da tela. Então, quando solicitado pelo usuário, ele pode responder com informações relevantes que o usuário está buscando. O recurso de vídeo, que parece ser compatível apenas com o YouTube, também pode fornecer resumos de vídeo, desde que haja legendas adicionadas ao vídeo.
Gemini agora permite que os usuários façam perguntas sobre suas telas
Os funcionários do Gadgets 360 identificaram os recursos no aplicativo Google versão 15.33.38.28.arm64 e posteriores em vários smartphones diferentes. Eles aparecem na parte superior da janela flutuante Gemini quando um usuário invoca o assistente de IA. Aqueles que têm acesso ao recurso verão uma faixa retangular separada com o texto “Pergunte sobre esta tela” e um ícone de captura de tela. Se o Gemini foi ativado durante a reprodução de um vídeo no YouTube, o texto é substituído por “Pergunte sobre este vídeo” e o ícone do YouTube.
Gemini Pergunte sobre este recurso de tela
Tocar no ícone para ‘Perguntar sobre esta tela’ captura uma captura de tela temporária dentro do Gemini, e então o usuário pode fazer qualquer pergunta sobre a tela. As respostas serão baseadas apenas no que a IA pode ver na captura de tela, no entanto, os usuários também podem solicitar que o Gemini acesse a Internet para encontrar mais informações. Um de seus casos de uso pode ser pedir um breve resumo de um artigo de notícias.
Para fazer uma pergunta de acompanhamento, os usuários podem simplesmente tocar no ícone do microfone ou no ícone do teclado na parte inferior da janela flutuante. Notavelmente, a captura de tela capturada não é salva no dispositivo. Além disso, capturas de tela longas não são suportadas com esse recurso.
O recurso ‘Perguntar sobre este vídeo’ só funciona para um vídeo do YouTube onde legendas foram adicionadas. Em nossos testes, descobrimos que nenhuma outra plataforma de vídeo, apesar do status das legendas, era compatível com o recurso. No entanto, em um vídeo do YouTube, usar o recurso permite que os usuários façam perguntas sobre o vídeo. As respostas são geradas com base nas legendas, e o vídeo em si não é analisado.
source – www.gadgets360.com
