Quem é assinante do Gemini Live está recebendo a capacidade de permitir que a IA possa “ver” a tela e o que a câmera mostra.
Recurso de inteligência artificial traz novas possibilidades de uso, o que muitos usuários avançados irão gostar.
Mas inicialmente, inovação está sendo liberada primeiro para os EUA e para quem é assinante Premium.
IA ganha capacidade de visualizar o conteúdo da tela
Chamado de compartilhamento de tela no Android, os assinantes Gemini podem mostrar o que está sendo mostrado no display para a inteligência artificial.
Isso significa que os usuários poderão utilizar a IA para conversar sobre o que está sendo mostrado no telefone ou tablet.
Com o display sendo visualizado, é possível perguntar sobre aplicativos, jogos, e muito mais, assim conseguindo respostas diretas e com o contexto daquele momento.
Inteligência artificial pode ver o mundo pela câmera
Outra inovação interessante, é que quem assina Gemini poderá utilizar a câmera para mostrar o mundo para a IA.
Recurso é bem parecido com o que o Project Astra revelou no passado, trazendo interação da inteligência artificial ao que estiver visualizando, escutando e claro, ao mesmo tempo tentará entender tudo o que está acontecendo.
Na demonstração da função, o Google mostrou o assistente reconhecendo e descrevendo os objetos que estão em sua frente.
Algo interessante é como tudo funciona, com a pessoa perguntando que cores combinam melhor com as peças do meio do século, a assistente traz o resultado com base nas cores que foram mostradas e como elas podem se integrar.
Novidade traz muitas novas possibilidades, algo que muitas pessoas irão gostar de interagir, já que será possível perguntar de coisas do mundo real, e a IA conseguirá “enxergar” e dar respostas contextuais com base no que foi mostrado.
Precisa de plano para funcionarem

Google já tinha revelado a chegada dos vídeos ao vivo e do compartilhamento de tela no Android para o Gemini Live.
Agora essas novidades estão sendo liberadas para quem inicialmente mora nos EUA, mas é algo que será expandido no futuro.
É preciso ter o plano Gemini Advanced, que faz parte do plano de 2TB do Google One, para conseguir utilizar as novidades.
Algo importante a se lembrar, é que o Google substituirá o Google Assistente pelo Gemini, que é o assistente padrão para os novos Android, e que será de alguns dos modelos antigos ainda em 2025.
Fonte: Theverge