Gemini para Android recibirá dos nuevas funciones que permitirán a los usuarios hacer preguntas sobre la pantalla de su último teléfono inteligente. Estas herramientas, denominadas “Preguntar sobre esta captura de pantalla” y “Preguntar sobre este vídeo”, capturan la pantalla y procesan el contenido de la pantalla. Luego, cuando el usuario lo solicita, puede responder con la información exacta que el usuario está buscando. La sección de vídeo, que parece ser compatible sólo con YouTube, puede proporcionar un resumen del vídeo siempre que se agreguen comentarios al vídeo.
Gemini ahora permite a los usuarios hacer preguntas sobre su pantalla
Los usuarios de dispositivos 360 han visto funciones de la versión 15.33.38.28.arm64 y posteriores de la aplicación de Google en varios teléfonos inteligentes diferentes. Estos aparecen en la parte superior de la ventana flotante de Gemini cuando el usuario invoca al asistente de IA. Aquellos que tengan acceso a esta función verán una línea rectangular separada con el texto “Preguntar sobre esta captura de pantalla” y un ícono de captura de pantalla. Si se abrió Gemini mientras se reproducía un video en YouTube, el texto se reemplaza por “Preguntar sobre este video” y el logotipo de YouTube.
Géminis Pregunta sobre esta función de pantalla
Al tocar el ícono ‘Preguntar sobre esta captura de pantalla’, se toma una captura de pantalla temporal dentro de Gemini, y el usuario puede hacer cualquier pregunta sobre la captura de pantalla. Las respuestas dependerán únicamente de lo que la IA pueda ver en la pantalla; sin embargo, los usuarios también pueden solicitar a Gemini que se conecte a Internet para obtener más información. Uno de sus casos de uso sería solicitar un breve resumen de un artículo de noticias.
Para hacer la siguiente pregunta, los usuarios pueden tocar el ícono del micrófono o el ícono del teclado en la parte inferior de la ventana flotante. Evidentemente la captura de pantalla no se guarda en el dispositivo. Además, esta función no admite capturas de pantalla largas.
La función “Preguntar sobre este vídeo” solo funciona para vídeos de YouTube a los que se han añadido subtítulos. En nuestras pruebas, descubrimos que ninguna otra plataforma de vídeo, ni siquiera con clasificación de palabras clave, igualaba el formato. Sin embargo, el vídeo de YouTube, al utilizar la función, permite a los usuarios hacer preguntas sobre el vídeo. Las respuestas se muestran en función de los comentarios y el vídeo en sí no se revisa.
