Google pronto podría permitir que Gemini explique cualquier cosa en tu pantalla… sin marcarla

¿Qué ha pasado? Según se informa, Google está trabajando en una nueva herramienta Gemini (supuestamente llamada "Circle Screen") que puede analizar la pantalla del teléfono y explicarla o resumirla automáticamente.

• La herramienta puede reemplazar efectivamente una de las funciones basadas en IA más populares y celebradas en los teléfonos inteligentes: Circle to Search (a través de Android Authority ).
• La nueva herramienta de comprensión de pantalla de Google te permite preguntarle a Gemini sobre cualquier cosa que aparezca en la pantalla de tu teléfono, incluido texto, imágenes y fórmulas matemáticas, entre otras cosas.

¿Por qué es importante? Actualmente, los usuarios deben usar la herramienta Círculo para buscar , seleccionar una parte de la pantalla y recibir respuestas relevantes y la oportunidad de realizar consultas adicionales.

• Sin embargo, la nueva actualización se basa en la interfaz basada en gestos y la amplía.
• En lugar de iniciar una búsqueda, Gemini ahora interpreta la selección y produce resúmenes o explicaciones basados ​​en IA.
• Marca un cambio de la búsqueda visual simple a una experiencia impulsada por IA en la que su teléfono proporciona más detalles sobre lo que ve sin invocar Círculo para buscar y cambiar de interfaz.

¿Por qué debería importarme? Esta incorporación forma parte de un esfuerzo más amplio de Google por integrar Gemini en la mayoría de los puntos de contacto de Android (e incluso en Wear OS ).

• La nueva herramienta Gemini podría agilizar la forma en que consumimos información en los teléfonos inteligentes, eliminando la necesidad de copiar y pegar, cambiar de aplicaciones o usar la herramienta Círculo para buscar.
• Por ejemplo, imagina leer una publicación en las redes sociales en otro idioma y obtener instantáneamente una traducción o explicación en la pantalla con un gesto, sin salir de la aplicación.
• Los estudiantes o investigadores podrían tomar una captura de pantalla de un diagrama, una cita o un párrafo y pedirle a Gemini que lo resuma o lo explique.

Bien, ¿qué sigue? Deberíamos esperar que más teléfonos Android, no solo los buques insignia de gama alta o los dispositivos Pixel, incorporen esta función de análisis de pantalla con tecnología Gemini.

• Con el tiempo, esto podría cambiar la forma en que usamos Gemini, ya que podrían obtener una explicación de IA con un solo gesto.
• Sin embargo, la función también plantea preguntas sobre la privacidad y el control de la experiencia del usuario a medida que los dispositivos comprenden mejor lo que hay en la pantalla.
• Más recientemente, se vio a Google integrando el modo AI en Circle to Search para brindar respuestas a consultas de seguimiento .