Google Fotos lanzará una nueva función Ask Photos impulsada por Gemini
Este verano, Google Fotos introducirá una nueva función llamada Ask Photos, basada en el modelo de inteligencia artificial Gemini. Google ha compartido más información sobre esta función, explicando cómo funcionará.
Cómo funciona Ask Photos
Según el equipo de investigación de Google, Ask Photos es “un ejemplo de cómo los modelos Gemini pueden actuar como agentes aprovechando las funciones y capacidades de la memoria”. Entre los ejemplos de consultas que se han demostrado figuran:
- “Enséñame la mejor foto de todos los parques nacionales que he visitado”.
- “¿Cuáles eran los temas de los cumpleaños de Lera?”
Su consulta de diálogo se pasa a un modelo de agente que utiliza Gemini para determinar la mejor herramienta de búsqueda enriquecida (RAG) para la tarea. El modelo analiza primero la intención del usuario y luego formula una búsqueda de fotos utilizando un sistema vectorial actualizado que amplía las capacidades de búsqueda de metadatos ya incorporadas en Google Fotos. El sistema comprende mejor los conceptos del lenguaje natural, como “persona sonriendo mientras monta en bicicleta”, que la búsqueda tradicional por palabras clave. A continuación, el modelo revisa las fotos y los vídeos obtenidos como resultado de la búsqueda. Gracias a la “larga ventana contextual y las capacidades multimodales” de Gemini, puede encontrar la información más relevante. Además del contenido visual, se utilizan fechas, ubicación y otros metadatos. A continuación, el modelo crea una respuesta basada en las fotos y vídeos que encuentra.
Características adicionales
Puedes ajustar Ask Photos, y la aplicación recordará estos cambios para futuras consultas. Esto permite utilizar la función como un asistente, no sólo como una herramienta de búsqueda. Los usuarios pueden “ver y gestionar los detalles memorizados en cualquier momento”. En los próximos meses se lanzará una función experimental, posiblemente relacionada con el rumoreado Project Ellman, y ya hay indicios de nuevas características.
Conclusión
Ask Photos, impulsado por Gemini, promete mejorar la experiencia de búsqueda en Google Fotos permitiendo a los usuarios obtener respuestas precisas y relevantes a sus consultas utilizando tecnología avanzada de inteligencia artificial.
