Nueva Función de Google Lens: Búsqueda por Video
Si no puedes capturar lo que deseas buscar solo con una imagen, Google Lens ahora te permitirá grabar un video — e incluso utilizar tu voz para preguntar sobre lo que estás viendo. Esta función presentará una Visión General de IA y resultados de búsqueda basados en el contenido del video y tu pregunta. Está siendo lanzada en Search Labs en Android y iOS hoy.
Uso de Video para Buscar Información
Google mostró por primera vez el uso de video para buscar en I/O en mayo. Como ejemplo, Google menciona que alguien curioso sobre un pez que está viendo en un acuario puede levantar su teléfono hacia la exhibición, abrir la aplicación Google Lens, y luego mantener presionado el botón de obturación. Una vez que Lens comienza a grabar, pueden formular su pregunta: “¿Por qué están nadando juntos?” Google Lens utiliza el modelo de IA Gemini para proporcionar una respuesta, similar a lo que se muestra en el GIF a continuación.
Tecnología Detrás de la Nueva Característica
Hablando sobre la tecnología detrás de la función, Rajan Patel, vicepresidente de ingeniería en Google, declaró a The Verge que Google captura el video “como una serie de fotogramas de imagen y luego aplica las mismas técnicas de visión por computadora” previamente utilizadas en Lens. Sin embargo, Google lleva las cosas un paso más allá al enviar la información a un modelo Gemini “personalizado” desarrollado para “comprender múltiples fotogramas en secuencia… y luego proporcionar una respuesta que esté arraigada en la web.”
Interacción Vocal y Actualizaciones en Google Lens
Aún no hay soporte para identificar los sonidos en un video — como por ejemplo, si intentas identificar un pájaro que estás escuchando — pero Patel menciona que es algo con lo que Google ha estado “experimentando.” También puedes usar tu voz para hacer preguntas sobre una foto. Para probarlo, apunta tu cámara al sujeto, mantén presionado el botón de obturación y luego plantea tu pregunta. Antes de este cambio, solo podías escribir tu pregunta en Lens después de tomar una foto. Las preguntas por voz se están implementando globalmente en Android e iOS, pero por ahora, solo están disponibles en inglés.
Fuente y créditos: www.theverge.com
Cats:
