Foto: El software de procesamiento de vídeo de Clarifai puede identificar objetos y escenas en un vídeo y crear una línea de tiempo para que puedas saltar al lugar en que aparece un determinado elemento.

Durante los últimos años, los investigadores de compañías como Google y Facebook han hecho avances impresionantes a la hora de entrenar software para que entienda lo que está pasando en las imágenes, gracias a una técnica conocida como aprendizaje profundo. Ahora, una start-up llamada Clarifai ofrece un servicio que utiliza el aprendizaje profundo para entender los vídeos.

La compañía asegura que su software puede analizar rápidamente clips de vídeo para reconocer 10.000 objetos o tipos de escena diferentes. En una demostración la semana pasada durante una conferencia sobre el aprendizaje profundo, el cofundador y director general de Clarifai, Matthew Zeiler, subió un clip con imágenes de un variado paisaje alpino. El software creó una línea de tiempo con líneas gráficas que resumían en qué momento se detectaban distintos objetos o tipos de escena. Mostró exactamente cuándo aparecían la nieve y las montañas individualmente y en conjunto. El software puede analizar vídeo más rápidamente de lo que un ojo humano tardaría en verlo. Durante la demostración, el clip de 3,5 minutos se procesó en tan sólo 10 segundos.

Clarifai ofrece la tecnología como servicio y espera que sea utilizada por ejemplo para vincular anuncios al contenido de los videos en internet, o desarrollar nuevas formas de organizar colecciones de vídeo y editar metraje.

El aprendizaje profundo consiste en procesar datos a través de una red de simples "neuronas" simuladas que han sido entrenadas con datos de ejemplo. La tecnología de Clarifai se originó durante una investigación en la Universidad de Nueva York (EEUU), y en 2013 la empresa se hizo con los cinco primeros puestos del principal concurso anual de software para identificar contenidos de imágenes.

Hasta ahora, la mayoría de las investigaciones en el campo se han centrado en las imágenes fijas, no en el vídeo. Clarifai lanzó un servicio de reconocimiento de imágenes fijas el año pasado. Otra start-up que también utiliza el aprendizaje profundo, Dextro, lanzó su propio servicio de procesamiento de vídeo a finales de diciembre.

Cualquiera puede probar el sistema de vídeo de Clarifai. En su sitio web, se puede cargar un clip de vídeo de hasta 10 megabytes para ser analizado. Entre los diferentes objetos o tipos de escena detectados puede haber coches, árboles o personas. El software también se puede aplicar a conceptos descriptivos más abstractos, como "diversión" y "unión".

Zeiler cree que su tecnología podría crear un nuevo enfoque para ofrecer publicidad junto a los vídeos por internet. "El software puede identificar qué parte del vídeo es el lugar óptimo para colocar un anuncio", aseguró.

Las empresas ya pueden pagar por colocar sus anuncios junto a cierto tipo de vídeos sobre un tema en particular. Zeiler cree que ser capaz de asociar automáticamente anuncios con momentos particulares en vídeos debería ser aún más atractivo para los anunciantes. La tecnología de Clarifai podría hacer posible que, por ejemplo, Starbucks haga que sus anuncios aparezcan cuando se consuma café.

Zeiler señala que ya está trabajando con empresas interesadas en utilizar la tecnología de análisis de vídeo. La compañía también está trabajando para que el software haga más cosas. Unas funciones en fase de desarrollo permitirán que el software resuma automáticamente lo que sucede en un vídeo y reconozca en qué momento ha ocurrido una actividad en particular, asegura Zeiler.