Tecnologia

Un empleado de Netflix creó una red neuronal para encontrar besos en las películas.

La visión por ordenador es casi perfecta.reconoce los objetos en imágenes estáticas, y en este momento los problemas surgen principalmente con videos. Sin embargo, los desarrolladores continúan creando redes neuronales para reconocer varias acciones en video, y uno de los últimos y más interesantes proyectos es el trabajo del empleado de Netflix, Amir Ziyah. Utilizando una base de 100 películas de Hollywood, entrenó la red neuronal para reconocer escenas con besos, mientras que evitaba escenas demasiado explícitas.

La red neuronal reconoce besos, centrándose.En los movimientos de los labios de los actores y los sonidos del tacto. Para mostrar a la red neuronal a qué debería prestarle atención, Amir Ziay marcó personalmente las escenas con besos en una muestra de cientos de películas de Hollywood. Entre las películas que procesó estaban Anna Karenina (1935), Ghost (1990) y Casino Royal (2006). El desarrollador no amplió la base de películas educativas, porque la red neuronal dejó de "volverse más sabia" después de la película ochenta. Al final, Amir destacó 263 escenas con besos y 363 escenas sin besos.

La red neuronal ha aprendido a reconocer los besos.

El sistema creado de reconocimiento de besos consiste en.en dos partes El primero analiza los fragmentos de video de un segundo y se llama clasificador binario: incluye la red neuronal ResNet convolucional para analizar datos visuales y la red neuronal VGG para estudiar audio. La segunda parte del sistema, el segmentador, selecciona los fragmentos con besos y los reparte para que no se repitan.

Tras recibir un videoclip, el sistema lo estudia enLa presencia de escenas con besos y los da en forma de pasajes. Las pruebas han demostrado que la red neuronal hace su trabajo con el 95% de precisión. Sin embargo, se ha observado que el sistema a menudo se equivoca en algunas escenas en las que se producen besos sobre un fondo de vastos paisajes, o donde los besos se producen con demasiada rapidez.

¿Por qué necesitamos tal red neuronal?

Aunque Amir Ziay es un empleado de Netflix,Él creó una red neuronal que no tiene relación con el servicio. Y en vano, la función de reconocimiento de besos puede ser muy útil en los servicios de transmisión, así como en Facebook, Instagram y TikTok. Como mínimo, al cambiar ligeramente el algoritmo, puede crear un sistema para clasificar escenas innecesariamente explícitas. Además, dicho sistema puede ordenar automáticamente los videos por carpetas temáticas.

Sobre el tema de las redes neuronales, recomendamos leer sobre ello.Oportunidades para revivir retratos estáticos. Gracias al trabajo de los especialistas del Centro de Inteligencia Artificial de Samsung, los retratos de Dostoievski, Mona Lisa y Albert Einstein han cobrado vida literalmente. Puedes verlos en nuestro material.

Para discutir esto y otros temas de ciencia y tecnología, es posible en nuestro chat de Telegram. Además de interlocutores interesantes, ¡allí encontrará anuncios de materiales nuevos de nuestro sitio!