technológia

A Netflix alkalmazottja neurális hálózatot hozott létre a filmek csókjainak keresésére.

A számítógépes látás szinte tökéletes.felismeri a statikus képekben lévő objektumokat, és jelenleg csak a videókkal kapcsolatos problémák merülnek fel. Mindazonáltal a fejlesztők továbbra is neurális hálózatokat hoznak létre a videó különböző műveleteinek felismerésére, és az utolsó és legérdekesebb projekt a Netflix Amir Ziyah alkalmazottja. 100 hollywoodi film alapja alapján képezte a neurális hálózatot, hogy felismerje a csókokkal való jeleneteket, elkerülve a túlzottan kifejezett jeleneteket.

A neurális hálózat felismeri a csókokat, fókuszálvaa színészek ajkainak mozgásaira és az érintés hangjaira. Az ideghálózat bemutatásához Amir Ziay személyesen jelölt jeleneteket csókokkal, több száz Hollywoodi filmben. A feldolgozott filmek között Anna Karenina (1935), Ghost (1990) és Casino Royal (2006) volt. A fejlesztő nem bővítette az oktatási filmek alapját, mert a neurális hálózat megállt a nyolcadik film után. Végül Amir 263 jelenetet csókokkal és 363 jelenettel csók nélkül emelt ki.

A neurális hálózat megtanulta felismerni a csókokat.

A megalkotott csókfelismerési rendszer állkét részből áll. Az első elemzi az egy másodperces videofragmentumokat, és ezt bináris osztályozónak nevezik - a vizuális adatok elemzéséhez a konvolúciós ResNet neurális hálózatot és a hang tanulmányozására szolgáló VGG neurális hálózatot. A rendszer második része, a szegmentáló, csókokkal kiválaszthatja a töredékeket, és kihagyja őket, hogy ne ismételjék meg.

Miután megkapta a videoklipet, a rendszer azt tanulmányozzaa jelenetek jelenléte csókokkal és átjárók formájában. A tesztelés kimutatta, hogy a neurális hálózat 95% -os pontossággal dolgozik. Megfigyelték azonban, hogy a rendszer gyakran hibázik bizonyos jelenetekben, ahol a csókok hatalmas tájak hátterében fordulnak elő, vagy ahol a csókok túl gyorsan előfordulnak.

Miért van szükség ilyen neurális hálózatra?

Bár Amir Ziay Netflix alkalmazott,létrehozott egy neurális hálózatot, nincs kapcsolatban a szolgáltatással. És hiába - a csókok felismerésének funkciója nagyon hasznos lehet a streaming szolgáltatásokban, valamint a Facebookon, az Instagramon és a TikTokon. Legalább az algoritmus kissé megváltoztatásával létrehozhat egy rendszert a szükségtelenül kifejezett jelenetek rendezéséhez. Egy ilyen rendszer automatikusan rendezheti a videókat tematikus mappák szerint.

A neurális hálózatok témakörében azt javasoljuk, hogy olvassa el rólaa statikus portrék újjáélesztésének lehetőségei. A Samsung Mesterséges Intelligencia Központ szakembereinek munkájának köszönhetően Dosztojevszkij, Mona Lisa és Albert Einstein portrék szó szerint életre kelnek - láthatjuk őket anyagunkban.

Ennek megvitatására és a tudomány és a technológia egyéb témáira a Telegram-csevegésünk során lehetséges. Az érdekes partnerek mellett a honlapunkról friss anyagokat is közölnek!