تكنولوجيا

أنشأ أحد موظفي Netflix شبكة عصبية للبحث عن القبلات في الأفلام.

رؤية الكمبيوتر مثالية تقريبا.يتعرف على الكائنات في الصور الثابتة ، وفي الوقت الحالي لا تنشأ المشكلات إلا مع مقاطع الفيديو. ومع ذلك ، يواصل المطورون إنشاء شبكات عصبية للتعرف على مختلف الإجراءات على الفيديو ، وأحد المشاريع الأخيرة والأكثر إثارة للاهتمام هو عمل الموظف في Netflix Amir Ziyah. باستخدام قاعدة من 100 فيلم من أفلام هوليود ، قام بتدريب الشبكة العصبية على التعرف على المشاهد بالقبلات ، مع تجنب المشاهد الواضحة للغاية.

الشبكة العصبية تعترف القبلات ، والتركيزعلى حركات شفاه الممثلين وأصوات اللمس. لتوضيح الشبكة العصبية ما ينبغي عليها الانتباه إليه ، قامت أمير زياي شخصياً بتمييز مشاهد قبلات في عينة من مئات أفلام هوليود. من بين الأفلام التي قام بمعالجتها آنا كارنينا (1935) ، غوست (1990) وكازينو رويال (2006). لم يوسع المطور قاعدة الأفلام التعليمية ، لأن الشبكة العصبية توقفت عن "الحكمة" بعد الفيلم الثمانين. في النهاية ، حدد أمير 263 مشاهدًا قبلات و 363 مشاهد بدون قبلات.

لقد تعلمت الشبكة العصبية التعرف على القبلات.

يتكون نظام الاعتراف من القبلاتفي جزأين. الأول يحلل شظايا الفيديو في ثانية واحدة ويطلق عليه المصنف الثنائي - ويشمل الشبكة العصبية التلافيفية ResNet لتحليل البيانات البصرية ، والشبكة العصبية VGG لدراسة الصوت. الجزء الثاني من النظام ، وهو المقسم ، يختار الأجزاء ذات القبلات ويعطيها حتى لا تتكرر.

بعد تلقي مقطع فيديو ، يدرسه النظاموجود مشاهد مع القبلات ويعطيهم في شكل مقاطع. أظهر الاختبار أن الشبكة العصبية تؤدي وظيفتها بدقة 95٪. ومع ذلك ، فقد لوحظ أن النظام غالباً ما يرتكب خطأ في بعض المشاهد حيث تحدث القبلات وسط مناظر طبيعية شاسعة ، أو حيث تحدث القبلات بسرعة كبيرة.

لماذا نحتاج إلى مثل هذه الشبكة العصبية؟

على الرغم من أن أمير زي هو موظف في Netflix ،أنشأ شبكة عصبية لا علاقة لها بالخدمة. وبلا جدوى - يمكن أن تكون وظيفة التعرف على القبلات مفيدة للغاية في خدمات البث ، وكذلك على Facebook و Instagram و TikTok. كحد أدنى ، من خلال تغيير الخوارزمية قليلاً ، يمكنك إنشاء نظام لفرز مشاهد واضحة وغير ضرورية. أيضًا ، يمكن لهذا النظام تلقائيًا فرز مقاطع الفيديو حسب المجلدات المواضيعية.

حول موضوع الشبكات العصبية ، نوصي بالقراءة عنهفرص لإحياء صور ثابتة. بفضل عمل متخصصين من مركز سامسونج للذكاء الاصطناعي ، ظهرت صور دوستويفسكي وموناليزا وألبرت أينشتاين حرفيًا - يمكنك رؤيتها في موادنا.

لمناقشة هذا الأمر ، وغيره من موضوعات العلوم والتكنولوجيا ، من الممكن في Telegram-chat. بالإضافة إلى محاوري مثيرة للاهتمام ، ستجد هناك إعلانات عن مواد جديدة من موقعنا!