מה היתרונות יכולים רשתות עצביות עבור קולנוע, משחקי וידאו ומציאות וירטואלית?

עם התפתחות של רשתות עצביות הטכנולוגיה המכונהלמידה, הרחבת היקף היישום שלהם. אם רשתות עצביות קודמות שימשו באופן בלעדי לביצוע חישובים מתמטיים, רפואיים, פיסיקליים וביולוגים מורכבים, מתמטיים, ביולוגיים, ביולוגיים, כיום הטכנולוגיות הללו צוברות פופולריות רחבה בסביבה "ארצית" יותר - בתחום הבידור. אם ניקח רק את הצעדים הראשונים בכיוון זה, הם כבר מסוגלים להפגין תוצאות מדהימות ולעתים אף יוצאי דופן. כיום אנו מנתחים מספר דוגמאות להמחשה.

תהליך של remastering וידאו הוא כל כך מורכבזמן רב, כי רבים של יצירות מופת של קלאסיקות העולם, אנחנו כנראה לא היה לראות עם תמונה חדשה, מודרנית, ברורה ועסיסית. עם זאת, העולם מלא של אוהדים נלהבים וחובבי מי הם בקיאים בטכנולוגיות חדשות, ובמיוחד, רשתות עצביות וטכנולוגיות למידה מכונה, שבה אתה יכול להשיג תוצאות מדהימות אפילו בבית. לדוגמה, משתמש YouTube סטפן רומן עם שם בדוי CaptRobau החליט להפגין כמה יכולות של רשתות עצביות בעיבוד וידאו של סדרת פנטסטי הישן.

עבודתו הקודמת היא Remako Mod -"מהדורה מחודשת HD" של קלאסי מאוד פופולרי יפנית RPG Final Fantasy VII נקרא. לשם כך, הוא השתמש באלגוריתם AI Gigapixel AI, שבו הוא היה מסוגל לשנות את גודל התמונה המקורית 4 פעמים, להעביר אותו ברזולוציה HD ללא שינויים משמעותיים בעיצוב האמנות המקורי. לכן, בזמן שאתה מחכה לעשור הבא עד לרגע שבו היפנים מפתח ומוציא לאור של משחקי מחשב Square Enix רשמית משחרר את remaster, אולי אחד החלקים הטובים ביותר של סדרת המשחק הזה, אתה יכול לנסות את סטפן Rumen mod בעצמך על ידי הורדת אותו מאתר זה.

</ p>

אגב, לאחרונה את הטכנולוגיה של רשתות עצביותעבור remastering משחקים ישנים ולהביא אותם מראה מודרני יותר מודרני מבלי לשנות את הרעיון המקורי הכולל הפך מגמה אמיתית בין mododelov שונים. לדוגמה, לא כל כך מזמן דיברנו על הטכנולוגיה ESRGAN (משופר סופר רזולוציה רזולוציה רשתות adversarial), בעזרת אילו טכנולוגיות דרוג תמונה עם פי 2 עד פי להכפיל איכות מיושמים. האלגוריתם הוא "מוזן" עם התמונה ברזולוציה נמוכה המקורי, ולאחר מכן זה לא רק מגדיל את הרזולוציה המקורית של האחרון, אלא גם משפר את איכות התמונה על ידי ציור פרטים מציאותיים עושה את המרקמים "טבעי יותר".

השוואה איכות המרקם: בצד שמאל, את המרקם המקורי של המשחק Morrowind, בצד ימין - מעובד על ידי רשת עצבית

הדמות מ Doom (בצד שמאל - זה היה, בצד ימין - זה הפך)

Resident Evil 3 רקע עיבוד

קרא בפירוט רב יותר וראה דוגמאות על ידי לחיצה על קישור זה.

בכל אופן, בין לביןRemastered הגמר השביעי סטפן רומן החליט להתחיל פרויקט אחר - באמצעות אותה טכנולוגיה למידה, אבל כבר לעיבוד מסגרות מתוך סדרת מדע בדיוני קלאסי של שנות ה -90. Rumen בחרה מסע בין כוכבים: חלל עמוק תשע כאובייקט להתנסות.

Scale סדרת טלוויזיה "תמונה חיה"את המורכבות היא שונה מאוד מן קנה המידה של מראש שניתנו Final Fantasy VII התמונה, מציין המחבר, כך התוצאה הסופית נראית הרבה יותר טוב מאשר את החומרים המקוריים ברזולוציה נמוכה, אבל תמונה זו עדיין רחוקה האידיאל אתה יכול היה חלם מאז את השוק הראשון Blu-ray שחקנים. מדי פעם "קטנים" מוצגים על המסך. אבל, שוב, באופן כללי, הכל נראה יותר ראוי. ו, באופן כללי, לראות בעצמך.

</ p>

Rumen משמש גם עבור פרוייקט זהAI Gigapixel אלגוריתם, אשר הוכשר בעריכת תמונות המבוססות על תמונות אמיתיות. המחבר מציין כי התמונה החדשה הושגה בפורמט 1080p ו 4k, אבל מאז Rumen אין טלוויזיה או לפקח עם רזולוציה יליד 4K, הוא לא יכול להעריך כראוי את הגירסה 4K.

</ p>

למרבה הצער, לראות את כל הסדרה במלואהHD איכות בלתי אפשרי. העיבוד של כל חומר המקור ייקח הרבה זמן, אז רומן השתמשו רק מסגרות נפרדות מסדרות שונות עבור ההפגנה. לדבריו, הוא לקח את הפרויקט מסיבה אחת בלבד - להראות שזה אכן אפשרי. לדעתו, צוות שלם של אנשי מקצוע העובדים בחברת טלוויזיה גדולה שיש ברשותם ציוד מחשבים מתאים יותר ורב עוצמה לעבודה כזו יוכלו להתמודד עם משימה זו הרבה יותר טוב.

שימוש ברשתות עצביות כדי לפשט את העבודהעיבוד תמונות ישנות של משחקי וידאו וסרטים אינם האזורים היחידים שבהם טכנולוגיות כאלה מסוגלות להציג את כשרונותיהן. בעולם המודרני, שבו מצלמות פנורמיות פנורמיות, מסוגל לייצר ב 360 מעלות, כמו גם אוזניות מציאות וירטואלית, הופכים פופולריים יותר ויותר, מפתחים החלו לחקור באופן פעיל את הפוטנציאל של ירי פנורמי.

אחת ההתפתחויות האחרונות בכיוון זההיא רשת עצבית המסוגלת לבטא דימויים סטטיים פנורמיים. מחבריו הם מומחים ללימודי מכונות מאוניברסיטת מסצ'וסטס, קולומביה ואוניברסיטת ג'ורג 'מייסון.

האלגוריתם שנוצר קובע את סוג הסביבהאובייקטים בתצלום, ולאחר מכן בוחר ומניח את הצלילים ממסד הנתונים בשימוש בהתאם לחישוב המרחבי של המרחק למקורות שלהם בתמונה זו. בשל כך, את התמונה הפנורמית רוכש צליל מציאותי להקיף, ומאפשר לך לחלוטין להעריך מחדש את התמונה שהוגשה.

</ p>

לדברי המפתחים של רשת עצבית זו,הטכנולוגיה עשויה למצוא עניין בקרב מפתחים של תוכן VR (סרטים ומשחקים). האחרון במקרה זה לא יצטרך להטיל את כל הצלילים על התמונה פנורמי באופן ידני, את הרשת העצבית יוכלו לעשות את כל זה בכוחות עצמו.

הצטרף כמנוי ל Yandex שלנו. שם תוכלו למצוא חומרים שאינם מפורסמים באתר.