בכנס עיבוד מידע עצבי במונטריאול, קנדה, הוכיחו חוקרי Nvidia שהם יכול להשתמש בכוחה של בינה מלאכותית כדי להציג סצנות סינתטיות, אך מציאותיות, עם פרטים ו מרקמים. חוקרים טוענים שהעבודה עדיין בשלביה הראשונים, ולא ברור מתי תהיה הטכנולוגיה שוחרר לצרכנים, אבל יש פוטנציאל גדול לעיבוד מונע הבינה המלאכותית של Nvidia ב- מרחב משחקים.
"עבודה זו עוסקת בדרך חדשה לעיבוד גרפיקה ממוחשבת באמצעות רשתות עצביות", אמר סגן נשיא Nvidia ללמידה עמוקה יישומית, בריאן קטנזארו, בשיחת ועידה. בעיקרון, חוקרים רצו לדעת כיצד הם יכולים ליישם A.I. כדי לשפר את הגרפיקה הממוחשבת, והפתרון הוא ליישם למידת מכונה על סרטונים מהעולם האמיתי כדי לעבד גרפיקה חדשה.
סרטונים מומלצים
"בנינו מערכת שלוקחת ייצוגים ברמה גבוהה של העולם הפיזי - בעצם לוקחים סקיצת וידאו וממירים אותה לסצנה מעובדת", אמר קטנזארו. "המודל מבין מידע ברמה גבוהה של אובייקטים בעולם האמיתי, ולאחר מכן מרחיב את אלה כדי להוסיף מידע על מרקם ותאורה. המטרה היא להיות מסוגל לסנתז סצינות חדשות עם גרפיקה".
למידת מכונה משמשת לניתוח סרטונים קיימים ו-Nvidia תחיל טכניקות ראייה ממוחשבת כדי להוסיף תוויות לאובייקטים ולמאפיינים שלהם. המשמעות היא ש-A.I. יוכל לזהות נוף עירוני עירוני ולהבין אילו חפצים הם עצים, מכוניות או בניין, למשל.
טכנולוגיה זו נגזרת ממחקר קיים, כמו זה מאוניברסיטת קליפורניה, ברקלי, לפי Nvidia. החברה הראתה בעבר טכניקות רינדור אחרות מבוססות A.I, כולל אחת כזו להסיר רעש מתמונה.
החוקרים הצליחו להשיג רינדור בזמן אמת ב-Tensor Core GPU, אבל לכנס, Nvidia הדגימה את הטכנולוגיה בכרטיס Titan V שלה. "למרות שאתה יכול לעשות זאת בכל מעבד, ההיבט של זמן אמת דורש הרבה A.I. תפוקה", הסביר Catanzaro וציין ש- Tensor Core GPU חשוב.
על ידי היכולת ליצור תוכן ולהוסיף אותם לעולמות וירטואליים, שוק המשחקים יוכל להפיק תועלת רבה מהעבודה שנוצרה על ידי מחקר זה. מפתחים, למשל, יכלו "מאסטר מחדש" משחקים ישנים על ידי עיבוד מחדש של כותרים ישנים כדי להוסיף ויזואליות בחדות גבוהה, או שהם יכולים להוסיף רמות חדשות למשחקים קיימים עם מעט מאמץ.
כדוגמה בסיסית לאופן שבו זה יעבוד, משתמשים יכולים לצלם סרטון וידאו של עצמם, להעלות אותו למשחק, והעיבוד יוכל ליצור אווטרים מותאמים אישית לשימוש במשחק. Nvidia רכשה את הקוד במקור פתוח מהמחקר שלה כרגע, אבל Catanzaro מזהיר שהעבודה המוקדמת בתחום זה מתאימה יותר למדעני מחשב מאשר למפתחי משחקים.
בהדגמה נפרדת, Nvidia הראתה שהיא יכולה לנתח תנועות ריקוד - כמו מהקליפ הפופולרי גנגם סטייל - ולהעביר את המהלכים הללו לאדם אחר באמצעות אותן טכניקות ראייה ממוחשבת. "אנחנו מנתחים את הקוד של האדם, וזה הופך לסקיצה שלנו", אמר קטנזארו. "והמודל מציג את איש היעד שקיבל את השרטוט הזה."
Nvidia מזהירה כי זו עדיין טכנולוגיה בשלב מוקדם, אבל אתה יכול גם לשדרג את הגרפיקה מ משחק קיים והכשיר מודל של תמונות בעולם האמיתי לעיבוד מחדש של משחקים ישנים כדי לגרום להם להיראות טוב יותר. מכיוון שהטכנולוגיה מחייבת את המחשב לנתח אובייקטים המוכרים בעולם האמיתי, Catanzaro מזהיר שזה לא יעבוד על דברים פנטסטיים, כמו עיבוד האלפים של סנטה. בתיאוריה, הוא מודה, אתה יכול לאמן את המחשב לעיבוד אלפים, אבל אתה צריך ליצור אלפים פיזיים וללכוד תמונות כדי שהמחשב ילמד.
כמו איתור קרניים טכנולוגיה שהוצגה בסדרת ה-RTX האחרונה של Nvidia כרטיסי מסך עבור צרכנים, החברה אמרה שהעיבוד המבוסס על A.I זה משמש בצורה היברידית ואינו נועד להחליף את טכניקות העיבוד המסורתיות. במקום זאת, עיבוד מבוסס A.I נועד להתקיים במקביל ולשמש עם מנועי עיבוד גרפי מסורתיים.
נכון לעכשיו, לא ברור מתי הטכנולוגיה הזו תגיע לשוק המשחקים. זה יכול לקחת גם כמה שנים, קטנזארו שיער באופטימיות. בשילוב עם איתור קרניים, עיבוד סצנה מבוסס A.I. יספק ויזואליה איכותית בכותרות משחקים המעובדות בזמן אמת.
המלצות עורכים
- בדקתי את תכונת ה-RTX החדשה של Nvidia, והיא תיקנה את החלק הגרוע ביותר במשחקי מחשב
- מחברים מובילים דורשים תשלום מחברות בינה מלאכותית על השימוש בעבודתם
- Wix משתמשת ב-ChatGPT כדי לעזור לך לבנות במהירות אתר שלם
- ה-Nvidia GPU המסתורי הזה הוא מפלצתיות מוחלטת - והרגע קיבלנו מבט נוסף
- RTX 4060 של Nvidia אולי לא יהיה כזה אכזבה אחרי הכל
שדרג את אורח החיים שלךמגמות דיגיטליות עוזרות לקוראים לעקוב אחר עולם הטכנולוגיה המהיר עם כל החדשות האחרונות, ביקורות מהנות על מוצרים, מאמרי מערכת מעוררי תובנות והצצות מיוחדות במינן.
