A.I. ของ Nvidia และ Ray Tracing สร้างวิดีโอเซลฟี่บนดวงจันทร์บนดวงจันทร์

นอกเหนือจากการเปิดตัวแล็ปท็อป RTX Studio ใหม่ 10 เครื่องที่มีเป้าหมายเป็นผู้สร้างที่ SIGGRAPH แล้ว Nvidia ยังได้ประกาศผลงานบางส่วนอีกด้วย ที่ทีมวิจัยได้ทำในสาขาปัญญาประดิษฐ์ ความเป็นจริงเสริม และคอมพิวเตอร์ กราฟิก ในวันครบรอบ 50 ปีของการลงจอดบนดวงจันทร์ Apollo 11 Nvidia ได้จัดแสดงวิธีการใช้เทคโนโลยีการติดตามรังสีจากกราฟิกการ์ด RTX ปรับปรุงภาพด้วยสายตา นาซาจับไว้เมื่อ 50 ปีที่แล้ว ที่ SIGGRAPH ความพยายามของ Nvidia ในการรำลึกถึง Apollo 11 ก้าวไปอีกขั้น ทำให้แฟน ๆ ของอวกาศมีโอกาสที่จะซ้อนตัวเองเป็น คลิปวิดีโอสั้นเสมือนเป็นนักบินอวกาศ นีล อาร์มสตรอง และ บัซ อัลดริน โดยใช้ A.I. และพลังของการติดตามรังสีเพื่อเรนเดอร์วิดีโอเหล่านี้ เรียลไทม์

“สิ่งที่เรากำลังทำคือการใช้ปัญญาประดิษฐ์เพื่อเล็งกล้องและผู้คนที่สวมเสื้อผ้าข้างถนน เพื่อให้สามารถประมาณท่าทางสามมิติได้” Rob Estes, Nvidia TKTK อธิบาย “เรารู้ว่าพวกเขาอยู่ที่ไหนในอวกาศ 3 มิติ และเรารู้ว่าแขนขาของพวกเขาเคลื่อนไหวอย่างไร ดังนั้นเราจึงวาดภาพโดยใช้

ทำมูนวอล์กบนมูนวอล์ก

ผู้กำกับวิชวลเอฟเฟ็กต์ของฮอลลีวูดทำสิ่งที่คล้ายกันมานานหลายปีโดยใช้ฉากเขียวและนักแสดงโมชั่นแคปเจอร์สวมชุดสูท มีจุดเพื่อจำลองการเคลื่อนไหวของแขนขา แต่มีการติดตามรังสีและ A.I. ก้าวไปอีกขั้นโดยไม่จำเป็นต้องใช้อุปกรณ์พิเศษและ นักแสดง “คุณสามารถทำสิ่งนี้ได้ทุกที่ที่คุณสามารถถ่ายทำใครสักคนได้” เอสเตสอธิบายรายละเอียดเกี่ยวกับประโยชน์ของการใช้ A.I. การติดตามรังสี ในตัวอย่างทางจันทรคตินี้ โดยพื้นฐานแล้ว ผู้เข้าร่วม SIGGRAPH สามารถถ่ายวิดีโอตัดต่อสั้น ๆ ของตัวเองในชุดอวกาศของ Aldrin และ Armstrong ที่กำลังเดินบนดวงจันทร์ราวกับว่าพวกเขาอยู่บนดวงจันทร์ซึ่งเป็นส่วนหนึ่งของภารกิจ Apollo 11

“เราจะมีการจำลองพื้นผิวดวงจันทร์และยานลงจอดบนดวงจันทร์ และเราจะให้พวกเขาดูว่ามันคืออะไร คงจะเหมือนกับว่าพวกเขาได้อยู่บนดวงจันทร์” เขากล่าวพร้อมกับใช้เอฟเฟกต์แสงและการเรนเดอร์ทั้งหมด เรียลไทม์ “นี่เป็นการวิจัยระดับแนวหน้ามากและไม่มีใครเคยทำเช่นนี้มาก่อน คุณกำลังหวี A.I. และการติดตามรังสีในลักษณะที่มีประโยชน์ในทางปฏิบัติมากมาย” สิทธิประโยชน์เหล่านี้ไม่เพียงแต่ช่วยเหลือฮอลลีวูดและเท่านั้น ทีมวิชวลเอฟเฟกต์ แต่ยังรวมถึงนักออกแบบและนักวิจัยที่พยายามแก้ไขปัญหายาก ๆ ด้วยการประมาณค่าการวิจัยของ Nvidia ขยาย

การเรนเดอร์แบบลอยตัวด้วยแว่นตาตามใบสั่งแพทย์

Nvidia ต้องการทำให้การเรนเดอร์สำหรับแอพพลิเคชั่น Augmented และ Virtual Reality ดูสมจริงและคมชัดยิ่งขึ้น และกำลังใช้เทคโนโลยีการเรนเดอร์แบบ Foveated เพื่อบรรลุเป้าหมายนี้ สิ่งที่ทีมนักวิจัยของ Nvidia ทำคือเพิ่มการรองรับเลนส์ที่ต้องสั่งโดยแพทย์ ซึ่งถือเป็นครั้งแรกของอุตสาหกรรม แม้ว่าขณะนี้ยังอยู่ในขั้นตอนการวิจัยเบื้องต้น แต่ Nvidia มองเห็นวันที่ผู้สวมแว่นตาตามใบสั่งแพทย์ไม่จำเป็นต้องสวมแว่นตาแยกต่างหากจากอุปกรณ์เติมความเป็นจริง

Nvidia กำลังทำงานร่วมกับจอแสดงผลหลายประเภทเพื่อให้สามารถสร้างจอแสดงผล VR หรือ AR ที่สอดคล้องกับแว่นตาตามใบสั่งแพทย์ที่คุณอาจมีได้ “นี่เป็นเรื่องใหญ่” เอสเตสกล่าว “คุณไม่เคยเห็น 20/20 มาก่อนเพราะไม่มีการมองเห็นสำหรับจอแสดงผลเหล่านี้”

ในลักษณะเดียวกับที่ Ray Tracing สามารถนำเอฟเฟกต์ภาพยนตร์ที่สมจริงมาสู่วิดีโอเกมได้ การเรนเดอร์สามารถทำให้ฉากและรูปภาพ AR ดูสมจริงยิ่งขึ้นด้วยความละเอียดที่ดีขึ้นโดยการอนุรักษ์ พลังกราฟิก แทนที่จะเรนเดอร์ทั้งฉาก การเรนเดอร์แบบลอยตัวช่วยให้ผู้สร้างสามารถเรนเดอร์ส่วนตรงกลางของฉากได้ในระดับสูง ความเที่ยงตรงซึ่งเป็นจุดที่ดวงตาของคุณมักจะเพ่งความสนใจ และพื้นที่รอบข้างสามารถแสดงผลได้ละเอียดน้อยลงเพื่อประหยัดบน GPU พลัง.

“ดังนั้นเราจึงทำงานเพื่อให้แน่ใจว่าเรากำลังติดตามว่าเกมของคุณอยู่ที่ไหน และใช้สิ่งนี้เพื่อให้คุณเร็วขึ้น อัตราเฟรมและกราฟิกที่ดีขึ้นในการทำความเป็นจริงเสริมหรืออาจนำไปใช้กับความเป็นจริงเสมือนได้เช่นกัน” กล่าว เอสเตส

GauGAN, A.I. ศิลปินได้รับอิสรภาพ

ในอดีต Nvidia ได้แสดงให้เห็นแล้วว่าเป็นอย่างไร เกากัน เครื่องมือวาดภาพสามารถเปลี่ยนแม้แต่ผู้ท้าทายศิลปะในหมู่พวกเราให้กลายเป็นศิลปินโดยให้คุณวาดที่ซับซ้อน ภูมิทัศน์แห่งชีวิตและชีวิตด้วยการลากเส้นง่ายๆ เพียงไม่กี่ครั้งโดยใช้ประโยชน์จากพลังแห่งการประดิษฐ์ ปัญญา. ฉากที่วาดโดย A.I. ที่ Nvidia เปิดเผยนั้น ถูกนำมาใช้ในภาพยนตร์ฮอลลีวูดชื่อดังบางเรื่องเป็นฉากหลังเช่นกัน โดยมีสตูดิโอวางองค์ประกอบที่พวกเขาต้องการสร้างอารมณ์โดยรวมของคลิป

แทนที่จะใช้ A.I. เพื่อระบุองค์ประกอบของฉาก เช่น สุนัขหรือแมว GauGAN ตามความหมายของชื่อ จะใช้ generative adversarial network หรือ GAN โดยระบุตำแหน่งของท้องฟ้าด้วยการวาดเส้นขอบฟ้าและจุดที่มหาสมุทรบรรจบกับท้องฟ้า GauGAN เริ่ม “วาด” ฉากด้วย เมฆและคลื่น และผู้ใช้สามารถเพิ่มหินและหน้าผาทะเลให้กับทิวทัศน์ท้องทะเลนี้ ทำให้ฉากมีเงาที่เหมาะสมและ การสะท้อนกลับ ดังนั้นแทนที่จะระบุวัตถุในภาพ GAN จะช่วยเติมภาพด้วยการสร้างและการเรนเดอร์ฉากที่สมจริง Nvidia อธิบาย

เมื่อพิจารณาถึงความนิยมของเครื่องมือนี้ Nvidia เปิดเผยว่าจะขยายการเข้าถึง GauGAN ให้กับทุกคน ในเวลานี้ Estes กล่าวว่าไม่มีแผนที่จะสร้างรายได้จาก GauGAN แม้ว่าจะมีงานสร้างสรรค์ในก็ตาม ในอุตสาหกรรมภาพยนตร์ และบริษัทก็แค่เพลิดเพลินไปกับความสุขที่ผู้อื่นได้รับเท่านั้น ใช้มัน

คำแนะนำของบรรณาธิการ

• Nvidia เปิดตัว Portal: Prelude RTX และคุณสามารถเล่นได้ฟรี
• 5 ฟีเจอร์ AI ที่น่าทึ่งใน Photoshop ที่คุณสามารถใช้ได้แล้วตอนนี้
• ซูเปอร์คอมพิวเตอร์ของ Nvidia อาจนำมาซึ่งยุคใหม่ของ ChatGPT
• 3 เหตุผลที่คุณควรซื้อ Nvidia GPU มากกว่า AMD
• หากคุณมีการ์ดกราฟิก Nvidia CPU ของคุณอาจมีปัญหาในขณะนี้

อัพเกรดไลฟ์สไตล์ของคุณDigital Trends ช่วยให้ผู้อ่านติดตามโลกแห่งเทคโนโลยีที่เปลี่ยนแปลงไปอย่างรวดเร็วด้วยข่าวสารล่าสุด รีวิวผลิตภัณฑ์สนุกๆ บทบรรณาธิการที่เจาะลึก และการแอบดูที่ไม่ซ้ำใคร