캐나다 몬트리올에서 열린 신경 정보 처리 회의에서 Nvidia 연구원들은 다음과 같은 사실을 입증했습니다. 인공 지능의 힘을 사용하여 합성적이면서도 사실적인 세부 묘사와 장면을 렌더링할 수 있습니다. 텍스처. 연구진은 이 연구가 아직 초기 단계에 있어 기술이 언제 구현될지는 불확실하다고 주장한다. 소비자에게 출시되었지만 Nvidia의 인공 지능 기반 렌더링에 대한 큰 잠재력이 있습니다. 게임 공간.
Nvidia의 Applied Deep Learning 부사장인 Bryan Catanzaro는 컨퍼런스 콜에서 “이 작업은 신경망을 사용하여 컴퓨터 그래픽을 렌더링하는 새로운 방법에 관한 것입니다.”라고 말했습니다. 기본적으로 연구자들은 AI를 어떻게 적용할 수 있는지 알고 싶었습니다. 컴퓨터 그래픽을 더 좋게 만들기 위한 해결책은 새로운 그래픽을 렌더링하기 위해 실제 비디오에 기계 학습을 적용하는 것입니다.
추천 동영상
Catanzaro는 "우리는 물리적 세계를 높은 수준으로 표현하는 시스템을 구축했습니다. 기본적으로 비디오 스케치를 가져와 렌더링된 장면으로 변환하는 것입니다."라고 말했습니다. “모델은 현실 세계의 물체에 대한 높은 수준의 정보를 이해한 다음 이를 정교하게 만들어 질감과 조명 정보를 추가합니다. 새로운 장면을 그래픽과 합성할 수 있도록 하는 것이 목표입니다.”
기계 학습은 기존 비디오를 분석하는 데 사용되며 Nvidia는 컴퓨터 비전 기술을 적용하여 개체와 해당 속성에 레이블을 추가합니다. 이는 A.I. 예를 들어 도시의 풍경을 인식하고 어떤 물체가 나무, 자동차, 건물인지 이해할 수 있습니다.
Nvidia에 따르면 이 기술은 버클리 캘리포니아 대학의 연구와 같은 기존 연구에서 파생되었습니다. 이 회사는 과거에도 다른 AI 기반 렌더링 기술을 선보였습니다. 이미지에서 노이즈 제거.
연구원들은 Tensor Core GPU에서 실시간 렌더링을 달성할 수 있었지만 컨퍼런스에서 Nvidia는 Titan V 카드에서 이 기술을 시연했습니다. “어떤 프로세서에서나 이 작업을 수행할 수 있지만 실시간 측면에는 많은 AI가 필요합니다. 처리량입니다.” Catanzaro는 Tensor Core GPU가 중요하다고 설명하면서 설명했습니다.
콘텐츠를 제작하고 이를 가상 세계에 추가할 수 있게 되면 게임 시장은 본 연구를 통해 창출된 작업으로부터 큰 이익을 얻을 수 있습니다. 예를 들어, 개발자는 오래된 타이틀을 다시 렌더링하여 고화질 비주얼을 추가하여 오래된 게임을 "리마스터링"하거나, 적은 노력으로 기존 게임에 새로운 레벨을 추가할 수 있습니다.
이것이 어떻게 작동하는지에 대한 기본적인 예로, 사용자는 자신의 비디오를 찍어 게임에 업로드할 수 있으며, 렌더링을 통해 게임에서 사용할 고도로 개인화된 아바타를 만들 수 있습니다. Nvidia는 현재 연구에서 얻은 코드를 오픈 소스로 공개했지만 Catanzaro는 이 분야의 초기 작업이 게임 개발자보다 컴퓨터 과학자에게 더 적합하다고 경고합니다.
별도의 데모에서 Nvidia는 인기 뮤직 비디오와 같은 댄스 동작을 분석할 수 있음을 보여주었습니다. 강남 스타일 — 동일한 컴퓨터 비전 기술을 사용하여 이러한 움직임을 다른 사람에게 전달합니다. Catanzaro는 “우리는 사람의 코드를 분석하고 그것이 우리의 스케치가 됩니다.”라고 말했습니다. "그리고 모델은 그 스케치를 바탕으로 대상 인물을 렌더링합니다."
Nvidia는 이것이 아직 초기 단계의 기술이지만 다음에서 그래픽을 업그레이드할 수도 있다고 경고합니다. 기존 게임을 만들고 실제 이미지를 기반으로 모델을 훈련하여 오래된 게임을 다시 렌더링하여 더 보기 좋게 만듭니다. 이 기술을 사용하려면 컴퓨터가 현실 세계에 알려진 개체를 분석해야 하기 때문에 Catanzaro는 산타의 엘프를 렌더링하는 것과 같은 환상적인 작업에는 작동하지 않을 것이라고 경고합니다. 이론적으로는 엘프를 렌더링하도록 컴퓨터를 훈련시킬 수 있지만 컴퓨터가 학습할 수 있도록 실제 엘프를 만들고 이미지를 캡처해야 한다고 그는 인정합니다.
처럼 광선 추적 Nvidia의 최근 RTX 시리즈에 도입된 기술 그래픽 카드 소비자를 위해 회사는 이 AI 기반 렌더링이 하이브리드 방식으로 사용되며 기존 렌더링 기술을 대체하기 위한 것이 아니라고 말했습니다. 대신, A.I. 기반 렌더링은 기존 그래픽 렌더링 엔진과 공존하고 사용되도록 고안되었습니다.
현재로서는 이 기술이 언제 게임 시장에 출시될지는 확실하지 않습니다. Catanzaro는 낙관적으로 추측하면서 몇 년 정도 걸릴 수 있다고 말했습니다. 와 결합 광선 추적, A.I. 기반 장면 렌더링은 실시간으로 렌더링되는 게임 타이틀에 고품질의 시각적 효과를 제공합니다.
편집자의 추천
- Nvidia의 새로운 RTX 기능을 테스트했는데, PC 게임의 가장 나쁜 부분을 수정했습니다.
- 최고 저자는 AI 회사에 자신의 작품 사용에 대한 대가를 요구합니다.
- Wix는 ChatGPT를 사용하여 전체 웹사이트를 빠르게 구축하도록 돕습니다.
- 이 신비한 Nvidia GPU는 정말 괴물입니다. 그리고 우리는 방금 또 다른 모습을 보았습니다.
- Nvidia의 RTX 4060은 결국 그렇게 실망스럽지 않을 수도 있습니다.
당신의 라이프스타일을 업그레이드하세요Digital Trends는 독자들이 모든 최신 뉴스, 재미있는 제품 리뷰, 통찰력 있는 사설 및 독특한 미리보기를 통해 빠르게 변화하는 기술 세계를 계속해서 살펴볼 수 있도록 도와줍니다.
