엔비디아, GTC에서 더 많은 3D 제너레이티브 AI를 공개하다
POSTED BY MIKE SEYMOUR ON MARCH 18, 2024
GTC에서는 비주얼 제너레이티브 AI를 위한 멀티모달 아키텍처인 NVIDIA Edify의 기능이 확장된 모습을 선보였습니다. 2시간에 걸친 CEO 젠슨 황의 기조연설에서 새로운 툴에 대해 간략하게 소개했는데, 이 중 상당수는 VFX 팀에게 점점 더 중요해질 것입니다.
젠슨 황 CEO
3D 에셋 생성은 에디파이가 개발자와 비주얼 콘텐츠 제공업체에 제공하는 최신 기능 중 하나입니다. 새로운 생성 도구를 통해 사용자는 AI 이미지 생성을 더욱 창의적으로 제어할 수 있습니다. 예를 들어, Shutterstock은 크리에이터가 텍스트 프롬프트 또는 이미지를 빠르게 사용하여 가상 장면의 3D 개체를 생성할 수 있는 최신 Edify 아키텍처를 기반으로 구축된 API에 대한 얼리 액세스를 출시합니다.
비주얼 콘텐츠 크리에이터인 Getty Images는 이제 상업적으로 안전한 제너레이티브 AI 서비스에 맞춤형 미세 조정 기능을 추가하여 기업 고객이 브랜드 가이드라인과 스타일을 준수하는 비주얼을 생성할 수 있도록 지원할 예정입니다.
개발자는 오늘 기조연설에서 발표된 추론용 마이크로서비스 모음인 NVIDIA NIM을 통해 게티 이미지와 셔터스톡의 사전 훈련된 에디파이 모델을 API로 곧 테스트해 볼 수 있습니다. 또한, 개발자는 엔비디아 DGX 클라우드에 구축된 AI 파운드리인 엔비디아 피카소를 통해 에디파이 아키텍처를 사용하여 자체 생성 AI 모델을 트레이닝하고 배포할 수 있습니다.
라이브 스트리밍 플랫폼인 Be.Live는 엔비디아 피카소 파운드리 서비스를 사용해 실시간 제너레이티브 AI를 제공함으로써 비주얼을 자동으로 생성하고 시청자에게 인터랙티브한 경험을 선사하고 있습니다. 책임감 있는 비주얼 제너레이티브 AI를 개발하는 기업을 위한 종합적인 플랫폼인 Bria는 추론을 실행하기 위해 피카소를 채택했습니다. 또한 크리에이티브 스튜디오 Cuebric은 몰입형 가상 환경을 구축하기 위해 Picasso 기반 제너레이티브 AI 애플리케이션을 개발하여 영화 제작 및 콘텐츠 제작을 향상시키고 있습니다.
얼리 액세스로 제공되는 Shutterstock의 3D AI 서비스를 통해 크리에이터는 세트 드레싱과 아이디어 구상을 위한 가상 오브젝트를 생성할 수 있습니다. 이 기능을 사용하면 장면의 프로토타입 제작에 필요한 시간을 대폭 단축할 수 있어 아티스트는 영웅 캐릭터와 오브젝트에 더 많은 시간을 집중할 수 있습니다.
상업적으로 안전한 이 모델은 Shutterstock의 라이선스 데이터로 학습되었습니다. 셔터스톡은 실제로 수십만 명의 아티스트에게 보상을 지급했으며, 수백만 명에게 추가로 지급할 것으로 예상되는 콘텐츠 IP의 제너레이티브 기술 교육 역할에 대한 보상을 지급했습니다.
Shutterstock 3D AI 생성기를 사용하여 생성된 에셋은 평면 이미지로 렌더링 및 배열됩니다.
크리에이티브 전문가는 이 도구를 사용하여 텍스트 프롬프트 또는 참조 이미지에서 에셋을 빠르게 생성하고 인기 있는 3D 형식 중에서 선택하여 파일을 내보낼 수 있습니다. 에디파이 3D 기반 서비스에는 생성된 콘텐츠를 필터링할 수 있는 안전장치도 내장되어 있습니다.
디즈니 로봇과 함께 무대에 선 젠슨 황 CEO
제품 시각화 렌더링
게티 이미지
게티 이미지는 상업적으로 안전한 AI 서비스를 통해 제공되는 기능을 지속적으로 확장하고 있습니다.
생성 AI 서비스를 통해 제공하는 기능을 지속적으로 확장하고 있습니다.
게티이미지 AI는 게티이미지의 자체 크리에이티브 콘텐츠만을 학습합니다. 따라서 새로 생성되는 이미지는 문제가 있는 이미지 생성을 방지하기 위해 허가가 승인된 데이터에 대해서만 상업적으로 안전하게 학습됩니다.
새로운 편집 도구
게티이미지는 이미지에 개체를 추가, 제거 또는 교체하는 인페인팅과 창의적인 캔버스를 확장하는 아웃페인팅을 위한 Edify 기반 API를 출시했습니다. 이 새로운 기능은 현재 Gettyimages.com과 iStock.com에서 모두 사용할 수 있으며, 5월부터는 기업의 브랜드와 비주얼 스타일에 맞게 Edify 기초 모델을 맞춤 조정하는 서비스도 제공할 예정입니다.
새로운 서비스는 기업이 자체 데이터 세트를 업로드하고, 자동으로 생성된 태그를 검토하고, 미세 조정 작업을 제출하고, 프로덕션에 배포하기 전에 결과를 검토할 수 있는 코드 없는 셀프 서비스 방식을 특징으로 합니다.
맞춤형 미세 조정 도구의 일환으로, 게티이미지는 제너레이티브 AI의 가장 큰 과제 중 하나인 이미지 출력을 보다 세밀하게 제어할 수 있는 API 모음을 출시할 예정입니다. 개발자는 곧 스케치, 뎁스 및 세그먼테이션 기능에 액세스할 수 있게 되며, 이를 통해 사용자는 AI의 이미지 생성을 안내하는 스케치를 제공하고, 뎁스 맵을 통해 참조 이미지의 구도를 복사하고, 이미지의 일부를 분할하여 캐릭터나 물체를 추가, 제거 또는 보정할 수 있습니다. 사용자는 생성한 모든 비주얼을 사용자가 원하는 해상도로 다운로드하고 라이선스를 부여할 수 있습니다.
360도 AI HDI
3D 콘텐츠 제작을 위한 다쏘시스템의 3DEXCITE 애플리케이션과 CGI 스튜디오 카타나는 OpenUSD 기반 3D 워크플로 및 애플리케이션 개발을 위한 컴퓨팅 플랫폼인 엔비디아 옴니버스를 기반으로 한 워크플로에 셔터스톡의 생성 360 HDRi API를 통합하고 있습니다.
또한 Shutterstock은 텍스트 또는 이미지 프롬프트에서 생성된 360 HDRi 환경을 사용하여 3D 장면을 조명하는 Edify 기반 도구를 구축하고 있습니다.
대화 프롬프트를 3D 환경으로 전환
액센츄어 송은 마케팅 목적으로 컴퓨터 지원 설계 데이터에서 고퀄리티의 디펜더 차량을 생성하기 위해 Omniverse 플랫폼을 사용하고 있습니다. 제너레이티브 AI 마이크로서비스와 결합하여 액센츄어 송은 대화형 프롬프트를 통해 영화 같은 인터랙티브 3D 환경을 제작할 수 있습니다. 그 결과 사실적으로 생성된 환경과 디펜더 차량의 디지털 트윈을 결합한 완벽한 몰입형 3D 장면이 탄생했습니다. NVIDIA 텍스트-이미지 프롬프트 툴은 현재 75개 언어로 제공됩니다.
클라이언트
게티 이미지의 API 서비스는 이미 다음과 같은 주요 크리에이티브 및 광고주들이 사용하고 있습니다:
Dentsu Inc: 일본에 본사를 둔 이 광고 대행사는 마케팅 활용 사례를 위한 만화 및 애니메이션 스타일의 콘텐츠를 제작할 수 있는 앱인 MAFA: Manga Anime For All을 구동하기 위해 게티 이미지의 생성 AI API 서비스를 사용하고 있습니다.
McCann: 이 크리에이티브 에이전시는 고객이 브랜드 마스코트와 상호작용할 수 있는 일반 감기약 뮤시넥스를 위한 혁신적인 게임을 개발하는 데 제너레이티브 AI를 활용했습니다.
리픽 아나돌 스튜디오: 예술 작품에 제너레이티브 AI를 사용하는 것으로 유명한 이 스튜디오는 열대우림에서 영감을 받은 예술 작품을 GTC에서 선보이며, Refik의 열대우림 카탈로그에 맞춰 미세 조정된 게티이미지의 AI 모델을 사용하여 제작했습니다.
WPP: 마케팅 및 커뮤니케이션 서비스 회사로, 코카콜라 컴퍼니와 파트너십을 맺고 게티 이미지의 모델을 미세 조정하여 브랜드 스타일과 가이드라인에 맞는 맞춤형 비주얼을 제작하는 방법을 모색하고 있습니다.