NVIDIA Maxine의 최신 릴리스에는 실시간 커뮤니케이션을 향상하고 AI를 통해 영향력 있는 비디오 편집을 향상하는 새롭고 업데이트된 기능이 포함되어 있습니다.
Maxine 개발자 플랫폼은 개발자와 기업에 클라우드에서 GPU 가속 AI 서비스를 제공하여 비디오 및 오디오 스트림을 실시간으로 향상시킬 수 있도록 함으로써 화상 회의 및 편집을 재정의합니다. 이제 NVIDIA AI 엔터프라이즈에서만 독점적으로 제공되는 Maxine 프로덕션 릴리스를 통해 사용자는 증강 현실, 오디오 효과 및 비디오 효과 전반에 걸친 고급 기능에 액세스할 수 있습니다.
아바타의 새로운 얼굴
디지털 아바타는 수십 년 동안 사용되어 왔으며, 종종 사람이나 캐릭터의 스타일화된 애니메이션 표현으로 여겨져 왔습니다.
이제 NVIDIA Maxine의 라이브 포트레이트 기능을 통해 사용자는 자신의 완벽한 사진을 선택하고 표준 웹캠으로 애니메이션을 적용할 수 있습니다. 라이브 포트레이트는 사용자의 머리 움직임과 얼굴 표정을 사용자가 선택한 사진에 동기화합니다. 사용자는 자신의 2D 스타일라이즈드 캐릭터 표현을 선택할 수도 있습니다.
라이브 포트레이트는 이제 Maxine에서 제작 기능으로 사용할 수 있으며 최대 1024×1024 해상도의 고해상도 모델 출력을 사용할 수 있습니다.
나만의 목소리 찾기
사람의 목소리는 감정과 의사 소통의 뉘앙스를 전달할 수 있습니다. 얼리 액세스 버전으로 제공되는 엔비디아 맥신의 새로운 보이스 폰트 기능을 사용하면 마치 디지털 아바타처럼 자신만의 고유한 목소리를 생성할 수 있습니다.
이 기능은 단 30초의 레퍼런스 오디오만으로 오디오 샘플을 디지털 음성으로 변환할 수 있습니다.
음성 글꼴은 언어 장애가 있거나 자신의 목소리를 미세하게 조정하려는 사람들에게 유용할 수 있습니다. 보이스 글꼴은 맥신의 얼리 액세스 버전에서 평가 및 테스트할 수 있습니다.
시선 추적
NVIDIA Maxine의 아이 컨택 기능은 AI와 웹캠 피드를 사용하여 사용자의 시선을 실시간으로 카메라로 향하게 합니다. 마찬가지로 오프라인 비디오에서도 시선을 고정하여 더욱 몰입감 있고 임팩트 있는 비디오를 만들 수 있습니다.
연구에 따르면 대화 중에 눈을 마주치는 것은 개인적인 유대감, 이해, 참여를 촉진하는 것으로 나타났습니다. Maxine 아이 컨택은 화상 회의 중이든 사전 녹화된 비디오를 통해든 사용자가 항상 청중을 바라보도록 하여 커뮤니케이션을 향상시킵니다.
새로운 버전의 Maxine Eye Contact는 자연스럽게 발생하는 미세한 눈의 움직임을 보존하고 주기적으로 ‘시선을 돌리는’ 기능이 추가되어 화상 회의에서 더욱 현실감 있는 경험을 제공합니다. ‘고개 돌리기’ 기능의 빈도와 지속 시간도 조절할 수 있습니다.
또한 최신 버전의 아이 콘택트는 향상된 시선 안정성, 더욱 강력한 오클루전 처리, NVIDIA Ada 세대 GPU와 함께 사용할 때 훨씬 더 짧은 지연 시간 등 품질이 개선되었습니다.
최고의 기능
최신 Maxine 릴리스는 또한 증강 현실, 오디오 효과 및 비디오 효과 전반에 걸쳐 새롭고 업데이트된 실시간 기능을 제공하여 화상 회의 및 편집 기능을 향상시킵니다. 여기에는 다음이 포함됩니다:
- 3D 바디 포즈: 상체만 카메라 뷰에 있을 때 포즈를 추정하여 가상 상호 작용에 새로운 차원을 도입합니다.
- 이전 제품군의 GPU에 비해 최대 1.75배 향상된 성능을 제공하는 NVIDIA Ada Lovelace 아키텍처 기반의 NVIDIA L4 Tensor Core 및 L40 GPU 지원
- AI 그린 스크린, 아이 컨택, 랜드마크 감지 및 얼굴 감지를 위한 NVIDIA Triton 추론 서버 지원으로 단일 및 다중 GPU 워크플로우 모두에서 더 높은 처리량을 제공합니다.
- 오디오 초고해상도 성능 개선
성공을 위한 파트너십
Quicklink 및 CoPilot AI와 같은 많은 NVIDIA 파트너 및 고객이 이미 Maxine을 통해 고품질의 화상 회의 및 편집을 경험하고 있습니다.
Quicklink는 미디어, 방송, 프로덕션 및 스포츠 산업에 원격 프로덕션 솔루션을 제공하는 선도적인 글로벌 기업입니다. 이 회사의 Cre8 비디오 제작 툴을 통해 사용자는 전문적인 가상, 대면 및 하이브리드 이벤트를 제공할 수 있습니다.
“엔비디아와의 파트너십은 원격 게스트 참여부터 시작하여 방송 업계의 과제를 해결하기 위해 시작되었습니다.”라고 퀵링크의 CEO인 리차드 리스(Richard Rees)는 말합니다. “퀵링크 Cre8에 NVIDIA Maxine을 통합하여 Maxine의 자동 프레이밍, 비디오 노이즈 제거, 노이즈 및 에코 제거, 아이 콘택트 기능을 추가함으로써 이러한 문제를 해결했습니다. 이러한 기능은 업계 전반에서 큰 호응을 얻고 있습니다.”
밴쿠버에 본사를 둔 서비스형 소프트웨어 스타트업인 CoPilot AI는 AI와 세일즈 지원 사이의 교차점에서 활동하며 콘텐츠 크리에이터에게 신뢰할 수 있는 솔루션을 제공하기 위해 Maxine을 도입했습니다.
CoPilot AI Video의 공동 설립자인 잭슨 차오(Jackson Chao)는 “NVIDIA Maxine 마이크로서비스를 사용하여 사용자가 즉흥적으로 녹화하고 군중 속에서 돋보일 수 있도록 지원합니다.”라고 말합니다. “Maxine의 아이 콘택트 기능을 사용하면 시청자와의 연결을 손상시키지 않고 대본을 녹화할 수 있습니다. 초보 콘텐츠 크리에이터도 자신감을 가지고 비디오 홍보를 채택하고 연락처와 소통하는 방식을 인간화할 수 있습니다.”
Maxine은 실시간 오디오 및 비디오를 향상시키는 AI 효과 모음을 제공하며 기존 고객 인프라에 통합할 수 있습니다. 또한 이 솔루션은 클라우드, 온프레미스 또는 엣지에 배포할 수 있으므로 거의 모든 곳에서 고품질의 커뮤니케이션이 가능합니다.
가용성
일상적인 화상 회의 요구 사항 개선부터 AI 기술 통합에 이르기까지 NVIDIA Maxine은 모든 전문가를 위한 고품질 비디오 커뮤니케이션을 제공합니다.
최신 Maxine 프로덕션 릴리스는 NVIDIA AI Enterprise 4.1에 독점적으로 포함되어 있으므로 사용자는 Triton 추론 서버, 엔터프라이즈 지원 등과 같은 프로덕션 지원 기능을 활용할 수 있습니다.
NVIDIA Maxine의 제한된 조기 액세스 프로그램에 액세스해야 하는 고객은 Maxine 마이크로서비스 조기 액세스 프로그램 또는 Maxine SDK 조기 액세스 프로그램 페이지에서 관련 온라인 신청서를 작성하세요.
향후 릴리스에서 기능을 개선하는 데 도움이 될 수 있도록 NVIDIA Maxine 및 NVIDIA Broadcast App 설문조사에 참여하여 피드백을 제공할 수 있습니다.