Nvidia, DLSS 5 세부 정보 공개: 세 가지 신경망 모델과 예술적 제어를 위한 마스크

3월 16일 GTC(GPU Technology Conference)에서 Nvidia는 DLSS 5를 공개했고, CEO 젠슨 황(Jensen Huang)은 이를 두고 '그래픽스 분야의 GPT 모먼트'라고 표현했지만, 이 발표는 거센 비판을 불러일으켰다. 사용자들은 이 기술을 'AI 슬롭(AI slop)'이라고 폄하했다. 로스앤젤레스에서 열린 SIGGRAPH(컴퓨터 그래픽스 학회) 행사 중이던 7월 20일, Nvidia는 마침내 DLSS 5의 작동 방식을 상세히 공개했다. DLSS 5에는 세 가지 신경망(모델 A, 모델 B, 모델 C)이 포함되어 있으며, 이들은 처리 균형과 리소스 요구량 면에서 서로 다르다. 개발자는 장면별로 어떤 모델을 사용할지 선택할 수 있고, 지연 없이 실시간으로 모델을 전환할 수 있다. 또한 이 시스템은 시간적 스트리밍(temporal streaming) 기법을 사용해 프레임 간 깜빡임을 줄인다. 핵심 기능 중 하나는 마스크와 두 개의 강도 조절기(구조적 조절기와 색조 조절기)로, 이는 객체 단위로 작동한다. 이를 통해 아티스트는 캐릭터의 얼굴에는 생성형 처리를 비활성화하면서 배경 환경에는 이를 그대로 적용할 수 있다. 기존의 클래식 렌더링과 업스케일링은 여전히 기하학적 구조, 카메라, 구도, 기본 조명을 담당하며, DLSS 5는 그 위에 얹히는 생성형 레이어 역할을 한다. 지난 3월 시연에서는 GeForce RTX 5090 카드 두 장이 사용되었지만, Nvidia에 따르면 최적화된 버전은 GPU(그래픽 처리 장치) 한 장으로도 구동이 가능할 것이라고 한다. 4K 해상도 프레임 하나를 처리하는 데 16밀리초(초당 60프레임에 해당)가 걸릴 수 있다는 설명이다. Nvidia는 아직 최소 VRAM(비디오 랜덤 액세스 메모리) 용량이나 지원 GPU 목록을 공개하지 않았지만, RTX 50 시리즈(Blackwell 아키텍처)가 기본 사양으로 여겨지고 있다. DLSS 5는 2026년 가을 출시가 예정되어 있으며, 현재까지 확정된 지원 게임으로는 Starfield, Assassin's Creed Shadows, Hogwarts Legacy, Oblivion Remastered 등이 있다. 여기에 더해 Bethesda, Capcom, Ubisoft 등도 지원을 약속했다. 수석 엔지니어 에드워드 류(Edward Liu)는 진정한 의미의 실시간 포토리얼리즘은 아직 달성되지 않았다고 인정했다.