SIGGRAPH 2026, MCP 기반 에이전트 AI와 합성 영상 탐지기 공개

전문가용 창작 도구에서 단순 반복 작업을 수동으로 처리하는 일은 오랫동안 당연한 불편함이었다. 레이어 이름을 하나하나 수정하거나 에셋 크기를 조정하는 작업은 창의성과 무관하지만 작업자의 많은 시간을 소모한다. 엔비디아는 2026년 7월 20일 SIGGRAPH 컨퍼런스에서 이러한 수동 워크플로우를 자동화하는 MCP(Model Context Protocol, 모델 컨텍스트 프로토콜)를 발표했다. MCP는 AI 에이전트가 창작 도구 내부의 API와 데이터에 직접 접근해 작업을 수행하도록 돕는 표준 규격이다.

기존의 GPU 가속 기술이 뷰포트나 렌더링 속도를 높이는 데 집중했다면 MCP는 애플리케이션을 에이전트가 조작 가능한 상태로 만든다. 사용자는 AI 에이전트에게 텍스처 누락 검사나 컬러 관리 확인 같은 반복 업무를 맡기고 최종 결정만 내릴 수 있다. 이를 위해 엔비디아는 NVIDIA Agent Toolkit을 제공한다. 이 툴킷은 원격 서버에 연결하는 MCP 클라이언트와 도구를 게시하는 MCP 서버 구조를 모두 지원하여 로컬 워크스테이션에서 모델 추론과 워크플로우를 실행하게 한다.

로컬 환경에서의 실행은 보안과 응답 속도 측면에서 이점을 가진다. NVIDIA RTX PRO 워크스테이션, DGX Spark, DGX Station 시스템을 활용하면 민감한 창작 데이터를 외부 클라우드로 전송하지 않고도 에이전트 파이프라인을 구축할 수 있다. 이는 데이터 유출 위험을 줄이면서 전문 창작자의 작업 환경 내에서 AI 추론을 직접 처리하는 기준을 제시한다. 외부 망과 분리된 환경에서도 에이전트가 도구 내부의 컨텍스트를 이해하고 작업을 수행하는 구조다.

영상 콘텐츠의 진위 여부를 판별하는 기술도 함께 공개됐다. 엔비디아는 NVIDIA NIM(NVIDIA Inference Microservice, 엔비디아 추론 마이크로서비스) 형태로 제공되는 Synthetic Video Detector를 발표했다. NIM은 최적화된 AI 모델 배포 단위로 영상 프레임을 분석해 합성 콘텐츠 포함 여부를 점수로 산출한다. 테스트 결과 비압축 영상에서 92%의 정확도를 보였으며 15% 압축 시 87%, 50% 압축 시에는 82%의 정확도를 유지했다. 이는 뉴스룸이나 소셜 미디어의 압축 환경에서도 신뢰할 수 있는 검증 신호를 제공한다.

로컬 추론을 지원하는 NVIDIA Agent Toolkit과 MCP 작동 구조

1080p 영상을 분석하는 데 소요되는 시간 22ms. 1초에 수십 프레임을 처리하는 이 속도는 단순한 수치 개선을 넘어 작업자가 AI 에이전트를 실시간으로 제어할 수 있는 환경을 만든다. 포토샵이나 언리얼 엔진 같은 전문가용 툴에서 반복적인 단순 작업을 수동으로 처리하던 불편함은 이제 AI 에이전트가 도구 내부의 API(응용 프로그램 인터페이스: 소프트웨어 간 통신 규칙)와 데이터에 직접 접근함으로써 해결된다. 엔비디아는 이를 위해 AI 에이전트가 외부 도구 및 데이터에 접근하기 위한 표준 규격인 MCP(Model Context Protocol, 모델 컨텍스트 프로토콜) 생태계를 발표했다.

NVIDIA Agent Toolkit은 에이전트가 도구를 제어하기 위한 MCP 클라이언트와 MCP 서버 구조를 모두 지원하여 구현 유연성을 높였다. MCP 클라이언트는 원격에 위치한 MCP 서버에 연결하여 기능을 요청하는 역할을 수행하며, MCP 서버는 AI 에이전트가 사용할 수 있도록 구체적인 툴과 기능을 외부에 게시하는 역할을 한다. 에이전트는 이 표준화된 통로를 통해 창작 도구의 내부 기능을 호출하며, 사용자는 복잡한 스크립트 작성 없이 자연어로 도구를 조작하는 파이프라인을 구축할 수 있다.

이 모든 모델 추론과 에이전트 워크플로우는 NVIDIA RTX PRO 워크스테이션, DGX Spark, DGX Station 시스템에서 로컬로 실행된다. 전문 창작자를 위해 설계된 이 하드웨어들은 AI 성능을 스튜디오 파이프라인에 더 가깝게 배치하여 응답 속도를 극대화하고 외부 서비스에 대한 의존도를 낮춘다. 특히 기업의 핵심 자산인 민감한 창작 데이터를 외부 클라우드로 전송하지 않고 로컬 환경에서 처리함으로써 데이터 유출 위험을 원천적으로 차단하는 보안 기준을 제시한다.

실제 처리 성능을 보면 1080p 영상 기준 RTX 시스템에서 22ms, L40 GPU에서 약 30ms의 분석 시간이 소요된다. 이는 고해상도 영상의 합성 여부를 판별하는 작업을 실시간 워크플로우에 통합할 수 있는 수치다. 배포 환경은 자체 서버를 구축하는 온프레미스부터 데이터 발생 지점에서 즉시 처리하는 엣지, 그리고 외부 망과 완전히 분리되어 보안이 극대화된 에어갭 환경까지 모두 지원한다. 사용자는 보안 수준과 인프라 상황에 따라 하이브리드 구성 등 최적의 배포 방식을 선택해 에이전트 자동화를 구현할 수 있다.

단순 렌더링 가속에서 '에이전트 준비(Agent-ready)' 단계로의 전환

시각효과 스튜디오의 테크니컬 디렉터는 렌더링 버튼을 누른 뒤 결과물이 나올 때까지 수 시간을 기다리거나, 수백 개의 샷에서 누락된 텍스처를 일일이 찾아내는 단순 반복 작업에 매달려 왔다. 엔비디아는 지난 20년간 GPU 가속 뷰포트(화면상에 3D 모델을 실시간으로 보여주는 창)와 CUDA(엔비디아 GPU의 병렬 컴퓨팅 플랫폼) 기반 효과를 통해 이러한 계산 속도를 높이는 데 집중했다. RTX PRO 레이 트레이싱(빛의 경로를 추적해 실사처럼 렌더링하는 기술)과 AI 디노이징(이미지의 노이즈를 제거해 화질을 높이는 기술) 역시 렌더링 시간을 단축해 작업 효율을 올리는 도구였다. 지금까지의 가속 영역이 연산량을 줄여 결과물을 빠르게 뽑아내는 속도의 문제였다면, 이제는 도구 자체가 AI와 소통할 수 있는 상태로 변한다.

엔비디아가 제시하는 MCP 기반의 환경에서 애플리케이션은 단순히 처리 속도가 빨라지는 것을 넘어 에이전트 준비(Agent-ready, AI 에이전트가 도구의 기능을 직접 호출하고 조작할 수 있는 상태) 단계로 진입한다. 이는 AI가 소프트웨어의 내부 구조를 이해하고 특정 명령을 수행할 수 있는 인터페이스를 갖췄음을 의미한다. 예를 들어 아티스트는 AI 에이전트에게 씬 내부에서 누락된 텍스처를 검사하거나, 일관되지 않은 컬러 관리 설정을 찾아내라는 명령을 내릴 수 있다. 또한 파이프라인 규칙에 따라 샷을 검증하고 데일리 리뷰를 위한 플레이블래스트(저해상도 미리보기 영상)를 생성하는 작업까지 에이전트가 직접 수행한다. 이는 단순한 매크로 실행이 아니라 AI가 현재 작업 중인 씬의 상태를 읽고 그에 맞는 적절한 API를 호출하는 방식이다.

이 과정에서 제어권은 여전히 인간이 보유한다. AI 에이전트는 텍스처 누락 확인이나 샷 검증 같은 반복적인 기술 업무를 처리하는 보조자 역할에 머문다. 최종적인 시각적 완성도나 예술적 방향성을 결정하는 창의적 판단은 사람이 직접 내리는 구조다. 기존의 GPU 가속이 렌더링이라는 결과값을 얻기 위한 물리적 시간을 줄였다면, MCP는 작업의 맥락을 이해하는 에이전트를 통해 작업자가 단순 노동에서 벗어나 창작에 집중하게 만든다. 도구가 계산기에서 협업자로 진화하며 작업 흐름의 병목 지점이 연산 속도가 아닌 작업자의 판단 속도로 이동한다. 이는 툴의 성능 지표가 초당 프레임 수에서 작업 완료까지의 총 소요 시간으로 확장됨을 뜻한다.

어도비부터 언리얼 엔진까지, MCP 기반 파트너 생태계 확장

전문가용 툴을 다루는 작업자의 화면에는 수백 개의 레이어와 복잡한 노드 트리가 얽혀 있다. 단순한 이름 변경이나 에셋 크기 조정 같은 반복 작업에 수 시간을 쏟던 작업자는 어느 순간 마우스에서 손을 떼고 자연어로 명령을 내린다. 엔비디아가 발표한 MCP(Model Context Protocol, 모델 컨텍스트 프로토콜: AI 에이전트가 외부 도구 및 데이터에 접근하기 위한 표준 규격) 기반 생태계는 창작자가 도구의 인터페이스에 종속되지 않고 AI 에이전트가 툴 내부의 API와 데이터에 직접 접근해 작업을 수행하게 만든다.

어도비는 파이어플라이(Firefly)와 익스프레스(Express), 크리에이티브 클라우드(Creative Cloud)로 AI 어시스턴트를 확장했다. 사용자가 원하는 결과물을 설명하면 어시스턴트가 다단계 워크플로우를 조율하는 방식이다. 개발자를 위해서는 어도비 익스프레스 개발자 MCP 서버를 제공해 공식 문서와 API를 기반으로 애드온을 구축할 수 있게 했다. 캔바의 어피니티(Affinity)는 클로드(Claude)용 AI 커넥터를 도입했다. 디자이너는 레이어 이름 변경, 다채널 에셋 리사이징, 벡터 경로 최적화 같은 반복 업무를 자연어로 처리하며, 워크플로우에 맞춘 재사용 스크립트를 생성해 제작 비용을 줄인다.

블렌더(Blender)는 블렌더 랩(Blender Lab)을 통해 파이썬 API와 문서에 접근하는 경량 MCP 서버를 제공한다. 보리스 FX 실루엣(Boris FX Silhouette)은 FX 스크립팅 API를 MCP 툴로 활용해 노드 트리 구축과 키프레임 편집을 지원한다. 설정 패널에서 MCP 패키지를 설치하고 클라이언트 설정을 붙여넣는 방식으로 연결하며, 활성 세션에 연결하는 온라인 모드와 배치 처리를 위한 헤드리스 오프라인 모드를 모두 지원한다. 파운드리 그립테이프(Foundry Griptape)는 VFX 파이프라인용 AI 오케스트레이션, 즉 여러 AI 모델의 실행 순서를 제어하는 기능을 지원한다. 블렌더 및 누크(Nuke)와 통합해 클린업과 품질 관리 작업을 자동화한다.

사이드FX 후디니 22(SideFX Houdini 22)는 `APEX Script` 워크플로우를 통해 캐릭터 리그용 코드를 생성하고 정제한다. AI 어시스턴트가 엄선된 APEX Script 구문과 함수, 문서 및 예제 집합에 접근해 절차적 캐릭터 리깅 코드를 정교하게 다듬는 방식이다. 언리얼 엔진(Unreal Engine)은 MCP로 AI 클라이언트를 에디터에 연결해 씬과 에셋의 상태를 추론하는 기능을 구현했다. 표준화된 프로토콜을 통해 게임 개발자와 가상 제작 팀이 에디터 기능을 AI로 제어할 수 있게 된다. 이러한 워크플로우는 엔비디아 에이전트 툴킷의 MCP 클라이언트와 서버 구조를 통해 RTX PRO 워크스테이션이나 DGX Spark, DGX Station 같은 로컬 환경에서 실행된다. 민감한 창작 데이터를 외부 클라우드로 전송하지 않고 로컬에서 추론과 자동화를 구현하는 것이 파이프라인 구축의 핵심 기준이 된다.

국내 VFX 및 게임 스튜디오의 파이프라인 보안과 자동화 전략

어제까지 연구실의 프로토타입이었던 기술이 오늘 바로 실무 현장의 파이프라인에 적용된다. 지금의 격차는 단순한 기술 진보가 아니라 인프라의 배포 속도에서 결정된다. 국내 대형 VFX 및 게임 스튜디오는 보안을 위해 데이터 외부 유출을 엄격히 제한하며 이는 클라우드 AI 도입의 가장 큰 걸림돌이었다. 엔비디아는 RTX PRO 워크스테이션과 DGX Spark, DGX Station 시스템을 통해 모델 추론과 에이전트 실행을 로컬 환경에서 처리하는 방식을 제공한다. RTX PRO는 아티스트 가까이에서 성능을 제공하고 DGX 시스템은 스튜디오 파이프라인 전반의 가속을 담당한다. 외부 서비스 의존도를 낮추고 민감한 창작 데이터를 통제된 환경 내에 유지하며 응답 속도를 높이는 구조다. 로컬 인프라를 활용한 에이전트 구축은 데이터 보안이 최우선인 국내 제작 환경에서 실무적인 자동화 기준이 된다.

기술 감독(TD, 창작물의 기술적 구현을 관리하는 담당자)이 수행하던 단순 반복 업무를 AI 에이전트에게 위임하여 작업 시간을 단축한다. 에이전트는 씬 내부에서 누락된 텍스처를 검사하거나 일관되지 않은 컬러 관리를 찾아내어 표시하는 작업을 수행한다. 또한 수출용 변형 파일을 준비하고 데일리 확인을 위한 플레이블래스트(Playblast, 렌더링 전 단계의 저해상도 미리보기 영상)를 생성하며 파이프라인 규칙에 따라 샷을 검증한다. 이러한 과정은 기술 감독이 수동으로 하나씩 확인하던 검수 단계를 자동화하여 단순 반복 업무의 부하를 줄인다. 최종적인 창의적 결정권은 인간이 보유하되 기술적 무결성을 확인하는 단계만 에이전트가 처리하는 방식이다.

외주 제작물이나 소스 영상의 진위 여부를 가려내는 검증 체계도 실무 워크플로우에 도입 가능하다. 최적화된 AI 모델 배포 단위인 엔비디아 추론 마이크로서비스(NIM) 기반의 합성 영상 탐지 도구를 활용한다. 이 서비스는 영상 프레임을 분석해 합성 콘텐츠 포함 여부를 분류 점수로 산출하며 편집 팀은 이 점수를 바탕으로 검토 우선순위를 정하거나 의심스러운 영상을 격리하여 편집 표준을 보호한다. 특히 외부 망과 완전히 분리된 에어갭(Air-gapped) 환경이나 온프레미스, 엣지, 하이브리드 환경에 배포할 수 있는 유연성을 갖췄다. 이는 보안 수준이 매우 높은 국내 스튜디오가 외부 유출 걱정 없이 영상의 진위를 빠르게 필터링하고 관리할 수 있는 환경을 제공한다.

이제 창작 도구의 가치는 단순한 기능 제공이 아니라 에이전트가 도구 내부의 API와 데이터에 얼마나 유연하게 접근하느냐로 결정된다. 보안이 중요한 실무 환경일수록 데이터 외부 유출 없이 로컬에서 모든 워크플로우를 완결하는 구조가 필수적이다. RTX PRO나 DGX 기반의 로컬 환경에서 MCP 클라이언트와 서버를 구성해 파이프라인 자동화를 구현하는 것이 실무 도입의 실질적인 기준이다.