자유 시점 영상을 더 작게 저장하는 SmoothMotionVectors
3D Gaussian Splatting 자유 시점 영상의 모션 벡터를 시공간적으로 매끄럽게 만들어 화질을 지키면서 저장 공간을 약 20% 줄인 연구입니다.
논문 《SmoothMotionVectors: Optimizing Your Content for Video Codecs in Free View Video Compression》
저자 Mingyang Song · Yang Zhang · Siyu Tang · Tunç Ozan Aydin
연구 Disney Research Studios · ETH Zurich
발표 SIGGRAPH 2026
공개 2026-07-16
영상 9분 41초
3D Gaussian Splatting 장면을 비디오 코덱에 맞추는 방법
《SmoothMotionVectors》는 3D Gaussian Splatting으로 복원한 동적 장면을 자유 시점 영상으로 저장할 때, 화질과 용량에 영향을 주는 파이프라인 선택을 분석한 연구다. 시간 단위 청킹, 변형 기반 복원, 양자화 인지 학습을 하나씩 비교해 실제 압축 효율을 높이는 조건을 찾는다.
짧은 GOP를 사용하면 프레임 간 오차가 누적되는 것을 줄여 복원 품질은 좋아지지만, 기준 프레임이 늘어나 저장 공간이 커진다. 연구팀은 이 상충 관계를 측정하고 장면의 움직임을 표현하는 벡터 자체를 공간과 시간 양쪽에서 부드럽게 만드는 방법을 제안했다.
매끄러운 모션 벡터는 기존 비디오 코덱이 더 쉽게 압축할 수 있는 변형 신호를 만든다. 별도의 전용 코덱을 설계하는 대신 이미 널리 쓰이는 압축 도구가 3D 장면의 시간적 변화도 효율적으로 처리하도록 콘텐츠 표현을 정돈하는 접근이다.
실험에서는 기존 최고 수준 방법과 비교해 화질을 유지하거나 개선하면서 저장 공간을 약 20% 줄였다. 자유 시점 영상의 품질만 높이는 데서 그치지 않고, 실제 전송과 보관 비용까지 함께 고려했다는 점이 이 연구의 실용적인 강점이다.