다시점 영상을 이용한 실시간 3D 모델 생성 시스템

Abstract

본 논문은 다시점 영상 획득에서 영상 기반 3D 모델 생성까지 실시간으로 처리가 가능한 실시간 3D 모델 생성 시스템을 소개한다. 이 시스템은 18대의 카메라에서 입력되는 HD급 영상을 수집, 전송, 관리하는 방법을 소개하며, 전경과 배경의 분리와 부드러운 3D 볼륨 모델 생성 과정을 설명한다. 이 논문은 18대의 카메라에서 입력되는 HD급 영상을 실시간으로 처리하기 위한 새로운 분산 데이터 송수신 및 관리 방법을 제안한다. 또한, 다시점 영상으로부터 부드러운 3D 모델을 생성하기 위한 시각 차이를 이용한 코드북 기반 전경과 배경 분리 알고리즘, 원근 보정 보간법을 이용한 수정된 마칭 큐브 알고리즘을 기술한다. 이 시스템은 현재 초당 30프레임 처리 속도로 구축되어 있다. This paper introduces a real-time 3D model generation system that can process in real time from multi-view image acquisition to image-based 3D model generation. This system describes how to collect, transmit, and manage the HD images input from 18 cameras and explain the background separation and smooth 3D volume model generation process. This paper proposes a new distributed data transmission and reception method for real-time processing of HD images input from 18 cameras. In addition, we describe a codebook-based background separating algorithm and a modified marching cube algorithm using perspective difference interpolation to generate smooth 3D models from multi-view images. The system is currently being built with a throughput rate of 30 frames per second.