Real-time Free-viewpoint Video Streaming Technology by Using 5G Wireless Network

Abstract

来る5G時代の新たな映像体験技術として，ユーザに高い臨場感を提供する自由視点映像合成技術のニーズが高まっている．これまで，数多くの自由視点映像合成技術が提案されてきたが，複数の高精細なカメラ映像から被写体の3次元形状を推定するために膨大な時間を要するといった課題があり，コンテンツのオフライン制作が必須であった．この制約から，放送波や無線を用いた自由視点映像のリアルタイム配信はこれまで実現されてこなかった．本論文では，リアルタイム処理が可能な自由視点映像合成技術，および5G網を用いた配信システムを提案する．提案手法では，従来，点群として表現されていた被写体3次元形状を，平面によって表現することで高速な映像合成を可能としている．また，当該技術を含む配信システムに5G網を用いることで，ユーザ操作に対して遅れのない合成映像の提示を実現した．実際のスポーツシーンにおける5G網を用いた実証実験において，本提案システムの有効性を確認した．