2Dビデオ入力シーケンスを3Dビデオに変換する

Question

どのように奥行き情報を抽出して3Dビデオに変換する2Dビデオシーケンスを作成することができますか。matlabでこれを行うためのアルゴリズムやコードを教えてください。

Answer 1

2Dビデオから深さ情報を抽出することはできません。あなたができる最善の方法は、深さを見積もるテクニック、完全に自動化されたテクニック、オペレータが支援するテクニックを採用することです。もちろん、後者ははるかに優れた品質を提供します。

2Dビデオから深度を生成する典型的な方法の1つは、シーンの異なる部分の動きを分析することです。例えば、動く車の窓から撮影されたシーンを考えてみましょう。車、木、建物など、カメラに近いオブジェクトは、空に近い雲のような背景よりもはるかに速く動くので、オブジェクトの移動速度を分析すると、カメラまでの距離、奥行きマップを生成するために使用される情報、次にステレオ画像を生成するための情報を含む。

シンプルで効果的でないアプローチは、左目と右目に同じビデオを再生することですが、一方の目は1つ以上のフレームだけ遅らせることです。横方向の動きを持つビデオの場合、このテクニックは本当にうまく機能します。どのビデオに対してもこの変換をリアルタイムで生成するAviSynthスクリプトについては、this pageを参照してください。

2Dビデオの深さを推定する技術の簡単な概要は、Wikipediaのページ2D to 3D conversionを参照してください。