JP3320592B2 - 映像表現方法及び装置 - Google Patents
映像表現方法及び装置Info
- Publication number
- JP3320592B2 JP3320592B2 JP18991695A JP18991695A JP3320592B2 JP 3320592 B2 JP3320592 B2 JP 3320592B2 JP 18991695 A JP18991695 A JP 18991695A JP 18991695 A JP18991695 A JP 18991695A JP 3320592 B2 JP3320592 B2 JP 3320592B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- fragment
- images
- video
- time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Landscapes
- Processing Or Creating Images (AREA)
- Image Processing (AREA)
Description
【０００１】
【発明の属する技術分野】本発明は、同一の対象物を撮
影して得られた複数個の映像をブラウジングするために
その複数個の映像を表現する方法及び装置に関し、特
に、映像から撮影された時空間を再構築する映像表現方
法及び装置に関するものである。
影して得られた複数個の映像をブラウジングするために
その複数個の映像を表現する方法及び装置に関し、特
に、映像から撮影された時空間を再構築する映像表現方
法及び装置に関するものである。
【０００２】
【従来の技術】従来、カメラで撮影された画像から撮影
された空間を表現・再構築する方法として多くの手法が
コンピュータビジョンの分野で報告されている。その中
で「環境のパノラマ表現」（電子情報通信学会誌，Ｖｏ
ｌ．７４，Ｎｏ．４，ｐｐ．３５４−３５９，１９９１
年４月）は、カメラを回転させながら連続的に撮影した
スリット内画像を連結し、３６０度全方位パノラマ画像
を作成する方法と、ロボット移動させロボットに設置し
たカメラで撮影された映像を時空間立体の解析を用いて
パノラマ表現に変換し、ロボット内に記憶された地図と
動的計画法で照合することでロボットが動き回る環境を
モニターリングする方法である。
された空間を表現・再構築する方法として多くの手法が
コンピュータビジョンの分野で報告されている。その中
で「環境のパノラマ表現」（電子情報通信学会誌，Ｖｏ
ｌ．７４，Ｎｏ．４，ｐｐ．３５４−３５９，１９９１
年４月）は、カメラを回転させながら連続的に撮影した
スリット内画像を連結し、３６０度全方位パノラマ画像
を作成する方法と、ロボット移動させロボットに設置し
たカメラで撮影された映像を時空間立体の解析を用いて
パノラマ表現に変換し、ロボット内に記憶された地図と
動的計画法で照合することでロボットが動き回る環境を
モニターリングする方法である。
【０００３】また、最近では、映像からカメラ操作を自
動抽出し、その情報を用いて撮影された空間を静止画と
して表現する方法が、いくつか報告されている。その中
で「Ｓａｌｉｅｎｔ Ｖｉｄｅｏ Ｓｔｉｌｌｓ： Ｃ
ｏｎｔｅｎｔ ａｎｄ Ｃｏｎｔｅｘｔ Ｐｒｅｓｅｒ
ｖｅｄ」（Ｐｒｏｃｅｅｄｉｎｇｓ ｏｆ ＡＣＭＭｕ
ｌｔｉｍｅｄｉ ９３，ｐｐ．３９−４６，ＣＡ，Ｊｕ
ｎ．，１９９３）は、映像から高解像度を有する静止画
像を作成する方法であり、動きベクトルを算出し映像の
各フレーム間のアフィン変換係数を推定しこの変換係数
を用いて静止画を作成するものである。
動抽出し、その情報を用いて撮影された空間を静止画と
して表現する方法が、いくつか報告されている。その中
で「Ｓａｌｉｅｎｔ Ｖｉｄｅｏ Ｓｔｉｌｌｓ： Ｃ
ｏｎｔｅｎｔ ａｎｄ Ｃｏｎｔｅｘｔ Ｐｒｅｓｅｒ
ｖｅｄ」（Ｐｒｏｃｅｅｄｉｎｇｓ ｏｆ ＡＣＭＭｕ
ｌｔｉｍｅｄｉ ９３，ｐｐ．３９−４６，ＣＡ，Ｊｕ
ｎ．，１９９３）は、映像から高解像度を有する静止画
像を作成する方法であり、動きベクトルを算出し映像の
各フレーム間のアフィン変換係数を推定しこの変換係数
を用いて静止画を作成するものである。
【０００４】また、射影変換を推定し映像の各フレーム
または複数枚の画像から撮影空間を構築する方法も報告
されている「Ｖｉｒｔｕａｌ Ｂｅｌｌｏｗ：Ｃｏｎｓ
ｔｒｕｃｔｉｎｇ Ｈｉｇｈ Ｑｕａｌｉｔｙ Ｓｔｉ
ｌｌｓ ｆｒｏｍ Ｖｉｄｅｏ」（Ｐｒｏｃｅｅｄｉｎ
ｇｓ ｏｆ ＩＣＩＰ−９４，Ｖｏｌ．Ｉ，ｐｐ．３６
３−３６７，Ａｕｓｔｉｎ，Ｎｏｖ．，１９９４）。
または複数枚の画像から撮影空間を構築する方法も報告
されている「Ｖｉｒｔｕａｌ Ｂｅｌｌｏｗ：Ｃｏｎｓ
ｔｒｕｃｔｉｎｇ Ｈｉｇｈ Ｑｕａｌｉｔｙ Ｓｔｉ
ｌｌｓ ｆｒｏｍ Ｖｉｄｅｏ」（Ｐｒｏｃｅｅｄｉｎ
ｇｓ ｏｆ ＩＣＩＰ−９４，Ｖｏｌ．Ｉ，ｐｐ．３６
３−３６７，Ａｕｓｔｉｎ，Ｎｏｖ．，１９９４）。
【０００５】
【発明が解決しようとする課題】上記従来の技術には、
環境をモニターリングすることを目的とした技術、映像
からより高精細な静止画像を作成すること等を目的とし
た技術が開示されている。しかしながら、撮影空間を上
記従来の技術を用いて空間的に再構成（表現）すること
は可能ではあるが、その表現に映像の持つ時間情報、映
像の中身（以下映像コンテントと記す）の時間的連続性
を考慮してないため、これら従来技術を用いた映像の表
現の限りにおいては、複数の映像情報を時間的にも空間
的にもブラウジングすることを容易にすることはできな
い。複数の映像を容易にブラウジングすることを支援す
る場合、その表現は時間的にも特に空間的に複数の映像
間の関係と各映像コンテントの直感的把握を支援するも
のである必要性を持つ。
環境をモニターリングすることを目的とした技術、映像
からより高精細な静止画像を作成すること等を目的とし
た技術が開示されている。しかしながら、撮影空間を上
記従来の技術を用いて空間的に再構成（表現）すること
は可能ではあるが、その表現に映像の持つ時間情報、映
像の中身（以下映像コンテントと記す）の時間的連続性
を考慮してないため、これら従来技術を用いた映像の表
現の限りにおいては、複数の映像情報を時間的にも空間
的にもブラウジングすることを容易にすることはできな
い。複数の映像を容易にブラウジングすることを支援す
る場合、その表現は時間的にも特に空間的に複数の映像
間の関係と各映像コンテントの直感的把握を支援するも
のである必要性を持つ。
【０００６】本発明の目的は、複数の映像を容易にブラ
ウジングすることを支援する場合の時間的に特に空間的
に複数の映像間の関係と各映像コンテントの直感的把握
を可能にする表現方法及び装置を提供することにある。
ウジングすることを支援する場合の時間的に特に空間的
に複数の映像間の関係と各映像コンテントの直感的把握
を可能にする表現方法及び装置を提供することにある。
【０００７】
【課題を解決するための手段】上記の課題に解決するた
めに本発明の映像表現装置は、同一の対象物を撮影して
得られた複数個の映像をブラウジングするために該複数
個の映像を表現する装置であって、該映像の撮影時の撮
影状態を検出する撮影状態検出部と、該検出された撮影
状態に基づいて前記複数個の映像中の各映像に対して撮
影静止対象物体の大きさと位置が各フレーム間で等しく
なるように該複数個の映像を変換し、該変換された各映
像を時間方向に重み付き積分を行って断片画像を作成す
る断片画像作成部と、該作成された各断片画像に対して
該各断片画像間の対応関係を算出する断片画像間照合部
と、該算出された対応関係を用い前記断片画像に対して
重み付き積分を行い前記断片画像を合成する断片画像合
成部と、を有し、該合成された映像から前記撮影された
時空間を再構築することを特徴とする。
めに本発明の映像表現装置は、同一の対象物を撮影して
得られた複数個の映像をブラウジングするために該複数
個の映像を表現する装置であって、該映像の撮影時の撮
影状態を検出する撮影状態検出部と、該検出された撮影
状態に基づいて前記複数個の映像中の各映像に対して撮
影静止対象物体の大きさと位置が各フレーム間で等しく
なるように該複数個の映像を変換し、該変換された各映
像を時間方向に重み付き積分を行って断片画像を作成す
る断片画像作成部と、該作成された各断片画像に対して
該各断片画像間の対応関係を算出する断片画像間照合部
と、該算出された対応関係を用い前記断片画像に対して
重み付き積分を行い前記断片画像を合成する断片画像合
成部と、を有し、該合成された映像から前記撮影された
時空間を再構築することを特徴とする。
【０００８】同じく本発明の映像表現方法は、同一の対
象物を撮影して得られた複数個の映像をブラウジングす
るために該複数個の映像を表現する方法であって、該映
像の撮影時の撮影状態を検出する撮影状態検出過程と、
該複数個の映像中の各映像に対して撮影静止対象物体の
大きさと位置が各フレーム間で等しくなるように該複数
個の映像を変換する映像変換過程と、該変換された各映
像を時間方向に重み付き積分を行って断片画像を作成す
る第１の重み付き積分過程と、該第１の重み付き積分過
程の結果算出された各断片画像に対して対応関係を算出
する過程と、該算出された対応関係を用い各断片画像に
対して重み付き積分を行い前記断片画像を合成する第２
の重み付き積分過程と、を有し、該第２の重み付き積分
過程の結果の合成された映像から前記撮影された時空間
を再構築することを特徴とする。
象物を撮影して得られた複数個の映像をブラウジングす
るために該複数個の映像を表現する方法であって、該映
像の撮影時の撮影状態を検出する撮影状態検出過程と、
該複数個の映像中の各映像に対して撮影静止対象物体の
大きさと位置が各フレーム間で等しくなるように該複数
個の映像を変換する映像変換過程と、該変換された各映
像を時間方向に重み付き積分を行って断片画像を作成す
る第１の重み付き積分過程と、該第１の重み付き積分過
程の結果算出された各断片画像に対して対応関係を算出
する過程と、該算出された対応関係を用い各断片画像に
対して重み付き積分を行い前記断片画像を合成する第２
の重み付き積分過程と、を有し、該第２の重み付き積分
過程の結果の合成された映像から前記撮影された時空間
を再構築することを特徴とする。
【０００９】上記のように、本発明の映像表現方法およ
び装置では、映像の撮影時の撮影状態を検出し、複数個
の映像の各映像に対して撮影静止対象物体の大きさと位
置が各フレーム間で等しくなるように映像を変換して断
片画像を作成し、作成された各断片画像に対して各断片
画像間の対応関係を算出し、算出された対応関係を用い
断片画像を合成することで、複数個の映像から撮影され
た時空間を再構築することによって、複数の映像を容易
にブラウジングすることを支援する場合の時間的にも空
間的にも複数の映像間の関係と各映像コンテントの直感
的把握を可能にする表現を実現する。
び装置では、映像の撮影時の撮影状態を検出し、複数個
の映像の各映像に対して撮影静止対象物体の大きさと位
置が各フレーム間で等しくなるように映像を変換して断
片画像を作成し、作成された各断片画像に対して各断片
画像間の対応関係を算出し、算出された対応関係を用い
断片画像を合成することで、複数個の映像から撮影され
た時空間を再構築することによって、複数の映像を容易
にブラウジングすることを支援する場合の時間的にも空
間的にも複数の映像間の関係と各映像コンテントの直感
的把握を可能にする表現を実現する。
【００１０】
【発明の実施の形態】以下、本発明の実施の形態を図面
を参照して詳細に説明する。
を参照して詳細に説明する。
【００１１】図１に本発明の実施の形態例における装置
の構成図を、図２に本発明の実施の形態例における方法
を説明する流れ図を示す。以下、図１と図２に沿って各
構成部及び手法を説明する。
の構成図を、図２に本発明の実施の形態例における方法
を説明する流れ図を示す。以下、図１と図２に沿って各
構成部及び手法を説明する。
【００１２】図１中の入力部１０１では、図２中の映像
信号入力過程２０１においてカメラ等で撮影した映像が
入力される。入力部１０１からの映像は、撮影状態検出
部１０２と断片画像作成部１０３において入力映像中の
撮影静止対象物体の大きさと位置が各フレーム間で等し
くなるように変換される。この過程においてカメラ操作
等の映像中の動きに含まれるグローバルな動きをキャン
セルすることを行う。例えば、移動する車をカメラを振
って撮影した例を図３に示す。そのように撮影した図３
（ａ）中の映像３０１を３０２に示す視線方向（観察方
向）から観察した場合、図３（ｂ）のような撮影空間の
画像３０３（以下パノラマ画像と記す）となる。同一対
象物を撮影した複数の映像からそれぞれ作成されるパノ
ラマ画像は、対象物を断片的に表現しているものであ
り、以下、それら一つ一をパノラマ断片画像と言う。
信号入力過程２０１においてカメラ等で撮影した映像が
入力される。入力部１０１からの映像は、撮影状態検出
部１０２と断片画像作成部１０３において入力映像中の
撮影静止対象物体の大きさと位置が各フレーム間で等し
くなるように変換される。この過程においてカメラ操作
等の映像中の動きに含まれるグローバルな動きをキャン
セルすることを行う。例えば、移動する車をカメラを振
って撮影した例を図３に示す。そのように撮影した図３
（ａ）中の映像３０１を３０２に示す視線方向（観察方
向）から観察した場合、図３（ｂ）のような撮影空間の
画像３０３（以下パノラマ画像と記す）となる。同一対
象物を撮影した複数の映像からそれぞれ作成されるパノ
ラマ画像は、対象物を断片的に表現しているものであ
り、以下、それら一つ一をパノラマ断片画像と言う。
【００１３】次に、図１中の撮影状態検出部１０２にお
いて、図２中の時空間投影画像作成過程２０２と撮影状
態検出過程２０３とで行う撮影状態を抽出する処理につ
いて説明する。
いて、図２中の時空間投影画像作成過程２０２と撮影状
態検出過程２０３とで行う撮影状態を抽出する処理につ
いて説明する。
【００１４】抽出方法として時空間投影画像を用いた方
法が開示されている「時空間画像を用いたグローバルな
動き抽出方法の検討」（１９９２年信学会秋季大会，Ｄ
−２５４，ｐｐ．６−２５６，１９９２）。この時空間
投影画像の特徴は、動きの時間的ふるまいが流れとして
表現されている点、処理が高速でロバストである点にあ
る。
法が開示されている「時空間画像を用いたグローバルな
動き抽出方法の検討」（１９９２年信学会秋季大会，Ｄ
−２５４，ｐｐ．６−２５６，１９９２）。この時空間
投影画像の特徴は、動きの時間的ふるまいが流れとして
表現されている点、処理が高速でロバストである点にあ
る。
【００１５】ここで時空間投影画像を用いたグローバル
な動き抽出方法について説明する。図４に処理のアルゴ
リズムの流れを示す。
な動き抽出方法について説明する。図４に処理のアルゴ
リズムの流れを示す。
【００１６】まず、手順４０１での処理は、映像フレー
ムの時間軸への並べ替えの処理であり、入力映像から時
空間画像を作成するものである。ここでいう時空間画像
とは、時間的に連続して撮影された画像を時間軸方向に
並べた物をいう。
ムの時間軸への並べ替えの処理であり、入力映像から時
空間画像を作成するものである。ここでいう時空間画像
とは、時間的に連続して撮影された画像を時間軸方向に
並べた物をいう。
【００１７】次に、手順４０２での処理は、画面法線を
含む平面での時空間画像の切断の処理であり、時空間断
面画像を作成するものである。ここでいう時空間断面画
像とは映像を時間軸方向に切断した画像であり、この時
空間断面画像の一例として、コンピュータビジョンの分
野で用いられているカメラの進行方向と画面の法線を含
む平面で時空間画像を切断した時の切断面（エピポーラ
平面画像（Ｅｐｉｐｏｌａｒ Ｐｌａｎｅ Ｉｍａｇ
ｅ））がある。この時空間断面画像から被写体の三次元
位置を推定している。これは、このエピポーラ平面画像
上では物体の特徴点の軌跡が直線になり、この直線の傾
きが物体特徴点の大きさになることによっている「Ｅｐ
ｉｐｏｌａｒ−Ｐｌａｎｅ ｉｍａｇｅ ａｎａｌｙｓ
ｉｓ：Ａｎａｐｐｒｏａｃｈ ｔｏ ｄｅｔｅｒｍｉｎ
ｇ ｓｔｒｕｃｔｕｒｅ ｆｒｏｍ ｍｏｔｉｏｎ」
（ＩＪＣＶ，１，１，ｐｐ７−５５，ｊｕｎｅ １９８
９）。時空間断面図画像としては、ｘ−ｔ時空間画像列
とｙ−ｔ時空間画像列を算出する。ここでｘ−ｔ時空間
画像列とは複数枚のｘ−ｔ時空間画像であり、ｙ−ｔ時
空間画像列も同様である。ここでいうｘ−ｔ時空間画像
／ｙ−ｔ時空間画像とは、それぞれ画面の法線を含む平
面で時空間画像を切断した切断面をいう。
含む平面での時空間画像の切断の処理であり、時空間断
面画像を作成するものである。ここでいう時空間断面画
像とは映像を時間軸方向に切断した画像であり、この時
空間断面画像の一例として、コンピュータビジョンの分
野で用いられているカメラの進行方向と画面の法線を含
む平面で時空間画像を切断した時の切断面（エピポーラ
平面画像（Ｅｐｉｐｏｌａｒ Ｐｌａｎｅ Ｉｍａｇ
ｅ））がある。この時空間断面画像から被写体の三次元
位置を推定している。これは、このエピポーラ平面画像
上では物体の特徴点の軌跡が直線になり、この直線の傾
きが物体特徴点の大きさになることによっている「Ｅｐ
ｉｐｏｌａｒ−Ｐｌａｎｅ ｉｍａｇｅ ａｎａｌｙｓ
ｉｓ：Ａｎａｐｐｒｏａｃｈ ｔｏ ｄｅｔｅｒｍｉｎ
ｇ ｓｔｒｕｃｔｕｒｅ ｆｒｏｍ ｍｏｔｉｏｎ」
（ＩＪＣＶ，１，１，ｐｐ７−５５，ｊｕｎｅ １９８
９）。時空間断面図画像としては、ｘ−ｔ時空間画像列
とｙ−ｔ時空間画像列を算出する。ここでｘ−ｔ時空間
画像列とは複数枚のｘ−ｔ時空間画像であり、ｙ−ｔ時
空間画像列も同様である。ここでいうｘ−ｔ時空間画像
／ｙ−ｔ時空間画像とは、それぞれ画面の法線を含む平
面で時空間画像を切断した切断面をいう。
【００１８】次に、手順４０３での処理は、フィルタ処
理によるエッジおよび線の検出の処理であり、ｘ−ｔ時
空間画像列に対して、各ｘ−ｔ時空間画像毎に第一次微
分や第二次微分等のフィルター処理を施し、エッジ及び
線を検出するものである。手順４０３の処理結果は上記
で説明した、物体、背景等の特徴点の動きに関する軌跡
を検出した結果に相当する。
理によるエッジおよび線の検出の処理であり、ｘ−ｔ時
空間画像列に対して、各ｘ−ｔ時空間画像毎に第一次微
分や第二次微分等のフィルター処理を施し、エッジ及び
線を検出するものである。手順４０３の処理結果は上記
で説明した、物体、背景等の特徴点の動きに関する軌跡
を検出した結果に相当する。
【００１９】手順４０３からエッジおよび線の強度が算
出されると、次に、手順４０４においてエッジおよび線
の統計的解析の処理が行われる。ここで言う統計処理と
は、ｘ−ｔ時空間画像列に対してｙ軸方向に積分処理を
行うことであり、同様にｙ−ｔ時空間画像列に対しては
ｘ方向に積分処理を行うことである。このようにしてエ
ッジの強度情報から時空間投影画像が算出できる。
出されると、次に、手順４０４においてエッジおよび線
の統計的解析の処理が行われる。ここで言う統計処理と
は、ｘ−ｔ時空間画像列に対してｙ軸方向に積分処理を
行うことであり、同様にｙ−ｔ時空間画像列に対しては
ｘ方向に積分処理を行うことである。このようにしてエ
ッジの強度情報から時空間投影画像が算出できる。
【００２０】時空間投影画像は、映像中の動きを流れと
して可視化している。この動きを流れとして可視化する
過程が図２中の時空間投影画像作成過程２０２である。
この流れを手順４０５の流れの追跡処理において追跡
し、撮影状態（以下カメラの操作と記す）を抽出する。
流れ追跡の例を図５に示す。図５中の５０１はｘ−ｔ時
空間投影画像を示し、このｘ−ｔ時空間投影画像５０１
に示した流れはカメラを右に振った場合を想定してい
る。５０２は、時間Ｔの積分値の分布を示し、５０３
は、時間Ｔ−１の積分値の分布を示す。５０２と５０３
の分布から相互相関法、Ｈｏｕｇｈ変換法、動的計画法
（「Ｕｓｉｎｇ ｄｙｎａｍｉｃ ｐｒｏｇｒａｍｉｎ
ｇ ｆｏｒ ｓｏｌｖｉｎｇ ｖａｒｉａｔｉｏｎａｌ
ｐｒｏｂｌｅｍｓ ｉｎ ｖｉｓｉｏｎ」（ＩＥＥＥ
Ｔｒａｎｓ．Ｐａｔｔｅｒｎ Ａｎａｌ．＆ Ｍａｃ
ｈ．Ｉｎｔｅｌｌ．，ＰＡＭＩ−１２，Ｖｏｌ．９，ｐ
ｐ．８５５−８６７（１９９０）））を用いて変化量を
算出し、算出される変化量がカメラ操作パラメータであ
る。
して可視化している。この動きを流れとして可視化する
過程が図２中の時空間投影画像作成過程２０２である。
この流れを手順４０５の流れの追跡処理において追跡
し、撮影状態（以下カメラの操作と記す）を抽出する。
流れ追跡の例を図５に示す。図５中の５０１はｘ−ｔ時
空間投影画像を示し、このｘ−ｔ時空間投影画像５０１
に示した流れはカメラを右に振った場合を想定してい
る。５０２は、時間Ｔの積分値の分布を示し、５０３
は、時間Ｔ−１の積分値の分布を示す。５０２と５０３
の分布から相互相関法、Ｈｏｕｇｈ変換法、動的計画法
（「Ｕｓｉｎｇ ｄｙｎａｍｉｃ ｐｒｏｇｒａｍｉｎ
ｇ ｆｏｒ ｓｏｌｖｉｎｇ ｖａｒｉａｔｉｏｎａｌ
ｐｒｏｂｌｅｍｓ ｉｎ ｖｉｓｉｏｎ」（ＩＥＥＥ
Ｔｒａｎｓ．Ｐａｔｔｅｒｎ Ａｎａｌ．＆ Ｍａｃ
ｈ．Ｉｎｔｅｌｌ．，ＰＡＭＩ−１２，Ｖｏｌ．９，ｐ
ｐ．８５５−８６７（１９９０）））を用いて変化量を
算出し、算出される変化量がカメラ操作パラメータであ
る。
【００２１】図５中の５０２の分布を時間ｔ、空間ｘの
関数Ｆ（ｘ，ｔ）で表現し、映像の動きがカメラ操作に
よる動きである場合、分布５０２と５０３の間には以下
の関係式が成り立つ。関数Ｆ（ｘ，ｔ）は、ｘ座標にお
けるｙ軸方向へのエッジ強度の積分値であり、ｙ軸方向
においてエッジが多く存在する場合、大きな値となる。
すなわちカメラ操作による動きが映像に含まれている場
合、その動き（上記の処理によりエッジとして表現され
ている）はフレーム内で多く存在する事を仮定してい
る。
関数Ｆ（ｘ，ｔ）で表現し、映像の動きがカメラ操作に
よる動きである場合、分布５０２と５０３の間には以下
の関係式が成り立つ。関数Ｆ（ｘ，ｔ）は、ｘ座標にお
けるｙ軸方向へのエッジ強度の積分値であり、ｙ軸方向
においてエッジが多く存在する場合、大きな値となる。
すなわちカメラ操作による動きが映像に含まれている場
合、その動き（上記の処理によりエッジとして表現され
ている）はフレーム内で多く存在する事を仮定してい
る。
【００２２】Ｆ（ｘ，ｔ）＝Ｆ（ａｘ＋ｂ，ｔ−１）． ここで係数ａ，ｂはそれぞれカメラ操作を表すパラメー
タであり、ａがズームパラメータ、ｂがパンパラメータ
を表す。これらパラメータを上記の各方法等で算出す
る。同様にｙ−ｔ時空間投影画像からチルトパラメータ
ｃが算出可能である。
タであり、ａがズームパラメータ、ｂがパンパラメータ
を表す。これらパラメータを上記の各方法等で算出す
る。同様にｙ−ｔ時空間投影画像からチルトパラメータ
ｃが算出可能である。
【００２３】上記の方法で算出したカメラ操作パラメー
タが撮影状態の有無判断過程２０４において検出された
と判断した場合（ｙｅｓ）に限り、図１中の断片画像作
成部１０３における図２中の変換過程２０５において以
下の関係式を用いて各フレーム毎に変換する。カメラ操
作が無いと判断された場合（ｎｏ）は、ａ＝−１，ｂ＝
０，ｃ＝０のパラメータで以下の変換を行うことと等し
い。
タが撮影状態の有無判断過程２０４において検出された
と判断した場合（ｙｅｓ）に限り、図１中の断片画像作
成部１０３における図２中の変換過程２０５において以
下の関係式を用いて各フレーム毎に変換する。カメラ操
作が無いと判断された場合（ｎｏ）は、ａ＝−１，ｂ＝
０，ｃ＝０のパラメータで以下の変換を行うことと等し
い。
【００２４】
【数１】
【００２５】ここで、（ｘ，ｙ）は時間Ｔ−１の画像フ
レーム座標を示し、（ｘ′，ｙ′）は、時間Ｔの画像フ
レーム座標を示す。
レーム座標を示し、（ｘ′，ｙ′）は、時間Ｔの画像フ
レーム座標を示す。
【００２６】次に、図１中の断片画像作成部１０３にお
いて行う図２中の重み係数算出過程２０６について説明
する。ここでは、断片画像作成部１０３において行う次
の時間積分処理に用いる重み係数を算出する。この重み
係数は物体等のローカルな動きを反映した係数がふさわ
しいと考えられる。この意味で先に変換した変換映像中
には物体等のローカルな動きしか含まれていない。この
変換映像を用いてローカルな動きを反映した係数を算出
する方法について説明する。この様子を図６に示す。
いて行う図２中の重み係数算出過程２０６について説明
する。ここでは、断片画像作成部１０３において行う次
の時間積分処理に用いる重み係数を算出する。この重み
係数は物体等のローカルな動きを反映した係数がふさわ
しいと考えられる。この意味で先に変換した変換映像中
には物体等のローカルな動きしか含まれていない。この
変換映像を用いてローカルな動きを反映した係数を算出
する方法について説明する。この様子を図６に示す。
【００２７】図６には、フレーム内の座標を示すｘ−ｙ
座標系とフレーム間を示すＸ−Ｙ−Ｔ座標系が存在す
る。図６中、６０１は、変換後の時空間画像である。６
０２は時間ｔのフレームであり、６０３は時間ｔ＋ｎの
フレームを表す。時空間画像６０１は、Ｘ−Ｙ−Ｔ座標
系でＸ，Ｙ，Ｔの関数Ｆ（Ｘ，Ｙ，Ｔ）で表現できる。
算出する重み係数は、時空間画像６０１の画素（Ｘ，
Ｙ，Ｔ）各々について算出しｗ（Ｘ，Ｙ，Ｔ）と表現す
る。６０４はフレーム６０２中の任意の画素ｆ（ｘ０，
ｙ０）でありｆ（Ｘ０，Ｙ０，ｔ）である。６０６はフ
レーム６０３中の任意の画素ｆ（ｘ１，ｙ１）でありＦ
（Ｘ１，Ｙ１，ｔ＋ｎ）である。但し、Ｘ１＝Ｘ０、Ｙ
１＝Ｙ０の関係がある。６０５は、画素６０４と画素６
０６を結ぶ直線であり、この直線上の画素値の持つ値
（輝度，Ｒ，Ｇ，Ｂ値，ｙ，ｃｂ，ｃｒ値等）で表され
る時間の関数Ｌ（Ｘ０，Ｙ０，Ｔ）である。時空間画像
６０１に物体等のローカルな動きが存在しない場合、 Ｌ（Ｘ０，Ｙ０，ｔ）＝Ｌ（Ｘ０，Ｙ０，ｔ＋１）＝Ｌ
（Ｘ０，Ｙ０，ｔ＋２）・・・＝Ｌ（Ｘ０，Ｙ０，ｔ＋
ｎ）、 が成り立つ。Ｌ（Ｘ０，Ｙ０，Ｔ）の値の変化がローカ
ルな動きによるものであり、この関数を用いて重み係数
ｗ（Ｘ，Ｙ，Ｔ）を定義することによりローカルな動き
を反映した係数を算出することが可能となる。重み係数
は、関数Ｌ（Ｘ０，Ｙ０，Ｔ）を用いて一般に以下のよ
うに表せる。
座標系とフレーム間を示すＸ−Ｙ−Ｔ座標系が存在す
る。図６中、６０１は、変換後の時空間画像である。６
０２は時間ｔのフレームであり、６０３は時間ｔ＋ｎの
フレームを表す。時空間画像６０１は、Ｘ−Ｙ−Ｔ座標
系でＸ，Ｙ，Ｔの関数Ｆ（Ｘ，Ｙ，Ｔ）で表現できる。
算出する重み係数は、時空間画像６０１の画素（Ｘ，
Ｙ，Ｔ）各々について算出しｗ（Ｘ，Ｙ，Ｔ）と表現す
る。６０４はフレーム６０２中の任意の画素ｆ（ｘ０，
ｙ０）でありｆ（Ｘ０，Ｙ０，ｔ）である。６０６はフ
レーム６０３中の任意の画素ｆ（ｘ１，ｙ１）でありＦ
（Ｘ１，Ｙ１，ｔ＋ｎ）である。但し、Ｘ１＝Ｘ０、Ｙ
１＝Ｙ０の関係がある。６０５は、画素６０４と画素６
０６を結ぶ直線であり、この直線上の画素値の持つ値
（輝度，Ｒ，Ｇ，Ｂ値，ｙ，ｃｂ，ｃｒ値等）で表され
る時間の関数Ｌ（Ｘ０，Ｙ０，Ｔ）である。時空間画像
６０１に物体等のローカルな動きが存在しない場合、 Ｌ（Ｘ０，Ｙ０，ｔ）＝Ｌ（Ｘ０，Ｙ０，ｔ＋１）＝Ｌ
（Ｘ０，Ｙ０，ｔ＋２）・・・＝Ｌ（Ｘ０，Ｙ０，ｔ＋
ｎ）、 が成り立つ。Ｌ（Ｘ０，Ｙ０，Ｔ）の値の変化がローカ
ルな動きによるものであり、この関数を用いて重み係数
ｗ（Ｘ，Ｙ，Ｔ）を定義することによりローカルな動き
を反映した係数を算出することが可能となる。重み係数
は、関数Ｌ（Ｘ０，Ｙ０，Ｔ）を用いて一般に以下のよ
うに表せる。
【００２８】ｗ＝ＡＢ． ここではＡは関数Ｌ（Ｘ０，Ｙ０，Ｔ）の関数の変形群
を表し、例えば以下のようなものである。
を表し、例えば以下のようなものである。
【００２９】 Ａ＝Ｌ（Ｘ０，Ｙ０，Ｔ）、 Ａ＝ｄＬ（Ｘ０，Ｙ０，Ｔ）／ｄＴ、 Ａ＝ｄＬ（Ｘ０，Ｙ０，Ｔ）2／ｄ2Ｔ、 ・ ・ また、Ｂは定数や時間を変数とする関数群であり、例え
ば以下のようなものである。
ば以下のようなものである。
【００３０】 Ｂ＝１、 Ｂ＝Ｔ、 Ｂ＝Ｔ-1、 Ｂ＝ｅｘｐ（Ｔ）、 ・ ・ Ａはローカルな動きを反映した項であり、Ｂは時間を反
映した項である。Ｂによって次に説明する積分過程の結
果得られる静止画像の輝度の濃淡，色等が変化し、時間
をこれらの変化で表現することが可能となる。例えば、
Ｂによって過去をセピヤ調にすることも可能である。
映した項である。Ｂによって次に説明する積分過程の結
果得られる静止画像の輝度の濃淡，色等が変化し、時間
をこれらの変化で表現することが可能となる。例えば、
Ｂによって過去をセピヤ調にすることも可能である。
【００３１】次に、断片画像作成部１０３では、重み付
き積分過程２０７において先に算出した重み係数を用い
て変換画像を時間方向に積分処理を行う。積分結果が像
としてＣＲＴ及びハードコピーに表現可能なように便宜
上、重み係数は以下のように定義する。ここで積分処理
を行う時間幅をｎとする。
き積分過程２０７において先に算出した重み係数を用い
て変換画像を時間方向に積分処理を行う。積分結果が像
としてＣＲＴ及びハードコピーに表現可能なように便宜
上、重み係数は以下のように定義する。ここで積分処理
を行う時間幅をｎとする。
【００３２】
【数２】
【００３３】ｗ′は正規化された形を表している。
【００３４】変換画像をＦ（Ｘ，Ｙ，Ｔｉ，ｉ＝ｔ〜ｔ
＋ｎ）、重み係数ｗ′（Ｘ，Ｙ，Ｔｉ，ｉ＝ｔ〜ｔ＋
ｎ）とすると、本発明により出力される画像Ｇ（Ｘ，
Ｙ）は、
＋ｎ）、重み係数ｗ′（Ｘ，Ｙ，Ｔｉ，ｉ＝ｔ〜ｔ＋
ｎ）とすると、本発明により出力される画像Ｇ（Ｘ，
Ｙ）は、
【００３５】
【数３】
【００３６】のように表せる。複数の映像を上記の手段
で処理した場合の作成したパノラマ画像Ｇ（Ｘ，Ｙ）を
ｐi，i=1-nで表す。
で処理した場合の作成したパノラマ画像Ｇ（Ｘ，Ｙ）を
ｐi，i=1-nで表す。
【００３７】次に、図１中の断片画像照合部１０４につ
いて説明する。断片画像照合部１０４では、作成したパ
ノラマ断片面像間で対応付け照合過程２０８を行う。こ
の対応付けの様子を図７に示す。図７中、７０１，７０
２は、照合対象パノラマ断片画像を表す。これをそれぞ
れｐiとｐjで表現する。７０３は、ｐiとｐjの画像間の
重なり部分である。座標系ｕｖを考え、ｐiとｐjの配置
関係を（７０４，７０５）の値で表現するものとする。
ここで、７０４はｖ方向のパノラマ断片画像間対応値で
あり、７０５はｕ方向のパノラマ断片画像間対応値であ
る。ｐiとｐjの画像間の重なり部分（７０３）に対し
て、以下の式に示す相互相関係数ρpi，ρpjを算出す
る。
いて説明する。断片画像照合部１０４では、作成したパ
ノラマ断片面像間で対応付け照合過程２０８を行う。こ
の対応付けの様子を図７に示す。図７中、７０１，７０
２は、照合対象パノラマ断片画像を表す。これをそれぞ
れｐiとｐjで表現する。７０３は、ｐiとｐjの画像間の
重なり部分である。座標系ｕｖを考え、ｐiとｐjの配置
関係を（７０４，７０５）の値で表現するものとする。
ここで、７０４はｖ方向のパノラマ断片画像間対応値で
あり、７０５はｕ方向のパノラマ断片画像間対応値であ
る。ｐiとｐjの画像間の重なり部分（７０３）に対し
て、以下の式に示す相互相関係数ρpi，ρpjを算出す
る。
【００３８】 ρpi，ρpj＝ρpi，ρpj／（ρpi 2・ρpj 2）1/2・Ｍ、 ここで、
【００３９】
【数４】
【００４０】であり、Ｍは重なり合っている部分の画素
数である。また、ρpi 2，ρpj 2は分散を表す。
数である。また、ρpi 2，ρpj 2は分散を表す。
【００４１】配置（７０４，７０５）を適当な範囲で変
化させ各値に応じて上記相互相関係数を算出し、算出し
た相互相関係数が最大値となるとの配置（７０４，７０
５）をもって対応関係とする。
化させ各値に応じて上記相互相関係数を算出し、算出し
た相互相関係数が最大値となるとの配置（７０４，７０
５）をもって対応関係とする。
【００４２】上記の方法を用い複数のパノラマ断片画像
に対してそれらの関係（７０４，７０５）を算出する。
に対してそれらの関係（７０４，７０５）を算出する。
【００４３】次に、図１中の断片画像合成部１０５で
は、まず図２中の重み計数算出過程２０９において照合
したパノラマ断片画像の枚数などから次の重み付き積分
過程２１０での処理において行う積分処理（重ね合わ
せ）に用いる各パノラマ断片画像の重みを算出する。こ
こでの重みとは、各パノラマ画像の透過率等である。た
とえば、複数のパノラマ断片画像間で多く重なる部分を
強調する等の表現が可能となる。
は、まず図２中の重み計数算出過程２０９において照合
したパノラマ断片画像の枚数などから次の重み付き積分
過程２１０での処理において行う積分処理（重ね合わ
せ）に用いる各パノラマ断片画像の重みを算出する。こ
こでの重みとは、各パノラマ画像の透過率等である。た
とえば、複数のパノラマ断片画像間で多く重なる部分を
強調する等の表現が可能となる。
【００４４】続いて、断片画像合成部１０５では、図２
中の重み付き積分過程２１０において重み計数算出過程
２０９で算出された重み配置関係（７０４，７０５）か
らパノラマ画像を積分（重ね合わせ）し、複数のパノラ
マ画像を表現する。
中の重み付き積分過程２１０において重み計数算出過程
２０９で算出された重み配置関係（７０４，７０５）か
らパノラマ画像を積分（重ね合わせ）し、複数のパノラ
マ画像を表現する。
【００４５】次に、図１中の出力部１０６では、合成さ
れたパノラマ画像が図２中の出力過程２１１において出
力される。ここで出力された画像は、上記で説明したよ
うにパノラマ画像空間に時間情報（物体の動き情報）が
表現されており、各パノラマ断片画像で大きな空間が再
構築された形の新しい映像の表現が可能となる。この再
構築空間をアクセス（ポイント）する事で時間情報をア
クセスする事が可能となる表現になっている。
れたパノラマ画像が図２中の出力過程２１１において出
力される。ここで出力された画像は、上記で説明したよ
うにパノラマ画像空間に時間情報（物体の動き情報）が
表現されており、各パノラマ断片画像で大きな空間が再
構築された形の新しい映像の表現が可能となる。この再
構築空間をアクセス（ポイント）する事で時間情報をア
クセスする事が可能となる表現になっている。
【００４６】以上、本発明を実施の形態例に基づき具体
的に説明したが、本発明は、前記実施の形態例に限定さ
れるものではなく、その要旨を逸脱しない範囲において
種々の変更が可能であることは言うまでもない。
的に説明したが、本発明は、前記実施の形態例に限定さ
れるものではなく、その要旨を逸脱しない範囲において
種々の変更が可能であることは言うまでもない。
【００４７】
【発明の効果】以上説明したように、本発明の映像表現
方法および装置は、映像中の各映像に対して撮像静止対
象物体の大きさと位置が各フレーム間で等しくなるよう
に該映像を相似変換して断片画像を作成し、各変換映像
を時間方向に積分する重み付け積分するなどにより各画
像に対して対応関係を算出し、その算出された対応関係
を用い各画像に対して重み付き積分するなどにより断片
画像を合成して、映像から撮影された時空間を再構築
（表現）することを特徴とするため、複数の映像を容易
にブラウジングすることを支援する場合の時間的にも空
間的にも複数の映像間の関係と各映像コンテント（映像
の中身）の直感的把握を可能にする表現が可能となる。
方法および装置は、映像中の各映像に対して撮像静止対
象物体の大きさと位置が各フレーム間で等しくなるよう
に該映像を相似変換して断片画像を作成し、各変換映像
を時間方向に積分する重み付け積分するなどにより各画
像に対して対応関係を算出し、その算出された対応関係
を用い各画像に対して重み付き積分するなどにより断片
画像を合成して、映像から撮影された時空間を再構築
（表現）することを特徴とするため、複数の映像を容易
にブラウジングすることを支援する場合の時間的にも空
間的にも複数の映像間の関係と各映像コンテント（映像
の中身）の直感的把握を可能にする表現が可能となる。
【図１】本発明の装置の実施の形態の一例を示す構成図
である。
である。
【図２】本発明の方法の実施の形態の一例を示す流れ図
である。
である。
【図３】（ａ），（ｂ）は上記実施の形態におけるパノ
ラマ画像の説明図である。
ラマ画像の説明図である。
【図４】上記実施の形態におけるカメラ操作パラメータ
抽出処理の流れ図である。
抽出処理の流れ図である。
【図５】上記実施の形態における流れ追跡処理の説明図
である。
である。
【図６】上記実施の形態における重み係数処理の説明図
である。
である。
【図７】上記実施の形態におけるパノラマ断片画像照合
処理の説明図である。
処理の説明図である。
【符号の説明】 １０１…入力部 １０２…撮影状態検出部 １０３…断片画像作成部 １０４…断片画像間照合部 １０５…断片画像合成部 １０６…出力部 ２０１…映像信号入力過程 ２０２…時空間投影画像作成過程 ２０３…撮影状態検出過程 ２０４…撮影状態の有無判断過程 ２０５…変換過程 ２０６…重み計数算出過程 ２０７…重み付き積分過程 ２０８…照合過程 ２０９…重み計数算出過程 ２１０…重み付け積分過程 ２１１…出力過程 ３０１…時空間画像 ３０２…視線方向（観察方向） ３０３…パノラマ画像 ４０１…映像フレームの時間軸への並べ替え ４０２…画面法線を含む平面での時空間画像の切断 ４０３…フィルタ処理によるエッジ及び線の検出 ４０４…エッジ及び線の統計的解析 ４０５…流れの追跡 ５０１…ｘ−ｔ時空間投影画像 ５０２…時間Ｔの積分値の分布（Ｆ（ｘ，ｔ）） ５０３…時間Ｔ−１の積分値の分布（Ｆ（ａｘ＋ｂ，ｔ
−１）） ６０１…変換された映像 ６０２…時間ｔのフレーム ６０３…時間ｔ＋ｎのフレーム ６０４…時間ｔのフレーム上の任意の画素 ６０５…時間ｔのフレーム上の任意の画素と時間ｔのフ
レームに対応する時間ｔ＋ｎのフレーム上の画素を結ぶ
直線 ６０６…時間ｔのフレームに対応する時間ｔ＋ｎのフレ
ーム上の画素 ７０１…パノラマ断片画像 ７０２…パノラマ断片画像 ７０３…パノラマ断片画像間の重なり部分 ７０４…ｖ方向のパノラマ断片画像間対応値 ７０５…ｕ方向のパノラマ断片画像間対応値
−１）） ６０１…変換された映像 ６０２…時間ｔのフレーム ６０３…時間ｔ＋ｎのフレーム ６０４…時間ｔのフレーム上の任意の画素 ６０５…時間ｔのフレーム上の任意の画素と時間ｔのフ
レームに対応する時間ｔ＋ｎのフレーム上の画素を結ぶ
直線 ６０６…時間ｔのフレームに対応する時間ｔ＋ｎのフレ
ーム上の画素 ７０１…パノラマ断片画像 ７０２…パノラマ断片画像 ７０３…パノラマ断片画像間の重なり部分 ７０４…ｖ方向のパノラマ断片画像間対応値 ７０５…ｕ方向のパノラマ断片画像間対応値
フロントページの続き (56)参考文献 特開 平５−260264（ＪＰ，Ａ) 特開 平７−95467（ＪＰ，Ａ) 特開 平５−14751（ＪＰ，Ａ) 特開 平６−119450（ＪＰ，Ａ) 特開 平６−350887（ＪＰ，Ａ) 特開 平６−261333（ＪＰ，Ａ) ”パノラマ表現内の３次元物体による 経路シーンの記述”，電子情報通信学会 誌，社団法人電子情報通信学会，1993年 10月25日，Ｖｏｌ．Ｊ76−Ｄ−ＩＩ，Ｎ ｏ．10，ｐ．2177−2184 ”ＰａｐｅｒＶｉｄｅｏ：紙を用いた 新しい映像インタフェース”，テレビジ ョン学会技術報告，社団法人テレビジョ ン学会，1994年 ９月22日，第18巻，第 49号，ｐ．15−20 (58)調査した分野(Int.Cl.7，ＤＢ名) G06T 1/00 G06T 11/80 G06T 7/20 ＣＳＤＢ（日本国特許庁)
Claims (2)
- 【請求項１】 同一の対象物を撮影して得られた複数個
の映像をブラウジングするために該複数個の映像を表現
する装置であって、 該映像の撮影時の撮影状態を検出する撮影状態検出部
と、 該検出された撮影状態に基づいて前記複数個の映像中の
各映像に対して撮影静止対象物体の大きさと位置が各フ
レーム間で等しくなるように該複数個の映像を変換し、
該変換された各映像を時間方向に重み付き積分を行って
断片画像を作成する断片画像作成部と、 該作成された各断片画像に対して該各断片画像間の対応
関係を算出する断片画像間照合部と、 該算出された対応関係を用い前記断片画像に対して重み
付き積分を行い前記断片画像を合成する断片画像合成部
と、を有し、 該合成された映像から前記撮影された時空間を再構築す
ることを特徴とする映像表現装置。 - 【請求項２】 同一の対象物を撮影して得られた複数個
の映像をブラウジングするために該複数個の映像を表現
する方法であって、該映像の撮影時の撮影状態を検出する撮影状態検出過程
と、 該複数個の映像中の各映像に対して撮影静止対象物体の
大きさと位置が各フレーム間で等しくなるように該複数
個の映像を変換する映像変換過程と、 該変換された各映像を時間方向に重み付き積分を行って
断片画像を作成する第１の重み付き積分過程と、 該第１の重み付き積分過程の結果算出された各断片画像
に対して対応関係を算出する過程と、 該算出された対応関係を用い各断片画像に対して重み付
き積分を行い前記断片画像を合成する第２の重み付き積
分過程と、を有し、 該第２の重み付き積分過程の結果の合成された映像から
前記撮影された時空間を再構築することを特徴とする映
像表現方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP18991695A JP3320592B2 (ja) | 1995-07-26 | 1995-07-26 | 映像表現方法及び装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP18991695A JP3320592B2 (ja) | 1995-07-26 | 1995-07-26 | 映像表現方法及び装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH0944630A JPH0944630A (ja) | 1997-02-14 |
| JP3320592B2 true JP3320592B2 (ja) | 2002-09-03 |
Family
ID=16249362
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP18991695A Expired - Lifetime JP3320592B2 (ja) | 1995-07-26 | 1995-07-26 | 映像表現方法及び装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3320592B2 (ja) |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3205571B2 (ja) * | 1991-06-28 | 2001-09-04 | 日本放送協会 | パノラマ画像取り込み装置 |
| JP2989364B2 (ja) * | 1992-03-12 | 1999-12-13 | シャープ株式会社 | 画像処理装置及び画像処理方法 |
| JPH07101458B2 (ja) * | 1992-03-26 | 1995-11-01 | 山口県 | 動物体抽出方式およびその装置 |
| JP3327614B2 (ja) * | 1993-03-08 | 2002-09-24 | キヤノン株式会社 | 撮像装置 |
| JP3364759B2 (ja) * | 1993-06-10 | 2003-01-08 | 恆明 日比 | パノラマ撮影装置 |
| JP2883265B2 (ja) * | 1993-09-24 | 1999-04-19 | キヤノン株式会社 | 画像処理装置 |
-
1995
- 1995-07-26 JP JP18991695A patent/JP3320592B2/ja not_active Expired - Lifetime
Non-Patent Citations (2)
| Title |
|---|
| "ＰａｐｅｒＶｉｄｅｏ：紙を用いた新しい映像インタフェース"，テレビジョン学会技術報告，社団法人テレビジョン学会，１９９４年 ９月２２日，第１８巻，第４９号，ｐ．１５−２０ |
| "パノラマ表現内の３次元物体による経路シーンの記述"，電子情報通信学会誌，社団法人電子情報通信学会，１９９３年１０月２５日，Ｖｏｌ．Ｊ７６−Ｄ−ＩＩ，Ｎｏ．１０，ｐ．２１７７−２１８４ |
Also Published As
| Publication number | Publication date |
|---|---|
| JPH0944630A (ja) | 1997-02-14 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8866910B1 (en) | Unusual event detection in wide-angle video (based on moving object trajectories) | |
| KR102003015B1 (ko) | 광류를 사용한 중간 뷰의 생성 | |
| US8275219B2 (en) | Method and device for video image processing, calculating the similarity between video frames, and acquiring a synthesized frame by synthesizing a plurality of contiguous sampled frames | |
| US5920657A (en) | Method of creating a high resolution still image using a plurality of images and apparatus for practice of the method | |
| US9576335B2 (en) | Method, device, and computer program for reducing the resolution of an input image | |
| WO2006138544A1 (en) | Object tracking system | |
| EP4546767A1 (en) | Video processing method and apparatus, and device and medium | |
| KR20040035803A (ko) | 협조적인 분배 비전을 통한 지능적인 쿼드 디스플레이 | |
| JPH10304244A (ja) | 画像処理装置およびその方法 | |
| JP3502525B2 (ja) | カメラパラメータ推定方法 | |
| JP3320592B2 (ja) | 映像表現方法及び装置 | |
| JP3607717B2 (ja) | 映像切り出し方法 | |
| JP2002094849A (ja) | 広視野画像撮像装置 | |
| JP3325823B2 (ja) | 映像静止画表示方法及び装置並びに映像静止画表示プログラム格納記録媒体 | |
| JP7665333B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
| JP3213105B2 (ja) | 映像の構図自動決定処理方法 | |
| JP3344600B2 (ja) | 画像処理装置 | |
| KR100421208B1 (ko) | 3차원영상의합성방법 | |
| JP3110939B2 (ja) | 映像アクセス装置 | |
| JP4515698B2 (ja) | 動画像合成方法および装置並びにプログラム | |
| JP4571370B2 (ja) | 動画像合成方法および装置並びにプログラム並びにデジタルカメラ | |
| JP4104947B2 (ja) | 動画像合成方法および装置並びにプログラム | |
| Castellano et al. | Regularized CDWT optical flow applied to moving-target detection in IR imagery | |
| JP2004120627A (ja) | 動画像合成方法および装置並びにプログラム | |
| JPH10164435A (ja) | 複数映像の時空間統合、管理方法及びその装置並びにそのプログラムを記録した記録媒体 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090621 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090621 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100621 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100621 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110621 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120621 Year of fee payment: 10 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130621 Year of fee payment: 11 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140621 Year of fee payment: 12 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| EXPY | Cancellation because of completion of term |