JP4354082B2 - ストリーミング映像情報連動コンテンツ作成支援方法及び装置及びストリーミング映像情報連動コンテンツ作成支援プログラムを格納した記憶媒体 - Google Patents
ストリーミング映像情報連動コンテンツ作成支援方法及び装置及びストリーミング映像情報連動コンテンツ作成支援プログラムを格納した記憶媒体 Download PDFInfo
- Publication number
- JP4354082B2 JP4354082B2 JP2000121621A JP2000121621A JP4354082B2 JP 4354082 B2 JP4354082 B2 JP 4354082B2 JP 2000121621 A JP2000121621 A JP 2000121621A JP 2000121621 A JP2000121621 A JP 2000121621A JP 4354082 B2 JP4354082 B2 JP 4354082B2
- Authority
- JP
- Japan
- Prior art keywords
- video
- information
- video information
- auxiliary information
- creation support
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Images
Landscapes
- Television Signal Processing For Recording (AREA)
- Television Systems (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は、ストリーミング映像情報連動コンテンツ作成支援方法及び装置及びストリーミング映像情報連動コンテンツ作成支援プログラムを格納した記憶媒体に係り、特に、ネットワークを介して映像を再生する際に、映像の再生時間を基準に、映像を関連する情報を変化させることで、映像の内容理解を促進するインタフェースを含むコンテンツを作成するストリーミング映像情報連動コンテンツ作成支援方法及び装置及びストリーミング映像情報連動コンテンツ作成支援プログラムを格納した記憶媒体に関する。
【０００２】
【従来の技術】
電子的なコンピュータネットワークの広まりと、コンピュータの爆発的な普及と共に、多くの映像が電子ネットワーク上を配信されている。特に、現在最も普及しているインターネットと呼ばれるＩＰネットワーク上で、次々と映像を伝送するためのいくつかのシステムが開発され、利用されている。例えば、SoftwareVision(NTT) 、RealSystem(Real Networks) 、MediaTechnorogy(MicroSoft)、QuickTime4.0(Apple) などがそれらの代表的なものである。
【０００３】
【発明が解決しようとする課題】
しかしながら、現在普及しているインターネットと呼ばれるＩＰネットワークはその構造上、容量が小さくなりやすく、実時間通信が必ずしも保証されていないため、１９９９年現在において、アナログＴＶ放送の映像品質（ＮＴＳＣ，ＰＡＬなど）を満たしていないものがほとんどである。
【０００４】
従って、現状のＩＰネットワーク上を配信する映像クオリティは、やむを得ずＴＶ品質と比較して、時間乃至空間の一方、または、両方を犠牲にした物となってしまい、ＴＶ放送品質を満たした映像よりも低い映像情報しか伝達することができないことが一般的である。
【０００５】
また、劣悪なネットワーク条件においては、映像の本質的特徴である実時間再生すら不可能な場合も存在する。こうした問題は、１９９９年現在では、一般的であり、今後しばらくは多くの場面において発生する問題になると考えられる。 また、映像は、その内容を、その時間長分だけ視聴することが必要であり、内容を瞬時に把握し、必要なところだけ視聴したいという要求を満たすことが困難なメディアである。これは、映像が視聴者に対して、強い時間的拘束を強いるからである。
【０００６】
そこで、映像の内容を簡単に把握し、かつ、視聴しやすくするために一つの提案として、映像情報のカメラのＯＮ／ＯＦＦに対応するカット点（ショットチェンジ）の情報を抽出し、カット点直後の映像を表示し、視聴者の要望に応じて、ショットチェンジ直後の映像に対応する映像区間を任意に再生するなどして、視聴を支援する試みがあげられる。その一例が、Yukinobu Taniguti, Yoshinobu Tonomura,「PanoramaExcerpts:Extracting and packing Panoramas for Video Browsing」(1996 ACM Multimedia 97)である。この方法は、映像の重要な意味を持つであろう複数の画像を自動的に検出し、その一覧を視聴者に提示させて、視聴者の映像内容の把握を支援し、視聴者が任意の映像区間を自由に選択して視聴することを可能としている。
【０００７】
また、映像情報を補完するものとして、地図情報を利用したものも提案されている。例えば、Masatoshi Arikawa,「Spatial Browing for Video Database」(1998, AMCP'98) などがあげられる。この方法は、映像情報の中に収められている風景の位置と地図情報を組み合わせたものであり、地図上に映像が配置されており、地図情報に対して操作を行うと、対応する映像を視聴できる。
【０００８】
これら２つの例は、映像の視聴を支援することが目的であり、補助情報から映像にアクセスし、視聴することが可能となっている。これらは、視聴者による関連補助情報を介した映像再生の操作を受け取ることで、映像を再生することは可能であるが、再生に伴う関連情報が変化することはない。
【０００９】
これは、前述の２例が、前提として、映像は高品位に実時間再生され、十分な情報を伝送することが可能であるという点による。最終的に映像を再生すれば、内容が伝達できるために、補助的な映像の再生を行うまでの手掛りとなれば良いわけである。
【００１０】
しかし、ネットワーク上でのストリーミング映像においては、前述のように劣悪な条件下で映像を再生することが求められるため、時間的空間的解像度の制約を受けやすく、映像情報だけでは情報を十分に伝達することができないことが多い。
【００１１】
従って、映像の視聴を目的として、他の情報を用いるのではなく、伝達したい情報を伝送するために、映像と関連する補助的な情報を組み合わせて伝送し、情報を提供することが必要となる。
【００１２】
即ち、映像を視聴するために、関連補助情報を利用するのではなく、映像と関連する補助情報を積極的に利用して、映像だけでは十分に伝わらない情報を補完する目的で積極的に利用すれば、劣悪な条件下でも十分な情報を伝達することが可能になるのではないかと考えられる。
【００１３】
こうした映像と関連補助情報とを含むインタフェースをインターネット上で公開し、構築するなどのスクリプト技術を加え、さらに、上記フォーマットを再生可能なプレイヤーと組み合わせることで、実現することは可能となる。
【００１４】
しかし、ここで用いられるhtml及びJava,JavaScript, VBScript は、記述が複雑になるため、一般の人々は簡単に書くことはできないという問題点を有している。また、その記述に際しては、関連補助情報と連動する映像の頭出しのタイミングといったものを見つけ出し、計算し、記述する必要があるが、映像の頭出しは上述のように困難を極める。
【００１５】
本発明は、上記の点に鑑みなされたもので、一般の利用者が容易に取り扱うことが可能なグラフィカルなインタフェースを持ち、htmlや、JavaScriptといった代表的な制御スクリプトを中心にコンテンツを取り扱うことを可能とするストリーミング映像情報連動コンテンツ作成支援方法及び装置及びストリーミング映像情報連動コンテンツ作成支援プログラムを格納した記憶媒体を提供することを目的とする。
【００１６】
【課題を解決するための手段】
本発明（請求項１）は、電子的なネットワークを介して、映像と該映像に関連する補助情報とを連動して再生し、かつ、補助情報に対して操作を行うことで、映像及び補助情報に変化を与えるコンテンツを作成するためのストリーミング映像情報連動コンテンツ作成支援方法において、
映像情報を読み込み、
映像情報と関連する関連補助情報を読み込み、
映像情報を特殊再生も含む各種再生を行い、
関連補助情報を再生し、
映像情報と関連補助情報とを連動させるための対応付けを行い、
映像情報と関連補助情報との連動の様子を記述したスクリプトを出力する。
【００１７】
本発明（請求項２）は、映像情報として、ネットワーク映像を用いる。
【００１８】
本発明（請求項３）は、映像情報として、ネットワーク映像以外の映像形式である場合には、該映像情報をネットワーク映像形式に変換する。
【００１９】
本発明（請求項４）は、映像情報をネットワーク映像形式に変換する際に、
スクリプトと関連補助情報を用いてネットワーク映像へ変換する。
本発明（請求項５）は、映像情報と関連補助情報との連動の具合を変更する場合に、スクリプトを読み込む。
【００２０】
本発明（請求項６）は、電子的なネットワークを介して、映像と該映像に関連する補助情報とを連動して再生し、かつ、補助情報に対して操作を行うことで、映像及び補助情報に変化を与えるコンテンツを作成するためのストリーミング映像情報連動コンテンツ作成支援装置であって、
映像情報を読み込む映像情報読み込み手段と、
映像情報と関連する関連補助情報を読み込む関連補助情報読み込み手段と、
映像情報を特殊再生も含む各種再生を行う再生制御手段と、
関連補助情報を再生する関連補助情報操作手段と、
映像情報と関連補助情報とを連動させるための対応付けを行う関連補助情報操作手段と、
映像情報と関連補助情報との連動の様子を記述したスクリプトを出力するスクリプト処理手段とを有する。
【００２１】
本発明（請求項７）は、映像情報として、ネットワーク映像を用いる。
【００２２】
本発明（請求項８）は、映像情報として、ネットワーク映像以外の映像形式である場合には、該映像情報をネットワーク映像形式に変換する変換手段を有する。
【００２３】
本発明（請求項９）は、変換手段において、
スクリプトと前記関連補助情報を用いてネットワーク映像へ変換する。
本発明（請求項１０）は、映像情報と関連補助情報との連動の具合を変更する場合に、スクリプトを読み込む手段を有する。
【００２４】
本発明（請求項１１）は、請求項６乃至１０のいずれか１項に記載のストリーミング映像情報連動コンテンツ作成支援装置を構成する各手段としてコンピュータを機能させるためのプログラムを格納したことを特徴とするコンピュータ読み取り可能な記憶媒体である。
【００２８】
上記のように、映像情報とネットワーク映像と関連する関連補助情報を読み込み、映像情報を特殊再生も含む各種再生を行い、関連補助情報を再生し、映像情報と関連補助情報を連動させるための対応付けを行い、映像情報と関連補助情報との連動動作の動作処理を記述したスクリプトを出力することにより、関連情報と映像情報との対応付けの結果を自由に読み、保存することが可能となり、情報の再利用性が高まり、汎用性が増し、かつ、編集が容易に行えるため、映像情報と関連補助情報を簡単に対応付けることが可能となり、スクリプトを知らない多くの人々が容易にコンテンツを作成することが可能となる。
【００２９】
また、本発明は、映像情報として、ネットワーク映像を用いることも可能である。
【００３０】
また、本発明は、映像情報として、ネットワーク映像以外の映像形式であっても、映像形式をネットワーク映像形式に変換することが可能となる。変換時において、関連補助情報との連動対応情報を保持しつつ、ネットワーク映像へ変換することが可能となり、最終的なネットワーク映像と、関連補助情報との連動再生を行うインタフェースの構築に際して、ネットワーク映像と関連補助情報の連動のための対応付けの際に、関連補助情報と対応付けるものをネットワーク映像そのものか、ネットワーク映像形式以外の映像形式のいずれかと対応を付ければ、最終的な対応付けが行われた結果が得られることになる。
【００３１】
【発明の実施の形態】
図１は、本発明のストリーミング映像情報連動再生支援装置の構成を示す。
【００３２】
同図に示す装置は、映像情報読み込み部１１、関連補助情報読み込み部１２、映像情報再生制御部１３、関連補助情報操作部１４、連動対応制御部１６、スクリプト処理部１７から構成される。
【００３３】
同図において、映像情報ａと、当該映像情報ａに関連して再生表示する関連補助情報ｂとが存在し、適宜ネットワークを介して伝送される。
【００３４】
映像情報ａは、映像情報読み込み部１１と、関連補助情報読み込み部１２にそれぞれ読み込まれ、映像情報再生制御部１３と関連補助情報操作部１４にそれぞれ送られて利用者が取り扱えるようにする。
【００３５】
このように、第三者が取り扱えるようになったら、時間進行に合わせて変化するように映像情報と関連補助情報との対応付けを行うために、それぞれの情報は、連動対応制御部１６に送られ、対応が付けられる。この際に、それぞれの対応を行うために、映像情報再生制御部１３において映像のみ一部再生する。また、関連情報を選択するといった対応付けのための細かい作業が発生する。
【００３６】
上述のように、映像情報と関連補助情報とが対応付けられたら、それらの案系は、連動動作処理記述ｃとして情報が記述される。この情報は、スクリプト処理部１７に送られ、インターネット上のブラウジングインタフェース上で同様の動作を行うインタフェースを構築する。
【００３７】
図２は、本発明のストーミング映像情報連動コンテンツ作成支援装置の動作を示すフローチャートである。
【００３８】
まず、映像情報読み込み部１１において、入力映像情報ａが読み込まれる（ステップ１０１）。当該映像情報ａは、ネットワーク映像形式でも良いし、それ以外の形式でもよい。
【００３９】
ネットワーク映像形式以外の場合には、映像フォーマットのデータを映像情報読み込み部１１内の変換部（図示せず）により、映像情報に変換する（ステップ１０３）。なお、映像情報への変換は、ネットワーク映像情報化できる手法であれば何を用いてもよい。
【００４０】
こうして読み込まれた映像情報ａを映像情報再生制御部１３に入力し、早送り、巻き戻し、スロー、こま送り等のような特殊再生機能を含む再生と表示を可能にする。なお、特殊再生の中には映像情報に含まれる画像の差分情報を元にしたシーンの変り目（シーンチェンジ）毎にジャンプする機能を有していてもよい。利用者は、この映像情報再生制御部１３に対して操作を加えることで自由に映像表示、再生することが可能になる（ステップ１０４）。
【００４１】
一方、映像情報ａと連動して再生と表示などを行う関連補助情報の入力素材となる入力関連補助情報ｂを、関連補助情報読み込み部１２において読み込む（ステップ１０５）。この関連情報の種類は、画像やテキスト、音楽情報または、他の３Ｄ物体をはじめとする特殊情報でもよい。この際に、各種の画像、テキスト、音楽、映像などのデータは、加工されていてもよい。また、データそのものが加工されていなくても、データを加工するための指示を与える制御スクリプトが付加されていればよい。これらの関連補助情報を、関連補助情報操作部１４により、利用者が自由に操作可能なようにする（ステップ１０６）。例えば、注目している関連補助情報の中から、映像情報と密接に関係した情報を選択するなどといった操作を可能にする。
【００４２】
ここまでの処理において、利用者は、映像情報と関連補助情報とのそれぞれに対し、簡単な操作で操作命令を行うことが可能となる。
【００４３】
次に、ネットワーク映像の再生表示時に、関連補助情報が連動して変化できるように、映像情報と、関連補助情報との対応付けを行う（ステップ１０７）。一例としては、映像中のシーンの切り変り目と、関連する情報（例えば、そのシーンの名称など）とを対応付ける。このほかにも、あるシーンまできたときの画像を表示したり、表示する画像を切り替えたり、音楽を再生したり、再生する音楽を通常のものと変化したり等という処理と操作を行う。他の具体的な例については後述する。
【００４４】
これらの操作の対応付けが終了したら、連動動作処理記述Ｃをスクリプト処理部１７に入力する。スクリプト処理部１７では、連動動作処理記述ｃに記述されたネットワーク映像と関連補助情報との連動の様子を、インターネットのブラウザで実行するための出力へ書き出す機能を有し、スクリプトｄを出力する（ステップ１０８）。このスクリプトと、映像情報そのもの乃至は、他の形式から変換されて得られたネットワーク映像と、関連補助情報を用いることで、インターネット上の情報を表示する。
【００４５】
なお、映像情報と関連補助情報との連動の具合を変更したい場合には（ステップ１０９）、出力されたスクリプトｄを再度、スクリプト処理部１７において読み込み処理を行う。この工程によって、スクリプトが解釈され、連動動作記述が読みだされ、どのようにして設定されたかを知ることが可能となる。なお、このスクリプトは、インターネットに接続する端末のブラウザと関連するプラグインが解釈可能な程度のスクリプトを解釈する機能は十分に備えるものとする。
【００４６】
【実施例】
以下、図面と共に本発明の実施例を説明する。
【００４７】
［第１の実施例］
図３は、本発明の第１の実施例を説明するための図である。同図では、映像情報と関連補助情報との連動がどのように行われていくのかを説明する。同図では、映像の一部を関連補助情報として利用している。具体的には、映像中のシーンの変り目であるシーンチェンジ直後の映像を用いている。
【００４８】
本実施例のどのような操作を行うかの説明の前に、本実施例によって出力したいインタフェースの概要を説明する。
【００４９】
これは、図３（ａ）に示す出力結果インタフェースを用いて説明する。このインタフェースは、ネットワーク用のブラウザの一画面を示しており、ストリーミング映像と、ショットチェンジ群の画像が存在する。ショットチェンジ群の画像は、指示ポインタであるマウスがその画像の上に重なると、その画像だけ表示が切り替わる。同図（ｂ）のマウスによる切り替わり手順に示すように、マウスが画像（ア）に重なると、画像は、（ア）から（イ）が表示される。そして、クリックされると、（ア）にもともと対応付けられていた開始点から、再生が開始され、画像表示は、（ウ）に変わる。この操作は、映像が再生されていてもいなくても生じる。なお、映像の再生が続くと、映像区間が変わるため、映像区間と対応付けられた画像領域は変化することになる。この場合は、画像（ア）の次の画像が対象となり、これまで（ア）における（ウ）が表示されるように、同様の画像が表示される。
【００５０】
このコンテンツを作成するためのツールが本実施例である。
【００５１】
即ち、必要な機能としては、画像（ア）（イ）（ウ）に相当する画像と、映像情報のある特定の区間を対応付けなくてはならない。映像の読み込みに関しては、映像５２の読み込み指示を司る映像読み込みボタンによって読み込みを開始する。これによって、映像情報５２を取得する。一方、関連補助情報にあたる画像群の読み込みに関しては、画像群読み込み指示５５によって読み込みが開始される。この読み込みの際、全画像を一枚一枚読み込んでもよいが、大量の画像を読み込む必要が多くなるため、読み込むべきリストを予め用意しておき、そのリストを読み込ませると、自動的に画像群が読み込まれるものとしてもよい。
【００５２】
次に、読み込まれた画像群と、映像との対応付けの方法について説明する。対応付けに必要なのは、映像区間、即ち、映像のある開始点から終了点までのある区間を示し、その区間に画像（ア）（イ）（ウ）がどのような対応を取るかという情報が必要になる。そのため、画像側では、そういった記述を行うために、例えば、独立のウィンドウ５５を表示し、対応付けを行っている。このウィンドウ５５では、対応する画像と、対応する区間をそれぞれ指定する。例えば、ウィンドウ４４内の項目「Default 」の部分をマウスでクリックすると、「Default 」が反転し、画像を選択すれば対象とする画像に置き変わる。「Over」「Click 」も同様に行う。即ち、画像（ア）（イ）（ウ）を対象としている場合には、それぞれ「Default 」「Over」「Click 」に対し、（ア）（イ）（ウ）を選択する。次に、映像区間の指定であるが、同様に「Start 」「Stop」を反転させ、その状態で、映像の時間を示す「Time」をクリックすれば対応づけることができる。この処理を各画像群について繰り返し行うことで、映像と画像群の連動のための対応付けを行うことが可能となる。この処理を繰り返して、対応付けが終了したら、スクリプト出力処理のボタン５６を介して出力の指示をし、最終的なスクリプトを出力する。
【００５３】
こうした類のスクリプトは、html+JavaScript やHtml+VBScript, Html+Javaなど各種インターネットスクリプト技術により、容易に構築することができる。本実施例では、html+JavaScript を用いて出力することとしている。
さらに、本実施例では、こうしたhtml+JavaScript を再度読み込む機能を有する。まず、こうした連動する機能を、Html+JavaScript を用いて実現する場合、htmlの<IMG> タグの中からマウスのOver,Clickのときに、表示を切り替え、映像の再生を開始するというJavaScriptのFunctionを呼び出す形式にすればよい。
これにより、
<IMG SRC="deault 画像"OnClick="JavaScript:ClickFunc(S)"OnOver="JavaScipt:OverFunc(E)">
となる。即ち、殆どの情報は、<IMG> タグの引数として与えられている。これを読み込むことで、映像の再生タイミングと、画像群をそれぞれ読み込み、連動のための対応関係を読み込み、本実施例で編集中の状態を再現することを可能にしている。
【００５４】
なお、本実施例では、対応付けを行う際に、ネットワーク映像形式ではなく、それ以外のディジタル映像形式を考えている。そこで、これを入力として、ネットワーク映像形式を出力する機能を備える。その構築あたっては、プログラムとして内包してもよいし、外部のプログラムにデータを引き渡してもよく、この場合は、外部プログラムを起動し、処理を行うようにしている。
【００５５】
これにより、入力としてネットワーク映像形式ではない映像情報と、画像群を示したリスト群を指定し、出力としてネットワーク映像形式化した映像情報と、映像情報と関連補助情報である画像群との対応関係と、その動作を記述したスクリプトを出力する。
【００５６】
［第２の実施例］
本実施例では、関連補助情報としてショットチェンジの情報ではなく、地図情報を用いる例を示す。
【００５７】
図４は、本発明の第２の実施例の関連補助譲歩に地図情報を利用した場合の例を示し、図５は、本発明の第２の実施例を説明するための図である。
【００５８】
ストリーミング映像の内容は刻々と変化し、地図上のさまざまな箇所を撮影しているものとする。ストリーミング映像の再生に伴い、関連補助情報表示では、映像中に含まれる風景と対応する地図上の位置を強調表示する。この強調表示は、画像内容が反転しても良いし、周囲を囲ってもよいし、他の画像よりも巨大に表示されるなど様々なことが考えられる。ここでは、地図上の色が変化するものとする。従って、ストリーミング映像の再生と表示に伴い、関連補助情報である地図情報は次々と色が変化しては戻りというプロセスを踏んでいく。
【００５９】
視聴者は、一方で、地図情報の特定領域を撮影している映像を見たい場合には、その特定領域をポインティングデバイスなどで、指定し、操作を行うことで、対応する領域を記録しているストリーミング映像の該当区間を再生し、表示する。
【００６０】
本実施例と前述の第１の実施例との違いは、関連補助情報たる情報が地図情報になっていることである。ショットチェンジ直後の画像情報と異なり、画像サイズが異なり、画像の配置がただ一覧すればよいというものではなく、画像同士の隣接関係がシビアになる。
【００６１】
本実施例では、htmlのTable 環境を用いることでその位置情報を固定している。具体的には、以下のようになる。
<TABLE>
<TR>
<TD>
<IMG SRC="deault 画像"OnClick="JavaScript:ClickFunc(S)"OnOver="JavaScipt:OverFunc(E)">
</TD>
…
</TABLE>
従って、第１の実施例では、<IMG> タグを解析の対象として扱っていたが、今後は、解析の対象として、<TABLE> 関連のタグを取扱う。<TR></TR>, <TD></TD>で囲まれている<IMG> タグ同士の位置関係を記述し、それを再現することで、位置関係を保ったまま、画像群と映像関係の対応付けを実現するインタフェースを提供している。画像の配置関係以外は、第１の実施例に準ずるため、細かい動作などの説明については割愛する。
【００６２】
以上、２つの実施例について述べた。ここでは、画像補助情報として、他にも音楽、テキスト、映像などを扱うことが考えられる。テキストであれば、画像と同様にある特定エリアとして扱うことが可能となる。音楽や映像の場合には、対応区間を時系列の中で定義する処理が困難となるが、開始、終了時間を明記することで、十分に対応可能である。
【００６３】
また、前述の図２のフローチャートをプログラムとして構築し、ストリーミング映像情報連動コンテンツ作成支援装置として利用されるコンピュータに接続されるディスク装置や、フロッピーディスク、ＣＤ−ＲＯＭ等の可搬記憶媒体に格納しておき、本発明を実施する際にインストールすることにより、容易に本発明を実現することができる。
【００６４】
なお、本発明は、上記の実施例に限定されることなく、特許請求の範囲内において、種々変更・応用が可能である。
【００６５】
【発明の効果】
上述のように、本発明によれば、ネットワークを介して映像を視聴するストリーミング映像を視聴する際に、欠落した情報を補完しつつ、任意の映像を自由に視聴するような関連補助情報との連動によって、制約の多いネットワーク上でも映像による情報伝達を有効に行うためのインタフェースの構築を容易に行うことができる。
【図面の簡単な説明】
【図１】本発明のストリーミング映像情報連動コンテンツ作成支援装置の構成図である。
【図２】本発明のストリーミング映像情報連動コンテンツ作成支援装置の動作を示すフローチャートである。
【図３】本発明の第１の実施例を説明するための図でわる。
【図４】本発明の第２の実施例の関連補助情報に地図情報を利用した場合の例を示す図である。
【図５】本発明の第２の実施例を説明するための図でわる。
【符号の説明】
１１ 映像情報読み込み部
１２ 関連補助情報読み込み部
１３ 映像情報再生制御部
１４ 関連補助情報操作部
１６ 連動対応制御部
１７ スクリプト処理部
５０ 映像情報
５１ 関連補助情報
５２ 映像情報読み込み指示
５３ マウスクリックによる情報画面表示
５４ 画面選択スクロールボタン
５５ 映像との関係記述を入力するためのウィンドウ
５６ スクリプト出力
５７ 映像変換ボタン
６１ 関連補助情報
ａ 映像情報
ｂ 関連補助情報
ｃ 連動動作処理記述
ｄ スクリプト
【発明の属する技術分野】
本発明は、ストリーミング映像情報連動コンテンツ作成支援方法及び装置及びストリーミング映像情報連動コンテンツ作成支援プログラムを格納した記憶媒体に係り、特に、ネットワークを介して映像を再生する際に、映像の再生時間を基準に、映像を関連する情報を変化させることで、映像の内容理解を促進するインタフェースを含むコンテンツを作成するストリーミング映像情報連動コンテンツ作成支援方法及び装置及びストリーミング映像情報連動コンテンツ作成支援プログラムを格納した記憶媒体に関する。
【０００２】
【従来の技術】
電子的なコンピュータネットワークの広まりと、コンピュータの爆発的な普及と共に、多くの映像が電子ネットワーク上を配信されている。特に、現在最も普及しているインターネットと呼ばれるＩＰネットワーク上で、次々と映像を伝送するためのいくつかのシステムが開発され、利用されている。例えば、SoftwareVision(NTT) 、RealSystem(Real Networks) 、MediaTechnorogy(MicroSoft)、QuickTime4.0(Apple) などがそれらの代表的なものである。
【０００３】
【発明が解決しようとする課題】
しかしながら、現在普及しているインターネットと呼ばれるＩＰネットワークはその構造上、容量が小さくなりやすく、実時間通信が必ずしも保証されていないため、１９９９年現在において、アナログＴＶ放送の映像品質（ＮＴＳＣ，ＰＡＬなど）を満たしていないものがほとんどである。
【０００４】
従って、現状のＩＰネットワーク上を配信する映像クオリティは、やむを得ずＴＶ品質と比較して、時間乃至空間の一方、または、両方を犠牲にした物となってしまい、ＴＶ放送品質を満たした映像よりも低い映像情報しか伝達することができないことが一般的である。
【０００５】
また、劣悪なネットワーク条件においては、映像の本質的特徴である実時間再生すら不可能な場合も存在する。こうした問題は、１９９９年現在では、一般的であり、今後しばらくは多くの場面において発生する問題になると考えられる。 また、映像は、その内容を、その時間長分だけ視聴することが必要であり、内容を瞬時に把握し、必要なところだけ視聴したいという要求を満たすことが困難なメディアである。これは、映像が視聴者に対して、強い時間的拘束を強いるからである。
【０００６】
そこで、映像の内容を簡単に把握し、かつ、視聴しやすくするために一つの提案として、映像情報のカメラのＯＮ／ＯＦＦに対応するカット点（ショットチェンジ）の情報を抽出し、カット点直後の映像を表示し、視聴者の要望に応じて、ショットチェンジ直後の映像に対応する映像区間を任意に再生するなどして、視聴を支援する試みがあげられる。その一例が、Yukinobu Taniguti, Yoshinobu Tonomura,「PanoramaExcerpts:Extracting and packing Panoramas for Video Browsing」(1996 ACM Multimedia 97)である。この方法は、映像の重要な意味を持つであろう複数の画像を自動的に検出し、その一覧を視聴者に提示させて、視聴者の映像内容の把握を支援し、視聴者が任意の映像区間を自由に選択して視聴することを可能としている。
【０００７】
また、映像情報を補完するものとして、地図情報を利用したものも提案されている。例えば、Masatoshi Arikawa,「Spatial Browing for Video Database」(1998, AMCP'98) などがあげられる。この方法は、映像情報の中に収められている風景の位置と地図情報を組み合わせたものであり、地図上に映像が配置されており、地図情報に対して操作を行うと、対応する映像を視聴できる。
【０００８】
これら２つの例は、映像の視聴を支援することが目的であり、補助情報から映像にアクセスし、視聴することが可能となっている。これらは、視聴者による関連補助情報を介した映像再生の操作を受け取ることで、映像を再生することは可能であるが、再生に伴う関連情報が変化することはない。
【０００９】
これは、前述の２例が、前提として、映像は高品位に実時間再生され、十分な情報を伝送することが可能であるという点による。最終的に映像を再生すれば、内容が伝達できるために、補助的な映像の再生を行うまでの手掛りとなれば良いわけである。
【００１０】
しかし、ネットワーク上でのストリーミング映像においては、前述のように劣悪な条件下で映像を再生することが求められるため、時間的空間的解像度の制約を受けやすく、映像情報だけでは情報を十分に伝達することができないことが多い。
【００１１】
従って、映像の視聴を目的として、他の情報を用いるのではなく、伝達したい情報を伝送するために、映像と関連する補助的な情報を組み合わせて伝送し、情報を提供することが必要となる。
【００１２】
即ち、映像を視聴するために、関連補助情報を利用するのではなく、映像と関連する補助情報を積極的に利用して、映像だけでは十分に伝わらない情報を補完する目的で積極的に利用すれば、劣悪な条件下でも十分な情報を伝達することが可能になるのではないかと考えられる。
【００１３】
こうした映像と関連補助情報とを含むインタフェースをインターネット上で公開し、構築するなどのスクリプト技術を加え、さらに、上記フォーマットを再生可能なプレイヤーと組み合わせることで、実現することは可能となる。
【００１４】
しかし、ここで用いられるhtml及びJava,JavaScript, VBScript は、記述が複雑になるため、一般の人々は簡単に書くことはできないという問題点を有している。また、その記述に際しては、関連補助情報と連動する映像の頭出しのタイミングといったものを見つけ出し、計算し、記述する必要があるが、映像の頭出しは上述のように困難を極める。
【００１５】
本発明は、上記の点に鑑みなされたもので、一般の利用者が容易に取り扱うことが可能なグラフィカルなインタフェースを持ち、htmlや、JavaScriptといった代表的な制御スクリプトを中心にコンテンツを取り扱うことを可能とするストリーミング映像情報連動コンテンツ作成支援方法及び装置及びストリーミング映像情報連動コンテンツ作成支援プログラムを格納した記憶媒体を提供することを目的とする。
【００１６】
【課題を解決するための手段】
本発明（請求項１）は、電子的なネットワークを介して、映像と該映像に関連する補助情報とを連動して再生し、かつ、補助情報に対して操作を行うことで、映像及び補助情報に変化を与えるコンテンツを作成するためのストリーミング映像情報連動コンテンツ作成支援方法において、
映像情報を読み込み、
映像情報と関連する関連補助情報を読み込み、
映像情報を特殊再生も含む各種再生を行い、
関連補助情報を再生し、
映像情報と関連補助情報とを連動させるための対応付けを行い、
映像情報と関連補助情報との連動の様子を記述したスクリプトを出力する。
【００１７】
本発明（請求項２）は、映像情報として、ネットワーク映像を用いる。
【００１８】
本発明（請求項３）は、映像情報として、ネットワーク映像以外の映像形式である場合には、該映像情報をネットワーク映像形式に変換する。
【００１９】
本発明（請求項４）は、映像情報をネットワーク映像形式に変換する際に、
スクリプトと関連補助情報を用いてネットワーク映像へ変換する。
本発明（請求項５）は、映像情報と関連補助情報との連動の具合を変更する場合に、スクリプトを読み込む。
【００２０】
本発明（請求項６）は、電子的なネットワークを介して、映像と該映像に関連する補助情報とを連動して再生し、かつ、補助情報に対して操作を行うことで、映像及び補助情報に変化を与えるコンテンツを作成するためのストリーミング映像情報連動コンテンツ作成支援装置であって、
映像情報を読み込む映像情報読み込み手段と、
映像情報と関連する関連補助情報を読み込む関連補助情報読み込み手段と、
映像情報を特殊再生も含む各種再生を行う再生制御手段と、
関連補助情報を再生する関連補助情報操作手段と、
映像情報と関連補助情報とを連動させるための対応付けを行う関連補助情報操作手段と、
映像情報と関連補助情報との連動の様子を記述したスクリプトを出力するスクリプト処理手段とを有する。
【００２１】
本発明（請求項７）は、映像情報として、ネットワーク映像を用いる。
【００２２】
本発明（請求項８）は、映像情報として、ネットワーク映像以外の映像形式である場合には、該映像情報をネットワーク映像形式に変換する変換手段を有する。
【００２３】
本発明（請求項９）は、変換手段において、
スクリプトと前記関連補助情報を用いてネットワーク映像へ変換する。
本発明（請求項１０）は、映像情報と関連補助情報との連動の具合を変更する場合に、スクリプトを読み込む手段を有する。
【００２４】
本発明（請求項１１）は、請求項６乃至１０のいずれか１項に記載のストリーミング映像情報連動コンテンツ作成支援装置を構成する各手段としてコンピュータを機能させるためのプログラムを格納したことを特徴とするコンピュータ読み取り可能な記憶媒体である。
【００２８】
上記のように、映像情報とネットワーク映像と関連する関連補助情報を読み込み、映像情報を特殊再生も含む各種再生を行い、関連補助情報を再生し、映像情報と関連補助情報を連動させるための対応付けを行い、映像情報と関連補助情報との連動動作の動作処理を記述したスクリプトを出力することにより、関連情報と映像情報との対応付けの結果を自由に読み、保存することが可能となり、情報の再利用性が高まり、汎用性が増し、かつ、編集が容易に行えるため、映像情報と関連補助情報を簡単に対応付けることが可能となり、スクリプトを知らない多くの人々が容易にコンテンツを作成することが可能となる。
【００２９】
また、本発明は、映像情報として、ネットワーク映像を用いることも可能である。
【００３０】
また、本発明は、映像情報として、ネットワーク映像以外の映像形式であっても、映像形式をネットワーク映像形式に変換することが可能となる。変換時において、関連補助情報との連動対応情報を保持しつつ、ネットワーク映像へ変換することが可能となり、最終的なネットワーク映像と、関連補助情報との連動再生を行うインタフェースの構築に際して、ネットワーク映像と関連補助情報の連動のための対応付けの際に、関連補助情報と対応付けるものをネットワーク映像そのものか、ネットワーク映像形式以外の映像形式のいずれかと対応を付ければ、最終的な対応付けが行われた結果が得られることになる。
【００３１】
【発明の実施の形態】
図１は、本発明のストリーミング映像情報連動再生支援装置の構成を示す。
【００３２】
同図に示す装置は、映像情報読み込み部１１、関連補助情報読み込み部１２、映像情報再生制御部１３、関連補助情報操作部１４、連動対応制御部１６、スクリプト処理部１７から構成される。
【００３３】
同図において、映像情報ａと、当該映像情報ａに関連して再生表示する関連補助情報ｂとが存在し、適宜ネットワークを介して伝送される。
【００３４】
映像情報ａは、映像情報読み込み部１１と、関連補助情報読み込み部１２にそれぞれ読み込まれ、映像情報再生制御部１３と関連補助情報操作部１４にそれぞれ送られて利用者が取り扱えるようにする。
【００３５】
このように、第三者が取り扱えるようになったら、時間進行に合わせて変化するように映像情報と関連補助情報との対応付けを行うために、それぞれの情報は、連動対応制御部１６に送られ、対応が付けられる。この際に、それぞれの対応を行うために、映像情報再生制御部１３において映像のみ一部再生する。また、関連情報を選択するといった対応付けのための細かい作業が発生する。
【００３６】
上述のように、映像情報と関連補助情報とが対応付けられたら、それらの案系は、連動動作処理記述ｃとして情報が記述される。この情報は、スクリプト処理部１７に送られ、インターネット上のブラウジングインタフェース上で同様の動作を行うインタフェースを構築する。
【００３７】
図２は、本発明のストーミング映像情報連動コンテンツ作成支援装置の動作を示すフローチャートである。
【００３８】
まず、映像情報読み込み部１１において、入力映像情報ａが読み込まれる（ステップ１０１）。当該映像情報ａは、ネットワーク映像形式でも良いし、それ以外の形式でもよい。
【００３９】
ネットワーク映像形式以外の場合には、映像フォーマットのデータを映像情報読み込み部１１内の変換部（図示せず）により、映像情報に変換する（ステップ１０３）。なお、映像情報への変換は、ネットワーク映像情報化できる手法であれば何を用いてもよい。
【００４０】
こうして読み込まれた映像情報ａを映像情報再生制御部１３に入力し、早送り、巻き戻し、スロー、こま送り等のような特殊再生機能を含む再生と表示を可能にする。なお、特殊再生の中には映像情報に含まれる画像の差分情報を元にしたシーンの変り目（シーンチェンジ）毎にジャンプする機能を有していてもよい。利用者は、この映像情報再生制御部１３に対して操作を加えることで自由に映像表示、再生することが可能になる（ステップ１０４）。
【００４１】
一方、映像情報ａと連動して再生と表示などを行う関連補助情報の入力素材となる入力関連補助情報ｂを、関連補助情報読み込み部１２において読み込む（ステップ１０５）。この関連情報の種類は、画像やテキスト、音楽情報または、他の３Ｄ物体をはじめとする特殊情報でもよい。この際に、各種の画像、テキスト、音楽、映像などのデータは、加工されていてもよい。また、データそのものが加工されていなくても、データを加工するための指示を与える制御スクリプトが付加されていればよい。これらの関連補助情報を、関連補助情報操作部１４により、利用者が自由に操作可能なようにする（ステップ１０６）。例えば、注目している関連補助情報の中から、映像情報と密接に関係した情報を選択するなどといった操作を可能にする。
【００４２】
ここまでの処理において、利用者は、映像情報と関連補助情報とのそれぞれに対し、簡単な操作で操作命令を行うことが可能となる。
【００４３】
次に、ネットワーク映像の再生表示時に、関連補助情報が連動して変化できるように、映像情報と、関連補助情報との対応付けを行う（ステップ１０７）。一例としては、映像中のシーンの切り変り目と、関連する情報（例えば、そのシーンの名称など）とを対応付ける。このほかにも、あるシーンまできたときの画像を表示したり、表示する画像を切り替えたり、音楽を再生したり、再生する音楽を通常のものと変化したり等という処理と操作を行う。他の具体的な例については後述する。
【００４４】
これらの操作の対応付けが終了したら、連動動作処理記述Ｃをスクリプト処理部１７に入力する。スクリプト処理部１７では、連動動作処理記述ｃに記述されたネットワーク映像と関連補助情報との連動の様子を、インターネットのブラウザで実行するための出力へ書き出す機能を有し、スクリプトｄを出力する（ステップ１０８）。このスクリプトと、映像情報そのもの乃至は、他の形式から変換されて得られたネットワーク映像と、関連補助情報を用いることで、インターネット上の情報を表示する。
【００４５】
なお、映像情報と関連補助情報との連動の具合を変更したい場合には（ステップ１０９）、出力されたスクリプトｄを再度、スクリプト処理部１７において読み込み処理を行う。この工程によって、スクリプトが解釈され、連動動作記述が読みだされ、どのようにして設定されたかを知ることが可能となる。なお、このスクリプトは、インターネットに接続する端末のブラウザと関連するプラグインが解釈可能な程度のスクリプトを解釈する機能は十分に備えるものとする。
【００４６】
【実施例】
以下、図面と共に本発明の実施例を説明する。
【００４７】
［第１の実施例］
図３は、本発明の第１の実施例を説明するための図である。同図では、映像情報と関連補助情報との連動がどのように行われていくのかを説明する。同図では、映像の一部を関連補助情報として利用している。具体的には、映像中のシーンの変り目であるシーンチェンジ直後の映像を用いている。
【００４８】
本実施例のどのような操作を行うかの説明の前に、本実施例によって出力したいインタフェースの概要を説明する。
【００４９】
これは、図３（ａ）に示す出力結果インタフェースを用いて説明する。このインタフェースは、ネットワーク用のブラウザの一画面を示しており、ストリーミング映像と、ショットチェンジ群の画像が存在する。ショットチェンジ群の画像は、指示ポインタであるマウスがその画像の上に重なると、その画像だけ表示が切り替わる。同図（ｂ）のマウスによる切り替わり手順に示すように、マウスが画像（ア）に重なると、画像は、（ア）から（イ）が表示される。そして、クリックされると、（ア）にもともと対応付けられていた開始点から、再生が開始され、画像表示は、（ウ）に変わる。この操作は、映像が再生されていてもいなくても生じる。なお、映像の再生が続くと、映像区間が変わるため、映像区間と対応付けられた画像領域は変化することになる。この場合は、画像（ア）の次の画像が対象となり、これまで（ア）における（ウ）が表示されるように、同様の画像が表示される。
【００５０】
このコンテンツを作成するためのツールが本実施例である。
【００５１】
即ち、必要な機能としては、画像（ア）（イ）（ウ）に相当する画像と、映像情報のある特定の区間を対応付けなくてはならない。映像の読み込みに関しては、映像５２の読み込み指示を司る映像読み込みボタンによって読み込みを開始する。これによって、映像情報５２を取得する。一方、関連補助情報にあたる画像群の読み込みに関しては、画像群読み込み指示５５によって読み込みが開始される。この読み込みの際、全画像を一枚一枚読み込んでもよいが、大量の画像を読み込む必要が多くなるため、読み込むべきリストを予め用意しておき、そのリストを読み込ませると、自動的に画像群が読み込まれるものとしてもよい。
【００５２】
次に、読み込まれた画像群と、映像との対応付けの方法について説明する。対応付けに必要なのは、映像区間、即ち、映像のある開始点から終了点までのある区間を示し、その区間に画像（ア）（イ）（ウ）がどのような対応を取るかという情報が必要になる。そのため、画像側では、そういった記述を行うために、例えば、独立のウィンドウ５５を表示し、対応付けを行っている。このウィンドウ５５では、対応する画像と、対応する区間をそれぞれ指定する。例えば、ウィンドウ４４内の項目「Default 」の部分をマウスでクリックすると、「Default 」が反転し、画像を選択すれば対象とする画像に置き変わる。「Over」「Click 」も同様に行う。即ち、画像（ア）（イ）（ウ）を対象としている場合には、それぞれ「Default 」「Over」「Click 」に対し、（ア）（イ）（ウ）を選択する。次に、映像区間の指定であるが、同様に「Start 」「Stop」を反転させ、その状態で、映像の時間を示す「Time」をクリックすれば対応づけることができる。この処理を各画像群について繰り返し行うことで、映像と画像群の連動のための対応付けを行うことが可能となる。この処理を繰り返して、対応付けが終了したら、スクリプト出力処理のボタン５６を介して出力の指示をし、最終的なスクリプトを出力する。
【００５３】
こうした類のスクリプトは、html+JavaScript やHtml+VBScript, Html+Javaなど各種インターネットスクリプト技術により、容易に構築することができる。本実施例では、html+JavaScript を用いて出力することとしている。
さらに、本実施例では、こうしたhtml+JavaScript を再度読み込む機能を有する。まず、こうした連動する機能を、Html+JavaScript を用いて実現する場合、htmlの<IMG> タグの中からマウスのOver,Clickのときに、表示を切り替え、映像の再生を開始するというJavaScriptのFunctionを呼び出す形式にすればよい。
これにより、
<IMG SRC="deault 画像"OnClick="JavaScript:ClickFunc(S)"OnOver="JavaScipt:OverFunc(E)">
となる。即ち、殆どの情報は、<IMG> タグの引数として与えられている。これを読み込むことで、映像の再生タイミングと、画像群をそれぞれ読み込み、連動のための対応関係を読み込み、本実施例で編集中の状態を再現することを可能にしている。
【００５４】
なお、本実施例では、対応付けを行う際に、ネットワーク映像形式ではなく、それ以外のディジタル映像形式を考えている。そこで、これを入力として、ネットワーク映像形式を出力する機能を備える。その構築あたっては、プログラムとして内包してもよいし、外部のプログラムにデータを引き渡してもよく、この場合は、外部プログラムを起動し、処理を行うようにしている。
【００５５】
これにより、入力としてネットワーク映像形式ではない映像情報と、画像群を示したリスト群を指定し、出力としてネットワーク映像形式化した映像情報と、映像情報と関連補助情報である画像群との対応関係と、その動作を記述したスクリプトを出力する。
【００５６】
［第２の実施例］
本実施例では、関連補助情報としてショットチェンジの情報ではなく、地図情報を用いる例を示す。
【００５７】
図４は、本発明の第２の実施例の関連補助譲歩に地図情報を利用した場合の例を示し、図５は、本発明の第２の実施例を説明するための図である。
【００５８】
ストリーミング映像の内容は刻々と変化し、地図上のさまざまな箇所を撮影しているものとする。ストリーミング映像の再生に伴い、関連補助情報表示では、映像中に含まれる風景と対応する地図上の位置を強調表示する。この強調表示は、画像内容が反転しても良いし、周囲を囲ってもよいし、他の画像よりも巨大に表示されるなど様々なことが考えられる。ここでは、地図上の色が変化するものとする。従って、ストリーミング映像の再生と表示に伴い、関連補助情報である地図情報は次々と色が変化しては戻りというプロセスを踏んでいく。
【００５９】
視聴者は、一方で、地図情報の特定領域を撮影している映像を見たい場合には、その特定領域をポインティングデバイスなどで、指定し、操作を行うことで、対応する領域を記録しているストリーミング映像の該当区間を再生し、表示する。
【００６０】
本実施例と前述の第１の実施例との違いは、関連補助情報たる情報が地図情報になっていることである。ショットチェンジ直後の画像情報と異なり、画像サイズが異なり、画像の配置がただ一覧すればよいというものではなく、画像同士の隣接関係がシビアになる。
【００６１】
本実施例では、htmlのTable 環境を用いることでその位置情報を固定している。具体的には、以下のようになる。
<TABLE>
<TR>
<TD>
<IMG SRC="deault 画像"OnClick="JavaScript:ClickFunc(S)"OnOver="JavaScipt:OverFunc(E)">
</TD>
…
</TABLE>
従って、第１の実施例では、<IMG> タグを解析の対象として扱っていたが、今後は、解析の対象として、<TABLE> 関連のタグを取扱う。<TR></TR>, <TD></TD>で囲まれている<IMG> タグ同士の位置関係を記述し、それを再現することで、位置関係を保ったまま、画像群と映像関係の対応付けを実現するインタフェースを提供している。画像の配置関係以外は、第１の実施例に準ずるため、細かい動作などの説明については割愛する。
【００６２】
以上、２つの実施例について述べた。ここでは、画像補助情報として、他にも音楽、テキスト、映像などを扱うことが考えられる。テキストであれば、画像と同様にある特定エリアとして扱うことが可能となる。音楽や映像の場合には、対応区間を時系列の中で定義する処理が困難となるが、開始、終了時間を明記することで、十分に対応可能である。
【００６３】
また、前述の図２のフローチャートをプログラムとして構築し、ストリーミング映像情報連動コンテンツ作成支援装置として利用されるコンピュータに接続されるディスク装置や、フロッピーディスク、ＣＤ−ＲＯＭ等の可搬記憶媒体に格納しておき、本発明を実施する際にインストールすることにより、容易に本発明を実現することができる。
【００６４】
なお、本発明は、上記の実施例に限定されることなく、特許請求の範囲内において、種々変更・応用が可能である。
【００６５】
【発明の効果】
上述のように、本発明によれば、ネットワークを介して映像を視聴するストリーミング映像を視聴する際に、欠落した情報を補完しつつ、任意の映像を自由に視聴するような関連補助情報との連動によって、制約の多いネットワーク上でも映像による情報伝達を有効に行うためのインタフェースの構築を容易に行うことができる。
【図面の簡単な説明】
【図１】本発明のストリーミング映像情報連動コンテンツ作成支援装置の構成図である。
【図２】本発明のストリーミング映像情報連動コンテンツ作成支援装置の動作を示すフローチャートである。
【図３】本発明の第１の実施例を説明するための図でわる。
【図４】本発明の第２の実施例の関連補助情報に地図情報を利用した場合の例を示す図である。
【図５】本発明の第２の実施例を説明するための図でわる。
【符号の説明】
１１ 映像情報読み込み部
１２ 関連補助情報読み込み部
１３ 映像情報再生制御部
１４ 関連補助情報操作部
１６ 連動対応制御部
１７ スクリプト処理部
５０ 映像情報
５１ 関連補助情報
５２ 映像情報読み込み指示
５３ マウスクリックによる情報画面表示
５４ 画面選択スクロールボタン
５５ 映像との関係記述を入力するためのウィンドウ
５６ スクリプト出力
５７ 映像変換ボタン
６１ 関連補助情報
ａ 映像情報
ｂ 関連補助情報
ｃ 連動動作処理記述
ｄ スクリプト
Claims (11)
- 電子的なネットワークを介して、映像と該映像に関連する補助情報とを連動して再生し、かつ、補助情報に対して操作を行うことで、映像及び補助情報に変化を与えるコンテンツを作成するためのストリーミング映像情報連動コンテンツ作成支援方法において、
前記映像情報を読み込み、
前記映像情報と関連する関連補助情報を読み込み、
前記映像情報を特殊再生も含む各種再生を行い、
前記関連補助情報を再生し、
前記映像情報と前記関連補助情報とを連動させるための対応付けを行い、
前記映像情報と前記関連補助情報との連動の様子を記述したスクリプトを出力することを特徴とするストリーミング映像情報連動コンテンツ作成支援方法。 - 前記映像情報として、ネットワーク映像を用いる請求項１記載のストリーミング映像情報連動コンテンツ作成支援方法。
- 前記映像情報として、ネットワーク映像以外の映像形式である場合には、該映像情報をネットワーク映像形式に変換する請求項１記載のストリーミング映像情報連動コンテンツ作成支援方法。
- 前記映像情報をネットワーク映像形式に変換する際に、
前記スクリプトと前記関連補助情報を用いてネットワーク映像へ変換する請求項３記載のストリーミング映像情報連動コンテンツ作成支援方法。 - 前記映像情報と前記関連補助情報との連動の具合を変更する場合に、前記スクリプトを読み込む請求項１記載のストリーミング映像情報連動コンテンツ作成支援方法。
- 電子的なネットワークを介して、映像と該映像に関連する補助情報とを連動して再生し、かつ、補助情報に対して操作を行うことで、映像及び補助情報に変化を与えるコンテンツを作成するためのストリーミング映像情報連動コンテンツ作成支援装置であって、
前記映像情報を読み込む映像情報読み込み手段と、
前記映像情報と関連する関連補助情報を読み込む関連補助情報読み込み手段と、
前記映像情報を特殊再生も含む各種再生を行う再生制御手段と、
前記関連補助情報を再生する関連補助情報操作手段と、
前記映像情報と前記関連補助情報とを連動させるための対応付けを行う関連補助情報操作手段と、
前記映像情報と前記関連補助情報との連動の様子を記述したスクリプトを出力するスクリプト処理手段とを有することを特徴とするストリーミング映像情報連動コンテンツ作成支援装置。 - 前記映像情報として、ネットワーク映像を用いる請求項６記載のストリーミング映像情報連動コンテンツ作成支援装置。
- 前記映像情報として、ネットワーク映像以外の映像形式である場合には、該映像情報をネットワーク映像形式に変換する変換手段を有する請求項６記載のストリーミング映像情報連動コンテンツ作成支援装置。
- 前記変換手段は、
前記スクリプトと前記関連補助情報を用いてネットワーク映像へ変換する請求項８記載のストリーミング映像情報連動コンテンツ作成支援装置。 - 前記映像情報と前記関連補助情報との連動の具合を変更する場合に、前記スクリプト手段を有する請求項６記載のストリーミング映像情報連動コンテンツ作成支援装置。
- 請求項６乃至１０のいずれか１項に記載のストリーミング映像情報連動コンテンツ作成支援装置を構成する各手段としてコンピュータを機能させるためのプログラムを格納したことを特徴とするコンピュータ読み取り可能な記憶媒体。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000121621A JP4354082B2 (ja) | 2000-04-21 | 2000-04-21 | ストリーミング映像情報連動コンテンツ作成支援方法及び装置及びストリーミング映像情報連動コンテンツ作成支援プログラムを格納した記憶媒体 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000121621A JP4354082B2 (ja) | 2000-04-21 | 2000-04-21 | ストリーミング映像情報連動コンテンツ作成支援方法及び装置及びストリーミング映像情報連動コンテンツ作成支援プログラムを格納した記憶媒体 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2001309283A JP2001309283A (ja) | 2001-11-02 |
| JP4354082B2 true JP4354082B2 (ja) | 2009-10-28 |
Family
ID=18632244
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2000121621A Expired - Lifetime JP4354082B2 (ja) | 2000-04-21 | 2000-04-21 | ストリーミング映像情報連動コンテンツ作成支援方法及び装置及びストリーミング映像情報連動コンテンツ作成支援プログラムを格納した記憶媒体 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4354082B2 (ja) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4296376B2 (ja) * | 2001-12-14 | 2009-07-15 | 富士フイルム株式会社 | 動画取得方法 |
| US8220020B2 (en) | 2003-09-30 | 2012-07-10 | Sharp Laboratories Of America, Inc. | Systems and methods for enhanced display and navigation of streaming video |
-
2000
- 2000-04-21 JP JP2000121621A patent/JP4354082B2/ja not_active Expired - Lifetime
Also Published As
| Publication number | Publication date |
|---|---|
| JP2001309283A (ja) | 2001-11-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR100806467B1 (ko) | 사용자 특정 정보를 이용한 미디어 콘텐츠 애노테이팅 | |
| US7979879B2 (en) | Video contents display system, video contents display method, and program for the same | |
| JP3897774B2 (ja) | マルチメディア再生装置およびメニュー画面表示方法 | |
| US20090327894A1 (en) | Systems and methods for remote control of interactive video | |
| JP5397995B2 (ja) | 通信端末、コンテンツ再生方法、プログラム、コンテンツ再生システム及びサーバ | |
| CN102823268B (zh) | 视频数据的技巧回放 | |
| JP2006174309A (ja) | 動画再生装置、プログラム、及び記録媒体 | |
| CN1729665A (zh) | 一种具备带有用于显示视频信号的显示器的手持控制器的住宅网关系统 | |
| US20130133001A1 (en) | Television Receiver, Method of Controlling the Receiver, and Network Construction Device | |
| JP2005198039A (ja) | 情報表示装置および情報表示方法 | |
| US20240146863A1 (en) | Information processing device, information processing program, and recording medium | |
| JP2003153254A (ja) | データ処理装置及びデータ処理方法、並びにプログラム、記憶媒体 | |
| JP5214614B2 (ja) | 映像配信装置及び映像配信プログラム | |
| JP4354082B2 (ja) | ストリーミング映像情報連動コンテンツ作成支援方法及び装置及びストリーミング映像情報連動コンテンツ作成支援プログラムを格納した記憶媒体 | |
| JP4129162B2 (ja) | コンテンツ作成実演システム及びコンテンツ作成実演方法 | |
| US20050102379A1 (en) | Method for on-line selecting and playing a media file | |
| JP2012044451A (ja) | 画像再生装置、その制御方法、及び画像再生プログラム、並びに記録媒体 | |
| JP2008048091A (ja) | 動画タグ付けプログラム、動画タグシステム、及び動画配信方法 | |
| KR100839263B1 (ko) | 디지털 방송 표시 장치 및 그 운용방법 | |
| JP2013090102A (ja) | 配信システム | |
| JP4498531B2 (ja) | ストリーミング映像再生方法、ストリーミング映像再生装置、及びストリーミング映像再生プログラムを記録した記録媒体 | |
| JP5939914B2 (ja) | 切替装置及びプログラム | |
| WO2006030995A1 (en) | Index-based authoring and editing system for video contents | |
| JP2008090526A (ja) | 会議情報保存装置、システム、会議情報表示装置及びプログラム | |
| JP2024007667A (ja) | 端末装置、配信装置及びプログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070316 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20090402 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090407 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090605 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090728 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090729 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 4354082 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120807 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130807 Year of fee payment: 4 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140807 Year of fee payment: 5 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| EXPY | Cancellation because of completion of term |