JP4864968B2 - 記録再生システム - Google Patents
記録再生システム Download PDFInfo
- Publication number
- JP4864968B2 JP4864968B2 JP2008517761A JP2008517761A JP4864968B2 JP 4864968 B2 JP4864968 B2 JP 4864968B2 JP 2008517761 A JP2008517761 A JP 2008517761A JP 2008517761 A JP2008517761 A JP 2008517761A JP 4864968 B2 JP4864968 B2 JP 4864968B2
- Authority
- JP
- Japan
- Prior art keywords
- recording
- video
- unit
- scenario
- state
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
- G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
- G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)
- Management Or Editing Of Information On Record Carriers (AREA)
- Television Signal Processing For Recording (AREA)
Description
【技術分野】
【０００１】
本発明は、動画像や静止画像、音声、描画やテキスト、起動したアプリケーションなど、画面上に表示される各種データに対する操作および表示の履歴を、当該時点における機能を維持しながら記録、再生する記録再生システムに関する。
【背景技術】
【０００２】
従来、パーソナルコンピュータ上で起動したアプリケーションプログラムなどに関して、ユーザーの操作履歴を記録する装置が提案されている（例えば、特許文献１、非特許文献１参照）。このような装置によれば、操作履歴を動画で再生したり、文書作成ソフトウェアや描画ソフトウェアなどで操作履歴を利用することにより文書作成や描画を迅速に行うことができる。また、同じく操作履歴を利用することにより、同一のプレゼンテーションを再現することができる装置も提案されている（例えば、特許文献２参照）。
【０００３】
一方、最近はパーソナルコンピュータを中核としてテレビチューナーやオーディオ・ビデオ機器（ＡＶ機器）などを複合させた製品（以下、複合製品と称する）も多数開発されている。これらの複合製品によれば、例えば、パーソナルコンピュータ上で起動したアプリケーションプログラムの画像、インターネットを介して取得したＷｅｂサイトの画像、テレビチューナーやＡＶ機器を介して取得したテレビ放送やビデオ映像などを同一画面に表示させることが可能となる。
【０００４】
このような製品の応用例として、図１に示すような電子黒板装置がある。この電子黒板装置は、プラズマディスプレイなどを用いた大型の表示部２００を黒板として装備し、接続するパーソナルコンピュータ３０１やＡＶ機器４０１、ペン入力装置３０２を用いて画像やテキスト、描画などを表示する。
【０００５】
例えば、上記の電子黒板装置を用いてプレゼンテーションやエデュケーション（教室内での授業など）を行う場合、パーソナルコンピュータで起動させたアプリケーションプログラムの画像、接続するＡＶ機器から取得したビデオ映像、手書き入力した描画、インターネット上のＷｅｂサイトから取得した画像など多くのデータを同一画面に表示することができる。
【０００６】
図２のディスプレイ表示例を用いてエデュケーションの場合を例に具体的に説明する。例えば、アプリケーションプログラムでテキスト２１１（教科書など）を表示しながら手書き入力で板書２１４を行う任意の授業において、授業の教材としてビデオ映像２１２やＷｅｂページの画像２１３を同一画面２１０上の別領域に表示させたりする状況が想定される。このような複合製品においても、プレゼンテーションやエデュケーションの履歴を記録し、プレゼンテーションや授業を再現できることが好ましい。例えば、授業などの場合、履歴の再現を活用してより効率的な授業を行うことができるからである。
【０００７】
ところが、上記に開示した操作履歴を記録する従来の装置では、パーソナルコンピュータ内部（複数のアプリケーション）の操作履歴は参照できるが、画面表示の状態までは参照（再現）できないという課題があった。つまり、上記の授業例で説明すると、従来の装置では、アプリケーションプログラムの表示や描画の履歴は記録できるが、途中で再生したビデオ映像やＷｅｂページの表示に関して、データ（コンテンツ）のソースが何であるか程度は記録できたとしても、当該コンテンツのどの部分がどの程度の時間に渡って表示されたかなどの履歴を記録することはできなかった。
【０００８】
例えば、過去の授業で、当日の天気予報に関するホームページを表示させたシーンを再利用したいような場合、当該ホームページは通常は更新されているので、前回と全く同じ状態を維持して授業を再現することはできないという問題が生じる。従って、従来の装置では、操作や画面表示の過去の履歴を時刻指定で再生することもできなかった。
【０００９】
一方、この問題を解決する手段として授業状況をビデオ録画するという方策も考えられるが、この場合は、今度は過去の任意の状態に戻って授業をやり直すことができないという問題が生じる。具体的には、例えば、過去の授業の操作履歴を再利用して授業を行う際に、その過去の授業において板書（ペン入力装置による手書き入力）に間違いがあったような場合、好ましいのは間違いが発生する直前までは各種機器の操作や画面表示の履歴を再現し、間違いが発生した時点から起動中の（テキスト表示やペン入力の）アプリケーションをそのまま利用して、板書をやり直して修正を行うことである。
【００１０】
しかし、録画映像のみを再生する方法では、アプリケーションの起動状態や画面表示の状態が再現されていないため、途中から授業の修正（正確には、修正するための分岐動作）を行うことはできなかった。
【先行技術文献】
【特許文献】
【００１１】
【特許文献１】
特開２０００−１６３６０２号公報（第２頁−第５頁、図１）
【特許文献２】
特開平５−６７１５０号公報（第２頁−第５頁、図１）
【００１２】
【非特許文献】
【非特許文献１】
俺デスク 次世代履歴情報検索ツール、［online］、［平成１８年５月８日検索］、インターネット＜ＵＲＬ：http//oredesk.com＞
【発明の概要】
【発明が解決しようとする課題】
【００１３】
本発明が解決しようとする課題としては、ＡＶ機器（ビデオレコーダやデジタルカメラなど）から供給される動画データのような時系列で内容が変化するリニアコンテンツと、文書作成アプリケーションプログラムで表示するテキストデータのような時系列で内容が変化しないノンリニアコンテンツとを同一画面に表示してプレゼンテーション等を行う場合において、その後それぞれのコンテンツを正しく同期して再生できるように、各コンテンツの画面表示の状態および機能を適切に記録できる記録再生システムを実現することが一例として挙げられる。
【課題を解決するための手段】
【００１４】
上記課題を解決するために、請求項１に記載の記録再生システムは、再生内容が時系列で変化するリニアコンテンツの映像と、再生内容が時系列で変化しないノンリニアコンテンツの映像とを含む映像を表示装置の画面に表示して、画面に表示される映像を時系列で記録する映像記録手段と、前記リニアコンテンツ及び前記ノンリニアコンテンツに対する操作信号を取得して操作履歴を生成する操作履歴生成手段と、前記ノンリニアコンテンツの使用ファイルの履歴を生成するファイル使用履歴生成手段と、前記操作履歴及び前記ファイル使用履歴を時間軸で関連付けたシナリオを生成して記録するシナリオ生成記録手段と、前記シナリオに基づいて、指定された復元ポイントから前記映像記録手段に時系列で記録されている画面表示の映像の再生を開始するコンテンツ再生手段と、を備え、前記コンテンツ再生手段は、前記指定された復元ポイントから前記映像記録手段に時系列で記録されている画面表示の映像の少なくともその一部分の再生を行うことができない場合、前記指定された復元ポイントからさらに過去に遡って他の復元ポイントがあるか否かを判断し、前記他の復元ポイントがない場合、前記指定された復元ポイントから前記映像記録手段に時系列で記録されている画面表示の映像を再生することを特徴とする。
【図面の簡単な説明】
【００１５】
【図１】 従来の電子黒板装置の構成を示す図である。
【図２】 従来の電子黒板装置におけるディスプレイ表示例を模式的に示す図である。
【図３】 本発明の実施の形態における記録再生システムの概略構成を示す図である。
【図４】 本発明の実施の形態における記録再生システムの、記録再生装置の内部構成を示す図である。
【図５】 記録再生装置の内部構成のうち、操作履歴の記録動作に関与する機能部分を抽出し、処理やデータの流れを示した図である。
【図６】 本発明の実施の形態における記録再生システムの操作履歴記録動作手順を示すフローチャートである。
【図７】 記録再生装置の内部構成のうち、画面表示の再現動作に関与する機能部分を抽出し、処理やデータの流れを示した図である。
【図８】 本発明の実施の形態における記録再生システムの画面表示の再現動作手順を示すフローチャートである。
【図９】 本発明の実施の形態における記録再生システムの復元動作手順を示すフローチャートである。
【図１０】 ＰＣシステムがＡＶセレクター相当の機能を担う場合における記録再生システムの構成および処理やデータの流れを示す図である。
【図１１】 ＰＣシステムがＡＶセレクター相当の機能を担う場合における記録再生システムの内部構成のうち、操作履歴の記録動作に関与する機能部分を抽出し、処理やデータの流れを示した図である。
【図１２】 ＰＣシステムがＡＶセレクター相当の機能を担う場合における記録再生システムの内部構成のうち、画面表示の再現動作に関与する機能部分を抽出し、処理やデータの流れを示した図である。
【発明を実施するための形態】
【００１６】
本発明の実施の形態に係る記録再生システムは、下記（１）〜（４）の手段を備えることを特徴とすることをその最良の形態とするものである。
（１） 再生内容が時系列で変化するリニアコンテンツの映像と、再生内容が時系列で変化しないノンリニアコンテンツの映像とを含む映像を表示装置の画面に表示して、当該映像を記録する映像記録手段。
（２） 前記リニアコンテンツ及び前記ノンリニアコンテンツに対する操作信号を取得して操作履歴を生成する操作履歴生成手段。
（３） 前記ノンリニアコンテンツの使用ファイルの履歴を生成するファイル使用履歴生成手段。
（４） 前記操作履歴及び前記ファイル使用履歴を時間軸で関連付けたシナリオを生成して記録するシナリオ生成記録手段と、前記シナリオに基づいて、指定された所定の時点から前記リニアコンテンツ及び前記ノンリニアコンテンツの再生を開始するコンテンツ再生手段。
【００１７】
本発明の実施の形態における記録再生システムは、表示映像の記録だけでなく、操作およびそれに伴う機能までの記録と再生を行う。具体的には、例えば、授業やプレゼンテーションの開始から終了まで全ての表示映像の記録に加え、同時に、機器操作に係る履歴を映像の記録と同期させて全て記録する。使用したファイルの途中経過も随時記録され、この経過も再利用することができる。
【００１８】
つまり、表示映像を元に戻して再生するときには、当該映像を供給する機器の機能も元に戻されるため、過去のその時点におけるのと同様の状況が再現され、機器の操作が可能となる。さらに、表示映像を元に戻した場合、その画面からの経過時間とその後の操作も新しい情報として記録される。従って、システムを利用している間は常時表示映像が記録され、再利用できるコンテンツ（即ち、授業やプレゼンテーションに係るまとまりのある記録）が蓄積されていく。
【００１９】
(実施例)
以下、本発明の実施の形態に係る記録再生システムの具体的な実施例について図面を参照して詳細に説明する。
図３は、本発明の実施の形態に係る記録再生システムの実施例の概略構成を示す図である。記録再生システムは、主に、記録再生装置１００と、それに接続するプラズマディスプレイなどの表示部２００、パーソナルコンピュータ（以降、ＰＣシステムと称する）３００、周辺ＡＶ機器４００で構成される。
【００２０】
図４は、本実施例の記録再生システムにおける記録再生装置の内部構成を示す図である。記録再生装置１００は、主に、ＩＲ信号受信部１１、ＡＶ機器状態取得部１２、ＡＶ機器状態計算部１３、ＡＶ機器状態復元部１４、ＡＶ機器状態設定部１５、ＩＲ信号発信部１６、ＰＣ操作取得部２１、ＰＣ状態取得部２２、ＰＣ状態計算部２３、ＰＣ状態復元部２４、ＰＣ状態設定部２５、ＰＣ操作発信部２６、コマンドテーブル２７、シナリオ作成部３１、シナリオ記録部３２、シナリオ記録データベース（ＤＢ）３３、シナリオ取得部３４、シナリオ復元部３５、動画記録部４１、動画記録データベース（ＤＢ）４２、動画取得／再生部４３、記録／再生管理部５０、時刻発生装置６０、で構成される。
【００２１】
ＩＲ信号受信部１１は、周辺ＡＶ機器４００を操作するためのＩＲ信号を受信する。また、ＡＶ機器状態取得部１２は、周辺ＡＶ機器４００の状態に関する情報を取得する。
【００２２】
なお、ＩＲ信号はＡＶ機器に付属のリモコン装置から発信される信号等であり、周辺ＡＶ機器に対する操作情報が取得可能な信号、または周辺ＡＶ機器に対する操作が可能な信号であればその他の種類の信号であってもかまわない。
【００２３】
また、ＡＶ機器状態計算部１３は、受信したＩＲ信号及びＡＶ機器状態取得部１２で取得した状態に関する情報に基づいて、周辺ＡＶ機器４００の状態を計算する。そして、この受信したＩＲ信号の履歴と取得したＡＶ機器状態とを合わせて記録しておくことにより、周辺ＡＶ機器に対する操作履歴生成手段として機能する。
【００２４】
一方、ＡＶ機器状態復元部１４は、画面表示を再生する際に、周辺ＡＶ機器４００の状態を再現するための情報を生成する。ＡＶ機器状態設定部１５は、周辺ＡＶ機器４００に対してＡＶ機器状態復元部１４で生成した情報の設定を行う。
【００２５】
ＩＲ信号発信部１６は、画面表示を再生する際に、周辺ＡＶ機器４００を操作するためのＩＲ信号を発信する。
【００２６】
ＰＣ操作取得部２１は、マウスやキーボードなどから入力されたＰＣシステム３００を操作するための信号を取得する。ＰＣ状態取得部２２は、ＰＣシステム３００の状態に関する情報を取得する。
【００２７】
また、ＰＣ状態計算部２３は、ＰＣ状態取得部２２で取得した状態に関する情報に基づいてＰＣシステム３００の状態を計算する。
【００２８】
一方、ＰＣ状態復元部２４は、画面表示を再生する際に、ＰＣシステム３００の状態を再現するための情報を生成する。
【００２９】
ＰＣ状態設定部２５は、ＰＣシステム３００に対してＰＣ状態復元部２４で生成した情報の設定を行う。ＰＣ操作発信部２６は、画面表示を再生する際に、ＰＣシステム３００を操作するための信号を発信する。
【００３０】
なお、ＰＣシステムの状態に関する情報とは、具体的には、起動しているアプリケーション名や、アプリケーションの表示位置／表示状態、処理ファイル名などで、編集中のファイルの途中の状態（経過）などを含めてもよい。
【００３１】
シナリオ作成部３１は、シナリオデータを作成する。シナリオデータとは、ＡＶ機器状態計算部１３とＰＣ状態計算部２３で計算した周辺ＡＶ機器およびＰＣシステムの状態に係る情報を、後述する時刻発生装置６０から取得したタイムスタンプ情報に関連付けて構成した情報である。
【００３２】
シナリオ記録部３２は、作成したシナリオデータをシナリオ記録データベース３３に記録する。
【００３３】
シナリオ取得部３４は、シナリオ記録データベース３３に格納された特定のシナリオデータを取得する。
【００３４】
シナリオ復元部３５は、画面表示を再生する際に、周辺ＡＶ機器４００やＰＣシステム３００の状態を再現するための情報を、取得したシナリオデータから生成する。
【００３５】
動画記録部４１は、周辺ＡＶ機器４００から供給される映像データを動画記録データベース４２に記録する。
【００３６】
なお、本実施の形態において、周辺ＡＶ機器４００はＡＶセレクターとしての機能を担っており、ＰＣシステム３００で起動しているアプリケーションが画面に表示する画像などもこの周辺ＡＶ機器４００を介して動画記録部４１に記録される。
【００３７】
つまり、表示部２００に表示される映像（表示映像）が時系列でそのまま記録される。動画取得／再生部４３は、画面表示を再生する際に、上述のシナリオ復元部３５で生成された再現用のシナリオデータに基づいて、動画記録データベース４２に記録されている該当部分の映像データを取得し、ＡＶセレクターとしての機能を担う周辺ＡＶ機器４００へ送出する。送出された映像データは、動画記録部４１を介して表示部２００で再現映像として再生される。この再現映像として再生された映像は、動画記録データベース４２に再帰的に記録される。
【００３８】
記録／再生管理部５０は、上記の記録再生装置１００各部の記録／再生動作を統括管理する。記録再生装置１００への入力部（図示省略）を介して外部より入力される画面表示データの記録開始／終了要求コマンドや、記録した画面表示データの再生開始／終了要求コマンドは、記録／再生管理部５０を介して動画記録部４１やシナリオ記録部３２に伝達される。
【００３９】
時刻発生装置６０は、絶対時刻または最初の時刻生成要求があったときからの相対時刻に関する情報を生成する。記録される表示画面データにこの時刻情報がリンクされることにより、画面表示を再生する際に、ＰＣシステム３００は勿論、周辺ＡＶ機器４００への操作やその状態を的確に再現することができる。
【００４０】
次に、本実施例の記録再生システムの動作について説明する。
はじめに、操作履歴の記録動作について説明する。図５は、記録再生装置の内部構成のうち、操作履歴の記録動作に関与する機能部分を抽出し、処理やデータの流れを示した図である。
【００４１】
また、図６は本実施例における記録再生システムの操作履歴記録動作手順を示すフローチャートである。
はじめに、ＰＣ操作取得部２１が、キーボード入力やマウス入力、タイマー処理など、トリガーとなる操作信号を取得すると（ステップＳ１０１）、ＰＣ状態計算部２３が、共通のインターフェースの有無を確認し（ステータス１０２）、共通のインターフェースがある場合には当該共通インターフェースにて、起動しているアプリケーションの状態を取得する（ステップＳ１０３）。
【００４２】
状態に係る情報の取得は、ＰＣ状態取得部２２で行う。ＰＣ状態計算部２３は、取得した情報をシナリオ作成部３１へ伝送する。シナリオ作成部３１は、伝送された情報と、ＡＶ機器状態計算部１３から伝送されたＡＶ機器の状態に係る情報とをリンクさせ、時刻発生装置６０から取得した時刻情報に関連付けてシナリオデータを作成する（ステップＳ１０４）。作成したシナリオデータは、シナリオ記録データベース３３に格納される。
【００４３】
一方、ステップＳ１０２の判断において共通インターフェースがない場合、次に、ＰＣ状態計算部２３は、個別の状態を取得するための方法がコマンドテーブルに保存されているか否かを判断する（ステップＳ１０５）。
【００４４】
保存されている場合、コマンドテーブルに記載されている方法で起動しているアプリケーションの状態を取得する（ステップＳ１０６）。状態に係る情報の取得は、ＰＣ状態取得部２２で行う。ＰＣ状態計算部２３は、取得した情報をシナリオ作成部３１へ伝送する。
【００４５】
シナリオ作成部３１は、伝送された情報と、ＡＶ機器状態計算部１３から伝送されたＡＶ機器の状態に係る情報とをリンクさせ、時刻発生装置６０から取得した時刻情報に関連付けてシナリオデータを作成する（ステップＳ１０７）。作成したシナリオデータは、シナリオ記録データベース３３に格納される。
【００４６】
一方、ステップＳ１０５の判断においてコマンドが保存されていない場合、次に、ＰＣ状態計算部２３は、キーボードやマウス、ＡＶ機器のリモコン装置などのＩＲ装置からの操作入力の有無を判断する（ステップＳ１０８）。
【００４７】
操作入力がある場合、当該操作入力に係るシナリオデータを作成する（ステップＳ１０９）。操作入力がない場合、操作履歴の記録に係るスレッドを終了する（ステップＳ１１０）。
【００４８】
次に、画面表示を過去に遡って再生する画面表示の再現動作について説明する。図７は、記録再生装置の内部構成のうち、画面表示の再現動作に関与する機能部分を抽出し、処理やデータの流れを示した図である。
【００４９】
また、図８は、本実施例における記録再生システムの画面表示の再現動作手順を示すフローチャートである。はじめに、記録／再生管理部５０は、画面表示の再生を開始する基点となる復元ポイントの要求入力を受け（ステップＳ２０１）、復元ポイントへ直接復元できる情報の有無を判断する（ステップＳ２０２）。直接復元できる情報がある場合、記録／再生管理部５０は、後述する復元処理を行う（ステップＳ２０３）。
【００５０】
直接復元できる情報がない場合、記録／再生管理部５０は、さらに過去に遡って復元ポイントがあるか否かを判断する（ステップＳ２０４）。復元ポイントがない場合、記録／再生管理部５０は、当該復元ポイントからの動画再生処理を行う（ステップＳ２０５）。動画再生処理とは、動画記録データベースに記録されている画面表示の映像を再生する処理である。
【００５１】
記録／再生管理部５０は、シナリオ取得部３４、シナリオ復元部３５を介して動画取得／再生部４３に、動画記録データベースに格納された動画データを取得させる。
【００５２】
一方、ステップＳ２０４の判断において復元ポイントがある場合、当該復元ポイントから復元処理を行う（ステップＳ２０６）。そして、入力処理の再現を行い（ステップＳ２０７）、当初の復元ポイントに到達するまで入力処理の再現を繰り返す（ステップＳ２０８）。ステップＳ２０８において復元ポイントに到達した場合、処理を終了する。
【００５３】
次に、上記の復元処理の詳細について説明する。図９は、本実施例における記録再生システムの復元処理手順を示すフローチャートである。
【００５４】
はじめに、記録／再生管理部５０は、復元ポイントの指定を受けて（ステップＳ３０１）、シナリオ記録データベース３３に記録のあったプロセスを起動させる（ステップＳ３０２）。次に、使用ファイルの有無を判断し（ステップＳ３０３）、使用ファイルがある場合、プロセスへ使用ファイルの通知を行う（ステップＳ３０４）。
【００５５】
ステップＳ３０３の判断において使用ファイルがない場合、次に、共通インターフェースにて再現可能な情報であるか否かを判断する（ステップＳ３０５）。再現可能な情報である場合、プロセスへ表示ページなどの表示状態の通知を行って（ステップＳ３０６）、復元処理を完了する。
【００５６】
一方、ステップＳ３０５の判断において再現可能な情報でない場合、個別のアプリケーションの状態遷移コマンドを取得し（ステップＳ３０７）、プロセスへ表示ページなどの表示状態の通知を行って（ステップＳ３０８）、復元処理を完了する。
【００５７】
画面表示の再現は、具体的には、シナリオ取得部３４が該当するシナリオをシナリオ記録データベース３３から取得してシナリオ復元部３５へ伝送し、シナリオ復元部３５、ＡＶ機器状態復元部１４およびＰＣ状態復元部２４を介してＰＣシステム３００および周辺ＡＶ機器４００の状態を復元した画面表示が表示部２００で再生されて行われる。
【００５８】
ところで、図１０は、ＰＣシステムがＡＶセレクター相当の機能を担う場合における記録再生システムの構成および処理やデータの流れを示す図である。
【００５９】
また、図１１は、ＰＣシステムがＡＶセレクター相当の機能を担う場合における記録再生システムの内部構成のうち、操作履歴の記録動作に関与する機能部分を抽出し、処理やデータの流れを示した図である。
【００６０】
さらに、図１２は、ＰＣシステムがＡＶセレクター相当の機能を担う場合における記録再生システムの内部構成のうち、画面表示の再現動作に関与する機能部分を抽出し、処理やデータの流れを示した図である。
【００６１】
ここでは、各部の機能および動作については周辺ＡＶ機器４００がＡＶセレクターの機能を担う場合と同じであるため、詳細な説明を省略する。
【００６２】
なお、上記の実施例において、記録モードから再生モードに常時切り替えられるが、各記録動作は継続される。表示部２００モニターの入力切り替えはＰＣシステム３００で制御するが、周辺ＡＶ機器４００に付属のリモコン装置でも切り替え可能である。
【００６３】
上記の実施例では、動画記録部４１および動画記録データベース４２が映像記録手段としての役割を担う。また、ＩＲ信号受信部１１とＡＶ機器状態取得部１２およびＡＶ機器状態計算部１３とがリニアコンテンツに対する操作履歴生成手段として、ＰＣ操作取得部２１がノンリニアコンテンツに対する操作履歴生成手段として、ＰＣ状態取得部２２がファイル使用履歴生成手段としての役割を担う。さらに、シナリオ作成部３１、シナリオ記録部３２がシナリオ生成記録手段としての役割を担う。
【００６４】
また、シナリオ取得部３４、シナリオ復元部３５、ＡＶ機器状態復元部１４、ＰＣ状態復元部２４、ＡＶ機器状態設定部１５、ＩＲ信号発信部１６、ＰＣ状態設定部２５、ＰＣ操作発信部２６がコンテンツ再生手段としての役割を担う。
【００６５】
以上、上記実施例において詳述したように、本発明の実施の形態に係る記録再生システムは、再生内容が時系列で変化する（動画像データなどの）リニアコンテンツの映像と、再生内容が時系列で変化しない（テキストデータなどの）ノンリニアコンテンツの映像とを含む映像を表示装置の画面に表示して、当該映像を記録する動画記録部４１と、前記リニアコンテンツ及び前記ノンリニアコンテンツに対する操作信号を取得して操作履歴を生成するＰＣ操作取得部２１と、前記ノンリニアコンテンツの使用ファイルの履歴を生成するＰＣ状態取得部２２と、前記操作履歴及び前記ファイル使用履歴を時間軸で関連付けたシナリオを生成して記録するシナリオ作成部３１と、前記シナリオに基づいて、指定された所定の時点から前記リニアコンテンツ及び前記ノンリニアコンテンツの再生を開始するシナリオ取得部３４、シナリオ復元部３５、ＡＶ機器状態復元部１４、ＰＣ状態復元部２４、ＡＶ機器状態設定部１５、ＩＲ信号発信部１６、ＰＣ状態設定部２５、ＰＣ操作発信部２６を含むコンテンツ再生機能部とを備える。
【００６６】
これにより、プレゼンテーションや授業などにおいて、コンテンツの過去の画面表示を忠実に再現でき、これを再利用することができる。また、過去の任意時刻における状態から画面表示を再生することも可能である。
【００６７】
つまり、パーソナルコンピュータ内部のアプリケーションだけでなく、ＡＶ機器などから提供されるリニアコンテンツの利用履歴も保持するので、過去の状態に戻って、その時点からやり直し（分岐）を行うことができる。
【符号の説明】
【００６８】
１１ ＩＲ信号受信部
１２ ＡＶ機器状態取得部
１３ ＡＶ機器状態計算部
１４ ＡＶ機器状態復元部
１５ ＡＶ機器状態設定部
１６ ＩＲ信号発信部
２１ ＰＣ操作取得部
２２ ＰＣ状態取得部
２３ ＰＣ状態計算部
２４ ＰＣ状態復元部
２５ ＰＣ状態設定部
２６ ＰＣ操作発信部
３１ シナリオ作成部
３２ シナリオ記録部
３３ シナリオ記録データベース（ＤＢ）
３４ シナリオ取得部
３５ シナリオ復元部
４１ 動画記録部
４２ 動画記録データベース（ＤＢ）
４３ 動画取得／再生部
５０ 記録／再生管理部
６０ 時刻発生装置
１００ 記録再生装置
２００ 表示部
３００、３０１ ＰＣシステム
３０２ ペン入力装置
３１０ マウスやキーボードによる入力
４００、４０１ ＡＶ機器
４１０ ＩＲ入力
【０００１】
本発明は、動画像や静止画像、音声、描画やテキスト、起動したアプリケーションなど、画面上に表示される各種データに対する操作および表示の履歴を、当該時点における機能を維持しながら記録、再生する記録再生システムに関する。
【背景技術】
【０００２】
従来、パーソナルコンピュータ上で起動したアプリケーションプログラムなどに関して、ユーザーの操作履歴を記録する装置が提案されている（例えば、特許文献１、非特許文献１参照）。このような装置によれば、操作履歴を動画で再生したり、文書作成ソフトウェアや描画ソフトウェアなどで操作履歴を利用することにより文書作成や描画を迅速に行うことができる。また、同じく操作履歴を利用することにより、同一のプレゼンテーションを再現することができる装置も提案されている（例えば、特許文献２参照）。
【０００３】
一方、最近はパーソナルコンピュータを中核としてテレビチューナーやオーディオ・ビデオ機器（ＡＶ機器）などを複合させた製品（以下、複合製品と称する）も多数開発されている。これらの複合製品によれば、例えば、パーソナルコンピュータ上で起動したアプリケーションプログラムの画像、インターネットを介して取得したＷｅｂサイトの画像、テレビチューナーやＡＶ機器を介して取得したテレビ放送やビデオ映像などを同一画面に表示させることが可能となる。
【０００４】
このような製品の応用例として、図１に示すような電子黒板装置がある。この電子黒板装置は、プラズマディスプレイなどを用いた大型の表示部２００を黒板として装備し、接続するパーソナルコンピュータ３０１やＡＶ機器４０１、ペン入力装置３０２を用いて画像やテキスト、描画などを表示する。
【０００５】
例えば、上記の電子黒板装置を用いてプレゼンテーションやエデュケーション（教室内での授業など）を行う場合、パーソナルコンピュータで起動させたアプリケーションプログラムの画像、接続するＡＶ機器から取得したビデオ映像、手書き入力した描画、インターネット上のＷｅｂサイトから取得した画像など多くのデータを同一画面に表示することができる。
【０００６】
図２のディスプレイ表示例を用いてエデュケーションの場合を例に具体的に説明する。例えば、アプリケーションプログラムでテキスト２１１（教科書など）を表示しながら手書き入力で板書２１４を行う任意の授業において、授業の教材としてビデオ映像２１２やＷｅｂページの画像２１３を同一画面２１０上の別領域に表示させたりする状況が想定される。このような複合製品においても、プレゼンテーションやエデュケーションの履歴を記録し、プレゼンテーションや授業を再現できることが好ましい。例えば、授業などの場合、履歴の再現を活用してより効率的な授業を行うことができるからである。
【０００７】
ところが、上記に開示した操作履歴を記録する従来の装置では、パーソナルコンピュータ内部（複数のアプリケーション）の操作履歴は参照できるが、画面表示の状態までは参照（再現）できないという課題があった。つまり、上記の授業例で説明すると、従来の装置では、アプリケーションプログラムの表示や描画の履歴は記録できるが、途中で再生したビデオ映像やＷｅｂページの表示に関して、データ（コンテンツ）のソースが何であるか程度は記録できたとしても、当該コンテンツのどの部分がどの程度の時間に渡って表示されたかなどの履歴を記録することはできなかった。
【０００８】
例えば、過去の授業で、当日の天気予報に関するホームページを表示させたシーンを再利用したいような場合、当該ホームページは通常は更新されているので、前回と全く同じ状態を維持して授業を再現することはできないという問題が生じる。従って、従来の装置では、操作や画面表示の過去の履歴を時刻指定で再生することもできなかった。
【０００９】
一方、この問題を解決する手段として授業状況をビデオ録画するという方策も考えられるが、この場合は、今度は過去の任意の状態に戻って授業をやり直すことができないという問題が生じる。具体的には、例えば、過去の授業の操作履歴を再利用して授業を行う際に、その過去の授業において板書（ペン入力装置による手書き入力）に間違いがあったような場合、好ましいのは間違いが発生する直前までは各種機器の操作や画面表示の履歴を再現し、間違いが発生した時点から起動中の（テキスト表示やペン入力の）アプリケーションをそのまま利用して、板書をやり直して修正を行うことである。
【００１０】
しかし、録画映像のみを再生する方法では、アプリケーションの起動状態や画面表示の状態が再現されていないため、途中から授業の修正（正確には、修正するための分岐動作）を行うことはできなかった。
【先行技術文献】
【特許文献】
【００１１】
【特許文献１】
特開２０００−１６３６０２号公報（第２頁−第５頁、図１）
【特許文献２】
特開平５−６７１５０号公報（第２頁−第５頁、図１）
【００１２】
【非特許文献】
【非特許文献１】
俺デスク 次世代履歴情報検索ツール、［online］、［平成１８年５月８日検索］、インターネット＜ＵＲＬ：http//oredesk.com＞
【発明の概要】
【発明が解決しようとする課題】
【００１３】
本発明が解決しようとする課題としては、ＡＶ機器（ビデオレコーダやデジタルカメラなど）から供給される動画データのような時系列で内容が変化するリニアコンテンツと、文書作成アプリケーションプログラムで表示するテキストデータのような時系列で内容が変化しないノンリニアコンテンツとを同一画面に表示してプレゼンテーション等を行う場合において、その後それぞれのコンテンツを正しく同期して再生できるように、各コンテンツの画面表示の状態および機能を適切に記録できる記録再生システムを実現することが一例として挙げられる。
【課題を解決するための手段】
【００１４】
上記課題を解決するために、請求項１に記載の記録再生システムは、再生内容が時系列で変化するリニアコンテンツの映像と、再生内容が時系列で変化しないノンリニアコンテンツの映像とを含む映像を表示装置の画面に表示して、画面に表示される映像を時系列で記録する映像記録手段と、前記リニアコンテンツ及び前記ノンリニアコンテンツに対する操作信号を取得して操作履歴を生成する操作履歴生成手段と、前記ノンリニアコンテンツの使用ファイルの履歴を生成するファイル使用履歴生成手段と、前記操作履歴及び前記ファイル使用履歴を時間軸で関連付けたシナリオを生成して記録するシナリオ生成記録手段と、前記シナリオに基づいて、指定された復元ポイントから前記映像記録手段に時系列で記録されている画面表示の映像の再生を開始するコンテンツ再生手段と、を備え、前記コンテンツ再生手段は、前記指定された復元ポイントから前記映像記録手段に時系列で記録されている画面表示の映像の少なくともその一部分の再生を行うことができない場合、前記指定された復元ポイントからさらに過去に遡って他の復元ポイントがあるか否かを判断し、前記他の復元ポイントがない場合、前記指定された復元ポイントから前記映像記録手段に時系列で記録されている画面表示の映像を再生することを特徴とする。
【図面の簡単な説明】
【００１５】
【図１】 従来の電子黒板装置の構成を示す図である。
【図２】 従来の電子黒板装置におけるディスプレイ表示例を模式的に示す図である。
【図３】 本発明の実施の形態における記録再生システムの概略構成を示す図である。
【図４】 本発明の実施の形態における記録再生システムの、記録再生装置の内部構成を示す図である。
【図５】 記録再生装置の内部構成のうち、操作履歴の記録動作に関与する機能部分を抽出し、処理やデータの流れを示した図である。
【図６】 本発明の実施の形態における記録再生システムの操作履歴記録動作手順を示すフローチャートである。
【図７】 記録再生装置の内部構成のうち、画面表示の再現動作に関与する機能部分を抽出し、処理やデータの流れを示した図である。
【図８】 本発明の実施の形態における記録再生システムの画面表示の再現動作手順を示すフローチャートである。
【図９】 本発明の実施の形態における記録再生システムの復元動作手順を示すフローチャートである。
【図１０】 ＰＣシステムがＡＶセレクター相当の機能を担う場合における記録再生システムの構成および処理やデータの流れを示す図である。
【図１１】 ＰＣシステムがＡＶセレクター相当の機能を担う場合における記録再生システムの内部構成のうち、操作履歴の記録動作に関与する機能部分を抽出し、処理やデータの流れを示した図である。
【図１２】 ＰＣシステムがＡＶセレクター相当の機能を担う場合における記録再生システムの内部構成のうち、画面表示の再現動作に関与する機能部分を抽出し、処理やデータの流れを示した図である。
【発明を実施するための形態】
【００１６】
本発明の実施の形態に係る記録再生システムは、下記（１）〜（４）の手段を備えることを特徴とすることをその最良の形態とするものである。
（１） 再生内容が時系列で変化するリニアコンテンツの映像と、再生内容が時系列で変化しないノンリニアコンテンツの映像とを含む映像を表示装置の画面に表示して、当該映像を記録する映像記録手段。
（２） 前記リニアコンテンツ及び前記ノンリニアコンテンツに対する操作信号を取得して操作履歴を生成する操作履歴生成手段。
（３） 前記ノンリニアコンテンツの使用ファイルの履歴を生成するファイル使用履歴生成手段。
（４） 前記操作履歴及び前記ファイル使用履歴を時間軸で関連付けたシナリオを生成して記録するシナリオ生成記録手段と、前記シナリオに基づいて、指定された所定の時点から前記リニアコンテンツ及び前記ノンリニアコンテンツの再生を開始するコンテンツ再生手段。
【００１７】
本発明の実施の形態における記録再生システムは、表示映像の記録だけでなく、操作およびそれに伴う機能までの記録と再生を行う。具体的には、例えば、授業やプレゼンテーションの開始から終了まで全ての表示映像の記録に加え、同時に、機器操作に係る履歴を映像の記録と同期させて全て記録する。使用したファイルの途中経過も随時記録され、この経過も再利用することができる。
【００１８】
つまり、表示映像を元に戻して再生するときには、当該映像を供給する機器の機能も元に戻されるため、過去のその時点におけるのと同様の状況が再現され、機器の操作が可能となる。さらに、表示映像を元に戻した場合、その画面からの経過時間とその後の操作も新しい情報として記録される。従って、システムを利用している間は常時表示映像が記録され、再利用できるコンテンツ（即ち、授業やプレゼンテーションに係るまとまりのある記録）が蓄積されていく。
【００１９】
(実施例)
以下、本発明の実施の形態に係る記録再生システムの具体的な実施例について図面を参照して詳細に説明する。
図３は、本発明の実施の形態に係る記録再生システムの実施例の概略構成を示す図である。記録再生システムは、主に、記録再生装置１００と、それに接続するプラズマディスプレイなどの表示部２００、パーソナルコンピュータ（以降、ＰＣシステムと称する）３００、周辺ＡＶ機器４００で構成される。
【００２０】
図４は、本実施例の記録再生システムにおける記録再生装置の内部構成を示す図である。記録再生装置１００は、主に、ＩＲ信号受信部１１、ＡＶ機器状態取得部１２、ＡＶ機器状態計算部１３、ＡＶ機器状態復元部１４、ＡＶ機器状態設定部１５、ＩＲ信号発信部１６、ＰＣ操作取得部２１、ＰＣ状態取得部２２、ＰＣ状態計算部２３、ＰＣ状態復元部２４、ＰＣ状態設定部２５、ＰＣ操作発信部２６、コマンドテーブル２７、シナリオ作成部３１、シナリオ記録部３２、シナリオ記録データベース（ＤＢ）３３、シナリオ取得部３４、シナリオ復元部３５、動画記録部４１、動画記録データベース（ＤＢ）４２、動画取得／再生部４３、記録／再生管理部５０、時刻発生装置６０、で構成される。
【００２１】
ＩＲ信号受信部１１は、周辺ＡＶ機器４００を操作するためのＩＲ信号を受信する。また、ＡＶ機器状態取得部１２は、周辺ＡＶ機器４００の状態に関する情報を取得する。
【００２２】
なお、ＩＲ信号はＡＶ機器に付属のリモコン装置から発信される信号等であり、周辺ＡＶ機器に対する操作情報が取得可能な信号、または周辺ＡＶ機器に対する操作が可能な信号であればその他の種類の信号であってもかまわない。
【００２３】
また、ＡＶ機器状態計算部１３は、受信したＩＲ信号及びＡＶ機器状態取得部１２で取得した状態に関する情報に基づいて、周辺ＡＶ機器４００の状態を計算する。そして、この受信したＩＲ信号の履歴と取得したＡＶ機器状態とを合わせて記録しておくことにより、周辺ＡＶ機器に対する操作履歴生成手段として機能する。
【００２４】
一方、ＡＶ機器状態復元部１４は、画面表示を再生する際に、周辺ＡＶ機器４００の状態を再現するための情報を生成する。ＡＶ機器状態設定部１５は、周辺ＡＶ機器４００に対してＡＶ機器状態復元部１４で生成した情報の設定を行う。
【００２５】
ＩＲ信号発信部１６は、画面表示を再生する際に、周辺ＡＶ機器４００を操作するためのＩＲ信号を発信する。
【００２６】
ＰＣ操作取得部２１は、マウスやキーボードなどから入力されたＰＣシステム３００を操作するための信号を取得する。ＰＣ状態取得部２２は、ＰＣシステム３００の状態に関する情報を取得する。
【００２７】
また、ＰＣ状態計算部２３は、ＰＣ状態取得部２２で取得した状態に関する情報に基づいてＰＣシステム３００の状態を計算する。
【００２８】
一方、ＰＣ状態復元部２４は、画面表示を再生する際に、ＰＣシステム３００の状態を再現するための情報を生成する。
【００２９】
ＰＣ状態設定部２５は、ＰＣシステム３００に対してＰＣ状態復元部２４で生成した情報の設定を行う。ＰＣ操作発信部２６は、画面表示を再生する際に、ＰＣシステム３００を操作するための信号を発信する。
【００３０】
なお、ＰＣシステムの状態に関する情報とは、具体的には、起動しているアプリケーション名や、アプリケーションの表示位置／表示状態、処理ファイル名などで、編集中のファイルの途中の状態（経過）などを含めてもよい。
【００３１】
シナリオ作成部３１は、シナリオデータを作成する。シナリオデータとは、ＡＶ機器状態計算部１３とＰＣ状態計算部２３で計算した周辺ＡＶ機器およびＰＣシステムの状態に係る情報を、後述する時刻発生装置６０から取得したタイムスタンプ情報に関連付けて構成した情報である。
【００３２】
シナリオ記録部３２は、作成したシナリオデータをシナリオ記録データベース３３に記録する。
【００３３】
シナリオ取得部３４は、シナリオ記録データベース３３に格納された特定のシナリオデータを取得する。
【００３４】
シナリオ復元部３５は、画面表示を再生する際に、周辺ＡＶ機器４００やＰＣシステム３００の状態を再現するための情報を、取得したシナリオデータから生成する。
【００３５】
動画記録部４１は、周辺ＡＶ機器４００から供給される映像データを動画記録データベース４２に記録する。
【００３６】
なお、本実施の形態において、周辺ＡＶ機器４００はＡＶセレクターとしての機能を担っており、ＰＣシステム３００で起動しているアプリケーションが画面に表示する画像などもこの周辺ＡＶ機器４００を介して動画記録部４１に記録される。
【００３７】
つまり、表示部２００に表示される映像（表示映像）が時系列でそのまま記録される。動画取得／再生部４３は、画面表示を再生する際に、上述のシナリオ復元部３５で生成された再現用のシナリオデータに基づいて、動画記録データベース４２に記録されている該当部分の映像データを取得し、ＡＶセレクターとしての機能を担う周辺ＡＶ機器４００へ送出する。送出された映像データは、動画記録部４１を介して表示部２００で再現映像として再生される。この再現映像として再生された映像は、動画記録データベース４２に再帰的に記録される。
【００３８】
記録／再生管理部５０は、上記の記録再生装置１００各部の記録／再生動作を統括管理する。記録再生装置１００への入力部（図示省略）を介して外部より入力される画面表示データの記録開始／終了要求コマンドや、記録した画面表示データの再生開始／終了要求コマンドは、記録／再生管理部５０を介して動画記録部４１やシナリオ記録部３２に伝達される。
【００３９】
時刻発生装置６０は、絶対時刻または最初の時刻生成要求があったときからの相対時刻に関する情報を生成する。記録される表示画面データにこの時刻情報がリンクされることにより、画面表示を再生する際に、ＰＣシステム３００は勿論、周辺ＡＶ機器４００への操作やその状態を的確に再現することができる。
【００４０】
次に、本実施例の記録再生システムの動作について説明する。
はじめに、操作履歴の記録動作について説明する。図５は、記録再生装置の内部構成のうち、操作履歴の記録動作に関与する機能部分を抽出し、処理やデータの流れを示した図である。
【００４１】
また、図６は本実施例における記録再生システムの操作履歴記録動作手順を示すフローチャートである。
はじめに、ＰＣ操作取得部２１が、キーボード入力やマウス入力、タイマー処理など、トリガーとなる操作信号を取得すると（ステップＳ１０１）、ＰＣ状態計算部２３が、共通のインターフェースの有無を確認し（ステータス１０２）、共通のインターフェースがある場合には当該共通インターフェースにて、起動しているアプリケーションの状態を取得する（ステップＳ１０３）。
【００４２】
状態に係る情報の取得は、ＰＣ状態取得部２２で行う。ＰＣ状態計算部２３は、取得した情報をシナリオ作成部３１へ伝送する。シナリオ作成部３１は、伝送された情報と、ＡＶ機器状態計算部１３から伝送されたＡＶ機器の状態に係る情報とをリンクさせ、時刻発生装置６０から取得した時刻情報に関連付けてシナリオデータを作成する（ステップＳ１０４）。作成したシナリオデータは、シナリオ記録データベース３３に格納される。
【００４３】
一方、ステップＳ１０２の判断において共通インターフェースがない場合、次に、ＰＣ状態計算部２３は、個別の状態を取得するための方法がコマンドテーブルに保存されているか否かを判断する（ステップＳ１０５）。
【００４４】
保存されている場合、コマンドテーブルに記載されている方法で起動しているアプリケーションの状態を取得する（ステップＳ１０６）。状態に係る情報の取得は、ＰＣ状態取得部２２で行う。ＰＣ状態計算部２３は、取得した情報をシナリオ作成部３１へ伝送する。
【００４５】
シナリオ作成部３１は、伝送された情報と、ＡＶ機器状態計算部１３から伝送されたＡＶ機器の状態に係る情報とをリンクさせ、時刻発生装置６０から取得した時刻情報に関連付けてシナリオデータを作成する（ステップＳ１０７）。作成したシナリオデータは、シナリオ記録データベース３３に格納される。
【００４６】
一方、ステップＳ１０５の判断においてコマンドが保存されていない場合、次に、ＰＣ状態計算部２３は、キーボードやマウス、ＡＶ機器のリモコン装置などのＩＲ装置からの操作入力の有無を判断する（ステップＳ１０８）。
【００４７】
操作入力がある場合、当該操作入力に係るシナリオデータを作成する（ステップＳ１０９）。操作入力がない場合、操作履歴の記録に係るスレッドを終了する（ステップＳ１１０）。
【００４８】
次に、画面表示を過去に遡って再生する画面表示の再現動作について説明する。図７は、記録再生装置の内部構成のうち、画面表示の再現動作に関与する機能部分を抽出し、処理やデータの流れを示した図である。
【００４９】
また、図８は、本実施例における記録再生システムの画面表示の再現動作手順を示すフローチャートである。はじめに、記録／再生管理部５０は、画面表示の再生を開始する基点となる復元ポイントの要求入力を受け（ステップＳ２０１）、復元ポイントへ直接復元できる情報の有無を判断する（ステップＳ２０２）。直接復元できる情報がある場合、記録／再生管理部５０は、後述する復元処理を行う（ステップＳ２０３）。
【００５０】
直接復元できる情報がない場合、記録／再生管理部５０は、さらに過去に遡って復元ポイントがあるか否かを判断する（ステップＳ２０４）。復元ポイントがない場合、記録／再生管理部５０は、当該復元ポイントからの動画再生処理を行う（ステップＳ２０５）。動画再生処理とは、動画記録データベースに記録されている画面表示の映像を再生する処理である。
【００５１】
記録／再生管理部５０は、シナリオ取得部３４、シナリオ復元部３５を介して動画取得／再生部４３に、動画記録データベースに格納された動画データを取得させる。
【００５２】
一方、ステップＳ２０４の判断において復元ポイントがある場合、当該復元ポイントから復元処理を行う（ステップＳ２０６）。そして、入力処理の再現を行い（ステップＳ２０７）、当初の復元ポイントに到達するまで入力処理の再現を繰り返す（ステップＳ２０８）。ステップＳ２０８において復元ポイントに到達した場合、処理を終了する。
【００５３】
次に、上記の復元処理の詳細について説明する。図９は、本実施例における記録再生システムの復元処理手順を示すフローチャートである。
【００５４】
はじめに、記録／再生管理部５０は、復元ポイントの指定を受けて（ステップＳ３０１）、シナリオ記録データベース３３に記録のあったプロセスを起動させる（ステップＳ３０２）。次に、使用ファイルの有無を判断し（ステップＳ３０３）、使用ファイルがある場合、プロセスへ使用ファイルの通知を行う（ステップＳ３０４）。
【００５５】
ステップＳ３０３の判断において使用ファイルがない場合、次に、共通インターフェースにて再現可能な情報であるか否かを判断する（ステップＳ３０５）。再現可能な情報である場合、プロセスへ表示ページなどの表示状態の通知を行って（ステップＳ３０６）、復元処理を完了する。
【００５６】
一方、ステップＳ３０５の判断において再現可能な情報でない場合、個別のアプリケーションの状態遷移コマンドを取得し（ステップＳ３０７）、プロセスへ表示ページなどの表示状態の通知を行って（ステップＳ３０８）、復元処理を完了する。
【００５７】
画面表示の再現は、具体的には、シナリオ取得部３４が該当するシナリオをシナリオ記録データベース３３から取得してシナリオ復元部３５へ伝送し、シナリオ復元部３５、ＡＶ機器状態復元部１４およびＰＣ状態復元部２４を介してＰＣシステム３００および周辺ＡＶ機器４００の状態を復元した画面表示が表示部２００で再生されて行われる。
【００５８】
ところで、図１０は、ＰＣシステムがＡＶセレクター相当の機能を担う場合における記録再生システムの構成および処理やデータの流れを示す図である。
【００５９】
また、図１１は、ＰＣシステムがＡＶセレクター相当の機能を担う場合における記録再生システムの内部構成のうち、操作履歴の記録動作に関与する機能部分を抽出し、処理やデータの流れを示した図である。
【００６０】
さらに、図１２は、ＰＣシステムがＡＶセレクター相当の機能を担う場合における記録再生システムの内部構成のうち、画面表示の再現動作に関与する機能部分を抽出し、処理やデータの流れを示した図である。
【００６１】
ここでは、各部の機能および動作については周辺ＡＶ機器４００がＡＶセレクターの機能を担う場合と同じであるため、詳細な説明を省略する。
【００６２】
なお、上記の実施例において、記録モードから再生モードに常時切り替えられるが、各記録動作は継続される。表示部２００モニターの入力切り替えはＰＣシステム３００で制御するが、周辺ＡＶ機器４００に付属のリモコン装置でも切り替え可能である。
【００６３】
上記の実施例では、動画記録部４１および動画記録データベース４２が映像記録手段としての役割を担う。また、ＩＲ信号受信部１１とＡＶ機器状態取得部１２およびＡＶ機器状態計算部１３とがリニアコンテンツに対する操作履歴生成手段として、ＰＣ操作取得部２１がノンリニアコンテンツに対する操作履歴生成手段として、ＰＣ状態取得部２２がファイル使用履歴生成手段としての役割を担う。さらに、シナリオ作成部３１、シナリオ記録部３２がシナリオ生成記録手段としての役割を担う。
【００６４】
また、シナリオ取得部３４、シナリオ復元部３５、ＡＶ機器状態復元部１４、ＰＣ状態復元部２４、ＡＶ機器状態設定部１５、ＩＲ信号発信部１６、ＰＣ状態設定部２５、ＰＣ操作発信部２６がコンテンツ再生手段としての役割を担う。
【００６５】
以上、上記実施例において詳述したように、本発明の実施の形態に係る記録再生システムは、再生内容が時系列で変化する（動画像データなどの）リニアコンテンツの映像と、再生内容が時系列で変化しない（テキストデータなどの）ノンリニアコンテンツの映像とを含む映像を表示装置の画面に表示して、当該映像を記録する動画記録部４１と、前記リニアコンテンツ及び前記ノンリニアコンテンツに対する操作信号を取得して操作履歴を生成するＰＣ操作取得部２１と、前記ノンリニアコンテンツの使用ファイルの履歴を生成するＰＣ状態取得部２２と、前記操作履歴及び前記ファイル使用履歴を時間軸で関連付けたシナリオを生成して記録するシナリオ作成部３１と、前記シナリオに基づいて、指定された所定の時点から前記リニアコンテンツ及び前記ノンリニアコンテンツの再生を開始するシナリオ取得部３４、シナリオ復元部３５、ＡＶ機器状態復元部１４、ＰＣ状態復元部２４、ＡＶ機器状態設定部１５、ＩＲ信号発信部１６、ＰＣ状態設定部２５、ＰＣ操作発信部２６を含むコンテンツ再生機能部とを備える。
【００６６】
これにより、プレゼンテーションや授業などにおいて、コンテンツの過去の画面表示を忠実に再現でき、これを再利用することができる。また、過去の任意時刻における状態から画面表示を再生することも可能である。
【００６７】
つまり、パーソナルコンピュータ内部のアプリケーションだけでなく、ＡＶ機器などから提供されるリニアコンテンツの利用履歴も保持するので、過去の状態に戻って、その時点からやり直し（分岐）を行うことができる。
【符号の説明】
【００６８】
１１ ＩＲ信号受信部
１２ ＡＶ機器状態取得部
１３ ＡＶ機器状態計算部
１４ ＡＶ機器状態復元部
１５ ＡＶ機器状態設定部
１６ ＩＲ信号発信部
２１ ＰＣ操作取得部
２２ ＰＣ状態取得部
２３ ＰＣ状態計算部
２４ ＰＣ状態復元部
２５ ＰＣ状態設定部
２６ ＰＣ操作発信部
３１ シナリオ作成部
３２ シナリオ記録部
３３ シナリオ記録データベース（ＤＢ）
３４ シナリオ取得部
３５ シナリオ復元部
４１ 動画記録部
４２ 動画記録データベース（ＤＢ）
４３ 動画取得／再生部
５０ 記録／再生管理部
６０ 時刻発生装置
１００ 記録再生装置
２００ 表示部
３００、３０１ ＰＣシステム
３０２ ペン入力装置
３１０ マウスやキーボードによる入力
４００、４０１ ＡＶ機器
４１０ ＩＲ入力
Claims (1)
- 再生内容が時系列で変化するリニアコンテンツの映像と、再生内容が時系列で変化しないノンリニアコンテンツの映像とを含む映像を表示装置の画面に表示して、画面に表示される映像を時系列で記録する映像記録手段と、
前記リニアコンテンツ及び前記ノンリニアコンテンツに対する操作信号を取得して操作履歴を生成する操作履歴生成手段と、
前記ノンリニアコンテンツの使用ファイルの履歴を生成するファイル使用履歴生成手段と、
前記操作履歴及び前記ファイル使用履歴を時間軸で関連付けたシナリオを生成して記録するシナリオ生成記録手段と、
前記シナリオに基づいて、指定された復元ポイントから前記映像記録手段に時系列で記録されている画面表示の映像の再生を開始するコンテンツ再生手段と、
を備え、
前記コンテンツ再生手段は、前記指定された復元ポイントから前記映像記録手段に時系列で記録されている画面表示の映像の少なくともその一部分の再生を行うことができない場合、前記指定された復元ポイントからさらに過去に遡って他の復元ポイントがあるか否かを判断し、前記他の復元ポイントがない場合、前記指定された復元ポイントから前記映像記録手段に時系列で記録されている画面表示の映像を再生することを特徴とする記録再生システム。
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/JP2006/310927 WO2007138702A1 (ja) | 2006-05-31 | 2006-05-31 | 記録再生システムおよび記録再生方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPWO2007138702A1 JPWO2007138702A1 (ja) | 2009-10-01 |
| JP4864968B2 true JP4864968B2 (ja) | 2012-02-01 |
Family
ID=38778230
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2008517761A Expired - Fee Related JP4864968B2 (ja) | 2006-05-31 | 2006-05-31 | 記録再生システム |
Country Status (2)
| Country | Link |
|---|---|
| JP (1) | JP4864968B2 (ja) |
| WO (1) | WO2007138702A1 (ja) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP6237753B2 (ja) * | 2015-12-09 | 2017-11-29 | カシオ計算機株式会社 | 情報表示装置、サーバ及びプログラム |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0877681A (ja) * | 1994-09-05 | 1996-03-22 | Sanyo Electric Co Ltd | 複数記録媒体の記録再生装置及び方法 |
| JP2000187542A (ja) * | 1998-10-16 | 2000-07-04 | Fuji Xerox Co Ltd | プレゼンテ―ション資料のシナリオ生成装置およびシナリオ生成方法 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004336289A (ja) * | 2003-05-06 | 2004-11-25 | Nippon Telegr & Teleph Corp <Ntt> | 共有ホワイトボード履歴再現方法、共有ホワイトボードシステム、クライアント、プログラム、および記録媒体 |
-
2006
- 2006-05-31 JP JP2008517761A patent/JP4864968B2/ja not_active Expired - Fee Related
- 2006-05-31 WO PCT/JP2006/310927 patent/WO2007138702A1/ja not_active Ceased
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0877681A (ja) * | 1994-09-05 | 1996-03-22 | Sanyo Electric Co Ltd | 複数記録媒体の記録再生装置及び方法 |
| JP2000187542A (ja) * | 1998-10-16 | 2000-07-04 | Fuji Xerox Co Ltd | プレゼンテ―ション資料のシナリオ生成装置およびシナリオ生成方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2007138702A1 (ja) | 2007-12-06 |
| JPWO2007138702A1 (ja) | 2009-10-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8363056B2 (en) | Content generation system, content generation device, and content generation program | |
| US8437409B2 (en) | System and method for capturing, editing, searching, and delivering multi-media content | |
| CN109324811B (zh) | 一种用于更新教学录播数据的装置 | |
| CN101272469A (zh) | 用于教学与会场的录制系统及方法 | |
| CN112329403B (zh) | 一种直播文档处理方法和装置 | |
| KR100395883B1 (ko) | 실시간 강의 기록 장치 및 그에 따른 파일 기록방법 | |
| CN102663907B (zh) | 视频授课方法 | |
| KR20150112113A (ko) | 이벤트 처리 기반의 온라인 강의 콘텐츠 관리방법 | |
| JP4686990B2 (ja) | コンテンツ処理システム及びコンテンツ処理方法、並びにコンピュータ・プログラム | |
| JP4864968B2 (ja) | 記録再生システム | |
| JP4129162B2 (ja) | コンテンツ作成実演システム及びコンテンツ作成実演方法 | |
| JP2007036752A (ja) | コンテンツ再生システム、コンテンツ再生方法およびコンテンツ再生プログラム | |
| JP4200976B2 (ja) | コンテンツ再生装置及び電子機器 | |
| US20080013917A1 (en) | Information intermediation system | |
| CN109862311B (zh) | 视频内容的实时制作方法 | |
| KR100714409B1 (ko) | 강의목차, 강의교재와 연동되는 동영상 강의 저작도구 및그 저작방법 | |
| JP2008017171A (ja) | マルチメディアデータの記録装置及び方法、並びにマルチメディアコンテンツの作成システム及び方法 | |
| JP5455012B2 (ja) | 情報配信装置および情報配信システム | |
| TWM527984U (zh) | 教學影片編輯系統 | |
| JP2020154349A (ja) | ビデオサーバシステム及びそのプログラム | |
| Jou et al. | Combining hybrid media tools for web-based education | |
| JP2005260512A (ja) | コンテンツ処理システム及びコンテンツ処理方法、並びにコンピュータ・プログラム | |
| JP2005045439A (ja) | コンテンツ作成装置及びコンテンツ作成方法 | |
| HK40038272B (zh) | 一种直播文档处理方法和装置 | |
| JP2005043546A (ja) | 資料画像表示装置及び資料画像表示方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20091125 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100118 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110201 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110328 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20111108 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20111109 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20141118 Year of fee payment: 3 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313117 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| LAPS | Cancellation because of no payment of annual fees |