JP6772782B2 - Information processing equipment, information processing systems, and information processing programs - Google Patents
Information processing equipment, information processing systems, and information processing programs Download PDFInfo
- Publication number
- JP6772782B2 JP6772782B2 JP2016228181A JP2016228181A JP6772782B2 JP 6772782 B2 JP6772782 B2 JP 6772782B2 JP 2016228181 A JP2016228181 A JP 2016228181A JP 2016228181 A JP2016228181 A JP 2016228181A JP 6772782 B2 JP6772782 B2 JP 6772782B2
- Authority
- JP
- Japan
- Prior art keywords
- display
- display screen
- data
- information processing
- reproduction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Digital Computer Display Output (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- User Interface Of Digital Computer (AREA)
Description
本発明は、情報処理装置、情報処理システム、および情報処理プログラムに関する。 The present invention relates to an information processing device, an information processing system, and an information processing program.
会議や授業に参加した参加者が会議中や授業中に各自の端末装置で視認していた資料に関する情報を、電子的に記録し、会議後や授業後などに提供するシステムが知られている。 There is known a system that electronically records information about materials that participants who participated in a meeting or class have viewed on their terminal devices during the meeting or class and provides them after the meeting or class. ..
例えば、特許文献１には、会議の出席者の各々が参照していた参照資料を示すアイコンを、時間軸に沿って表示するシステムが開示されている。また、特許文献２には、複数の表示装置の各々に表示された静止画像を、同じモニタ画面に同時に再生表示するシステムが開示されている。また、特許文献３には、一致または類似する属性の複数のコンテンツを、同一ページに表示するシステムが開示されている。
For example,
しかしながら、従来では、表示された資料を簡略化して再生していた。このため、従来では、過去に表示画面に示されていた内容を一見して把握可能に提供することは困難であった。すなわち、従来では、表示された表示画面の再生時の視認性が悪かった。 However, in the past, the displayed material was simplified and reproduced. For this reason, in the past, it has been difficult to provide the contents displayed on the display screen in the past so that they can be grasped at a glance. That is, conventionally, the visibility of the displayed display screen during reproduction has been poor.
本発明は、上記に鑑みてなされたものであって、表示された表示画面の再生時の視認性向上を図ることを目的とする。 The present invention has been made in view of the above, and an object of the present invention is to improve the visibility of the displayed display screen during reproduction.
上述した課題を解決するために、情報処理装置は、資料データと、前記資料データにおける表示領域を示す表示領域情報と、を含む資料表示データに基づいて、前記資料データにおける、前記表示領域情報によって示される前記表示領域を表示画面として抽出した、表示画面データを取得する取得部と、前記表示画面データによって示される前記表示画面に含まれる要素の要素種類を特定する特定部と、前記表示画面に含まれる前記要素を、特定した前記要素種類に応じた再生形態で再生制御する再生制御部と、を備える。 In order to solve the above-mentioned problems, the information processing apparatus uses the display area information in the material data based on the material display data including the material data and the display area information indicating the display area in the material data. The display screen includes an acquisition unit that acquires display screen data obtained by extracting the displayed display area as a display screen, a specific unit that specifies the element type of the element included in the display screen indicated by the display screen data, and the display screen. It is provided with a reproduction control unit that controls reproduction of the included elements in a reproduction form according to the specified element type.
本発明によれば、表示された表示画面の再生時の視認性向上を図ることができる。 According to the present invention, it is possible to improve the visibility of the displayed display screen during reproduction.
以下、添付図面を参照しながら、本実施の形態の情報処理装置、情報処理システム、および情報処理プログラムの実施の形態を詳細に説明する。なお、本明細書において、同じ構成および機能を示す部分には、同じ符号を付与し、詳細な説明を省略する場合がある。 Hereinafter, embodiments of the information processing apparatus, information processing system, and information processing program of the present embodiment will be described in detail with reference to the accompanying drawings. In the present specification, the same reference numerals may be given to parts showing the same configuration and function, and detailed description thereof may be omitted.
図１は、本実施の形態の情報処理システム１０００の構成の一例を示す模式図である。
FIG. 1 is a schematic diagram showing an example of the configuration of the
本実施の形態の情報処理システム１０００は、情報処理装置１０と、共通表示装置１２と、端末装置１４と、を備える。
The
情報処理装置１０と、共通表示装置１２と、端末装置１４と、は、ネットワーク１３を介して通信可能に接続されている。なお、情報処理装置１０、共通表示装置１２、および、端末装置１４の少なくとも１つは、無線または有線によりネットワーク１３に接続されている。無線により接続する場合、例えば、３Ｇ（３ｒｄ Ｇｅｎｅｒａｔｉｏｎ）、４Ｇ（４ｔｈ Ｇｅｎｅｒａｔｉｏｎ）、ＬＴＥ（Ｌｏｎｇ Ｔｅｒｍ Ｅｖｏｌｕｔｉｏｎ）、無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、Ｂｌｕｅｔｏｏｔｈ（登録商標）などを用いればよい。
The
情報処理システム１０００の備える情報処理装置１０、共通表示装置１２、および端末装置１４の各々の数は、限定されない。図１には、一例として、情報処理システム１０００が、１台の情報処理装置１０と、１台の共通表示装置１２と、複数台の端末装置１４とを備える形態を示した。
The number of each of the
本実施の形態では、一例として、共通表示装置１２および複数の端末装置１４が、特定の領域内で使用されることを想定している。また、本実施の形態では、特定の領域として、授業を受ける教室Ｐを想定している。なお、特定の領域は、端末装置１４をそれぞれ携帯した１または複数のユーザが参加する、会議や授業やディスカッションなどの会合の開かれる領域であればよく、教室に限定されない。また、特定の領域は、壁などによって閉鎖された空間に限定されず、開放された空間であってもよい。
In the present embodiment, as an example, it is assumed that the
また、本実施の形態では、情報処理装置１０が、教室Ｐの設けられた学校Ｑ内に設置された形態を想定している。しかし、情報処理装置１０は、学校Ｑに設置された形態に限定されない。また、情報処理装置１０は、共通表示装置１２および端末装置１４と同じ領域（例えば、教室Ｐ）内に設置されていてもよいし、該領域の外部に設置されていてもよい。例えば、情報処理装置１０は、教室Ｐ内、学校Ｑの外部、クラウド上に設けられたクラウドサーバ、などに設置または搭載されていてもよい。
Further, in the present embodiment, it is assumed that the
また、情報処理システム１０００は、複数の端末装置１４を、同じ領域（例えば、教室Ｐ）内で使用する形態に限定されない。例えば、情報処理システム１０００は、複数の端末装置１４の内の少なくとも１つを、他の端末装置１４とは異なる領域で使用する形態であってもよい。
Further, the
端末装置１４は、ユーザによって操作される装置である。本実施の形態では、ユーザは、一人一台の端末装置１４を操作する。すなわち、複数の端末装置１４の各々は、それぞれ異なるユーザによって操作される場合を説明する。なお、１人のユーザが複数の端末装置１４を操作する形態であってもよい。端末装置１４は、各種操作指示を受付ける受付機能、各種画像を表示する表示機能、および、他の装置との通信機能、を備える。端末装置１４は、例えば、パーソナルコンピュータや、スマートフォンや、タブレット端末や、携帯電話、などである。なお、端末装置１４に、受付機能や表示機能を備えたアクセサリを接続することで、受付機能および表示機能を実現してもよい。
The
共通表示装置１２は、表示機能および音声出力機能の少なくとも一方を備える。共通表示装置１２は、複数の端末装置１４の位置する特定の領域（例えば、教室Ｐ）内に、共通提供データを出力する装置である。共通提供データは、該特定の領域内に位置する複数の端末装置１４の各々を操作する複数のユーザに対して、共通して提供されるデータである。共通表示装置１２は、例えば、教室Ｐ内に位置する全てのユーザが視認可能な位置に設置されたディスプレイや、教室Ｐ内に位置する全てのユーザが視聴可能な音量の音を出力するスピーカである。
The
なお、共通表示装置１２は、電子黒板であってもよい。また、共通表示装置１２は、特定の領域内に共通して提供された共通提供データを記録する装置であればよく、ボードに表示された表示内容を撮影する撮影装置や、音声を録音する録音装置であってもよい。
The
情報処理装置１０は、複数の端末装置１４および共通表示装置１２と通信するサーバ装置である。情報処理装置１０は、共通表示装置１２から出力された共通提供データと、端末装置１４の各々に表示された表示画面の表示画面データと、を用いて、端末装置１４の各々に表示された表示画面を後から再生するときの、再生制御を行う（詳細後述）。
The
次に、情報処理装置１０、共通表示装置１２、および端末装置１４の、ハードウェア構成の一例を説明する。図２は、情報処理装置１０、共通表示装置１２、および端末装置１４のハードウェア構成の一例を示す模式図である。
Next, an example of the hardware configuration of the
情報処理装置１０、共通表示装置１２、および端末装置１４の各々は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）２５と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）２６と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）２７と、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）２８と、通信Ｉ／Ｆ（インターフェース）２４と、外部Ｉ／Ｆ２３と、操作パネル２９と、を備え、バス２１を介して相互に接続されている。
Each of the
ＣＰＵ２５は、情報処理装置１０、共通表示装置１２、および端末装置１４の動作を統括的に制御する。ＣＰＵ２５は、ＲＡＭ２７をワークエリアとし、ＲＯＭ２６またはＨＤＤ２８などに格納されたプログラムを実行することで、情報処理装置１０、共通表示装置１２、および端末装置１４全体の動作を制御し、後述する各種機能部を実現する。
The
ＨＤＤ２８は、プログラムやデータなどを格納する。なお、端末装置１４は、ＨＤＤ２８に代えて、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）を備えた構成であってもよい。
The
操作パネル２９は、ユーザの操作に応じた各種の操作入力を受付けるとともに、各種の情報や各種の画像を表示する。
The
本実施の形態では、操作パネル２９は、各種操作指示を受付ける受付機能を実現する操作受付部２９Ａと、各種情報の表示を行う表示機能を実現する表示部２９Ｂと、の双方を一体的に備えたタッチパネルである場合を説明する。しかし、操作パネル２９の構成は、このような構成に限定されない。例えば、操作パネル２９は、操作受付部２９Ａと、表示部２９Ｂと、を別体として構成してもよい。
In the present embodiment, the
通信Ｉ／Ｆ２４は、ネットワーク１３を介して他の装置や機器と通信するためのインターフェースである。外部Ｉ／Ｆ２３は、マイク、スピーカ、および、記録媒体などの外部メモリ、などと通信するためのインターフェースである。
The communication I /
次に、本実施の形態の情報処理システム１０００が行う情報処理の流れの概要を説明する。図３は、情報処理システム１０００が行う情報処理の流れの概要の一例を示す、説明図である。
Next, an outline of the flow of information processing performed by the
本実施の形態では、授業や会議やディスカッションなどの会合中、共通表示装置１２から教室Ｐ内に共通提供データ３１が継続して出力されているものと仮定する。また、本実施の形態では、複数の端末装置１４の各々には、ユーザによる操作指示によって、様々な資料における様々な表示領域の表示画面が表示部２９Ｂに表示され、また、ユーザによる操作指示によって資料における表示領域が変更されるものと仮定する。
In the present embodiment, it is assumed that the common provided
会合が終了すると、共通表示装置１２は、情報処理装置１０からの要求に応じて、該会合中に提供した共通提供データ３１を情報処理装置１０へ送信する（ステップＳ１）。また、複数の端末装置１４の各々は、情報処理装置１０からの要求に応じて、該授業中に表示した資料と資料における表示領域とを示す資料表示データ３０を、情報処理装置１０へ送信する（ステップＳ２）。資料表示データ３０は、資料データ３２および表示領域情報３６を含む。これらのデータの詳細は後述する。なお、ステップＳ１とステップＳ２の処理は、順序が逆であってもよい。
When the meeting is completed, the
情報処理装置１０は、資料表示データ３０を用いて、表示画面データを取得する（ステップＳ３）。
The
図４は、資料データ３２および表示画面データ５０の一例の説明図である。資料表示データ３０は、資料データ３２と表示領域情報３６とを含む。
FIG. 4 is an explanatory diagram of an example of
図４（Ａ）は、資料データ３２の一例の模式図である。資料データ３２は、端末装置１４に表示する対象のデータである。資料データ３２の種類は限定されない。例えば、資料データ３２は、画像データや文書データなどである。
FIG. 4A is a schematic diagram of an example of
図４（Ｂ）は、端末装置１４に表示された表示画面５２の一例を示す模式図である。ユーザによる端末装置１４の操作指示によって、端末装置１４の表示部２９Ｂには、表示対象の資料データ３２における、特定の表示領域３４の表示画面５２が表示される。
FIG. 4B is a schematic view showing an example of the
例えば、資料データ３２における表示領域３４Ａが表示対象の領域として操作指示されたと仮定する（図４（Ａ）参照）。この場合、端末装置１４の表示部２９Ｂには、資料データ３２における該表示領域３４Ａの表示画面５２Ａが表示される（図４（Ｂ）参照）。また、資料データ３２における表示領域３４Ｂが表示対象の領域として操作指示されたと仮定する（図４（Ａ）参照）。この場合、端末装置１４の表示部２９Ｂには、資料データ３２における該表示領域３４Ｂの表示画面５２Ｂが表示される（図４（Ｂ）参照）。
For example, it is assumed that the display area 34A in the
表示領域情報３６は、資料データ３２における、端末装置１４の表示部２９Ｂに表示された表示領域３４を示す情報である。図４（Ｂ）には、表示領域情報３６の一例として、表示領域３４Ａを示す表示領域情報３６Ａと、表示領域３４Ｂを示す表示領域情報３６Ｂと、を示した。表示領域情報３６は、資料データ３２における位置、大きさ、範囲で表してもよいし、資料データ３２における特定の基準領域からの移動量、移動方向、およびズーム率で表してもよい。ズーム率は、基準領域の拡大縮小率を示す。基準領域は、予め定めればよい。基準領域は、例えば、資料データ３２における１頁目の中央部の領域である。
The
情報処理装置１０が取得する資料表示データ３０は、資料データ３２と、該資料データ３２における表示画面５２に表示された表示領域３４を示す表示領域情報３６と、該表示画面５２の表示タイミングと、を含む。言い換えると、資料表示データ３０には、資料データ３２と、異なる表示タイミングの各々に対応する表示領域情報３６と、が含まれる。
The
情報処理装置１０は、資料データ３２から、各表示タイミングに対応する表示領域情報３６によって示される表示領域３４を抽出することによって、表示タイミングの各々に対応する表示画面５２を含む、表示画面データ５０を取得する。
The
図４（Ｃ）は、表示画面データ５０の一例を示す模式図である。表示画面データ５０は、表示された表示タイミングの異なる複数の表示画面５２を時系列に配列してなる。すなわち、表示画面データ５０は、複数の表示画面５２（例えば、表示画面５２Ａ、表示画面５２Ｂ）を表示タイミングごとに時系列にならべたものである。
FIG. 4C is a schematic diagram showing an example of
図３に戻り説明を続ける。情報処理装置１０は、端末装置１４の各々から取得した表示画面データ５０について、含まれる要素の要素種類を特定する（ステップＳ４）。
The explanation will be continued by returning to FIG. The
要素とは、表示画面５２に含まれる、文字、絵柄、動画、図表の少なくとも１つを示す。また、要素種類とは、要素の種類を示す。要素種類は、具体的には、文字、絵柄、動画、図表などである。
The element indicates at least one of a character, a pattern, a moving image, and a chart included in the
そして、情報処理装置１０は、共通提供データ３１と、端末装置１４の各々から受信した資料表示データ３０から取得した表示画面データ５０と、を用いて、再生用表示画面３８を生成する（ステップＳ５）。再生用表示画面３８は、端末装置１４の各々で表示された表示画面５２を、後から再生するときの再生画面である。そして、情報処理装置１０は、再生用表示画面３８を、端末装置１４で再生するように再生制御する（ステップＳ６）。再生用表示画面３８の生成方法については、詳細を後述する。
Then, the
次に、本実施の形態の情報処理システム１０００を構成する各装置の機能について、詳細に説明する。
Next, the functions of the devices constituting the
図５は、情報処理システム１０００に含まれる各装置の機能的構成例を示すブロック図である。
FIG. 5 is a block diagram showing a functional configuration example of each device included in the
まず、端末装置１４の機能的構成を説明する。端末装置１４は、制御部６４と、記憶部６６と、操作パネル６８と、を備える。制御部６４と、記憶部６６および操作パネル６８と、は、データや信号を授受可能に接続されている。
First, the functional configuration of the
操作パネル６８は、操作受付部６８Ｂと表示部６８Ａとを含む。操作パネル６８、操作受付部６８Ｂ、および表示部６８Ａは、操作パネル２９、操作受付部２９Ａ、および表示部２９Ｂ（図２参照）によって実現される。
The
記憶部６６は、各種データを記憶する。例えば、記憶部６６は、１または複数の資料データ３２を予め記憶する。資料データ３２の種類は限定されない。資料データ３２は、例えば、文書データ、画像データ、動画像データなどである。また、資料データ３２は、文書、絵柄、図表、および、動画の少なくとも１つを含むデータであってもよい。すなわち、資料データ３２は、文書、絵柄、図表、および動画の少なくとも２つ以上を混在したデータであってもよい。
The
制御部６４は、ＣＰＵ２５、ＲＯＭ２６、およびＲＡＭ２７（図２参照）などによって実現する。なお、制御部６４は、回路などによって実現してもよい。
The
制御部６４は、通信部６４Ａと、表示制御部６４Ｄと、受付部６４Ｅと、を有する。通信部６４Ａは、送信部６４Ｃと、受信部６４Ｂと、を有する。通信部６４Ａ、受信部６４Ｂ、送信部６４Ｃ、表示制御部６４Ｄ、および受付部６４Ｅ、の一部または全ては、例えば、ＣＰＵ２５などのプロセッサ回路にプログラムを実行させること、すなわち、ソフトウェアにより実現してもよいし、ＩＣ（Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）などの専用の処理回路を用いてハードウェアにより実現してもよいし、ソフトウェアおよびハードウェアを併用して実現してもよい。処理回路は、物理的に１つであってもよいし、複数であってもよい。
The
受信部６４Ｂは、情報処理装置１０から、各種のデータや指示信号などを受信する。送信部６４Ｃは、情報処理装置１０に対して、各種のデータを送信する。
The receiving
受付部６４Ｅは、ユーザによる操作パネル６８の操作指示を操作受付部６８Ｂから受付ける。本実施の形態では、受付部６４Ｅは、表示対象の資料データ３２の指定や、資料データ３２における表示対象の表示領域３４の操作指示などを受付ける。
The reception unit 64E receives an operation instruction of the
なお、表示対象の資料データ３２の記憶場所は限定されない。すなわち、受付部６４Ｅは、記憶部６６に記憶されている資料データ３２の指定を受付けてもよいし、ネットワーク１３に接続された外部装置などに記録された資料データ３２の指定を受付けてもよい。
The storage location of the
表示制御部６４Ｄは、各種画像を操作パネル６８（表示部６８Ａ）へ表示する制御を行う。本実施の形態では、表示制御部６４Ｄは、ユーザによって指定された資料データ３２における、ユーザによって操作指示された表示領域３４の表示画面５２を、表示部６８Ａへ表示する。また、表示制御部６４Ｄは、受信部６４Ｂを介して情報処理装置１０から受信した再生用表示画面３８を、表示部６８Ａへ表示する制御を行う。
The display control unit 64D controls to display various images on the operation panel 68 (display unit 68A). In the present embodiment, the display control unit 64D displays the
そして、受付部６４Ｅは、ユーザによって指定された表示対象の資料データ３２を示す情報を記憶部６６へ記憶する。資料データ３２を示す情報には、例えば、資料データ３２の識別情報や、該資料データ３２の記憶場所を示すパス（ＵＲＬ：Ｕｎｉｆｏｒｍ Ｒｅｓｏｕｒｃｅ Ｌｏｃａｔｏｒ）などを用いればよい。
Then, the reception unit 64E stores in the
また、受付部６４Ｅは、該資料データ３２における新たな表示領域３４が表示対象の領域として操作指示されるごとに、該資料データ３２における操作指示された表示領域３４を示す表示領域情報３６と、表示タイミングと、を、資料データ３２を示す情報に対応づけて、記憶部６６へ記憶する。そして、授業終了時には、送信部６４Ｃが、該資料データ３２と、表示タイミングと、表示タイミングの各々に対応する表示領域情報３６と、を含む資料表示データ３０を、情報処理装置１０へ送信する。
Further, each time the reception unit 64E is instructed to operate the new display area 34 in the
なお、制御部６４で実行する上記処理は、専用のアプリケーションを起動することで実行される。このアプリケーションの形態は限定されない。制御部６４において用いる該専用のアプリーションは、例えば、ブラウザベースのアプリケーションなどであるが、これに限定されない。
The above process executed by the
次に、情報処理装置１０の機能的構成を説明する。情報処理装置１０は、制御部６０と、記憶部６２と、を備える。
Next, the functional configuration of the
記憶部６２は、各種データを記憶する。記憶部６２は、例えば、ＨＤＤ２８（図２参照）によって実現する。
The
情報処理装置１０の制御部６０は、ＣＰＵ２５、ＲＯＭ２６、ＲＡＭ２７（図２参照）などによって実現する。なお、制御部６０は、回路などによって実現してもよい。
The
制御部６０は、通信部６０Ｂと、実行部６０Ａと、を含む。通信部６０Ｂは、受信部６０Ｈと、送信部６０Ｉと、を含む。実行部６０Ａは、取得部６０Ｃと、特定部６０Ｄと、分割部６０Ｅと、算出部６０Ｆと、再生制御部６０Ｇと、を含む。実行部６０Ａ、通信部６０Ｂ、取得部６０Ｃ、特定部６０Ｄ、分割部６０Ｅ、算出部６０Ｆ、再生制御部６０Ｇ、受信部６０Ｈ、および送信部６０Ｉの一部または全ては、例えば、ＣＰＵ２５などのプロセッサ回路にプログラムを実行させること、すなわち、ソフトウェアにより実現してもよいし、ＩＣなどの専用の処理回路を用いてハードウェアにより実現してもよいし、ソフトウェアおよびハードウェアを併用して実現してもよい。処理回路は、物理的に１つであってもよいし、複数であってもよい。
The
受信部６０Ｈは、端末装置１４から、各種のデータや信号などを受信する。
The receiving unit 60H receives various data, signals, and the like from the
具体的には、受信部６０Ｈは、共通表示装置１２から共通提供データ３１を受信する。また、受信部６０Ｈは、端末装置１４の各々から、資料表示データ３０を受信する。送信部６０Ｉは、端末装置１４へ、各種の情報や信号などを送信する。具体的には、送信部６０Ｉは、再生用表示画面３８を端末装置１４へ送信する。
Specifically, the receiving unit 60H receives the common provided
取得部６０Ｃは、表示画面データ５０を取得する。表示画面データ５０は、上述したように、表示された表示タイミングの異なる複数の表示画面５２を時系列に配列してなる。
The
本実施の形態では、取得部６０Ｃは、端末装置１４から受信した資料表示データ３０に基づいて、表示画面データ５０を取得する。
In the present embodiment, the
図４を用いて具体的に説明する。取得部６０Ｃは、端末装置１４から受信した資料表示データ３０から、資料データ３２と、表示タイミングの各々に対応する表示領域情報３６と、を読取る。例えば、取得部６０Ｃは、図４（Ａ）に示す資料データ３２と、表示タイミングの各々に対応する表示領域３４（表示領域３４Ａ、３４Ｂ）を示す表示領域情報３６と、を読取る。
This will be specifically described with reference to FIG. The
そして、取得部６０Ｃは、資料データ３２から、表示タイミングの各々に対応する、表示領域情報３６によって示される表示領域３４を抽出した表示画面５２を、表示タイミングに沿って時系列に配列し、表示画面データ５０（図４（Ｃ）参照）を生成する。これによって、取得部６０Ｃは、端末装置１４に表示された表示画面５２を時系列に配列した表示画面データ５０を取得する。
Then, the
なお、表示領域情報３６が、資料データ３２における位置、大きさ、範囲を示す情報である場合、取得部６０Ｃは、表示領域情報３６によって示される表示領域３４を表示画面５２として、資料データ３２から直接抽出すればよい。一方、表示領域情報３６が、資料データ３２における特定の基準領域からの移動量、移動方向、およびズーム率を示す場合、取得部６０Ｃは、資料データ３２における基準領域を、表示領域情報３６によって示される移動量および移動方向にずらし、且つ、該表示領域情報３６によって示されるズーム率に応じて拡大または縮小した領域を、表示画面５２として抽出すればよい。
When the
これによって、取得部６０Ｃは、端末装置１４に表示された複数の表示画面５２を表示タイミングに沿って時系列に配列した表示画面データ５０を、取得する。
As a result, the
なお、取得部６０Ｃは、複数の端末装置１４の各々から、それぞれの端末装置１４に表示された表示画面５２の表示画面データ５０を取得してもよい。また、取得部６０Ｃは、複数の端末装置１４の各々から受信した資料表示データ３０から、それぞれの端末装置１４に表示された表示画面５２の表示画面データ５０を取得してもよい。また、１台の端末装置１４に、同時に複数の表示画面５２が表示される場合がある。この場合、取得部６０Ｃは、１台の端末装置１４から、複数の表示画面データ５０を取得してもよい。
The
本実施の形態では、取得部６０Ｃは、複数の端末装置１４の各々から受信した資料表示データ３０から、複数の端末装置１４の各々に表示された表示画面５２の表示画面データ５０を取得する形態を説明する。
In the present embodiment, the
なお、表示画面データ５０は、少なくとも１つの表示タイミングに対応する表示画面５２を示すものであればよく、異なる複数の表示タイミングの各々に対応する、複数の表示画面５２を含むものに限定されない。但し、本実施の形態では、表示画面データ５０は、複数の表示画面５２を表示タイミングに沿って時系列に配列したものである場合を説明する。
The
図５に戻り、説明を続ける。特定部６０Ｄは、表示画面データ５０によって示される表示画面５２に含まれる、要素の要素種類を特定する。本実施の形態では、特定部６０Ｄは、表示画面データ５０に含まれる、表示タイミングの各々に対応する表示画面５２の各々について、含まれる要素の要素種類を特定する。要素種類は、上述したように、文字、絵柄、動画、図表、の少なくとも１つである。
Returning to FIG. 5, the description will be continued. The
図６は、要素種類の特定の一例の説明図である。特定部６０Ｄは、表示画面データ５０を構成する各表示タイミングの各々に対応する表示画面５２の各々を、公知の画像解析方法を用いて解析する。
FIG. 6 is an explanatory diagram of an example of specifying the element type. The
公知の画像解析方法として、例えば、特定部６０Ｄは、表示画面データ５０の拡張子、表示画面データ５０のファイル構造、画表示画面データ５０の構造解析、などの公知の解析方法の１または複数を組合せることで、要素種類を特定すればよい。
As a known image analysis method, for example, the
これにより特定部６０Ｄは、各表示タイミングに対応する表示画面５２に含まれる、要素の要素種類を特定する。
As a result, the
例えば、表示画面５２Ａに文字が含まれる場合、特定部６０Ｄは、表示画面５２Ａに含まれる要素の要素種類を“文字”と特定する。また、例えば、表示画面５２Ｂに図や表が含まれる場合、特定部６０Ｄは、表示画面５２Ｂに含まれる要素の要素種類を“図表”と特定する。
For example, when the
表示画面データ５０に含まれる他の表示タイミングの各々に対応する表示画面５２についても同様に、特定部６０Ｄは、含まれる要素の要素種類を特定する。
Similarly, for the
図６には、特定部６０Ｄが、表示画面５２Ａに含まれる要素の要素種類“文字”と、表示画面５２Ｂに含まれ要素の要素種類“図表”と、を特定した場合を、一例として示した。
FIG. 6 shows, as an example, a case where the
なお、特定部６０Ｄは、表示画面５２を画像解析することで、表示画面５２に含まれる要素の要素種類を特定してもよいし、表示画面５２の一部の領域である注目領域Ｅを用いて、該表示画面５２に含まれる要素の要素種類を特定してもよい。注目領域Ｅは、例えば、表示画面５２の中央を含む領域である。表示画面５２における注目領域Ｅの位置、大きさ、範囲は、予め設定すればよい。また、注目領域Ｅの位置、大きさ、範囲は、ユーザによる操作指示などによって、適宜変更可能としてもよい。
The specifying
図５に戻り、説明を続ける。特定部６０Ｄは、複数の端末装置１４の各々から取得した、複数の表示画面データ５０の各々について、表示タイミングの各々に対応する表示画面５２に含まれる要素の要素種類を特定する。
Returning to FIG. 5, the description will be continued. The specifying
図７は、要素種類の特定結果の一例を示す模式図である。例えば、特定部６０Ｄは、表示画面データＡ（５０Ａ）、表示画面データＢ（５０Ｂ）、表示画面データＣ（５０Ｃ）の各々について、開始時間と終了時間によって規定される表示タイミングごとに要素種類を特定する。
FIG. 7 is a schematic diagram showing an example of a specific result of the element type. For example, the
図５に戻り、説明を続ける。分割部６０Ｅは、端末装置１４における複数の表示画面５２の表示期間を、複数のトピック区間に分割する。表示期間は、取得した表示画面データ５０に含まれる表示タイミングの群によって表される期間である。表示期間は、具体的には、授業の授業時間や、会議の会議時間、講義の講義時間などである。更に具体的には、表示期間は、該表示画面５２の表示されていたときにユーザの参加していた会合の、開催されていた期間である。
Returning to FIG. 5, the description will be continued. The
トピック区間は、表示期間における、時系列に隣接する一対のトピック区切りによって区切られた区間を示す。本実施の形態では、分割部６０Ｅは、教室Ｐ内に共通して提供されていた共通提供データ３１に基づいて、表示期間を、提供されたトピックごとに複数のトピック区間に分割する。
The topic section indicates a section in the display period separated by a pair of topic breaks adjacent to each other in time series. In the present embodiment, the
トピックとは、テーマや話題を意味する。すなわち、分割部６０Ｅは、授業や講義などの期間（表示期間）を、トピックごとに複数のトピック区間に分割する。
A topic means a theme or topic. That is, the
分割部６０Ｅは、公知の方法を用いて、共通提供データ３１を解析する。この解析によって、分割部６０Ｅは、トピックの区切りであるトピック区切りを特定する。そして、分割部６０Ｅは、表示期間を、トピック区切りによって区切られた、複数のトピック区間に分割する。
The
例えば、分割部６０Ｅは、公知の方法として、特開２０１４−１１２２８０号公報に示される方法を用いて、トピック区切りと、隣接する一対のトピック区切りによって規定されるトピック区間と、トピック区間のトピックと、を特定する。このとき、分割部６０Ｅは、各トピック区間のトピックの特定に用いたキーワードについても、併せて特定する。キーワードは、要素の１種である文字によって形成された言葉であり、トピックの特定に用いたキーとなる言葉である。
For example, the
なお、分割部６０Ｅは、表示期間に教室Ｐ内に共通して提供されていたデータを用いて、トピック区間、各トピック区間のトピック、およびトピックの特定に用いたキーワード、を特定すればよい。このため、分割部６０Ｅは、複数の端末装置１４の各々から受信した、複数の資料表示データ３０の内の１つを、共通提供データ３１として用いてもよい。
In addition, the
本実施の形態では、分割部６０Ｅは、共通提供データ３１を用いて、トピック区間、各トピック区間のトピック、および、トピックの特定に用いたキーワード、を特定する場合を一例として説明する。
In the present embodiment, the case where the
例えば、分割部６０Ｅは、共通提供データ３１に含まれる音や文字を解析することで、トピック区間と、各トピック区間のトピックと、トピックの特定に用いたキーワードと、を特定する。
For example, the
図８は、分割部６０Ｅによる、共通提供データ３１の解析結果の一例を示す模式図である。例えば、共通提供データ３１が、動画像データと、音声データと、を含んでいたと仮定する。
FIG. 8 is a schematic diagram showing an example of the analysis result of the common provided
この場合、分割部６０Ｅは、図８に示すように、共通提供データ３１における、開始時間と終了時間によって規定される表示タイミングの各々について、キーワード解析結果と、トピック区間ごとのトピックと、トピックの特定に用いたキーワードと、を解析する。
In this case, as shown in FIG. 8, the
例えば、分割部６０Ｅは、共通提供データ３１を構成する動画像データおよび音声データの各々について、各表示タイミングに対応する文字認識結果および音声認識結果から、トピックの特定に用いるキーワードを抽出する。このとき、分割部６０Ｅは、文字認識結果から抽出したキーワードを画面用のキーワード、音声認識結果から抽出したキーワードを音声用のキーワードとして抽出する。更に、分割部６０Ｅは、これらのキーワードによって示されるトピック、および、トピック区間を特定する。
For example, the
これによって、分割部６０Ｅは、複数の表示タイミングによって示される表示期間を、トピック毎に複数のトピック区間に分割する。図８に示す例では、共通提供データ３１の表示期間を、４つのトピック（トピック１〜４）のトピック区間に分割した場合を、一例として示した。
As a result, the
図５に戻り説明を続ける。算出部６０Ｆは、表示画面データ５０における、分割部６０Ｅによって分割されたトピック区間ごとに、共通提供データ３１における対応するトピック区間のトピックとの関連度を算出する。
The explanation will be continued by returning to FIG. The calculation unit 60F calculates the degree of relevance to the topic of the corresponding topic section in the common provided
具体的には、算出部６０Ｆは、表示画面データ５０における各トピック区間に含まれるキーワードと、共通提供データ３１における対応するトピック区間の特定に用いたキーワードと、の一致度および類似度が高いほど、高い関連度を算出する。例えば、一致するキーワードが３０個以上の場合には関連度“高”とし、５個以上３０個未満の場合には関連度“中”とし、５個未満の場合には関連度“低”とする。
Specifically, the calculation unit 60F has a higher degree of matching and similarity between the keyword included in each topic section in the
なお、端末装置１４で上記表示期間に音声を録音し、音声データを得ている場合がある。この場合、情報処理装置１０の算出部６０Ｆは、資料表示データ３０と、該資料表示データ３０に含まれる資料データ３２を表示した表示期間に録音された音声データと、を端末装置１４から取得することが好ましい。そして、算出部６０Ｆは、取得した資料表示データ３０に含まれる資料データ３２における、表示領域情報３６によって示される表示領域３４を含むページ内と、取得した音声データと、について、含まれるキーワードを表示タイミングごとに解析することが好ましい。そして、算出部６０Ｆは、トピック区間の各々に属する表示タイミングの群ごとに、含まれるキーワードの解析結果を用いて、関連度を算出することが好ましい。
In some cases, the
図９は、表示画面データ５０の解析結果の一例を示す模式図である。例えば、算出部６０Ｆは、表示画面データ５０について、分割部６０Ｅで分割したトピック１〜４のトピック区間ごとに、共通提供データ３１における対応するトピック区間のトピックとの関連度を算出する。
FIG. 9 is a schematic diagram showing an example of the analysis result of the
図９に示す例では、情報処理装置１０が、資料表示データ３０と、授業中に録音された音声データと、を端末装置１４から取得した場合を示した。そして、図９には、取得した資料表示データ３０に含まれる資料データ３２における、表示領域情報３６によって示される表示領域３４を含むページ内と、該音声データと、について、含まれるキーワードを表示タイミングごとに解析した解析結果の一例を示した。
In the example shown in FIG. 9, the
この場合、算出部６０Ｆは、資料データ３２における、各表示タイミングに対応する表示領域情報３６によって示される表示領域３４を含むページ内のキーワードを解析することによって、表示タイミングごとの文字認識結果を導出する。また、算出部６０Ｆは、表示期間に端末装置１４で取得した音声データについて、含まれるキーワードを表示タイミングごとに解析することによって、表示タイミングごとの音声認識結果を導出する。
In this case, the calculation unit 60F derives the character recognition result for each display timing by analyzing the keywords in the page including the display area 34 indicated by the
そして、算出部６０Ｆは、図９に示すように、トピック１〜４のトピック区間の各々について、含まれる表示タイミング毎の文字認識結果に示されるキーワードと、共通提供データ３１における対応するトピック区間のトピックの特定の用いた画面用のキーワード（図８参照）と、の関連度を算出する（図９中、画面関連度参照）。また、算出部６０Ｆは、トピック区間の各々について、含まれる表示タイミング毎の音声認識結果に示されるキーワードと、共通提供データ３１における対応するトピック区間のトピックの特定に用いた音声用のキーワード（図８参照）と、の関連度を算出する（図９中、音声関連度参照）。
Then, as shown in FIG. 9, the calculation unit 60F sets the keywords shown in the character recognition result for each display timing included in each of the topic sections of
そして、算出部６０Ｆは、各トピック区間について、画面関連度と音声関連度との平均値である総合関連度を、表示画面データ５０における各トピック区間の関連度として算出する。
Then, the calculation unit 60F calculates the total relevance, which is the average value of the screen relevance and the audio relevance, as the relevance of each topic section in the
算出部６０Ｆは、取得部６０Ｃで複数の表示画面データ５０を取得した場合には、表示画面データ５０の各々について、トピック区間ごとに、共通提供データ３１における対応するトピック区間のトピックとの関連度を算出すればよい。
When the
図１０は、複数の表示画面データ５０の各々の、トピック区間ごとの関連度算出の一例の説明図である。
FIG. 10 is an explanatory diagram of an example of calculating the degree of relevance for each topic section of each of the plurality of
例えば、取得部６０Ｃが、図１０（Ａ）に示す共通提供データ３１を取得したと仮定する。また、例えば、取得部６０Ｃが、図１０（Ｂ）〜（Ｄ）に示す、表示画面データ５０（５０Ａ、５０Ｂ、５０Ｃ）を取得したと仮定する。
For example, it is assumed that the
そして、特定部６０Ｄが、表示画面データ５０Ａ〜５０Ｃの各々について、表示タイミングごとに、含まれる要素の要素種類を特定したと仮定する。また、分割部６０Ｅが、共通提供データ３１を解析することによって、表示期間Ｔを、トピック区切りｅ１〜ｅ２のトピック１、トピック区切りｅ２〜ｅ３のトピック２、トピック区切りe３〜ｅ４のトピック３、トピック区切りｅ４〜ｅ５のトピック４、に分割したと仮定する。
Then, it is assumed that the specifying
表示期間Ｔは、表示画面データ５０Ａ〜５０Ｃによって示される、複数の端末装置１４の各々で表示画面５２の表示された期間である。具体的には、表示期間Ｔは、１つの授業の授業時間や会議の会議時間を示す。
The display period T is a period in which the
そして、算出部６０Ｆは、表示画面データ５０Ａ〜５０Ｃの各々について、トピック区間（トピック１〜４）ごとに、共通提供データ３１における対応するトピック区間のトピックの特定に用いたキーワードとの関連度を算出する。
Then, the calculation unit 60F determines the degree of relevance of each of the
図１０には、算出部６０Ｆが、関連度“高”，“中”，“低”の３段階の関連度を算出した例を示した。しかし、算出部６０Ｆは、複数段階の関連度を算出すればよく、関連度の段階は３段階に限定されない。 FIG. 10 shows an example in which the calculation unit 60F calculated the degree of relevance in three stages of the degree of relevance “high”, “medium”, and “low”. However, the calculation unit 60F may calculate the degree of relevance in a plurality of stages, and the degree of relevance is not limited to three.
図５に戻り、説明を続ける。次に、再生制御部６０Ｇについて説明する。
Returning to FIG. 5, the description will be continued. Next, the
再生制御部６０Ｇは、取得部６０Ｃで取得した表示画面データ５０の表示画面５２に含まれる要素を、特定部６０Ｄで特定した要素種類に応じた再生形態で再生制御する。
The
本実施の形態では、再生制御部６０Ｇは、表示画面５２に含まれる要素を、要素種類に応じた再生形態で配置した再生用表示画面３８を生成し、該再生用表示画面３８を表示するように制御することで、再生制御を行う。
In the present embodiment, the
再生形態は、表示時の、表示サイズ、形、色、配置位置、の少なくとも１つによって規定される。 The reproduction mode is defined by at least one of display size, shape, color, and arrangement position at the time of display.
すなわち、再生制御部６０Ｇは、取得部６０Ｃで取得した表示画面データ５０の表示画面５２に含まれる要素を、特定部６０Ｄで特定した要素種類に応じた、表示サイズ、形、色、配置位置、の少なくとも１つによって規定される再生形態で再生制御する。
That is, the
詳細には、再生制御部６０Ｇは、要素種類が文字である場合、該文字を、予め定めた文字サイズより大きく表示されるように再生制御する。予め定めた文字サイズは、例えば、端末装置１４で表示画面５２に表示されていた時の該文字のサイズである。すなわち、再生制御部６０Ｇは、要素種類が文字である場合、該文字を、端末装置１４で表示画面５２に表示されていた時より大きい文字サイズで表示するように、再生制御する。
Specifically, when the element type is a character, the
詳細には、再生制御部６０Ｇは、要素種類が文字である場合、該文字を、再生用表示画面３８における、予め定めた文字サイズより大きく且つ複数文字を表示可能な文字表示領域内に、該文字表示領域に一致する文字サイズに調整して配置する。このとき、再生制御部６０Ｇは、元の表示画面５２に含まれる要素（文字）のアスペクト比を変更し、該文字表示領域に一致するサイズに調整して配置してもよい。
Specifically, when the element type is a character, the
なお、再生制御部６０Ｇは、取得部６０Ｃで取得した表示画面データ５０の表示画面５２に含まれる、要素としての文字の文字列に改行が含まれている場合、改行を削除した後に、上記文字表示領域に一致するサイズに調整した配置を行い、該文字表示領域内に収まるように適宜改行を行って表示すればよい。
If the character string of the character as an element included in the
また、再生制御部６０Ｇは、取得部６０Ｃで取得した表示画面データ５０の表示画面５２に含まれる、要素としての文字の書字方向が縦方向（すなわち、縦書き）である場合、再生用表示画面３８における文字表示領域も、同じ書字方向である縦方向に長い形状の領域とすることが好ましい。同様に、再生制御部６０Ｇは、取得部６０Ｃで取得した表示画面データ５０の表示画面５２に含まれる、要素としての文字の書字方向が横方向（すなわち、横書き）である場合、再生用表示画面３８における文字表示領域も、同じ書字方向である横方向に長い形状の領域とすることが好ましい。
Further, the
なお、複数の表示画面データ５０における、同じ表示タイミングに対応する表示画面５２に含まれる文字の書字方向が互いに異なる複数方向である場合、１つの書字方向（例えば、横書き）に統一して、要素としての文字を再生用表示画面３８に配置することが好ましい。
When the writing directions of the characters included in the
一方、再生制御部６０Ｇは、要素種類が図表、絵柄、動画、の何れかである場合、これらの要素（図表、絵柄、動画）に含まれる文字については、予め定めた文字サイズより大きく表示してもよい。そして、再生制御部６０Ｇは、要素種類が図表、絵柄、動画、の何れかである場合、これらの要素（図表、絵柄、動画）における、含まれる文字以外の要素領域については、予め定めた画像サイズより小さく表示するように再生制御する。本実施の形態では、要素種類が図表、絵柄、動画、の何れかである場合、再生制御部御６０Ｇは、このような再生制御を行う場合を一例として説明する。
On the other hand, when the element type is any of charts, patterns, and moving images, the
このとき、再生制御部６０Ｇは、図表、絵柄、動画、に含まれる文字以外の要素については、表示画面５２に表示されていた時のアスペクト比を維持し、且つ、表示時より小さく表示するように再生制御する。
At this time, the
このため、例えば、再生制御部６０Ｇは、取得部６０Ｃで取得した表示画面データ５０の表示画面５２に含まれる要素の要素種類が図表、絵柄、動画、の何れかである場合には、含まれる文字については元の表示時より大きいサイズで表示し、文字以外の部分については、アスペクト比を維持したまま表示時より小さいサイズで表示する。このとき、再生制御部６０Ｇは、図表、絵柄、および動画における文字以外の部分について、解像度を減らし且つサイズを小さく調整したサムネイル画像を生成し、再生用表示画面３８に配置してもよい。
Therefore, for example, the
なお、再生制御部６０Ｇは、要素種類が図表、絵柄、動画、の何れかである場合、文字が含まれるか否かに拘らず、文字を含むこれらの要素（図表、絵柄、動画）を、予め定めた画像サイズより小さく表示するように再生制御してもよい。
When the element type is any of a chart, a pattern, and a moving image, the
すなわち、再生制御部６０Ｇは、要素種類が図表、絵柄、動画、の何れかである場合、これらの要素に含まれる文字（図表、絵柄、動画）については、文字以外の要素領域（図表、絵柄、動画そのもの）と同じ画像サイズとなるように、小さく表示してもよい。
That is, when the element type is any of a chart, a pattern, and a moving image, the
なお、要素種類が図表、絵柄、動画、の何れかである場合、これらの要素に含まれる文字（図表、絵柄、動画）と、文字以外の要素領域（図表、絵柄、動画そのもの）と、の各々の表示時のサイズを示すパラメータを予め設定してもよい。このパラメータは、ユーザによる操作指示によって変更可能としてもよい。そして、再生制御部６０Ｇは、要素に含まれる文字（図表、絵柄、動画）と、文字以外の要素領域（図表、絵柄、動画そのもの）と、の各々の表示時のサイズを、パラメータに応じて調整してもよい。
When the element type is any of a chart, a pattern, and a moving image, the characters included in these elements (chart, pattern, moving image) and the element area other than the characters (chart, pattern, moving image itself) Parameters indicating the size of each display may be set in advance. This parameter may be changeable by an operation instruction by the user. Then, the
なお、再生制御部６０Ｇは、表示タイミングごとに、表示画面５０に含まれる要素を、特定した要素の要素種類に応じた再生形態で再生制御すればよい。この場合、再生制御部６０Ｇは、表示タイミングの各々に対応する再生用表示画面３８を生成し、該再生用表示画面３８を表示するように再生制御すればよい。
The
また、再生制御部６０Ｇは、トピック区間ごとに、表示画面データ５０に含まれる要素を、特定した要素の要素種類に応じた再生形態で再生制御してもよい。この場合、再生制御部６０Ｇは、トピック区間の各々に対応する再生用表示画面３８を生成し、該再生用表示画面３８の各々を表示するように再生制御すればよい。
Further, the
また、再生制御部６０Ｇは、表示画面データ５０に含まれる複数の表示画面５２に含まれる要素を、トピック区間ごとに、特定した要素種類および関連度に応じた再生形態で再生制御してもよい。
Further, the
例えば、再生制御部６０Ｇは、関連度が高いトピック区間の要素であるほど、より注視を促す再生形態で表示するように再生制御する。より注視を促す再生形態とは、例えば、より大きなサイズで表示、強調表示（太字、赤文字、点滅など）、などを示す。
For example, the
ここで、上述したように、取得部６０Ｃは、複数の表示画面データ５０を取得する。そこで、再生制御部６０Ｇは、表示画面５２に含まれる要素を、特定した要素種類および関連度に応じた再生形態で複数の表示画面データ５０ごとに配置した再生用表示画面３８を、トピック区間ごとに生成し、再生制御する。
Here, as described above, the
図１１は、再生用表示画面３８の一例を示す模式図である。なお、図１１は、図１０に示す表示画面データ５０Ａ〜５０Ｃ（図１０（Ｂ）〜図１０（Ｄ）参照）から生成した、再生用表示画面３８の一例を示す模式図である。
FIG. 11 is a schematic view showing an example of the
図１１（Ａ）は、“トピック１”のトピック区間に対応する再生用表示画面３８Ａの一例を示す模式図である。
FIG. 11A is a schematic view showing an example of the
図１０（Ｂ）に示すように、表示画面データ５０Ａにおける“トピック１”のトピック区間に含まれる要素５４Ａ１の要素種類は文字であり、関連度は“高”である。また、図１０（Ｃ）に示すように、表示画面データ５０Ｂにおける“トピック１”のトピック区間に含まれる要素５４Ｂ１の要素種類は図表であり、関連度は“中”である。なお、要素５４Ｂ１の図表には、文字“ＸＸ年”が含まれている。また、図１０（Ｄ）に示すように、表示画面データ５０Ｃにおける“トピック１”のトピック区間に含まれる要素５４Ｃ１の要素種類は文字であり、関連度は“低”である。
As shown in FIG. 10B, the element type of the element 54A1 included in the topic section of the "
この場合、再生制御部６０Ｇは、これらの表示画面データ５０Ａ〜５０Ｃにおける、“トピック１”のトピック区間に対応する再生用表示画面３８として、図１１（Ａ）に示す再生用表示画面３８Ａを生成する。
In this case, the
詳細には、再生制御部６０Ｇは、表示画面データ５０Ａにおける“トピック１”のトピック区間の要素５４Ａ１である文字を（図１０（Ｂ）参照）、表示画面５２Ａ１における文字サイズより大きい文字で、再生用表示画面３８Ａにおける文字表示領域３９Ａ１に配置する（図１１（Ａ）参照）。また、再生制御部６０Ｇは、該要素５４Ａ１の関連度が“高”であることから（図１０（Ｂ）参照）、要素５４Ａ１に対応する文字を、強調文字、例えば、太字で文字表示領域３９Ａ１に配置する（図１１（Ａ）参照）。
Specifically, the
また、再生制御部６０Ｇは、表示画面データ５０Ｂにおける“トピック１”のトピック区間の要素５４Ｂ１である図表について（図１０（Ｃ）参照）、含まれる文字“ＸＸ年”については、表示画面５２Ｂ１における文字サイズより大きい文字で、再生用表示画面３８Ａにおける図表領域３９Ｂ１に配置する（図１１（Ａ）参照）。また、再生制御部６０Ｇは、該図表における文字以外の要素領域（すなわち、図表そのもの）については、表示画面５２Ｂ（図１０（Ｃ）参照）に表示されていた時のアスペクト比を維持し、且つ、該表示時より小さいサイズに調整し、再生用表示画面３８Ａにおける図表領域３９Ｂ１に配置する（図１１（Ａ）参照）。
Further, the
また、再生制御部６０Ｇは、該要素５４Ｂ１の関連度が“中”であることから（図１０（Ｃ）参照）、要素５４Ｂ１に対応する図表および文字を、関連度“高”より注視を促さず、且つ、関連度“低”より注視を促す再生形態で、図表表示領域３９Ｂ１に配置する（図１１（Ａ）参照）。
Further, since the
さらに、再生制御部６０Ｇは、表示画面データ５０Ｃにおける“トピック１”のトピック区間の要素５４Ｃ１である文字を（図１０（Ｄ）参照）、表示画面５２Ｃ１における文字サイズより大きい文字で、再生用表示画面３８Ａにおける文字表示領域３９Ｃ１に配置する（図１１（Ａ）参照）。
Further, the
また、再生制御部６０Ｇは、該要素５４Ｃ１の関連度が“低”であることから（図１０（Ｄ）参照）、要素５４Ｃ１に対応する文字３９Ｃ１を、関連度“高”の文字表示領域３９Ａ１より狭い文字表示領域３９Ｃ１に、該関連度“高”の文字に比べて小さい文字サイズで、配置する。
Further, since the
これにより、再生制御部６０Ｇは、トピック区間“トピック１”に対応する再生用表示画面３８Ａを生成する。なお、図１１に示すように、再生制御部６０Ｇは、要素を、要素種類ごとにまとめて再生用表示画面３８に配置する。例えば、再生制御部６０Ｇは、要素種類“文字”の要素を、再生用表示画面３８における上部に配置し、要素種類“図表”や“動画”の要素を、再生用表示画面３８における下部の領域に配置する。
As a result, the
トピック区間“トピック２”についても同様に、再生制御部６０Ｇは、再生用表示画面３８Ｂを生成する（図１１（Ｂ））。
Similarly, for the topic section “
図１１（Ｂ）は、“トピック２”のトピック区間に対応する再生用表示画面３８Ｂの一例を示す模式図である。
FIG. 11B is a schematic view showing an example of the
図１０（Ｂ）に示すように、表示画面データ５０Ａにおける“トピック２”のトピック区間に含まれる要素５４Ａ２の要素種類は文字であり、関連度は“中”である。また、図１０（Ｃ）に示すように、表示画面データ５０Ｂにおける“トピック２”のトピック区間に含まれる要素５４Ｂ２の要素種類は文字であり、関連度は“高”である。また、図１０（Ｄ）に示すように、表示画面データ５０Ｃにおける“トピック１”のトピック区間に含まれる要素５４Ｃ２の要素種類は動画であり、関連度は“高”である。
As shown in FIG. 10B, the element type of the element 54A2 included in the topic section of the "
この場合、再生制御部６０Ｇは、これらの表示画面データ５０Ａ〜５０Ｃにおける、“トピック２”のトピック区間に対応する再生用表示画面３８として、図１１（Ｂ）に示す再生用表示画面３８Ｂを生成する。
In this case, the
詳細には、再生制御部６０Ｇは、表示画面データ５０Ａにおける“トピック２”のトピック区間の要素５４Ａ２である文字を（図１０（Ｂ）参照）、表示画面５２Ａ２における文字サイズより大きい文字で、再生用表示画面３８Ｂにおける文字表示領域３９Ａ２に配置する（図１１（Ｂ）参照）。また、再生制御部６０Ｇは、該要素５４Ａ２の関連度が“中”であることから（図１０（Ｂ）参照）、要素５４Ａ２に対応する文字を、例えば、強調を解除し、且つ、関連度“高”のときより小さい文字サイズで、文字表示領域３９Ａ２に配置する（図１１（Ｂ）参照）。
Specifically, the
また、再生制御部６０Ｇは、表示画面データ５０Ｂにおける“トピック２”のトピック区間の要素５４Ｂ２である文字を（図１０（Ｃ）参照）、表示画面５２Ｂ２における文字サイズより大きい文字で、再生用表示画面３８Ｂにおける文字表示領域３９Ｂ２に配置する（図１１（Ｂ）参照）。
Further, the
また、再生制御部６０Ｇは、該要素５４Ｂ２の関連度が“高”であることから（図１０（Ｃ）参照）、要素５４Ｂ２に対応する文字を、関連度“中”の文字表示領域３９Ｃ１（図１０（Ａ）参照）より広い文字表示領域３９Ｂ２に配置する（図１１（Ｂ）参照）。
Further, since the
また、再生制御部６０Ｇは、表示画面データ５０Ｃにおける“トピック２”のトピック区間の要素５４Ｃ２である動画について（図１０（Ｄ）参照）、該動画を、表示画面５２Ｃ２（図１０（Ｄ）参照）に表示されていた時のアスペクト比を維持し、且つ、該表示時より小さいサイズに調整した要素を、再生用表示画面３８Ｂにおける動画表示領域３９Ｃ２に配置する（図１１（Ｂ）参照）。
Further, the
また、再生制御部６０Ｇは、該要素５４Ｃ２の関連度が“高”であることから（図１０（Ｄ）参照）、要素５４Ｃ２に対応する動画像を、関連度“中”より注視を促す再生形態で、動画表示領域３９Ｃ２に配置する。
Further, since the
これにより、再生制御部６０Ｇは、トピック区間“トピック２”に対応する再生用表示画面３８Ｂを生成する。
As a result, the
同様にして、再生制御部６０Ｇは、表示画面データ５０における各トピック区間の各々に対応する、再生用表示画面３８を生成する。そして、再生制御部６０Ｇは、生成した再生用表示画面３８のデータを、再生対象の装置（例えば、端末装置１４）へ送信し、該再生用表示画面３８を再生するように再生制御する。
Similarly, the
このため、端末装置１４には、過去に表示された表示画面５２を後から再生するときには、含まれる要素を要素種類に応じた再生形態で表示した再生用表示画面３８が表示される。
Therefore, when the
なお、端末装置１４は、例えば、専用のアプリケーションを用いて、情報処理装置１０から配信された再生用表示画面３８を表示部６８Ａへ再生すればよい。
The
次に、本実施の形態の情報処理システム１０００で行われる情報処理の流れの一例を説明する。
Next, an example of the flow of information processing performed by the
まず、授業の開始時に、複数の端末装置１４および共通表示装置１２の各々で資料データ３２の表示および表示領域情報３６の記録を開始する時に実行される、シーケンスの一例を説明する。図１２は、端末装置１４の各々において表示領域情報３６の記録を開始するときに、情報処理システム１０００で実行される記録開始処理の流れの一例を示す、シーケンス図である。
First, an example of a sequence executed when the display of the
例えば、情報処理システム１０００における複数の端末装置１４の内の１つを操作するユーザＡが端末装置１４Ａを操作し、専用アプリケーションを介して、記録開始指示を入力する（ＳＥＱ１００）。すると、端末装置１４Ａは、記録開始指示を示す信号を情報処理装置１０へ送信する（ＳＥＱ１０２）。
For example, the user A who operates one of the plurality of
情報処理装置１０は、記録開始指示を示す信号の送信元の端末装置１４Ａの参加中の授業（以下、ディスカッションまたはセッションと称する場合がある）が有る場合には、セッションの二重オープンを禁止するため、情報処理装置１０は、エラーを示す信号を端末装置１４Ａへ返信する。一方、情報処理装置１０は、記録開始指示を示す信号の送信元の端末装置１４Ａの参加中のディスカッションが無い場合には、新たなセッションをオープンにする（ＳＥＱ１０４）。
The
そして、情報処理装置１０は、共通表示装置１２および端末装置１４Ａへ、セッションオープンを示す信号を送信する（ＳＥＱ１０６，ＳＥＱ１０８，ＳＥＱ１１０，ＳＥＱ１１２）。
Then, the
次に、情報処理装置１０は、当該情報処理装置１０において、ＳＥＱ１０４より前にオープンにしていたセッションを初期化し、新たなセッションを開始可能な状態とする（ＳＥＱ１１４）。そして、情報処理装置１０は、共通表示装置１２および端末装置１４Ａについても同様に、ＳＥＱ１０４より前にオープンにしていたセッションを初期化し、新たなセッションを開始可能な状態とするための初期化を示す信号を、共通表示装置１２および端末装置１４Ａへ送信する（ＳＥＱ１１６，ＳＥＱ１２０）。共通表示装置１２および端末装置１４Ａの各々は、ＳＥＱ１０４より前にオープンにしていたセッションを初期化し、新たなセッションを開始可能な状態とするための初期化を行う（ＳＥＱ１１８，ＳＥＱ１２２）。
Next, the
次に、オープン済みのディスカッションに端末装置１４を操作するユーザが参加する際に実行されるシーケンスの一例を説明する。図１３は、情報処理システム１０００においてオープン済みのディスカッションに、端末装置１４を操作するユーザが参加する際に実行される、記録開始処理の流れの一例を示す、シーケンス図である。
Next, an example of the sequence executed when the user who operates the
例えば、ユーザＢは、端末装置１４Ｂを操作することで、参加可能なディスカッションリストを要求するための操作指示を入力する（ＳＥＱ１４０）。すると、端末装置１４Ｂは、参加可能ディスカッションリスト要求を示す信号を情報処理装置１０へ送信する（ＳＥＱ１４２）。情報処理装置１０は、ＳＥＱ１４２で受信した信号に対する応答として、端末装置１４Ｂへ、端末装置１４Ｂの参加可能なディスカッションリストを送信する（ＳＥＱ１４４）。参加可能なディスカッションリストとは、現在オープンな状態とされているディスカッションの一覧を示す。
For example, the user B inputs an operation instruction for requesting a discussion list that can be participated in by operating the
端末装置１４Ｂは、受信した参加可能ディスカッションリストを操作パネル６８へ表示し（ＳＥＱ１４６）、ユーザＢに対して応答を促すメッセージを出力する（ＳＥＱ１４８）。
The
ユーザＢは端末装置１４Ｂの操作パネル６８を操作することで、参加対象のディスカッションを選択する（ＳＥＱ１５０）。端末装置１４Ｂは、操作パネル６８から受付けた、選択されたディスカッションへの参加要求を表す、参加ディスカッション登録を示す信号を情報処理装置１０へ送信する（ＳＥＱ１５２）。
User B selects a discussion to participate in by operating the
情報処理装置１０は、該ディスカッションへの参加を許可する場合、ＯＫを示す応答を端末装置１４Ｂへ送信する（ＳＥＱ１５４）。すると、端末装置１４Ｂは、ＳＥＱ１５２で要求したセッションをオープンにし（ＳＥＱ１５６）、該ＳＥＱ１５６より前にオープンにしていた他のセッションを初期化し、ＳＥＱ１５６でオープンにした新たなセッションを開始可能な状態とするための初期化を行う（ＳＥＱ１５８）。そして、端末装置１４Ｂは、ユーザＢに対してディスカッションへの参加が許可されたことを示す、ＯＫ応答を出力する（ＳＥＱ１６０）。
When permitting participation in the discussion, the
このようにして、情報処理装置１０は、新たにセッションに参加する端末装置１４を、順次登録していく。
In this way, the
次に、セッションの終了時に、情報処理システム１０００で実行される処理の一例を説明する。図１４は、セッションの終了時に、情報処理システム１０００で実行される処理の一例を示す、シーケンス図である。
Next, an example of the processing executed by the
例えば、情報処理システム１０００における複数の端末装置１４の内の１つを操作するユーザＡが端末装置１４Ａを操作し、専用アプリケーションを介して、記録終了指示を入力する。すると、情報処理装置１０へ、記録終了指示を示す信号が送信される（ＳＥＱ１７０）。
For example, the user A who operates one of the plurality of
情報処理装置１０は、受信した信号によって示されるセッションをクローズする（ＳＥＱ１７２）。また、情報処理装置１０は、該セッションに参加中の共通表示装置１２および端末装置１４（端末装置１４Ａ、端末装置１４Ｂ）に対して、セッションのクローズを示す信号を送信する（ＳＥＱ１７４〜ＳＥＱ１８４）。これにより、ユーザＡによって指示されたセッションがクローズされる。
The
次に、セッションがクローズしたとき、すなわち、授業や会議が終了したときに、情報処理システム１０００で実行される処理の一例を説明する。図１５は、セッションがクローズしたときに、情報処理システム１０００で実行される処理の一例を示す、シーケンス図である。
Next, an example of the processing executed by the
情報処理装置１０は、セッションがクローズされると、参加していた端末装置１４の各々に対して、該セッションの資料表示データ３０の要求を示す信号を送信する（ＳＥＱ１９０，ＳＥＱ１９２）。該信号を受信した端末装置１４の各々は、参加していたセッションの資料表示データ３０を、情報処理装置１０へ送信する（ＳＥＱ１９１，ＳＥＱ１９３）。また、情報処理装置１０は、共通表示装置１２へ、該セッションで提供した共通提供データ３１の要求を示す信号を送信する（ＳＥＱ１９４）。該信号を受信した共通表示装置１２は、参加していたセッションの共通提供データ３１を、情報処理装置１０へ送信する（ＳＥＱ１９６）。
When the session is closed, the
情報処理装置１０は、共通表示装置１２から取得した共通提供データ３１と、端末装置１４の各々から受信した資料表示データ３０と、を用いて、端末装置１４の各々に表示された表示画面５２を後から再生するときの、再生用表示画面３８を生成し、再生制御を行う。
The
図１６は、端末装置１４Ａを操作するユーザＡが、あるディスカッションにおいて端末装置１４の各々に表示された表示画面５２を確認するときに、情報処理システム１０００で実行される処理の一例を示す、シーケンス図である。
FIG. 16 is a sequence showing an example of processing executed by the
例えば、ユーザＡは、端末装置１４Ａの操作パネル６８を操作することで、ディスカッションの振り返りを操作指示する（ＳＥＱ２００）。すると、端末装置１４Ａは、振り返りのためのディスカッションリストの要求を示す信号を、情報処理装置１０へ送信する（ＳＥＱ２０２）。
For example, the user A operates the
情報処理装置１０は、ＳＥＱ２０２で受信した信号に対する応答として、端末装置１４Ａへ、端末装置１４Ａが参加したディスカッションリストを送信する（ＳＥＱ２０４）。
The
端末装置１４Ａは、受信したディスカッションリストを操作パネル６８へ表示し（ＳＥＱ２０６）、ユーザＡに対して応答を促すメッセージを出力する。
The
ユーザＡは端末装置１４Ａの操作パネル６８を操作することで、振り返り対象のディスカッションを選択する（ＳＥＱ２０８）。端末装置１４Ａは、操作パネル６８から受付けた、選択されたディスカッションの識別情報（ディスカッションＩＤ）を、情報処理装置１０へ送信する（ＳＥＱ２１０）。
User A selects a discussion to be reviewed by operating the
情報処理装置１０は、該ディスカッションＩＤによって識別されるディスカッションのユーザＡによる振り返りを許可する場合、ＯＫを示す応答を端末装置１４Ａへ送信する（ＳＥＱ２１２）。すると、端末装置１４Ａを操作するユーザは、操作パネル６８を操作することで、ＳＥＱ２０８で指定したディスカッションＩＤのディスカッションに対応する再生用表示画面３８のデータ要求を指示する（ＳＥＱ２１４）。
When the
端末装置１４Ａは、再生用表示画面３８のデータ要求を示す信号を、情報処理装置１０へ送信する（ＳＥＱ２１６）。情報処理装置１０は、ＳＥＱ２１０で受信したディスカッションＩＤによって識別されるディスカッションで用いた、資料表示データ３０および共通提供データ３１を用いて、再生用表示画面３８を生成する（ＳＥＱ２１８）。
The
そして、情報処理装置１０は、生成した再生用表示画面３８のデータを、端末装置１４Ａへ送信する（ＳＥＱ２２０）。端末装置１４Ａは、受信した再生用表示画面３８を操作パネル６８へ表示する（ＳＥＱ２２４）。
Then, the
次に、端末装置１４および情報処理装置１０の各々で実行する、情報処理の手順の一例を説明する。
Next, an example of the information processing procedure executed by each of the
図１７は、セッション参加時に端末装置１４の制御部６４が実行する、情報処理の手順の一例を示すフローチャートである。
FIG. 17 is a flowchart showing an example of an information processing procedure executed by the
まず、端末装置１４の受付部６４Ｅが、制御部６４から表示対象の資料データ３２の指定を受付けたか否かを判断する（ステップＳ３００）。ステップＳ３００で否定判断すると（ステップＳ３００：Ｎｏ）、本ルーチンを終了する。ステップＳ３００で肯定判断すると（ステップＳ３００：Ｙｅｓ）、ステップＳ３０２へ進む。
First, it is determined whether or not the reception unit 64E of the
ステップＳ３０２では、受付部６４Ｅは、ステップＳ３００で受付けた資料データ３２の資料ＩＤを、該セッションで表示した資料データ３２の識別情報として記憶部６６へ記憶する（ステップＳ３０２）。
In step S302, the reception unit 64E stores the material ID of the
次に、表示制御部６４Ｄは、ステップＳ３００で受付けた資料データ３２の一部の領域を、表示画面５２として表示部６８Ａへ表示する（ステップＳ３０４）。そして、表示制御部６４Ｄは、ステップＳ３０４で表示した表示画面５２に対応する表示領域３４の表示領域情報３６を、該表示画面５２の表示タイミングと、ステップＳ３０２で記憶した資料ＩＤと、に対応付けて、記憶部６６へ記憶する（ステップＳ３０６）。
Next, the display control unit 64D displays a part of the area of the
次に、受付部６４Ｅが、該資料データ３２における表示対象の表示領域３４の変更指示を、操作受付部６８Ｂから受付けたか否かを判断する（ステップＳ３０８）。ステップＳ３０８で否定判断すると（ステップＳ３０８：Ｎｏ）、後述するステップＳ３１４へ進む。
Next, the reception unit 64E determines whether or not the instruction to change the display area 34 to be displayed in the
一方、ステップＳ３０８で肯定判断すると（ステップＳ３０８：Ｙｅｓ）、ステップＳ３１０へ進む。ステップＳ３１０では、表示制御部６４Ｄは、ステップＳ３０８で受付けた変更指示によって変更された、変更後の表示領域３４の表示画面５２を、表示部６８Ａへ表示する（ステップＳ３１０）。
On the other hand, if an affirmative determination is made in step S308 (step S308: Yes), the process proceeds to step S310. In step S310, the display control unit 64D displays the
そして、表示制御部６４Ｄは、ステップＳ３１０で表示した表示画面５２に対応する表示領域３４の表示領域情報３６を、該表示画面５２の表示タイミングと、ステップＳ３０２で記憶した資料ＩＤと、に対応付けて、記憶部６６へ記憶する（ステップＳ３１２）。
Then, the display control unit 64D associates the
次に、ステップＳ３１４では、受付部６４Ｅが、ステップＳ３０２で記憶した資料ＩＤによって識別される資料データ３２の表示を終了するか否かを判断する（ステップＳ３１４）。例えば、受付部６４Ｅは、操作受付部６８Ｂから資料データ３２の表示終了を示す指示信号を受付けたか否かを判別することで、ステップＳ３１４の判断を行う。
Next, in step S314, the reception unit 64E determines whether or not to end the display of the
ステップＳ３１４で否定判断すると（ステップＳ３１４：Ｎｏ）、上記ステップＳ３０８へ戻る。一方、ステップＳ３１４で肯定判断すると（ステップＳ３１４：Ｙｅｓ）、本ルーチンを終了する。 If a negative determination is made in step S314 (step S314: No), the process returns to step S308. On the other hand, if an affirmative judgment is made in step S314 (step S314: Yes), this routine ends.
端末装置１４がステップＳ３００〜ステップＳ３１４の処理を実行することによって、端末装置１４は、ディスカッション中に表示された資料データ３２と、ディスカッション中の表示タイミングの各々に表示部６８Ａに表示された、表示画面５２に対応する資料データ３２における表示領域３４を示す表示領域情報３６と、を含む資料表示データ３０が作成される。そして、情報処理装置１０からの資料表示データ３０の要求を示す信号に応じて、端末装置１４は、資料表示データ３０を情報処理装置１０へ送信する。
When the
次に、情報処理装置１０で実行する情報処理の手順の一例を説明する。
Next, an example of the information processing procedure executed by the
図１８は、情報処理装置１０で実行する情報処理の手順の一例を示す、フローチャートである。
FIG. 18 is a flowchart showing an example of the information processing procedure executed by the
まず、情報処理装置１０の受信部６０Ｈが、複数の端末装置１４の各々から資料表示データ３０を受信する（ステップＳ５００）。制御部６０は、ステップＳ５００で受信した資料表示データ３０を、オープン中のディスカッションのディスカッションＩＤに対応付けて、記憶部６２へ記憶する（ステップＳ５０２）。
First, the receiving unit 60H of the
次に、情報処理装置１０の取得部６０Ｃが、ステップＳ５００で取得した資料表示データ３０に基づいて、表示画面データ５０を取得する（ステップＳ５０４）。上述したように、取得部６０Ｃは、資料表示データ３０に含まれる、資料データ３２と、表示タイミングの各々に対応する表示領域情報３６と、を用いて、表示画面データ５０（図４（Ｃ）参照）を生成する。
Next, the
次に、特定部６０Ｄが、ステップＳ５０４で取得した表示画面データ５０によって示される表示画面５２に含まれる、要素の要素種類を特定する（ステップＳ５０６）。本実施の形態では、特定部６０Ｄは、表示画面データ５０に含まれる、表示タイミングの各々に対応する表示画面５２の各々について、含まれる要素の要素種類を特定する。
Next, the specifying
次に、取得部６０Ｃが、受信部６０Ｈを介して共通表示装置１２から、共通提供データ３１を取得する（ステップＳ５０８）。
Next, the
そして、分割部６０Ｅが、ステップＳ５０８で取得した共通提供データ３１を用いて、ディスカッションの期間（授業時間）に相当する表示期間Ｔを、複数のトピック区間に分割する（ステップＳ５１０）。
Then, the
次に、算出部６０Ｆが、ステップＳ５０４で取得した表示画面データ５０における、ステップＳ５１０で分割されたトピック区間ごとに、共通提供データ３１における対応するトピック区間のトピックとの関連度を算出する（ステップＳ５１２）。
Next, the calculation unit 60F calculates the degree of relevance to the topic of the corresponding topic section in the common provided
次に、再生制御部６０Ｇが、ステップＳ５０４で取得した表示画面データ５０を構成する表示画面５２に含まれる要素を、トピック区間ごとに、要素種類および関連度に応じた再生形態で示す再生用表示画面３８を生成する（ステップＳ５１４）。そして、再生制御部６０Ｇは、ステップＳ５１４で生成した再生用表示画面３８を、ディスカッションを振り返ることを所望するユーザの操作する端末装置１４へ配信する（ステップＳ５１６）。再生用表示画面３８を受信した端末装置１４は、表示部６８Ａに再生用表示画面３８を表示する。これによって、再生制御部６０Ｇは、表示画面データ５０の表示画面５２に含まれる要素を、特定部６０Ｄで特定した要素種類に応じた再生形態で再生制御する。そして、本ルーチンを終了する。
Next, the
以上説明したように、本実施の形態の情報処理装置１０は、取得部６０Ｃと、特定部６０Ｄと、再生制御部６０Ｇと、を備える。取得部６０Ｃは、表示された表示画面５２を示す表示画面データ５０を取得する。特定部６０Ｄは、表示画面データ５０によって示される表示画面５２に含まれる要素の要素種類を特定する。再生制御部６０Ｇは、表示画面５２に含まれる要素を、特定した要素種類に応じた再生形態で再生制御する。
As described above, the
このように、本実施の形態の情報処理装置１０は、表示された表示画面５２について、含まれる要素を要素種類に応じた再生形態で再生制御する。すなわち、本実施の形態の情報処理装置１０は、表示された表示画面の縮小や低解像度化を行うこと無く、また、表示画面をそのまま再生用として用いるのではなく、表示画面に含まれる要素について、要素種類に応じた再生形態で再生制御する。このため、本実施の形態の情報処理装置１０は、過去に表示された表示画面５２に示された内容を一見して把握可能に提供することができる。
As described above, the
従って、本実施の形態の情報処理装置１０は、表示された表示画面５２の再生時の視認性向上を図ることができる。
Therefore, the
例えば、ユーザが端末装置１４を用いて資料を参照しながら授業や会議に参加した後に、授業中や会議中に表示していた表示画面５２を後から確認することを所望する場合がある。本実施の形態の情報処理装置１０は、授業中や会議中に表示していた表示画面５２に含まれる要素について、要素種類に応じた再生形態で再生制御する。このため、ユーザは、要素種類に応じた再生形態で再生された要素を視認することで、再生内容の特定の部分を大きく表示させるための特定の操作指示などを行うことなく、授業や会議中に表示された内容を容易に確認することができる。
For example, after a user participates in a lesson or a conference while referring to materials using the
このため、本実施の形態の情報処理装置１０は、過去に表示された表示画面５２の再生時の視認性向上を図ることができる。
Therefore, the
また、要素種類は、文字、絵柄、動画、および図表、の少なくとも１つである。 Further, the element type is at least one of a character, a pattern, a moving image, and a chart.
また、再生制御部６０Ｇは、要素を、要素種類に応じた表示サイズ、形、色、配置位置、の少なくとも１つによって規定される再生形態で再生制御する。
Further, the
再生時の文字の文字サイズは、判読のしやすさに大きな影響を与える。本実施の形態では、再生制御部６０Ｇは、要素種類が文字である場合、該文字が予め定めた文字サイズより大きく表示されるように再生制御する。このため、本実施の形態の情報処理装置１０は、上記効果に加えて、更に、表示された表示画面５２の再生時の視認性向上を図ることができる。
The character size of characters during playback has a great effect on readability. In the present embodiment, when the element type is a character, the
要素種類が図表、絵柄、および動画の何れかである場合、アスペクト比を変更すると判読性が低下する場合がある。また、図表、絵柄、および動画に含まれる文字の文字サイズを小さくして再生すると、判読性が低下する場合がある。一方、図表、絵柄、および動画における、文字以外の要素領域（すなわち、図表、絵柄、動画そのもの）については、サイズを小さくしたり低解像度化したりしても、判読性に与える影響は少ない場合が多い。 If the element type is any of charts, patterns, and moving images, changing the aspect ratio may reduce readability. In addition, if the character size of the characters included in the chart, the pattern, and the moving image is reduced and reproduced, the legibility may be deteriorated. On the other hand, in the element areas other than characters (that is, the chart, the pattern, and the moving image itself) in the chart, the picture, and the moving image, even if the size is reduced or the resolution is lowered, the readability may not be affected. There are many.
そこで、再生制御部６０Ｇは、要素種類が、図表、絵柄、および動画、の何れかである場合、含まれる文字を予め定めた文字サイズより大きく表示し、含まれる文字以外の要素領域を予め定めた画像サイズより小さく表示するように再生制御する。
Therefore, when the element type is any of a chart, a pattern, and a moving image, the
また、再生制御部６０Ｇは、要素種類が図表、絵柄、および動画の何れかである場合、含まれる文字以外の要素領域を表示時のアスペクト比を維持し、且つ、予め定めた画像サイズより小さく表示するように再生制御する。
Further, when the element type is any of a chart, a pattern, and a moving image, the
このため、本実施の形態の情報処理装置１０は、上記効果に加えて、更に、表示された表示画面５２の再生時の視認性向上を図ることができる。
Therefore, in addition to the above effects, the
特定部６０Ｄは、表示画面５２の一部の領域である一部領域（注目領域Ｅ）に含まれる要素の要素種類を特定する。
The
ユーザの視線の向き易い領域（例えば、表示画面５２の中央を含む領域）を、注目領域Ｅとして設定することで、特定部６０Ｄは、表示画面５２における、ユーザの注視していた可能性の高い領域に含まれる要素の要素種類を、選択的に特定することができる。また、特定部６０Ｄによる特定精度の向上および特定時間の短縮を図ることもできる。
By setting the area in which the user's line of sight is easily directed (for example, the area including the center of the display screen 52) as the area of interest E, it is highly possible that the
取得部６０Ｃは、資料データ３２と、資料データ３２における表示領域３４を示す表示領域情報３６と、を含む資料表示データ３０に基づいて、資料データ３２における、表示領域情報３６によって示される表示領域３４を表示画面５２として抽出した、表示画面データ５０を取得する。
The
取得部６０Ｃは、表示画面データ５０と、表示画面データ５０によって示される表示画面５２の表示タイミングと、を取得する。再生制御部６０Ｇは、表示タイミングごとに、表示画面５２に含まれる要素を、特定した要素種類に応じた再生形態で再生制御する。
The
表示画面データ５０は、表示された表示タイミングの異なる複数の表示画面５２を時系列に配列してなる。分割部６０Ｅは、複数の表示画面５２の表示期間Ｔを、表示期間Ｔに提供された共通提供データ３１に基づいて、提供されたトピック毎に複数のトピック区間に分割する。算出部６０Ｆは、表示画面データ５０におけるトピック区間ごとに、共通提供データ３１における対応するトピック区間のトピックとの関連度を算出する。再生制御部６０Ｇは、表示画面データ５０に含まれる複数の表示画面５２に含まれる要素を、トピック区間ごとに、特定した要素種類および関連度に応じた再生形態で再生制御する。
The
取得部６０Ｃは、複数の表示画面データ５０を取得する。再生制御部６０Ｇは、表示画面５２に含まれる要素を、特定した要素種類および関連度に応じた再生形態で表示画面データ５０ごとに配置した再生用表示画面３８を、トピック区間ごとに生成し、再生用表示画面３８を再生制御する。
The
再生制御部６０Ｇは、表示画面データ５０における、関連度の高いトピック区間に含まれる要素ほど、より注視を促す再生形態で再生用表示画面３８に配置する。
The
本実施の形態の情報処理システム１０００は、情報処理装置１０と、情報処理装置１０と通信する端末装置１４と、を備える。端末装置１４の表示制御部６４Ｄは、表示画面５２を表示部６８Ａ（表示部２９Ｂ）に表示する。端末装置１４の送信部６４Ｃは、表示画面５２を示す表示画面データ５０を情報処理装置１０へ送信する。情報処理装置１０の取得部６０Ｃは、表示画面データ５０を取得する。特定部６０Ｄは、表示画面データ５０によって示される表示画面５２に含まれる要素の要素種類を特定する。再生制御部６０Ｇは、表示画面５２に含まれる要素を、特定した要素種類に応じた再生形態で再生制御する。
The
本実施の形態の情報処理プログラムは、表示された表示画面５２を示す表示画面データ５０を取得するステップと、表示画面データ５０によって示される表示画面５２に含まれる要素の要素種類を特定するステップと、表示画面５２に含まれる要素を、特定した要素種類に応じた再生形態で再生制御するステップと、をコンピュータに実行させるための情報処理プログラムである。
The information processing program of the present embodiment includes a step of acquiring
なお、上記実施の形態では、情報処理装置１０が要素種類を特定する特定部６０Ｄを備えた構成を説明した。しかし、特定部６０Ｄを、端末装置１４側に搭載してもよい。
In the above embodiment, the configuration in which the
この場合、端末装置１４に搭載された特定部６０Ｄは、新たな表示領域３４がユーザによって指定される毎に、表示領域３４によって示される表示画面５２に含まれる要素の要素種類を特定してもよい。また、端末装置１４に搭載された特定部６０Ｄは、１つのディスカッションが終了するごとに、情報処理装置１０と同様に、表示タイミングの各々に対応する表示画面５２に含まれる要素の要素種類を特定してもよい。
In this case, the
なお、上述した実施の形態における、情報処理装置１０、共通表示装置１２、および端末装置１４の各々で実行する上記処理を実行するためのプログラムは、インストール可能な形式または実行可能な形式のファイルでＣＤ−ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ−Ｒ、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｋ）、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）メモリ等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよいし、インターネット等のネットワーク経由で提供または配布するように構成してもよい。また、各種プログラムを、ＲＯＭ等に予め組み込んで提供するように構成してもよい。
The program for executing the above processing executed by each of the
また、上述した実施の形態における、情報処理装置１０、共通表示装置１２、および端末装置１４の各々で実行されるプログラムは、上記各機能部を含むモジュール構成となっており、実際のハードウェアとしては、例えば、ＣＰＵ２５（プロセッサ回路）がＲＯＭ２６またはＨＤＤ２８からプログラムを読み出して実行することにより、上述した各機能部がＲＡＭ２７（主記憶）上にロードされ、上述した各機能部がＲＡＭ２７（主記憶）上に生成されるようになっている。
Further, the program executed by each of the
なお、上記には、実施の形態を説明したが、上記実施の形態は、例として提示したものであり、発明の範囲を限定することは意図していない。上記新規な実施の形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。上記実施の形態は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。 Although the embodiment has been described above, the embodiment is presented as an example and is not intended to limit the scope of the invention. The above-mentioned novel embodiment can be implemented in various other forms, and various omissions, replacements, and changes can be made without departing from the gist of the invention. The above-described embodiment is included in the scope and gist of the invention, and is also included in the scope of the invention described in the claims and the equivalent scope thereof.
１０００ 情報処理システム
１０ 情報処理装置
１４ 端末装置
６０Ｃ 取得部
６０Ｄ 特定部
６０Ｅ 分割部
６０Ｆ 算出部
６０Ｇ 再生制御部
６４Ｂ 受信部
６４Ｃ 送信部
６４Ｄ 表示制御部
６８Ａ 表示部
1000
Claims (13)
前記表示画面データによって示される前記表示画面に含まれる要素の要素種類を特定する特定部と、
前記表示画面に含まれる前記要素を、特定した前記要素種類に応じた再生形態で再生制御する再生制御部と、
を備える、情報処理装置。 A display screen obtained by extracting the display area indicated by the display area information in the material data as a display screen based on the material display data including the material data and the display area information indicating the display area in the material data. The acquisition department that acquires data and
A specific unit that specifies the element type of the element included in the display screen indicated by the display screen data, and a specific unit.
A reproduction control unit that controls reproduction of the element included in the display screen in a reproduction form corresponding to the specified element type.
Information processing device equipped with.
請求項１または請求項２に記載の情報処理装置。 The reproduction control unit regenerates and controls the element in the reproduction mode defined by at least one of a display size, a shape, a color, and an arrangement position according to the element type.
The information processing device according to claim 1 or 2.
前記要素種類が文字である場合、該文字が予め定めた文字サイズより大きく表示されるように再生制御する、請求項１〜請求項３の何れか１項に記載の情報処理装置。 The reproduction control unit
The information processing apparatus according to any one of claims 1 to 3, wherein when the element type is a character, reproduction control is performed so that the character is displayed larger than a predetermined character size.
前記要素種類が、図表、絵柄、および動画、の何れかである場合、含まれる文字を予め定めた文字サイズより大きく表示し、含まれる文字以外の要素領域を予め定めた画像サイズより小さく表示するように再生制御する、
請求項１〜請求項４の何れか１項に記載の情報処理装置。 The reproduction control unit
When the element type is any of a chart, a pattern, and a moving image, the included characters are displayed larger than the predetermined character size, and the element areas other than the included characters are displayed smaller than the predetermined image size. Playback control,
The information processing device according to any one of claims 1 to 4.
前記要素種類が図表、絵柄、および動画の何れかである場合、含まれる文字以外の要素領域を表示時のアスペクト比を維持し、且つ、予め定めた画像サイズより小さく表示するように再生制御する、
請求項１〜請求項５の何れか１項に記載の情報処理装置。 The reproduction control unit
When the element type is any of a chart, a pattern, and a moving image, playback control is performed so that the element area other than the contained characters is displayed with an aspect ratio at the time of display and displayed smaller than a predetermined image size. ,
The information processing device according to any one of claims 1 to 5.
前記表示画面データと、前記表示画面データによって示される前記表示画面の表示タイミングと、を取得し、
前記再生制御部は、
前記表示タイミングごとに、前記表示画面に含まれる前記要素を、特定した前記要素種類に応じた前記再生形態で再生制御する、
請求項１〜請求項７の何れか１項に記載の情報処理装置。 The acquisition unit
The display screen data and the display timing of the display screen indicated by the display screen data are acquired.
The reproduction control unit
At each display timing, the element included in the display screen is controlled to be reproduced in the reproduction mode according to the specified element type.
The information processing device according to any one of claims 1 to 7 .
当該情報処理装置は、
複数の前記表示画面の表示期間を、前記表示期間に提供された共通提供データに基づいて、提供されたトピック毎に複数のトピック区間に分割する分割部と、
前記表示画面データにおける前記トピック区間ごとに、前記表示画面に含まれる前記要素と、前記共通提供データにおける対応する前記トピック区間の前記トピックとの関連度を算出する算出部と、
を備え、
前記再生制御部は、
前記表示画面データに含まれる複数の前記表示画面に含まれる前記要素を、前記トピック区間ごとに、特定した前記要素種類および前記関連度に応じた前記再生形態で再生制御する、
請求項１〜請求項８の何れか１項に記載の情報処理装置。 The display screen data is formed by arranging a plurality of the display screens having different display timings in chronological order.
The information processing device
A division unit that divides the display period of the plurality of display screens into a plurality of topic sections for each provided topic based on the common provided data provided in the display period.
For each topic section in the display screen data, a calculation unit that calculates the degree of relevance between the element included in the display screen and the topic in the corresponding topic section in the commonly provided data.
With
The reproduction control unit
The elements included in the plurality of display screens included in the display screen data are reproduced and controlled in the reproduction mode according to the specified element type and the relevance degree for each topic section.
The information processing device according to any one of claims 1 to 8 .
複数の前記表示画面データを取得し、
前記再生制御部は、
前記表示画面に含まれる前記要素を、特定した前記要素種類および前記関連度に応じた前記再生形態で前記表示画面データごとに配置した再生用表示画面を、前記トピック区間ごとに生成し、前記再生用表示画面を再生制御する、
請求項９に記載の情報処理装置。 The acquisition unit
Acquire a plurality of the display screen data and
The reproduction control unit
A playback display screen in which the elements included in the display screen are arranged for each display screen data in the playback mode according to the specified element type and the degree of relevance is generated for each topic section, and the playback is performed. Playback control of the display screen for
The information processing device according to claim 9 .
前記表示画面データにおける、前記関連度の高い前記トピック区間に含まれる前記要素ほど、より注視を促す再生形態で前記再生用表示画面に配置する、請求項１０に記載の情報処理装置。 The reproduction control unit
The information processing apparatus according to claim 10 , wherein the element included in the topic section having a high degree of relevance in the display screen data is arranged on the reproduction display screen in a reproduction form that encourages more attention.
前記端末装置は、
資料データを表示部に表示する表示制御部と、
資料データと、前記資料データにおける表示領域を示す表示領域情報と、を含む資料表示データを前記情報処理装置へ送信する送信部と、
を備え、
前記情報処理装置は、
前記資料表示データに基づいて、前記資料データにおける、前記表示領域情報によって示される前記表示領域を前記表示画面として抽出した、前記表示画面データを取得する取得部と、
前記表示画面データによって示される前記表示画面に含まれる要素の要素種類を特定する特定部と、
前記表示画面に含まれる前記要素を、特定した要素種類に応じた再生形態で再生制御する再生制御部と、
を備える、
情報処理システム。 An information processing system including an information processing device and a terminal device that communicates with the information processing device.
The terminal device is
A display control unit that displays material data on the display unit,
A transmission unit that transmits material display data including material data and display area information indicating a display area in the material data to the information processing apparatus.
With
The information processing device
Based on the material display data, the acquisition unit for acquiring the display screen data obtained by extracting the display area indicated by the display area information in the material data as the display screen, and
A specific unit that specifies the element type of the element included in the display screen indicated by the display screen data, and a specific unit.
A playback control unit that controls playback of the element included in the display screen in a playback mode according to the specified element type.
To prepare
Information processing system.
前記表示画面データによって示される前記表示画面に含まれる要素の要素種類を特定するステップと、
前記表示画面に含まれる前記要素を、特定した要素種類に応じた再生形態で再生制御するステップと、
をコンピュータに実行させるための情報処理プログラム。 A display screen obtained by extracting the display area indicated by the display area information in the material data as a display screen based on the material display data including the material data and the display area information indicating the display area in the material data. Steps to get the data and
A step of specifying the element type of the element included in the display screen indicated by the display screen data, and
A step of controlling playback of the element included in the display screen in a playback mode according to the specified element type, and
An information processing program that allows a computer to execute.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016228181A JP6772782B2 (en) | 2016-11-24 | 2016-11-24 | Information processing equipment, information processing systems, and information processing programs |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016228181A JP6772782B2 (en) | 2016-11-24 | 2016-11-24 | Information processing equipment, information processing systems, and information processing programs |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2018084990A JP2018084990A (en) | 2018-05-31 |
| JP6772782B2 true JP6772782B2 (en) | 2020-10-21 |
Family
ID=62238376
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2016228181A Expired - Fee Related JP6772782B2 (en) | 2016-11-24 | 2016-11-24 | Information processing equipment, information processing systems, and information processing programs |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6772782B2 (en) |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3916124B2 (en) * | 2001-02-15 | 2007-05-16 | インターナショナル・ビジネス・マシーンズ・コーポレーション | Digital document browsing system, browser, digital document display method, program, and storage medium |
| JP2008027013A (en) * | 2006-07-19 | 2008-02-07 | Fuji Xerox Co Ltd | System for analyzing browsing degree of document element |
| JP5243365B2 (en) * | 2009-08-10 | 2013-07-24 | 日本電信電話株式会社 | CONTENT GENERATION DEVICE, CONTENT GENERATION METHOD, AND CONTENT GENERATION PROGRAM |
| JP5235240B1 (en) * | 2012-06-27 | 2013-07-10 | 楽天株式会社 | Information processing apparatus, information processing method, and information processing program |
-
2016
- 2016-11-24 JP JP2016228181A patent/JP6772782B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2018084990A (en) | 2018-05-31 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20160188125A1 (en) | Method to include interactive objects in presentation | |
| WO2018227761A1 (en) | Correction device for recorded and broadcasted data for teaching | |
| CN103607457B (en) | Take down notes processing method, device, terminal, server and system | |
| EP3788793A1 (en) | Interactive application adapted for use by multiple users via a distributed computer-based system | |
| Langlotz et al. | Audio stickies: visually-guided spatial audio annotations on a mobile augmented reality platform | |
| CN104639868B (en) | Technology for supporting meeting | |
| CN112286610A (en) | An interactive processing method, device, electronic device and storage medium | |
| US20170092253A1 (en) | Karaoke system | |
| JP7452299B2 (en) | Conversation support system, conversation support method and program | |
| JP2015106223A (en) | Content evaluation apparatus, system, server apparatus, and terminal apparatus | |
| JP2019101751A (en) | Information presentation device, information presentation system, information presentation method, and program | |
| JP2021039618A (en) | Information processing system, information processing device, information processing method and program | |
| JP2012178028A (en) | Album creation device, control method thereof, and program | |
| JP6850377B1 (en) | Information processing equipment, information processing methods and programs | |
| JP6772782B2 (en) | Information processing equipment, information processing systems, and information processing programs | |
| JP2021033361A (en) | Information processing equipment, information processing methods and information processing systems | |
| CN111033540B (en) | Method and system for streaming data over a network | |
| JP2018165871A (en) | Lesson system, lesson server, lesson support method, and lesson support program | |
| CN115951774A (en) | Virtual space control system, control method thereof, and computer-readable storage medium storing control program | |
| JP2018165978A (en) | Lesson system, lesson server, lesson support method, and lesson support program | |
| JP2008032787A (en) | Language learning system and program for language learning system | |
| WO2022145043A1 (en) | Video meeting evaluation terminal, video meeting evaluation system, and video meeting evaluation program | |
| JP7082440B1 (en) | Reading aloud data generation system | |
| US20220222295A1 (en) | Information processing apparatus, non-transitory computer readable medium storing information processing program, and information processing method | |
| JP2013183182A (en) | Conference system, minutes server, and minutes creation method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190903 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200623 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200707 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200820 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200901 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200914 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 6772782 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| LAPS | Cancellation because of no payment of annual fees |