JP6859743B2 - 端末装置、プログラム、データ表示方法 - Google Patents

Description

本発明は、端末装置、プログラム、及びデータ表示方法に関する。

インターネット等のネットワークを介して複数の端末装置がビデオ会議等を行う通信システムが知られている。このような通信システムでは、一方の端末装置が撮像した画像データ及び集音した音声データを遠隔地の他方の端末装置に送信する。他方の端末装置はこの画像データ及び音声データを受信し、ディスプレイ等に画像を表示したり、スピーカから音声を出力したりすることで、これらの端末装置を使用する参加者がビデオ会議を行うことができる。

また、ビデオ会議においては、各参加者が共通の会議資料を見ながら議論したいという要望があり、各端末装置はサーバ等から配信された会議資料の同じページを表示することができるようになっている（同期表示）。更に、各参加者が共通の会議資料を閲覧するだけでなく、それぞれの参加者が会議資料の任意のページを閲覧したい場合もあり（非同期表示）、会議資料の同期表示と非同期表示に対応した表示方法が考案されている（例えば、特許文献１参照。）。

特許文献１には、同期表示された会議資料のページと、非同期表示された会議資料のページとを端末装置が同時に表示することができる表示方法について開示されている。

しかしながら、特許文献１に開示された表示方法では、同期表示された会議資料のページを参加者が容易に表示できないという問題があった。例えば、参加者が非同期表示された会議資料を閲覧している場合に、同期表示された会議資料を閲覧しようとした場合に、参加者が会議資料のどのページを表示すればよいかを容易に把握しにくい。

本発明は、上記課題に鑑み、会議資料等の表示対象データのページを参加者が容易に表示できる端末装置を提供することを目的とする。

本発明は、複数のページを有する共有対象データを、ネットワークを介して通信する他の端末装置と共有する端末装置であって、前記共有対象データの少なくとも２つのページを表示装置に表示する表示処理手段と、前記他の端末装置が表示する第一のページと、前記第一のページに関する情報を取得する第一のページ取得手段と、前記共有対象データの任意の第二のページを取得する第二のページ取得手段と、を有し、前記表示処理手段は、前記第一のページ、前記第一のページに関する情報、及び前記第二のページを前記表示装置に表示し、前記２つのページの表示モードを受け付ける受付手段を有し、前記第二のページの中に、前記第二のページよりも小さい前記第一のページを表示する表示モードを前記受付手段が受け付けた場合、前記表示処理手段は、前記第二のページの中に前記第一のページに関する情報を表示し、前記受付手段が前記第一のページに関する情報に対する所定の操作を受け付けた場合、前記表示処理手段は、前記第一のページの中に、前記第一のページよりも小さい前記第二のページを表示すると共に、前記第二のページに関する情報を表示し、前記受付手段が更に、前記第二のページに関する情報に対する所定の操作を受け付けた場合、前記表示処理手段は、前記第二のページの中に、前記第二のページよりも小さい前記第一のページを表示すると共に、前記第一のページに関する情報を表示する。

会議資料等の表示対象データのページを参加者が容易に表示できる端末装置を提供することができる。

端末装置が表示する資料表示画面の一例を示す図である。 通信システムの概略構成図の一例である。 端末装置のハードウェア構成図の一例である。 サーバシステムのハードウェア構成図である。 通信システムが有する機能をブロック状に示す機能ブロック図の一例である。 端末装置がセッションを接続しビデオ会議に参加するまでの処理を示すシーケンス図の一例である。 端末装置が同期ページと非同期ページを表示する手順を示すシーケンス図の一例である。 １画面モードと２画面モードの切り替えを説明する図の一例である。 ２画面モードの資料表示画面の一例を示す図である。 会議画面の一例を示す図である。 ２つのディスプレイにそれぞれ表示された同期画面と非同期画面を示す図の一例である。 非同期画面の一部に同期画面のページ番号が表示された場合の資料表示画面の一例を示す図である。 非同期画面の一部に同期画面のページ番号と同期画面が表示された場合の資料表示画面の一例を示す図である。 図９の資料表示画面において同期画面にページ番号が表示された例を示す図である。 図１０の会議画面において同期画面にページ番号が表示された例を示す図である。 図１１の資料表示画面において同期画面にページ番号が表示された例を示す図である。 ページ番号が進捗バーとパーセンテージで表示された資料表示画面の一例である。 ページ番号が資料表示画面に常に表示されない資料表示画面の一例を示す図である。 進行役でない端末装置が資料表示画面を表示する手順を示すフローチャート図の一例である。 進行役である端末装置が資料表示画面を表示する手順を示すフローチャート図の一例である。 タッチパネルディスプレイのサイズが小さい場合の資料表示画面の一例を示す図である。 タッチパネルディスプレイのサイズが小さい場合の資料表示画面の一例を示す図である。

以下、本発明の一実施形態として、本実施形態の通信システム及び通信システムが行うデータ表示方法について図面を参照しながら説明する。

＜概略的な動作＞
図１は端末装置が表示する資料表示画面６０の一例を示す図である。図１の資料表示画面６０は非同期画面９を有している。非同期画面９は各参加者が任意のページの会議資料を表示するための画面である。また、資料表示画面６０はページ番号の表示欄７を有しており、表示欄７にページ番号１０１が表示されている。ページ番号１０１は、進行役の端末装置が現在、表示している会議資料のページ番号である。したがって、進行役でない参加者はこのページを非同期画面９で容易に表示できる。

後述されるように、進行役でない端末装置が、進行役の端末装置が表示する会議資料と同期して表示することは可能である。このため、同期表示されている会議資料を閲覧することはできる。しかし、同期表示された会議資料を進行役でない参加者が閲覧するには視線移動が大きい場合がある。また、会議資料にアプリケーションソフトウェアが付与したページ番号が表示される場合もある。しかし、進行役の端末装置のページが小さく表示されると、例えばプレゼンテーションソフトが付与した会議資料の右下のページ番号も非常に小さく表示されてしまい、参加者が確認することは困難であった。

本実施形態の端末装置は、会議資料が持つページ番号とは別に、進行役の端末装置が表示中の会議資料のページ番号を非同期画面９に表示するため、参加者は進行役の端末装置が表示している会議資料のページ番号を容易に確認できる。

また、図１の資料表示画面６０では、非同期画面９が表示欄７を有しており、参加者は非同期画面９を閲覧中に少ない視線移動でページ番号１０１を確認できる。ページ番号が分かれば、会議資料を表示できる。

なお、以下の説明では、進行役の端末装置が表示する会議資料のページを同期ページ、進行役でない端末装置が表示する会議資料のページを非同期ページという。同期ページが表示される画面を同期画面、非同期ページが表示される画面を非同期画面という。また、参加者とはビデオ会議に参加している者をいい、端末装置を操作するユーザ、利用者、又は操作者などでもある。

＜用語について＞
共有とは、複数の端末装置が同じデータを表示することを言う。共有対象データは複数の端末装置で共有されるデータである。本実施形態では会議資料という用語で説明するが、テキスト、画像、図形など共有されればどのようなデータでもよい。

第一のページに関する情報は、第一のページを参加者が表示することができる情報である。例えば、第一のページを特定、推定、又は識別するための情報である。具体的にはページ番号等が挙げられる。

＜構成例＞
図２は、本実施形態の通信システム１００の概略構成図の一例を示す。通信システム１００は、ネットワークＮを介して接続されたサーバシステム３０と端末装置３を有する。通信システム１００には、サーバシステム３０を介して複数の端末装置間で情報や感情等を相互に伝達するコミュニケーションシステム、及び、サーバシステム３０を介して一方の端末から他方の端末に一方向でコンテンツデータを伝送するデータ提供システムが含まれる。コミュニケーションシステムは、ビデオ会議システム、テレビ会議システム、テレビ電話システム、音声会議システム、音声電話システム、ＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）画面共有システム等が例として挙げられる。

ネットワークＮは、端末装置３が配置された施設のＬＡＮ、回線事業者が提供する有線や無線の回線、及び、回線を使ってＬＡＮをインターネットに接続するプロバイダのプロバイダネットワーク等により構築されている。ネットワークＮが複数のＬＡＮを有していてもよいし、インターネットを含んでいてよい。ネットワークＮは有線又は無線のどちらで構築されてもよく、また、有線と無線が組み合わされていてもよい。また、端末装置３が、３ＧやＬＴＥなどの回線交換型の通信機能を有する場合、ＬＡＮを介することなく回線事業者の回線を介してインターネットに接続し、サーバシステム３０と通信することができる。

サーバシステム３０は、端末装置３がビデオ会議するための１台以上のサーバである。また、サーバは情報処理装置と呼ばれる場合がある。サーバシステム３０は端末装置３のステータス（状態）を管理し、一方の端末装置３から他方の端末装置３に着信があった場合に２つの端末装置間でセッションを開始するなどの呼制御を行う呼制御サーバとして機能する。呼制御とは、通信を開始するための発信、その着信、着信への応答、通信の切断など、電話をかけたり切ったりするための一連の処理をいう。この他、端末装置３の認証、検索、死活の監視なども行う場合が多い。

なお、ステータスとは、端末装置３の通信システム１００における状態である。ステータスは主に、ログインした状態（画像データ、音声データ及びページデータ（会議資料のデータ）の受信前）、ビデオ会議中（画像データ、音声データ及びページデータの受信中）、離席、退席、ログアウトなどがある。

また、サーバシステム３０は、会議資料のアップロードを受け付け、各端末装置３に配信する。これにより各端末装置３は会議資料を共有できる。例えば進行役の端末装置３の参加者は、共有したい会議資料をサーバシステム３０にアップロードする。テレビ会議に参加している各端末装置３はサーバシステム３０からアップロードされた会議資料の配信を受ける。進行役が開いている会議資料のページ番号をサーバシステム３０が保持している。これにより、各端末装置３が会議資料を同期表示することが可能になる。また、進行役でない端末装置３は、非同期表示として任意のページを自機に表示させることができる。

ただし、端末装置３がビデオ会議を行う際、サーバシステム３０は必須ではない。２つの端末装置３が１対１でテレビ会議するような場合、一方の端末装置３が進行役になってページ番号を他方の端末装置３に送信すれば、同期表示及び非同期表示が可能になる。

端末装置３は、通信機能、カメラ及びマイクを備えた情報処理装置である。図２では端末装置３として、ＰＣ３ａ、専用端末３ｂ、スマートフォン３ｃ、及びタブレット端末３ｄが図示されているが、通信機能、カメラ及びマイクを備えた情報処理装置であればよい。例えばＰＤＡ（Personal Digital Assistant）、又は、携帯電話等でもよい。

専用端末３ｂとは、ビデオ会議の専用の端末装置３である。専用端末３ｂは、電源ＯＮによりビデオ会議用のアプリケーションソフトウェアが自動的に起動したり、サーバシステム３０にログインしたりすることで、参加者は最小限の操作でビデオ会議を開始できる。これに対し、ＰＣ３ａ、スマートフォン３ｃ、及びタブレット端末３ｄは汎用的な情報処理装置であり、これらの端末装置３ではＯＳ（Operation System）上で通信システム１００用のアプリケーションソフトウェアが動作する。参加者がアプリケーションソフトウェアを起動させると、サーバシステム３０にログインする。

更に、端末装置３は所定の機能を有する機器でもよい。例えば、電子黒板、複合機、又は、デジタルサイネージ端末が挙げられる。これらも通信機能、カメラ及びマイクを備えた情報処理装置である場合があり、アプリケーションソフトウェアが動作することで端末装置３となりうる。なお、電子黒板とは、タッチパネル付きのディスプレイを有し、タッチパネルを介してペンや指などの軌跡を取り込んで、軌跡を手書き情報としてディスプレイに描画する機器である。手書き情報も端末装置間で共有可能である。また、ＰＣと接続され、ＰＣと同じ画面をディスプレイに表示して手書き情報を重畳して描画したり、タッチパネルから入力された情報にしたがってＰＣを操作したりすることができる。また、複合機は、プリンタ、スキャナ、ファクシミリ、及び、コピーのうち１つ以上の機能を有する機器である。また、デジタルサイネージ端末は、人が通過又は存在しうる場所でディスプレイなどの電子的な表示機器を使って情報を発信するシステムの端末である。

なお、ビデオ会議に参加している端末装置３が設置されている設置場所を「拠点」と称する。拠点はこのように概念的には場所を示すが、拠点は端末装置３そのものを示す場合がある。また、拠点が設置場所だけでなく拠点の参加者、及び、企業や部署を示す場合がある。したがって、拠点は会議をしている相手（参加者）を特定する意味も持つ。なお、拠点の具体例として、例えば、地名、企業名、企業内の部署名、出張所、支店、参加者名等が挙げられる。
サーバシステム３０は複数のサーバを有してよいので、テレビ会議を行うサーバ、資料共有の処理を行うサーバ、又は、画像データと音声データを端末装置３に中継するサーバ等に分かれていてもよい。

＜ハードウェア構成例＞
図３は、端末装置３のハードウェア構成図の一例である。端末装置３は、ＣＰＵ１０に接続されたカメラ１１、マイク１２、スピーカ１３、記憶装置１４、メモリ１５、操作部１６、ＬＡＮ Ｉ／Ｆ１７、及び、タッチパネル付きのディスプレイ１８、を有している。なお、本実施形態の説明に直接、使用されない図示する以外の構成は省略されている。

カメラ１１は、撮像手段としてＣＭＯＳやＣＣＤなどの撮像素子を有し周囲の被写体を撮像して画像データを生成する。カメラ１１は所定のフレームレート（例えば３０fps）で周期的に画像データを生成するため、画像データは動画となる。カメラ１１は端末装置３の所定の位置に固定して設置されている。ＵＳＢインタフェースなどでカメラ１１が外付けされていてもよい。

タッチパネル付きのディスプレイ１８はＣＰＵ１０から受信した画像データを表示する表示装置である。また、参加者がペン又は指でタッチパネルに触れた座標を検出しＣＰＵ１０に通知する。すなわち、タッチパネル付きのディスプレイ１８は入出力インタフェース機能を有する。なお、タッチパネルの一例として、ディスプレイ一体型の静電容量方式タッチパネルや抵抗膜方式、又は赤外線遮断方式等があるが、タッチパネルの方式は問わない。

マイク１２は参加者の音声を集音し電気信号に変換する。マイク１２は、端末装置３の所定の場所に固定されている。ＵＳＢインタフェースなどでマイク１２が外付けされていてもよい。

スピーカ１３は音声データを出力する。記憶装置１４は、ＣＰＵ１０が実行するプログラム１４ｐ、画像データ、音声データ、及び、ページデータを記憶する。記憶装置１４として、例えばフラッシュメモリを集積したＳＳＤ（Solid State Drive）又はＨＤＤ（Hard Disk Drive）といった不揮発性の記憶媒体が挙げられる。

メモリ１５はＣＰＵ１０が実行するプログラムが記憶装置１４から展開される作業エリアである。また、ＣＰＵ１０による演算結果や演算の対象のデータが一時的に保存される。例えば、ＤＤＲメモリのような揮発性の記憶素子が挙げられる。

ＬＡＮ Ｉ／Ｆ１７はネットワークに接続する通信装置である。ネットワークを介して他の端末装置３と通信し、画像データ及び音声データの送受信を行う。ＬＡＮ Ｉ／Ｆ１７として10Base-T,100Base-TX,1000Base-Tに対応したEthernet（登録商標）用のＬＡＮカード、又は、IEEE802.11a/b/g/nに対応した無線ＬＡＮのＩＣが例として挙げられる。別途、携帯電話等の回線通信網に接続する機能を有していてよい。

操作部１６は、参加者による端末装置３への操作を受け付ける。例えば、キーボード、ボタン、及び音声認識装置などが相当する。タッチパネルによる入力も操作の一種である。

ＣＰＵ１０は、記憶装置１４に記憶されているプログラム１４ｐを実行することで端末装置３の全体の動作を制御する。例えば、カメラ１１から取得した画像データ、マイク１２から取得した音声データをエンコードしてＬＡＮ Ｉ／Ｆ１７を介してサーバシステム３０に送信する。また、ＬＡＮ Ｉ／Ｆ１７が受信した画像データ、及び音声データをデコードして、タッチパネル付きのディスプレイ１８に表示し、スピーカ１３ーから出力する。なお、ＣＰＵ１０が使用するコーデック（画像圧縮）の一例として、H.264/AVCやH.264/SVC、H.265等がある。

<<サーバシステム>>
図４は、サーバシステム３０のハードウェア構成図である。サーバシステム３０は、サーバシステム３０全体の動作を制御するＣＰＵ２０１、伝送管理用プログラムを記憶したＲＯＭ２０２、ＣＰＵ２０１のワークエリアとして使用されるＲＡＭ２０３、各種データを記憶するＨＤ（Ｈａｒｄ Ｄｉｓｋ）２０４を有する。また、ＣＰＵ２０１の制御にしたがってＨＤ２０４に対する各種データの読み出し又は書き込みを制御するＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）２０５、フラッシュメモリ等の記録メディア２０６に対するデータの読み出し又は書き込み（記憶）を制御するメディアドライブ２０７を有する。また、カーソル、メニュー、ウィンドウ、文字、又は画像などの各種情報を表示するディスプレイ２０８、ネットワークＮを利用してデータ伝送をするためのネットワークＩ／Ｆ２０９、文字、数値、各種指示などの入力のための複数のキーを備えたキーボード２１１、各種指示の選択や実行、処理対象の選択、カーソルの移動などを行うマウス２１２を有する。着脱可能な記録媒体の一例としての光記憶媒体２１３に対するデータの読み出し又は書き込みを制御する光記憶メディアドライブ２１４、及び、上記各構成要素を図４に示されているように電気的に接続するためのアドレスバスやデータバス等のバスライン２１０を備えている。

なお、上記伝送管理用プログラムは、インストール可能な形式又は実行可能な形式のファイルで、上記記録メディア２０６や光記憶媒体２１３等のコンピュータで読み取り可能な記録媒体に記録して流通させるようにしてもよい。

＜機能について＞
図５は、本実施形態の通信システム１００が有する機能をブロック状に示す機能ブロック図の一例である。

<<端末装置>>
端末装置３は、送受信部２１、同期ページ取得部２２、非同期ページ取得部２３、操作受付部２４、資料アップロード部２５、表示制御部２６、ビデオ会議通信部２７、及び、記憶・読出部２８を有する。これら各部は、記憶装置１４からメモリ１５に展開されたプログラム１４ｐを実行するＣＰＵ１０によって実現される機能である。また、端末装置３は、記憶装置１４及びメモリ１５の少なくとも一方によって構成される記憶部２９を有している。記憶部２９にはページデータＤＢ２９０１が記憶されている。また、主に進行役の端末装置３では会議資料２９０２が記憶されている。

送受信部２１は、ＣＰＵ１０がプログラム１４ｐを実行しＬＡＮ Ｉ／Ｆ１７を制御すること等によって構成され、ネットワークＮを介してサーバシステム３０と各種データや情報の送受信を行う。

資料アップロード部２５は、送受信部２１を介して会議資料をサーバシステム３０にアップロードする。会議資料は、参加者の一人以上が用意することができる。例えば、プレゼンテーションソフトのファイル、写真などの画像データ、動画データ、ＨＴＭＬファイルなどであり参加者が記憶装置１４に記憶させる。この他、インターネットからダウンロードしたファイルやＷｅｂページを会議資料としてもよい。

表示制御部２６は、ＣＰＵ１０がプログラム１４ｐを実行しタッチパネル付きのディスプレイ１８を制御すること等によって実現され、送受信部２１が受信した画像データ、並びに、同期ページ取得部２２及び非同期ページ取得部２３が取得したページデータを資料表示画面６０に成形してディスプレイ１８に表示する。画像データ及びページデータのレイアウトは予め決まっているものとするが、参加者が任意に調整してもよい。また、表示制御部２６は、端末装置３の設定や操作を受け付ける操作パネルを表示する。

ビデオ会議通信部２７は、送受信部２１を介してビデオ会議に必要な通信をサーバシステム３０と行う。例えば、画像データ及び音声データを送受信する。ビデオ会議通信部２７は、ログイン要求部２７ａ、撮像部２７ｂ、音入力部２７ｃ、及び音出力部２７ｄを有する。

ログイン要求部２７ａは、ＣＰＵ１０がプログラム１４ｐを実行すること等によって実現される。ログイン要求部２７ａは、送受信部２１を介してサーバシステム３０にログインを要求する旨を示すログイン要求及び現時点の自端末のＩＰアドレスを送信する。送信の契機は、専用端末の場合は電源ＯＮであり、汎用的な情報処理装置の場合はアプリの起動又は参加者のログイン操作である。

撮像部２７ｂは、ＣＰＵ１０がプログラム１４ｐを実行しカメラ１１を制御すること等によって実現され、被写体（参加者及びその周囲）を撮像し、画像データを生成する。

音入力部２７ｃは、ＣＰＵ１０がプログラム１４ｐを実行しマイク１２を制御すること等によって実現され、マイク１２によって集音された音を電気信号としての音声データに変換する。

音出力部２７ｄは、ＣＰＵ１０がプログラム１４ｐを実行しスピーカ１３を制御すること等によって実現され、スピーカ１３を駆動する信号に音声データを変換しスピーカ１３から出力させる。

同期ページ取得部２２は、送受信部２１を介してサーバシステム３０から同期ページを取得する。同期ページとは、進行役の端末装置３が表示している会議資料のページである。同期ページ取得部２２は、同期ページが更新されるとサーバシステム３０から更新後の同期ページを取得する。具体的には端末装置３からポーリングしてもよいし、ＡＪＡＸなどを利用して任意のタイミングでサーバシステム３０から端末装置３にデータを送信する機能を利用してもよい。同期ページ取得部２２が取得したページデータはページデータＤＢ２９０１に記憶される。

非同期ページ取得部２３は、送受信部２１を介してサーバシステム３０から非同期ページを取得する。非同期ページとは、各端末装置３が任意に表示している会議資料のページを言う。参加者が端末装置３を操作して会議資料のページを変更すると、この操作により決定されるページ番号をサーバシステム３０に送信し、サーバシステム３０から会議資料のページデータ（非同期ページ）を取得する。非同期ページ取得部２３が取得したページデータはページデータＤＢ２９０１に記憶される。

操作受付部２４は、ＣＰＵ１０がプログラム１４ｐを実行し操作部１６及びディスプレイ１８を制御すること等によって実現され、参加者による各種の入力を受け付ける。例えば、参加者が会議資料の同期ページ又は非同期ページのページ番号を変更する操作を行うと、変更後のページ番号を受け付ける。参加者が入力するページ番号は、次のページ、又は前のページ、などのように現在のページ番号に対する差分でもよいし、ページ番号そのものでもよい。

記憶・読出部２８は、ＣＰＵ１０がプログラム１４ｐを実行し記憶装置１４及びメモリ１５等を制御することより実現され、記憶部２９に各種データを記憶したり、記憶部２９に記憶された各種データを読み出したりするようになっている。ただし、以下の説明では、記憶・読出部２８が記憶部２９にアクセスする場合でも「記憶・読出部２８を介して」という記載を省略する場合がある。記憶部２９にはページデータＤＢ２９０１が記憶される。また、会議資料を用意した参加者の端末装置３の場合は会議資料２９０２が記憶される。

なお、記憶部２９は、他の端末装置３とビデオ会議を行う際に受信される画像データ、音声データ及びページデータの受信バッファとして用いられる。また、専用端末３ｂの場合、端末装置３には端末装置３を識別するための端末ＩＤが付されており、記憶部２９にはこの端末ＩＤが記憶されている。

表１は、ページデータＤＢ２９０１に記憶されている情報を模式的に示す。ページデータＤＢ２９０１には、会議資料ＩＤに対応付けて資料名とページデータが登録されている。会議資料ＩＤは会議資料を識別するための情報である。ＩＤはIdentificationの略であり識別子や識別情報という意味である。ＩＤは複数の対象から、ある特定の対象を一意的に区別するために用いられる名称、符号、文字列、数値又はこれらのうち１つ以上の組み合わせをいう。なお、端末ＩＤは参加者が入力してもよい。

資料名は、会議資料を参加者が判別するための名称である。例えば、ファイル名が挙げられる。ページデータは、会議資料の各ページの画像データである。ページデータはサーバシステム３０が会議資料の各ページを画像データに変換したものである。画像データのフォーマットは例えばＪＰＥＧ、ＰＮＧ、ＧＩＦなどであるが、端末装置３が表示できればどのようなものでもよい。ページデータのうち同期して提供されるものが同期ページ、各端末装置３が任意に表示するものが非同期ページである。このように一度、端末装置３が表示したページデータがキャッシュされることで、二度目以降、端末装置３が表示する際にサーバシステム３０から取得する必要がない。

<<サーバシステム３０>>
サーバシステム３０は、送受信部３１、資料共有部３２、ビデオ会議通信部３３、及び、記憶・読出部３８を有する。これら各部は、ＨＤ２０４からＲＡＭ２０３に展開されたプログラム２０４ｐを実行するＣＰＵ２０１によって実現される機能である。また、サーバシステム３０はＨＤ２０４、ＲＡＭ２０３、及びＲＯＭ２０２の少なくとも一方によって構成される記憶部３９を有している。記憶部３９には資料管理ＤＢ３９０１、会議管理ＤＢ３９０２、及び、参加者ＤＢ３９０３が記憶されている。

送受信部３１は、ＣＰＵ２０１がプログラム２０４ｐを実行しネットワークＩ／Ｆ２０９を制御すること等によって構成され、ネットワークＮを介して端末装置３と各種データや情報の送受信を行う。

資料共有部３２は、ＣＰＵ２０１がプログラム２０４ｐを実行すること等により実現され、送受信部３１を介して、同期ページ及び非同期ページを各端末装置３に送信する。会議資料が画像データの形式で送信された場合は、端末装置３に対し適切な解像度やアスペクト比などに成形して同期ページ及び非同期ページを送信する。端末装置３は自機のディスプレイの仕様に基づいて解像度やアスペクト比をサーバシステム３０に送信する。また、会議資料がファイル形式で送信された場合は、ファイルを解析してページごとに画像データに変換する。

ビデオ会議通信部３３は、ＣＰＵ２０１がプログラム２０４ｐを実行すること等により実現され、送受信部３１を介して、ビデオ会議で送受信される画像データと音声データを中継する。つまり、同じ会議に参加している端末装置３に他の端末装置３から送信された画像データと音声データを転送する。また、ビデオ会議通信部３３は端末装置３（参加者）の認証、端末装置３の状態管理、会議の予約の管理等を行う。

記憶・読出部３８は、ＣＰＵ２０１がプログラム２０４ｐを実行しＨＤＤ２０５及びＲＡＭ２０３等を制御することより実現され、記憶部３９に各種データを記憶したり、記憶部３９に記憶された各種データを読み出したりするようになっている。ただし、以下の説明では、記憶・読出部３８が記憶部３９にアクセスする場合でも「記憶・読出部３８を介して」という記載を省略する場合がある。

表２は、会議管理ＤＢ３９０２に記憶された情報を模式的に示す。会議管理ＤＢ３９０２はビデオ会議に関する情報を事前に参加者が登録する情報である。会議管理ＤＢ３９０２には、会議ＩＤに対応付けて会議名、日時、参加予定者、及びログインパスワードが登録されている。会議ＩＤは会議を識別するための情報である。会議名は参加者が会議を判別するための会議の名称である。日時は会議が開催される日付と時間帯である。参加予定者は会議に参加することが予定される参加者である。ログインパスワードは、参加者が会議に参加する際に、サーバシステム３０から認証を受けるためのパスワードである。会議名、参加予定者、及び、ログインパスワードは会議の開始前（会議の開始後でもよい）に参加者の一人がサーバシステム３０に登録しておく。

サーバシステム３０のビデオ会議通信部３３は参加予定者にこれらの情報を電子メールなどで送信する。電子メールにはサーバシステム３０のＵＲＬが記述されているので、参加者がこのＵＲＬを選択することで端末装置３は会議ＩＤで特定されるビデオ会議のログイン画面にアクセスできる。参加者は例えば電子メールアドレスとログインパスワードを入力してログインする。これにより、各参加者は予定された会議に参加できる。

また、予定されていない参加者はログインできないのでセキュリティも保たれる。仮に、予定されていない参加者がビデオ会議中に参加する場合は、参加者に電話などで連絡し同様の電子メールを受信する。

表３は、参加者ＤＢ３９０３に記憶された情報を模式的に示す。参加者ＤＢ３９０３はビデオ会議に参加した参加者に関する情報である。参加者ＤＢ３９０３は、会議ＩＤに対応付けて参加者ＩＤ、進行役、及び、ＩＰアドレスの各項目を有する。参加者ＩＤはログインした参加者を特定するための情報であり、本実施形態ではメールアドレスとするが、参加者を特定できればどのような情報でもよい。例えば、専用端末を特定する端末ＩＤ、参加者に配布された固有のＩＤなどでもよい。進行役は、同期ページのページ番号を決定する権限を有する参加者を言う。

進行役の決定方法には例えば以下のように種々の方法がある。
(i) 会議資料をアップロードした参加者
(ii) 予め設定された参加者
(iii) 会議中に現在の進行役から指定された参加者
本実施形態では特に説明しない場合、(i)の参加者が進行役であるとして説明する。また、進行役が決定されている必要はない。この場合、任意の参加者が同期画面８で表示されるページ番号を決定でき、最後に決定されたページ番号の会議資料が同期画面８に表示される。

ＩＰアドレスは、サーバシステム３０が把握した各端末装置３のＩＰアドレスである。各端末装置３のＩＰアドレスは、端末装置３がサーバシステム３０にログインすることで把握される。この他、ポート番号など、端末装置３とサーバシステム３０が通信するために必要な情報が登録されてよい。

表４は、資料管理ＤＢ３９０１に記憶されている情報を模式的に示す。資料管理ＤＢ３９０１は同期ページに関する情報を有する。資料管理ＤＢ３９０１は、会議ＩＤに対応付けて会議資料ＩＤ、同期ページ番号、及び、総ページ数の各項目を有する。会議ＩＤと会議資料ＩＤについてはすでに説明した。同期ページ番号は、現在の同期ページのページ番号である。総ページ番号は会議資料が有する全ページ数である。非同期ページのページ番号は各端末装置３によって異なりサーバシステム３０が保持している必要はないが、サーバシステム３０が保持していてもよい。

＜セッション接続までの動作手順＞
図６は、端末装置３がセッションを接続しビデオ会議に参加するまでの処理を示すシーケンス図の一例である。セッションとは、少なくとも２つの端末装置３が画像データと音声データを送受信できる状態（オンライン）になることをいう。また、会議管理ＤＢ３９０２の情報は各参加者に送信済みであるものとする。

S1：まず、端末装置３を操作する参加者が端末装置３の電源スイッチをＯＮにしてログインするための操作を行うと（電子メールに記述されたＵＲＬにアクセス）、操作受付部２４が受け付けてログイン要求部２７ａがネットワークＮを介してサーバシステム３０にログイン要求を送信する。ログイン要求には、ログイン要求する端末装置３を操作する参加者の参加者ＩＤ及びログインパスワードが含まれている。なお、ログイン要求がサーバシステム３０に受信された際に、サーバシステム３０は送信側である端末装置３のＩＰアドレスを把握することができる。

S2：サーバシステム３０のビデオ会議通信部３３はログイン要求に含まれている参加者ＩＤ及びログインパスワードに基づいて端末装置３を認証する。認証方法は参加者ＩＤ及びログインパスワードに基づくものに限らず、ＩＣカードや生体認証情報を用いてもよい。ここでは認証が成立したものとする。

S3：認証が成立したのでサーバシステム３０のビデオ会議通信部３３は、会議管理ＤＢ３９０２から要求元の端末装置３の参者ＩＤが登録されている会議ＩＤを読み出し、参加者ＤＢ３９０３に会議ＩＤと参加者ＩＤとＩＰアドレス（及びポート番号等）を登録する。

S4〜S6：他の端末装置３もステップＳ１〜Ｓ３と同様の処理を行う。これにより、参加者ＤＢ３９０３にはログインした参加者の参加者ＩＤとＩＰアドレスが登録される。

S7：サーバシステム３０のビデオ会議通信部３３は参加者ＤＢ３９０３に登録されたＩＰアドレスの間でセッションを確立する。ビデオ会議通信部３３が更にＩＰアドレスに基づいて端末装置３と通信できるかどうかを判断することでセッションを確立してもよい。

以降、サーバシステム３０のビデオ会議通信部３３は参加者ＤＢ３９０３に登録されている端末装置３のＩＰアドレスを宛先に画像データ、及び音声データ（ページデータについては後述する）を送信する。

すなわち、
・suzuki@sample.co.jpが送信した画像データと音声データをsuzuki@sample.co.jp 、satoh@sample.co.jpとyamada@sample.co.jpの端末装置３に送信する。送信先にsuzuki@sample.co.jpが含まれているのは、他の端末装置３が送信する画像データと音声データと、自機である端末装置３が送信した画像データと音声データとを区別することなく配信するためである。ただし、自機の画像データと音声データは送信せずに、そのまま端末装置３が表示したり出力したりしてもよい。
・satoh@sample.co.jpとyamada@sample.co.jpの端末装置３が送信する画像データと音声データも同様に各端末装置３に送信される。

＜ページデータの送信手順＞
図７は、端末装置３が同期ページと非同期ページを表示する手順を示すシーケンス図の一例である。図７のシーケンス図は、進行役の端末装置３が会議に参加した参加者の端末装置３と資料を共有する処理（Ｓ１〜Ｓ６）、参加した端末装置３が２画面モードに切り替える処理（Ｓ７，Ｓ８）、進行役の端末装置３が会議資料のページ番号を変更する処理（Ｓ９〜Ｓ１５）、進行役でない端末装置３が自分の会議資料のページ番号を変更する処理（Ｓ１６〜Ｓ１９）について説明している。

なお、進行役の会議端末と他の端末装置３はビデオ会議通信部の機能により、ビデオ会議を開始している状態である。

S1：進行役の参加者は端末装置３を操作して会議資料をアップロードする操作を行う。操作受付部２４はこの操作を受け付けて、進行役の端末装置３の資料アップロード部２５は記憶部２９に記憶されている会議資料を読み出し、送受信部２１を介してサーバシステム３０に会議資料と参加者ＩＤを送信する。送信時、進行役の参加者はページ番号の初期値を指定できる。指定しない場合は、自動的に１ページ目が初期値となる。参加者ＩＤが送信されるのは進行役をサーバシステムが特定するためである。

また、会議資料はファイルのままアップロードされても、端末装置３がファイルから変換した画像データがアップロードされてもよい。

S2：サーバシステム３０の送受信部３１は会議資料と参加者ＩＤを受信して、会議資料を資料管理ＤＢ３９０１に登録する。進行役の端末装置３は参加者ＩＤを送信したので、サーバシステム３０は参加者ＤＢ３９０３を参照してどの会議の会議資料かを特定することができる。サーバシステム３０の記憶・読出部３８は会議ＩＤに対応付けて会議資料ＩＤと総ページ数を登録する。会議資料ＩＤは、１つの会議ＩＤに対し重複しなければよい。総ページ数は、ファイル形式の会議資料の場合は会議資料の最後のページ番号である。画像データの形式の会議資料の場合は画像データの数である。また、進行役の端末装置３からページ番号の初期値の指示がない場合、サーバシステム３０の記憶・読出部３８は同期ページを１ページに設定する。また、サーバシステム３０の記憶・読出部３８は参加者ＤＢ３９０３の参加者ＩＤに対応付けて進行役を設定する。

S3：サーバシステム３０の資料共有部３２は、会議資料が新たに登録されたので、資料管理ＤＢ３９０１の同期ページ番号を参照し、会議資料から同期ページ（１ページ目の画像データ）を取得して会議資料ＩＤと共に送受信部３１を介して進行役の端末装置３に送信する。この時、端末装置３が同期画面を更新することを通知するため同期画面変更通知を送信する。同期画面変更通知は、同期画面８のページ番号が変更された旨を通知する情報である。また、資料共有部３２はページ番号（１ページ目）を進行役の端末装置３に送信する。進行役の端末装置３にはページ番号は送信されなくてもよいが、進行役の端末装置３もページ番号を表示できる。会議資料ＩＤは複数の会議資料がある場合にどの会議資料のページデータであるかを特定するために使用される。また、この端末装置３が進行役なので進行役であることを示す進行役通知を送信する。進行役通知を受信した端末装置３は任意に同期画面８のページを切り替えることができる。

S4：進行役の端末装置３の送受信部２１は同期ページ等を受信して、表示制御部２６が同期画面変更通知に基づいて資料表示画面６０に同期画面８を表示する。同期画面８には会議資料の１ページ目が表示される。進行役の端末装置３の送受信部２１は変更後の同期ページを受信し、記憶・読出部３８が記憶部３９のページデータＤＢ２９０１にキャッシュする。

S5：次に、サーバシステム３０の資料共有部３２は、参加している他の端末装置３にも会議資料ＩＤ、会議資料から取得した同期ページ（１ページ目の画像データ）、同期画面変更通知、及び、ページ番号を、送受信部３１を介して参加している端末装置３に送信する。他の端末装置３は進行役でないので、進行役であることを示す進行役通知は送信されない。ページ番号が送信されることで進行役でない端末装置３が同期ページを表示できる。更に、総ページ数を送信することが好ましい。

S6：参加している端末装置３の同期ページ取得部２２は送受信部２１を介して同期ページ（１ページ目のページデータ）等を受信する。参加している端末装置３の表示制御部２６は同期画面変更通知に基づいて端末装置３に接続されているディスプレイの資料表示画面６０に同期ページを表示する。この時、参加している端末装置３の表示制御部２６は、同期画面８と非同期画面９を同時に表示する２画面モードで表示してもよいし、同期画面８のみを表示して後から２画面モードに切り替えてもよい。図７のシーケンス図では、まず、同期画面８のみを表示するものとする。なお、進行役でない端末装置３の送受信部２１は変更後の同期ページを受信し、記憶・読出部３８が記憶部３９のページデータＤＢ２９０１にキャッシュする。

S7：参加している端末装置３を操作する参加者は２画面モードに切り替える操作を行う。端末装置３の操作受付部２４はこの操作を受け付ける。

S8：２画面モードになったため、端末装置３の表示制御部２６は同期ページと非同期ページを資料表示画面６０に表示させる。詳細は図８にて説明する。後述するように、進行役でない端末装置３が２画面モードの場合、同期画面８には操作パネル６１が表示されず、非同期画面９にのみ操作パネル６１が表示される。したがって、進行役が操作する同期画面８を、他の端末装置３の参加者が操作することを制限できる。

S9：次に、進行役の参加者が同期画面８のページを切り替える。進行役の端末装置３の操作受付部２４はこの操作を受け付ける。

S10：進行役の端末装置３の同期ページ取得部２２は、変更後のページ番号をサーバシステム３０に送信する。進行役の端末装置３は会議資料ＩＤと共に参加者ＩＤを送信する。

S11：サーバシステム３０の送受信部３１はページ番号等を受信し、記憶・読出部３８が資料管理ＤＢ３９０１の会議ＩＤと会議資料ＩＤに対応付けて、ステップＳ１０のページ番号を同期ページ番号に登録する。

S12：サーバシステム３０の資料共有部３２は同期画面８のページ番号が更新されたので、まず、進行役の端末装置３に会議資料ＩＤ、ページ番号、変更後のページの同期ページ、同期画面変更通知、及び進行役通知を送信する。

S13：進行役の端末装置３の送受信部２１は変更後のページの同期ページ等を受信し、記憶・読出部３８が記憶部３９のページデータＤＢ２９０１にキャッシュする。また、表示制御部２６は、最後に受信したページデータを記憶部３９のページデータＤＢ２９０１から読み出して、進行役の端末装置３に接続されているディスプレイの同期画面８に表示する。

S14：次に、サーバシステム３０の資料共有部３２は同期画面８のページ番号が更新されたので、参加している端末装置３に会議資料ＩＤ、ページ番号、同期画面変更通知、及び、変更後のページの同期ページを送信する。

S15：参加している端末装置３の送受信部３１は変更後のページの同期ページ等を受信し、記憶・読出部２８が記憶部２９のページデータＤＢ２９０１にキャッシュする。また、表示制御部２６は、最後に受信したページデータを記憶部２９のページデータＤＢ２９０１から読み出して、同期画面変更通知に基づいて参加している端末装置３に接続されているディスプレイの同期画面８に表示する。２画面モードの場合、同期画面と非同期画面に同じページデータが表示される。

S16：そして、参加者が端末装置３を操作して、非同期画面９のページ番号を変更する。参加している端末装置３の操作受付部２４はこの操作を受け付ける。

S17：非同期画面９が操作されたので、非同期ページ取得部２３は送受信部２１を介して、サーバシステム３０に参加者ＩＤ、非同期画面変更通知、変更後のページ番号及び会議資料ＩＤを送信する。非同期画面変更通知は、非同期画面９のページ番号が変更された旨を通知する情報である。

S18：サーバシステム３０の送受信部３１は変更後のページ番号等を受信し、資料共有部が資料管理ＤＢ３９０１から変更後のページ番号のページデータを取得する。資料共有部３２は、参加者ＩＤで端末装置３を特定し、この端末装置３に変更後のページ番号、このページの非同期ページ、非同期画面変更通知、及び会議資料ＩＤを送信する。非同期画面変更通知を受信したので、資料共有部３２は他の端末装置３にページデータを送信しない。非同期画面変更通知があることで、似たようなタイミングで同期画面が更新されても進行役でない端末装置３が非同期画面を更新できる。

S19：参加している端末装置３の送受信部２１は変更後のページ番号の非同期ページ等を受信し、記憶・読出部２８がページデータＤＢ２９０１にページデータをキャッシュする。また、表示制御部２６が最後に受信したページデータをページデータＤＢ２９０１から読み取り、非同期画面変更通知に基づいて参加している端末装置３に接続されているディスプレイの非同期画面９に表示する。

以上のように、各端末装置３は同期画面８で会議資料を共有しながら、任意のページを非同期画面９に表示できる。

＜画面例＞
図８は、１画面モードと２画面モードの切り替えを説明する図の一例である。１画面モードと２画面モードは資料表示画面６０の表示モードの１つである。図８は会議画面のうち、会議資料のみが表示された資料表示画面６０を示す。図８（ａ）は、１画面モードの資料表示画面６０であり、図８（ｂ）は２画面モードの資料表示画面６０である。１画面モードの資料表示画面６０では原則的に同期画面８のみが表示されるとするが、参加者の所定の操作により非同期画面９のみを表示してもよい。つまり、参加者は同期画面８も非同期画面９もディスプレイ１８に大きく表示できる。

２画面モードの資料表示画面６０は同期画面８と非同期画面９を有する。図８（ｂ）では左側が同期画面８、右側が非同期画面９であるが、同期画面８と非同期画面９の配置は参加者が任意に設定できる。

１画面モードの資料表示画面６０は操作パネル６１を有する。操作パネル６１は、前ページボタン６３、次ページボタン６２、及び、２画面モード切替ボタン６４を有する。前ページボタン６３は１つ前のページを参加者が表示させるボタンであり、次ページボタン６２は次のページを参加者が表示させるボタンである。２画面モード切替ボタン６４は２画面モードに参加者が切り替えるためのボタンである。この他、任意のページを参加者が入力したり選択したりするボタンを有していてもよい。１画面モードの場合に操作パネル６１の２画面モード切替ボタン６４を参加者が押下すると、端末装置３の表示制御部２６は２画面モードに切り替える。端末装置３が非同期ページを取得していない状態で２画面モードに切り替えた場合、２画面モードでは同じページデータが表示される。

したがって、１画面モードでは進行役でない参加者も同期ページのページ番号を変更できる。しかしながら、１画面モードでは進行役でない端末装置３が操作パネル６１を非表示にしてもよい。

２画面モードの操作パネル６１は前ページボタン６３、次ページボタン６２、及び、１画面モード切替ボタン６５を有する。１画面モード切替ボタン６５は１画面モードに参加者が切り替えるためのボタンである。その他の機能は２画面モードと同じである。

２画面モードでは２つのページデータに１つの操作パネル６１しかない。これは単なる参加者（進行役でない）は同期画面８を操作できないためである。すなわち、２画面モードの操作パネル６１は非同期画面９を操作するためのものである。このように、進行役でない参加者は同期画面８を操作できないので、同期画面８を誤操作してしまうことを防止できる。

なお、資料表示画面６０は３つ目の表示モード（後述するピクチャーインピクチャーモード）を有しており、操作パネル６１の操作により、参加者は３つの表示モードを切り替えることができる。

図９は、２画面モードの資料表示画面６０の一例を示す。図９は図８（ｂ）と同様の画面である。１つのウィンドウの中に同期画面８と非同期画面９がある。図９では参加者の顔等が撮像された画像データが表示されていないので、参加者は会議資料のみを表示できる。同期画面８と非同期画面９が横に並んで表示されるので、参加者は進行役が表示させる会議資料を把握できる。

同期ページと非同期ページはそれぞれアプリケーションソフトウェアが付与したページ番号を有している。以下、このページ番号をアプリページ番号６８という。参加者は同期ページのアプリページ番号６８を参照し、同期ページを把握できる。ただし、アプリページ番号６８の大きさや資料表示画面６０の大きさによっては参加者が見にくい場合がある。

＜会議画面＞
図１０は、会議画面７０の一例を示す。会議画面７０は、各端末装置３がカメラ１１で撮像して得た画像データ７１と資料表示画面６０を含む画面である。図１０では、左側に２つの端末装置３の画像データ７１が表示され、右側に資料表示画面６０が表示されている。資料表示画面６０は２画面モードになっており、操作パネル６１が１つだけ表示されている。したがって、参加者は画像データ７１を見ながら、会議資料を閲覧することもできる。また、同期画面８の会議資料と非同期画面９の会議資料を同時に閲覧することができる。ただし、アプリページ番号６８の大きさや資料表示画面６０の大きさによっては参加者が見にくい場合がある。

＜２つのディスプレイへの表示＞
図１１は２つのディスプレイにそれぞれ表示された同期画面８と非同期画面９を示す。端末装置３が２つのディスプレイ１８を有する場合、図１１に示すように、表示制御部２６はそれぞれに同期画面８と非同期画面９を表示できる。このように、１つのディスプレイ１８が１つのページデータを表示できるため、参加者は会議資料を大画面で閲覧できる。また、参加者は同期画面８と非同期画面９を任意のサイズに変更できる。図１１では資料表示画面６０のみが表示されているが、画像データ７１を表示することも可能である。

また、２つのディスプレイ１８を有するとは、端末装置３が２つのディスプレイＩ／Ｆを有することをいう。当然ながら、３つ以上のディスプレイ１８を有してもよい。ディスプレイＩ／Ｆは、ディスプレイ１８を接続するためのインタフェースであり、例えば、ＨＤＭＩ（登録商標）、Ｄ−ＳＵＢ、ＤＶＩ、Ｄｉｓｐｌａｙ Ｐｏｒｔ（登録商標）、ＵＳＢなどがある。ディスプレイ１８は、液晶や有機ＥＬのようなフラットパネルディスプレイの他、プロジェクタなどでもよい。

また、資料表示画面６０が表示されるディスプレイは、表示機能を有するディスプレイ１８だけでなく情報処理装置でもよい。例えば、タブレット端末、スマートフォン、ＰＤＡなどディスプレイを有していれば、端末装置３に接続できる。参加者が手持ちの情報処理装置を端末装置３に接続して、図１１のような表示を実現することができる。

＜ページ番号の表示＞
続いて、図１２〜図１８を用いて、ページ番号の表示形態を説明する。図１２（ａ）は非同期画面９の一部に同期画面８のページ番号が表示された場合の資料表示画面６０の一例を示す。このような表示形態をピクチャーインピクチャーという場合がある。図１２（ａ）の資料表示画面６０は非同期画面９を全面に表示すると共に、その一部である右上に同期画面８のページ番号の表示欄７がある。ページ番号の表示欄７は右上の他、右下、左下、又は、左上でもよい。また、参加者がページ番号の表示欄７の位置を任意に変更できてよい。

参加者は非同期画面９の内部にあるページ番号１０１を少ない視線移動で確認できる。また、ページ番号の表示欄７は非同期画面９の閲覧を阻害しない程度の大きさであるが、参加者がページ番号１０１を見ることができる大きさなので、非同期画面９の閲覧を阻害せずにページ番号１０１を確認できる。

なお、参加者がページ番号の表示欄７（ページ番号１０１）を押下すると、このページの同期画面８が大きく表示される。図１２（ｂ）は表示欄７が押下されることで表示された同期画面８を示す。ページ番号１０１で指定された会議資料の同期ページが大きく表示され、右上には「非同期画面 １０／１５」と表示される。このように、参加者は同期画面と非同期画面を容易に切り替えることができる。

図１３は、非同期画面９の一部に同期画面８のページ番号１０１と同期画面８が表示された場合の資料表示画面６０の一例を示す。なお、図１３の説明では主に図１２との相違を説明する。図１３の資料表示画面６０は一部に同期画面８を有する。したがって、参加者は非同期画面９と共に小さく表示された同期画面８を閲覧できる。

図１３の同期画面８のサイズは、ディスプレイのサイズの１／４より大きいと非同期画面９の閲覧を阻害する。このため、最大でもディスプレイのサイズの１／４以下とする。一方、同期画面８が小さいと同期画面８を見にくくなるため（どの会議資料のどのページかを参加者が判断できない）、最小でもディスプレイのサイズの１／６４以上とする。しかしながら、１／４や１／６４はあくまで目安であり、参加者が同期ページを閲覧できる程度のサイズであればよい。例えば、同期画面８がディスプレイの１／２のサイズでもよい。

したがって、参加者はページ番号だけでなく小さな同期画面８を見ることで会議資料のどのページを表示すべきか推定できる。

図１２又は図１３と同様のページ番号１０１の表示は、図９〜図１１の資料表示画面６０又は会議画面７０でも可能である。図１４は、図９の資料表示画面６０において同期画面８にページ番号が表示された例を示す。図１４の同期画面８は上方にページ番号の表示欄７を有するため、アプリページ番号６８が小さくても、参加者はページ番号を容易に確認できる。なお、ページ番号の表示欄７は非同期画面９の一部に表示されてもよい。

図１５は、図１０の会議画面において同期画面８にページ番号が表示された例を示す。図１５の同期画面８は右方にページ番号の表示欄７を有するため、アプリページ番号６８が小さくても、参加者はページ番号を容易に確認できる。なお、ページ番号の表示欄７は非同期画面９の一部に表示されてもよい。

図１６は、図１１の資料表示画面６０において同期画面８にページ番号が表示された例を示す。図１６の同期画面８は右上にページ番号の表示欄７を有する。ディスプレイが２つある場合はアプリページ番号６８が大きく表示されると考えられるが、仮にディスプレイのサイズが小さい場合でも、参加者は会議のページ番号を容易に確認できる。なお、ページ番号の表示欄７は非同期画面９の一部に表示されてもよい。

＜他の表示例＞
上記では、同期ページを表示するための情報としてページ番号で示したが、同期ページを表示するための情報は以下のような態様で表示することができる。

図１７（ａ）は、現在のページ番号が進捗バー７３とパーセンテージ７４で表示された資料表示画面６０の一例である。同期画面８のページ番号は表示されないが、進捗バー７３とパーセンテージ７４で参加者はおよそのページ番号が分かるので、会議の進捗状況かを把握できる。なお、進捗バー７３は、以下のように表示される。まず、表示制御部２６は現在のページ番号を総ページ数で割ることでパーセンテージ７４を算出する。進捗バー７３の全長のうち、パーセンテージ７４に相当する長さを着色する。

図１７（ｂ）は、ジャンプボタン７５が表示された資料表示画面６０の一例を示す。ジャンプボタン７５には「Ｊｕｍｐ Ｔｏ Ｔｈｅ Ｐａｇｅ」と表示されている。参加者はページ番号を知ることで同期ページを大きく表示したいので、ジャンプボタン７５そのものから参加者がページ番号を判断できなくても、ジャンプボタン７５を押下することで同期ページを大きく表示することができる。

また、図１８（ａ）に示すように、ページ番号１０１は資料表示画面６０に常に表示されなくてもよい。図１８（ａ）では、マウスカーソル７７が所定の領域と重なると同期画面８とページ番号１０１が表示される。所定の領域とは同期画面８の右上など、ページ番号が表示される領域である。このように予め定められた場所に参加者がマウスカーソル７７を移動させた際にページ番号等が表示されるので、常態では、参加者は非同期画面９のみを閲覧できる。

なお、マウスカーソル７７の他、端末装置３の所定のハードキーが押下された場合にページ番号が表示されてもよいし、ディスプレイ１８の非同期画面９がタップされた場合にページ番号が表示されてもよい。

また、図１８（ｂ）に示すように、同期ページが更新された旨がサーバシステム３０から端末装置３に通知された際に、表示制御部２６がページ番号を表示してもよい。図１８（ｂ）では、同期ページの更新の旨の通知に対し、同期画面８と「ページが更新されました。現在のページは１４／１５です」というメッセージ７８が表示されている。メッセージ７８は更新の旨の通知から所定期間だけ表示される。同期ページの更新の旨の通知時にのみページ番号が表示されるので、端末装置３は参加者を注意喚起することができる。

図１８（ａ）と図１８（ｂ）は組み合わせて適用されることが有効である。参加者はページの更新のタイミングでページ番号を把握でき、マウスカーソル７７を使用して任意のタイミングでページ番号を把握できる。

＜表示手順＞
図１９は、進行役でない端末装置３が資料表示画面６０を表示する手順を示すフローチャート図の一例である。図１９の処理は端末装置３が会議資料のページデータを受信するとスタートする。なお、ピクチャーインピクチャーモードの説明では、同期画面８とページ番号１０１が表示される場合を例にして説明する。

<<進行役でない場合>>
まず、ページデータを受信すると表示制御部２６は自機である端末装置３が進行役か否かを判断する（Ｓ１０）。進行役か否かは進行役通知がサーバシステム３０から送信されたか否かにより判断される。

ステップＳ１０の判断がＮｏの場合、表示制御部２６は１画面モードか否かを判断する（Ｓ２０）。表示モードは参加者が操作パネル６１を操作して設定する。

（１画面モード）
ステップＳ２０の判断がＹｅｓの場合、表示制御部２６は資料表示画面６０に同期画面８のみを表示して、同期画面８の下方に操作パネル６１を表示する（Ｓ３０）。

次に、表示制御部２６は次のページデータを受信したか否かを判断する（Ｓ４０）。次のページデータを同期画面８に表示するためである。同期ページのページ番号の変更は１画面モードの進行役でない参加者も可能である。

ステップＳ４０の判断がＹｅｓの場合、表示制御部２６は同期ページか否かを判断する（Ｓ５０）。同期ページか否かは非同期画面変更通知の有無により判断される。説明の便宜上、１画面モードの場合、同期ページが表示されるものとする。

ステップＳ５０の判断がＹｅｓの場合、表示制御部２６は同期画面８を更新する（Ｓ６０）。このように、１画面モードでは受信したページデータを同期画面８に表示できる。ステップＳ５０の判断がＮｏの場合、表示制御部２６は非同期画面９を更新しない。

次に、操作受付部２４は操作パネル６１から同期画面８のページ番号が変更された否かを判断する（Ｓ７０）。本実施形態では、進行役以外の端末装置３も１画面モードでは同期画面８のページを変更できる。しかしながら、進行役以外の端末装置３が同期画面８のページ番号を変更することを禁止する運用も考えられ、例えばサーバシステム３０から禁止信号を送信して、参加者が同期画面８のページ番号を変更できないように設定することも有効である。

ステップＳ７０の判断がＹｅｓの場合、同期ページ取得部２２は参加者が操作したページ番号のページデータがページデータＤＢ２９０１に記憶されているか否かを判断し、ない場合には同期ページ要求とページ番号をサーバシステム３０に送信する（Ｓ８０）。

ステップＳ７０の判断がＮｏの場合、処理はステップＳ１０に戻り、進行役か否かの判断から繰り返し実行される。

図１９の１画面モードでは同期画面が表示されることを前提に説明したが、非同期画面が表示されている場合も同様である。この場合、ステップＳ５０で非同期ページが受信さえたか否かが判断される。

（２画面モード）
ステップＳ２０の判断がＮｏの場合、表示制御部２６は２画面モードか否かを判断する（Ｓ１１０）。

ステップＳ１１０の判断がＹｅｓの場合、表示制御部２６は資料表示画面６０に同期画面８と非同期画面９を表示し、同期画面８の操作パネル６１を非表示にして、非同期画面９の操作パネル６１を表示する（Ｓ１２０）。１ページ目しか送信されていない場合は同期画面８と非同期画面９のどちらも１ページ目が表示される。

また、表示制御部２６は同期画面８に同期ページを表示するための情報を表示する（Ｓ１３０）。すなわち、ページ番号１０１を表示する。

次に、表示制御部２６は次のページデータを受信したか否かを判断する（Ｓ１４０）。次のページデータを同期画面８又は非同期画面９に表示するためである。

ステップＳ１４０の判断がＹｅｓの場合、表示制御部２６は同期ページか否かを判断する（Ｓ１５０）。同期ページか否かは非同期画面変更通知の有無により判断される。２画面モードの場合、同期画面８と非同期画面９のどちらにページデータを表示するか判断するためである。

ステップＳ１５０の判断がＹｅｓの場合、表示制御部２６は同期画面８を更新する（Ｓ１６０）。ステップＳ１５０の判断がＮｏの場合、表示制御部２６は非同期画面９を更新する（Ｓ１６５）。

次に、操作受付部２４は操作パネル６１から非同期画面９のページ番号が変更された否かを判断する（Ｓ１７０）。２画面モードの場合、ページ番号が変更されるのは非同期画面９のみである。こうすることで、参加者が２画面モードで誤って同期画面８のページ番号を変更することを防止できる。

ステップＳ１７０の判断がＹｅｓの場合、非同期ページ取得部２３は参加者が操作したページ番号のページデータがページデータＤＢ２９０１に記憶されているか否かを判断し、ない場合には非同期ページ要求とページ番号をサーバシステム３０に送信する（Ｓ１８０）。

ステップＳ１７０の判断がＮｏの場合、処理はステップＳ１０に戻り、進行役か否かの判断から繰り返し実行される。

（ピクチャーインピクチャーモード）
ステップＳ１１０の判断がＮｏの場合、表示制御部２６は非同期画面９の一部に同期画面８を小さく表示する資料表示画面６０を表示する。また、非同期画面９の操作パネル６１を表示する（Ｓ２２０）。１ページ目しか送信されていない場合は同期画面８と非同期画面９のどちらも１ページ目が表示される。

また、表示制御部２６は非同期画面９の一部に同期ページを表示するための情報を表示する（Ｓ２３０）。すなわち、ページ番号１０１を表示する。

次に、表示制御部２６は次のページデータを受信したか否かを判断する（Ｓ２４０）。次のページデータを同期画面８又は非同期画面９に表示するためである。

ステップＳ２４０の判断がＹｅｓの場合、表示制御部２６は同期ページか否かを判断する（Ｓ２５０）。同期ページか否かは非同期画面変更通知の有無により判断される。ピクチャーインピクチャーモードの場合、同期画面８と非同期画面９のどちらにページデータを表示するか判断するためである。

ステップＳ２５０の判断がＹｅｓの場合、表示制御部２６は同期画面８を更新する（Ｓ２６０）。ステップＳ２５０の判断がＮｏの場合、表示制御部２６は非同期画面９を更新する（Ｓ２６５）。

次に、操作受付部２４は操作パネル６１から非同期画面９のページ番号が変更された否かを判断する（Ｓ２７０）。ピクチャーインピクチャーモードの場合、ページ番号が変更されるのは非同期画面９のみである。こうすることで、参加者がピクチャーインピクチャーモードで誤って同期画面８のページ番号を変更することを防止できる。

ステップＳ２７０の判断がＹｅｓの場合、非同期ページ取得部２３は参加者が操作したページ番号のページデータがページデータＤＢ２９０１に記憶されているか否かを判断し、ない場合には非同期ページ要求とページ番号をサーバシステム３０に送信する（Ｓ２８０）。

ステップＳ２７０の判断がＮｏの場合、操作受付部２４はページ番号１０１が押下されたか否かを判断する（Ｓ２９０）。同期画面８を大きく表示するためである。

ステップＳ２９０の判断がＹｅｓの場合、表示制御部２６は同期画面８と非同期画面９のサイズを交換して表示する（Ｓ３００）。つまり、非同期画面９が大きく表示されていた場合は同期画面８を大きく表示し、同期画面８が大きく表示されていた場合は非同期画面９を大きく表示する。こうすることで、参加者はいつでも同期画面８又は非同期画面９を大きく表示できる。

<<進行役である場合>>
図２０は進行役の端末装置３が資料表示画面６０を表示する手順を示すフローチャート図の一例である。図２０の説明では図１９との相違を説明する。進行役の参加者がビデオ会議中に非同期画面９を表示すると操作を誤ったり、うまく進行できなかったりするなどのおそれがある。このため、考えの１つとして進行役の端末装置３は１画面モードしか表示できないように制御することも有効である。別の考え方として、進行役の端末装置３は進行のために同期ページとは別に任意のページを閲覧したい場合があるとも考えられる。この場合は、端末装置３が表示モードを制限すべきでない。本実施形態ではどちらも採用しうるが、図２０では後者の考えに基づいて説明する。

この場合、図２０の処理はステップＳ１２０のみが異なる。すなわち、表示制御部２６は同期画面８の操作パネル６１を表示し、非同期画面９の操作パネル６１を表示する（Ｓ１２０）。進行役の参加者は同期画面８のページ番号を変更する必要があるため、これにより、進行役の端末装置３は２画面モードでも同期画面８のページ番号を更新できる。

＜ディスプレイ１８のサイズが小さい場合＞
図２１，図２２を用いてディスプレイ１８のサイズが小さい端末装置３の資料表示画面６０について説明する。具体的には、スマートフォン、タブレット端末、ＰＤＡ、又は、携帯電話などで有効である。

図２１（ａ）〜（ｃ）は縦長のディスプレイに表示される資料表示画面６０の一例を示す。表示制御部２６は、資料表示画面６０を上半分と下半分の１：１に固定する。また、操作量が多くなる非同期画面９（自分が操作する画面）を下側に配置する。

図２１（ｂ）に示すように、端末装置３がカメラで撮像された画像データ７１を表示する場合は、資料表示画面６０を下側に配置する。参加者が操作するためである。

図２１（ｃ）に示すように、同期画面８に画像データ７１を重ねて表示してもよい。この場合、資料表示画面６０が大きく表示できると共に、画像データ７１が小さく表示されるため、参加者の表情を見ながらビデオ会議することができる。

いずれの場合も、表示制御部２６は同期画面８にページ番号を表示する。これにより、ディスプレイ１８のサイズが小さくても参加者はページ番号を確認できる。

なお、ページの変更に関する操作として、参加者はフリック操作（指でタッチパネルを一方向になぞる）を使用できる。上記のように、進行役でない参加者は２画面モード（図２１（ａ）〜（ｃ）の全て）で同期画面８のページ番号を変更できない。つまり、操作受付部２４は同期画面８に対するページ変更の操作を受け付けない。上記と同様に操作パネル６１を表示して操作してもよい。

図２２（ａ）〜（ｃ）は横長のディスプレイ１８に表示される資料表示画面６０の一例を示す。表示制御部２６は、資料表示画面６０を左半分と右半分の１：１に固定する。参加者は利き手で非同期画面９を操作すると考えられるので、表示制御部２６は利き手側に非同期画面９を表示する。参加者は自分の利き手を端末装置３に設定しておく。

したがって、図２２（ｂ）に示すように、表示制御部２６が画像データ７１を表示する場合、資料表示画面６０を利き手側に表示する。また、図２２（ｃ）に示すように、表示制御部２６は同期画面８に画像データを重ねて表示してもよい。ページの変更に関する操作は図２１と同様である。

＜まとめ＞
以上説明したように端末装置３は、会議資料が持つページ番号とは別に、進行役の端末装置３が表示中の会議資料のページ番号を非同期画面９に表示するため、参加者は進行役の端末装置３が表示している会議資料のページ番号を容易に確認できる。

＜その他の適用例＞
以上、本発明を実施するための最良の形態について実施例を用いて説明したが、本発明はこうした実施例に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。

例えば、同期ページを表示するための情報として、会議開始からの時間を表示してもよい。

また、上記実施形態では、通信システム１００の一例として、ビデオ会議システムの場合について説明したが、これに限るものではなく、ＩＰ（Internet Protocol）電話や、インターネット電話等の電話システムであってもよい。

また、通信システム１００は、移動体に搭載されたカーナビゲーション装置を含むシステムであってもよい。また、端末装置３に画面共有用のＰＣが接続されてもよい。

また、上記実施形態では、コンテンツデータの一例として、画像データ及び音声データについて説明したが、これに限るものではなく、触覚（touch）データであってもよい。この場合、一方の端末装置側で参加者が接触した感覚が、他方の端末装置側に伝達される。更に、コンテンツデータは、嗅覚（smell）データであってもよい。

また、図５などの構成例は、端末装置３による処理の理解を容易にするために、主な機能に応じて分割したものである。処理単位の分割の仕方や名称によって本願発明が制限されることはない。端末装置３の処理は、処理内容に応じて更に多くの処理単位に分割することもできる。また、１つの処理単位が更に多くの処理を含むように分割することもできる。

なお、表示制御部２６は表示処理手段の一例であり、同期ページ取得部２２は第一のページ取得手段の一例であり、非同期ページ取得部２３は第二のページ取得手段の一例であり、操作受付部２４は受付手段の一例であり、ページデータＤＢ２９０１はページ記憶部の一例である。同期ページは第一のページ、非同期ページは第二のページの一例である。

３ 端末装置
８ 同期画面
９ 非同期画面
２２ 同期ページ取得部
２３ 非同期ページ取得部
２４ 操作受付部
２６ 表示制御部
２７ ビデオ会議通信部
３０ サーバシステム
３２ 資料共有部
３３ ビデオ会議通信部
６１ 操作パネル
１００ 通信システム

特開平9-101767号公報

Claims (10)

1. 複数のページを有する共有対象データを、ネットワークを介して通信する他の端末装置と共有する端末装置であって、
   前記共有対象データの少なくとも２つのページを表示装置に表示する表示処理手段と、
   前記他の端末装置が表示する第一のページと、前記第一のページに関する情報を取得する第一のページ取得手段と、
   前記共有対象データの任意の第二のページを取得する第二のページ取得手段と、を有し、
   前記表示処理手段は、前記第一のページ、前記第一のページに関する情報、及び前記第二のページを前記表示装置に表示し、
   前記２つのページの表示モードを受け付ける受付手段を有し、
   前記第二のページの中に、前記第二のページよりも小さい前記第一のページを表示する表示モードを前記受付手段が受け付けた場合、前記表示処理手段は、前記第二のページの中に前記第一のページに関する情報を表示し、
   前記受付手段が前記第一のページに関する情報に対する所定の操作を受け付けた場合、
   前記表示処理手段は、前記第一のページの中に、前記第一のページよりも小さい前記第二のページを表示すると共に、前記第二のページに関する情報を表示し、
   前記受付手段が更に、前記第二のページに関する情報に対する所定の操作を受け付けた場合、前記表示処理手段は、前記第二のページの中に、前記第二のページよりも小さい前記第一のページを表示すると共に、前記第一のページに関する情報を表示する端末装置。
2. 前記第一のページに関する情報は、前記第一のページを表示するための情報である請求項１に記載の端末装置。
3. 前記第一のページに関する情報は、前記第一のページのページ番号であることを特徴とする請求項１又は２に記載の端末装置。
4. 前記第一のページ取得手段が前記第一のページを取得した場合、前記表示処理手段は前記第一のページを取得してから所定期間だけ前記第一のページに関する情報を表示する請求項１〜３のいずれか１項に記載の端末装置。
5. 前記第一のページ取得手段が取得した前記第一のページ、及び、前記第二のページ取得手段が取得した前記第二のページを記憶するページ記憶部を有し、
   前記受付手段が受け付けたページ番号のページが前記ページ記憶部に記憶されている場合、前記第二のページ取得手段は前記ページ記憶部から該ページを読み出し、
   前記受付手段が受け付けたページ番号のページが前記ページ記憶部に記憶されていない場合、前記第二のページ取得手段はネットワークを介して接続された情報処理装置から前記第二のページを取得する請求項１に記載の端末装置。
6. 前記受付手段が、前記第二のページの中に、前記第二のページよりも小さい前記第一のページを表示する表示モードを受け付けた場合、
   又は、前記第二のページと前記第一のページを並べて表示する表示モードを受け付けた場合、
   前記受付手段は前記第二のページに対する操作のみを受け付ける請求項１に記載の端末装置。
7. 前記端末装置が所定の権限を有する場合、
   前記受付手段は前記第一のページ及び前記第二のページに対する操作を受け付ける請求項６に記載の端末装置。
8. 複数の表示装置が接続されており、
   前記表示処理手段は、前記第一のページと前記第二のページをそれぞれ別の表示装置に表示する請求項１〜７のいずれか１項に記載の端末装置。
9. 複数のページを有する共有対象データを、ネットワークを介して通信する他の端末装置と共有する端末装置を、
   前記共有対象データの少なくとも２つのページを表示装置に表示する表示処理手段と、
   前記他の端末装置が表示する第一のページと、前記第一のページに関する情報を取得する第一のページ取得手段と、
   前記共有対象データの任意の第二のページを取得する第二のページ取得手段と、
   前記２つのページの表示モードを受け付ける受付手段、として機能させ、
   前記表示処理手段は、前記第一のページ、前記第一のページに関する情報、及び前記第二のページを前記表示装置に表示し、
   前記第二のページの中に、前記第二のページよりも小さい前記第一のページを表示する表示モードを前記受付手段が受け付けた場合、前記表示処理手段は、前記第二のページの中に前記第一のページに関する情報を表示し、
   前記受付手段が前記第一のページに関する情報に対する所定の操作を受け付けた場合、
   前記表示処理手段は、前記第一のページの中に、前記第一のページよりも小さい前記第二のページを表示すると共に、前記第二のページに関する情報を表示し、
   前記受付手段が更に、前記第二のページに関する情報に対する所定の操作を受け付けた場合、前記表示処理手段は、前記第二のページの中に、前記第二のページよりも小さい前記第一のページを表示すると共に、前記第一のページに関する情報を表示するプログラム。
10. 複数のページを有する共有対象データを、ネットワークを介して通信する他の端末装置と共有する端末装置が行うデータ表示方法であって、
    表示処理手段が、前記共有対象データの少なくとも２つのページを表示装置に表示するステップと、
    第一のページ取得手段が、前記他の端末装置が表示する第一のページと、前記第一のページに関する情報を取得するステップと、
    第二のページ取得手段が、前記共有対象データの任意の第二のページを取得するステップと、
    前記表示処理手段が、前記第一のページ、前記第一のページに関する情報、及び前記第二のページを前記表示装置に表示するステップと、
    受付手段が、前記２つのページの表示モードを受け付けるステップと、
    前記第二のページの中に、前記第二のページよりも小さい前記第一のページを表示する表示モードを前記受付手段が受け付けた場合、前記表示処理手段が、前記第二のページの中に前記第一のページに関する情報を表示するステップと、
    前記受付手段が前記第一のページに関する情報に対する所定の操作を受け付けた場合、
    前記表示処理手段が、前記第一のページの中に、前記第一のページよりも小さい前記第二のページを表示すると共に、前記第二のページに関する情報を表示するステップと、
    前記受付手段が更に、前記第二のページに関する情報に対する所定の操作を受け付けた場合、前記表示処理手段が、前記第二のページの中に、前記第二のページよりも小さい前記第一のページを表示すると共に、前記第一のページに関する情報を表示するステップと、
    を有するデータ表示方法。

Images