JP7552183B2 - 情報処理装置、プログラム及び情報処理システム - Google Patents

Description

本発明は、情報処理装置、プログラム及び情報処理システムに関する。

近年、複数のクライアント端末とサーバとをネットワークで接続し、ユーザがそれぞれのクライアント端末を用いてリアルタイムで情報交換を行うウエブ会議システムが普及している。従来のウエブ会議システムは、ユーザが自身のクライアント端末で実行しているアプリケーションをお互いにネットワークを介して提供し合う、アプリケーション共有の機能を備えていた（例えば特許文献１参照）。

しかしながら、会議室に設置された共用の端末（情報処理装置）にユーザが操作する情報処理端末を接続して、情報処理端末の出力画像を共有することはできなかった。

本発明の一実施形態は、情報処理装置に接続する情報処理端末の画面共有の手間を軽減できる情報処理装置を提供することを目的とする。

上記した課題を達成するため、本発明の一実施形態は、表示装置の画面に表示させる出力画像を制御する情報処理装置であって、該情報処理装置に接続される情報処理端末の出力画像の受信に利用するデバイスの検知、又は、該情報処理装置に接続される前記情報処理端末の検知、に基づき、前記情報処理端末の出力画像を、前記情報処理装置に接続される前記表示装置の画面に表示させる表示制御手段と、前記情報処理端末の出力画像の受信に利用するデバイスの検知、又は前記情報処理端末の出力画像を前記表示装置に表示させるユーザの選択操作、に基づき、前記情報処理端末の出力画像を前記表示装置に表示させる処理を行う外部入力表示アプリケーションを起動する起動手段と、を有し、前記表示制御手段は、前記起動した前記外部入力表示アプリケーションの画面を前記表示装置に表示させるように制御することを特徴とする。

本発明の一実施形態によれば、情報処理装置に接続する情報処理端末の画面共有の手間を軽減できる。

本実施形態に係る情報処理システムの一例の構成図である。 本実施形態に係るコンピュータの一例のハードウェア構成図である。 本実施形態に係る情報処理装置の一例の機能ブロック図である。 本実施形態に係る情報処理システムの一例の画面遷移図である。 本実施形態に係る会議画面の一例のイメージ図である。 本実施形態に係る情報処理システムにおいて画面共有を行う処理の一例のシーケンス図である。 本実施形態に係る情報処理システムにおいて画面共有を行う処理の一例のシーケンス図である。 対象デバイス情報の一例の構成図である。 本実施形態に係る複数の拠点の情報処理システムの一例の構成図である。 本実施形態に係るテレビ会議の通信の一例について説明する図である。 本実施形態に係る一の拠点の情報処理システムの一例の構成図である。 本実施形態に係る一の拠点の情報処理装置の一例の機能ブロック図である。 本実施形態に係る一の拠点の情報処理装置の一例の画面遷移図である。 本実施形態に係る複数の拠点の情報処理システムにおいて画面共有を行う場合の一の拠点の情報処理装置の処理の一例のシーケンス図である。 本実施形態に係る複数の拠点の情報処理システムにおいて画面共有を行う場合の一の拠点の情報処理装置の処理の一例のシーケンス図である。 本実施形態に係る複数の拠点の情報処理システムにおいて画面共有を行う処理の一例のシーケンス図である。

以下、本発明の各実施形態について、添付の図面を参照しながら説明する。なお、本実施形態ではテレビ会議を行う情報処理システムを例に説明するが、テレビ会議での使用に限定するものでなく、講義やセミナーなど、画面共有を行う様々な情報処理システムに適用できる。

［第１の実施形態］
＜システム構成＞
図１は本実施形態に係る情報処理システムの一例の構成図である。図１の情報処理システム１は、情報処理装置１０、表示装置１２、情報処理端末１４、キャプチャデバイス１６、キーボード１８、及びマウス２０を有する。

情報処理装置１０は、例えば会議室などの部屋に設置された共用の端末である。情報処理装置１０は、例えばＰＣ（Personal Computer）である。情報処理装置１０は通信規格の一例であるＨＤＭＩ（登録商標）（High-Definition Multimedia Interface）等を介して、外部ディスプレイなどの表示装置１２に表示させる画面を制御する。キーボード１８及びマウス２０は情報処理装置１０に対するユーザの各種操作（選択操作など）を受け付ける入力装置の一例である。情報処理装置１０はキーボード１８及びマウス２０からユーザの各種操作を受け付ける。

情報処理装置１０はコンピュータに周辺機器を接続するためのバス規格の一例であるＵＳＢ（Universal Serial Bus）などを介してキャプチャデバイス１６を接続する。キャプチャデバイス１６の接続とは、ＵＳＢ等を介して有線又は無線で通信可能に接続することを言う。キャプチャデバイス１６はＨＤＭＩ等を介して出力される映像信号から画像を取得して出力するハードウェアの一例である。なお、以下ではＨＤＭＩ等を介して出力される映像信号から画像を取得するキャプチャデバイス１６の処理を「キャプチャする」と言うことがある。情報処理装置１０は情報処理端末１４の出力画像の受信に利用するデバイスとしてキャプチャデバイス１６の接続を検知する。

なおキャプチャデバイス１６は、予め情報処理装置１０に接続されていて、情報処理端末１４がキャプチャデバイス１６に接続されることで、キャプチャデバイス１６が情報処理端末１４の出力画像を受信する形態でもよい。また、画面共有を行う際に、キャプチャデバイス１６が情報処理端末１４とともに情報処理装置１０に接続されてもよい。また、後述する実施の形態では、キャプチャデバイス１６の接続を検知する構成が記載されているが、情報処理端末１４の接続を検知して画面を共有する構成でもよい。

情報処理端末１４は、例えば会議などに参加するユーザの個人端末である。情報処理装置１０は例えばＰＣである。情報処理端末１４は通信規格の一例であるＨＤＭＩ等を介してキャプチャデバイス１６を接続する。情報処理端末１４は表示装置１２で画面共有を行う画面共有対象の一例である。

例えば図１の情報処理システム１では情報処理端末１４に表示されている画面をキャプチャデバイス１６でキャプチャし、情報処理端末１４の出力画像として情報処理装置１０に送信する。情報処理装置１０は受信した情報処理端末１４の出力画像を表示装置１２に表示させるように制御することで、会議などに参加するユーザ間で画面共有を行う。

なお、図１に示す情報処理システム１の構成は一例である。情報処理装置１０はＰＣに限定されるものではない。情報処理装置１０は、ＰＪ（Projector：プロジェクタ）、ＩＷＢ（Interactive White Board：相互通信が可能な電子式の黒板機能を有する白板）、デジタルサイネージ等の出力装置、ＨＵＤ（Head Up Display）装置、産業機械、撮像装置、集音装置、医療機器、ネットワーク家電、自動車（Connected Car）等であってもよい。情報処理装置１０は、携帯電話、スマートフォン、タブレット端末、ゲーム機、ＰＤＡ（Personal Digital Assistant）、デジタルカメラ等であってもよい。また、情報処理端末１４はＰＣに限定されるものではない。情報処理端末１４は携帯電話、スマートフォン、タブレット端末、ゲーム機、ＰＤＡ、デジタルカメラ等であってもよい。

＜ハードウェア構成＞
《コンピュータ》
図１に示した情報処理装置１０及び情報処理端末１４は例えば図２に示すハードウェア構成のコンピュータ５００により実現する。図２は本実施形態に係るコンピュータの一例のハードウェア構成図である。

コンピュータ５００は、ＣＰＵ（Central Processing Unit）５０１、ＲＯＭ（Read Only Memory）５０２、ＲＡＭ（Random Access Memory）５０３、ＨＤ５０４、ＨＤＤ（Hard Disk Drive）コントローラ５０５、ディスプレイ５０６、外部機器接続Ｉ／Ｆ（Interface）５０８、ネットワークＩ／Ｆ５０９、データバス５１０、キーボード５１１、ポインティングデバイス５１２、ＤＶＤ－ＲＷ（Digital Versatile Disk Rewritable）ドライブ５１４、メディアＩ／Ｆ５１６を備えている。

ＣＰＵ５０１はプログラムに従ってコンピュータ５００全体の動作を制御する。ＲＯＭ５０２はＩＰＬ等のＣＰＵ５０１の駆動に用いられるプログラムを記憶する。ＲＡＭ５０３はＣＰＵ５０１のワークエリアである。ＨＤ５０４は、プログラム等の各種データを記憶する。ＨＤＤコントローラ５０５は、ＣＰＵ５０１の制御にしたがってＨＤ５０４に対する各種データの読み出し又は書き込みを制御する。

ディスプレイ５０６は、カーソル、メニュー、ウインドウ、文字、又は画像などの各種情報を表示する。外部機器接続Ｉ／Ｆ５０８は、各種の外部機器を接続するためのインタフェースである。この場合の外部機器は、例えば、ＵＳＢメモリ等である。ネットワークＩ／Ｆ５０９は通信ネットワークを利用してデータ通信をするためのインタフェースである。データバス５１０は、ＣＰＵ５０１等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。

キーボード５１１は、文字、数値、各種指示などの入力のための複数のキーを備えた入力手段の一種である。ポインティングデバイス５１２は、各種指示の選択や実行、処理対象の選択、カーソルの移動などを行う入力手段の一種である。ＤＶＤ－ＲＷドライブ５１４は、着脱可能な記録媒体の一例としてのＤＶＤ－ＲＷ５１３に対する各種データの読み出し又は書き込みを制御する。なお、ＤＶＤ－ＲＷに限らず、ＤＶＤ－Ｒ等であってもよい。メディアＩ／Ｆ５１６は、フラッシュメモリ等の記録メディア５１５に対するデータの読み出し又は書き込み（記憶）を制御する。

なお、図１の情報処理装置１０を実現するコンピュータ５００の場合、キーボード５１１は図１のキーボード１８に対応する。ポインティングデバイス５１２は図１のマウス２０に対応する。ディスプレイ５０６は図１の表示装置１２に対応する。

＜機能構成＞
本実施形態に係る情報処理システム１の情報処理装置１０は例えば図３に示すような機能構成により実現する。図３は本実施形態に係る情報処理装置の一例の機能ブロック図である。なお、図３の機能構成は、本実施形態の説明に不要な構成について、適宜省略している。

図３の情報処理装置１０は、外部入力表示アプリケーション３０及びテレビ会議アプリケーション３２を搭載し、実行する。また、情報処理装置１０は対象デバイス情報記憶部３４を実現する。

外部入力表示アプリケーション３０は例えばビューワー（Viewer）アプリケーションであって、キャプチャデバイス１６を介して受信する情報処理端末１４の出力画像を表示装置１２に表示させる処理を行う。テレビ会議アプリケーション３２は、テレビ会議機能を担う。テレビ会議アプリケーション３２を実行することで、情報処理装置１０は起動部４０、デバイス検知部４２、テレビ会議管理部４４、及びＵＩ部４６を実現する。ＵＩ部４６は表示制御部５０及び入力受付部５２を有する。

起動部４０は、後述するようにキャプチャデバイス１６が検知された場合、又は後述するように情報処理端末１４の出力画像を表示装置１２に表示させる選択操作をユーザから受け付けた場合に、外部入力表示アプリケーション３０を起動する。

デバイス検知部４２は、キャプチャデバイス１６の接続及び切断を、ＵＳＢの挿抜イベントなどにより検知し、起動部４０に通知する。テレビ会議管理部４４は、テレビ会議に関する管理を行う。

ＵＩ部４６はユーザインタフェースに関する制御を行う。ＵＩ部４６の表示制御部５０は外部入力表示アプリケーション３０の画面又はテレビ会議アプリケーション３２の会議画面を表示装置１２に表示させるように制御を行う。表示装置１２は表示制御部５０の制御に基づき、外部入力表示アプリケーション３０の画面又はテレビ会議アプリケーション３２の会議画面などの画面を表示する表示部を有する。入力受付部５２は表示装置１２に表示させる画面のユーザの選択操作など、ユーザの各種操作を受け付ける。対象デバイス情報記憶部３４は後述の対象デバイス情報を記憶する。図３の情報処理装置１０は、プログラムを実行することにより、図３のような機能構成を実現している。

＜画面遷移＞
図４は本実施形態に係る情報処理システムの一例の画面遷移図である。情報処理装置１０が表示装置１２に表示させる画面は、例えば図４に示すように遷移する。情報処理装置１０は電源ＯＮにより、表示装置１２にオペレーティングシステム（ＯＳ）のログイン画面１０００を表示する。情報処理装置１０はユーザによるサインインによりデスクトップ画面１０２０を表示装置１２に表示する。情報処理装置１０はユーザによるテレビ会議アプリケーション３２の起動により例えば図５に示すような会議画面１０４０を表示装置１２に表示する。

図５は本実施形態に係る会議画面の一例のイメージ図である。図５の会議画面１０４０は画面下部に画面共有ボタン１０４２を有する。情報処理装置１０を操作するユーザは画面共有ボタン１０４２を押下することで画面共有対象のリストを会議画面１０４０に表示できる。画面共有対象のリストは画面共有する対象を選択するリストである。図５の画面共有対象のリストは画面共有する対象の一つとして、外部入力画面の選択に利用する外部ＰＣ入力１０４４を含んでいる。ユーザは外部ＰＣ入力１０４４を選択することで外部入力画面共有開始を要求できる。

外部入力画面共有開始を要求された情報処理装置１０は外部入力表示アプリケーション３０を起動し、外部入力画面の一例である情報処理端末１４の出力画像を表示装置１２に表示して、画面共有を開始する。また、キャプチャデバイス１６が検知された場合、情報処理装置１０は外部入力表示アプリケーション３０を起動し、外部入力画面の一例である情報処理端末１４の出力画像を表示装置１２に表示して、画面共有を開始する。

なお、図４の画面遷移図の例は、外部入力画面共有終了のイベント発生により、外部入力画面の一例である情報処理端末１４の出力画像による画面共有を終了する。情報処理装置１０はユーザによるテレビ会議アプリケーション３２の終了によりデスクトップ画面１０２０を表示装置１２に表示する。ユーザによるサインアウトにより情報処理装置１０はログイン画面１０００を表示装置１２に表示する。

＜処理＞
図６は本実施形態に係る情報処理システムにおいて画面共有を行う処理の一例のシーケンス図である。図６は、ユーザが図５の会議画面１０４０の外部ＰＣ入力１０４４を選択することで、情報処理端末１４の出力画像による画面共有を行う処理を表している。

ステップＳ１０において、情報処理装置１０を操作するユーザは、会議画面１０４０の外部ＰＣ入力１０４４を選択することで、外部入力画面共有開始を情報処理装置１０に要求する。

外部入力画面共有開始の要求を受け付けたテレビ会議アプリケーション３２の起動部４０はステップＳ１２において、外部入力表示アプリケーション３０を起動する。ステップＳ１４において、外部入力表示アプリケーション３０はＵＳＢなどを介して接続されている周辺機器の中からキャプチャデバイス１６を選択する。ステップＳ１６において、テレビ会議アプリケーション３２の表示制御部５０は外部入力表示アプリケーション３０の起動を確認後、情報処理端末１４の出力画像を表示装置１２に表示させるように制御することで画面共有を開始する。なお、ユーザからの外部入力画面共有終了の要求を受け付けるなどの外部入力画面共有終了のイベント発生によりテレビ会議アプリケーション３２の起動部４０はステップＳ１８において、外部入力表示アプリケーション３０を終了する。

図７は本実施形態に係る情報処理システムにおいて画面共有を行う処理の一例のシーケンス図である。図７はテレビ会議アプリケーション３２がキャプチャデバイス１６の接続を検知することで情報処理端末１４の出力画像による画面共有を行う処理を表している。

会議中、ユーザはＵＳＢなどを介してキャプチャデバイス１６を情報処理装置１０に接続する。ステップＳ３０において、情報処理装置１０のＯＳ６０はＵＳＢが差し込まれたことを表すＵＳＢの挿抜イベントをテレビ会議アプリケーション３２のデバイス検知部４２に通知する。

ステップＳ３２において、デバイス検知部４２は接続を検知したキャプチャデバイス１６が、画面共有の対象のキャプチャデバイス１６であるかの判定処理を行う。ステップＳ３２の判定処理では、対象デバイス情報記憶部３４に記憶されている図８の対象デバイス情報を参照することにより、画面共有の対象のキャプチャデバイス１６であるか否かを判定する。

図８は対象デバイス情報の一例の構成図である。図８の対象デバイス情報は、画面共有の対象のキャプチャデバイス１６に関する情報が記憶されている。図８の対象デバイス情報はデータ項目として、キャプチャデバイス名、ベンダＩＤ、及びプロダクトＩＤを有している。

キャプチャデバイス名は画面共有の対象のキャプチャデバイス１６の名称である。ベンダＩＤは、キャプチャデバイス１６の製造者の識別子を示す。プロダクトＩＤは、キャプチャデバイス１６の識別子を示す。このように、図８の対象デバイス情報に記載されているキャプチャデバイス１６は画面共有の対象となる。

デバイス検知部４２は、接続を検知したキャプチャデバイス１６のベンダＩＤ及びプロダクトＩＤと、図８の対象デバイス情報に記憶されているベンダＩＤ及びプロダクトＩＤとを照合し、画面共有の対象のキャプチャデバイス１６であるかを判定する。画面共有の対象のキャプチャデバイス１６であれば、デバイス検知部４２はステップＳ３４において外部入力表示アプリケーション３０を起動する。

画面共有の対象のキャプチャデバイス１６でなければ、デバイス検知部４２は外部入力表示アプリケーション３０を起動しない。このように、デバイス検知部４２は画面共有の対象のキャプチャデバイス１６の接続を検知した場合に、外部入力表示アプリケーション３０を起動する。

ステップＳ３６において、外部入力表示アプリケーション３０はＵＳＢなどを介して接続された画面共有の対象のキャプチャデバイス１６を選択する。ステップＳ３８においてテレビ会議アプリケーション３２の表示制御部５０は外部入力表示アプリケーション３０の起動を確認後、情報処理端末１４の出力画像を表示装置１２に表示させるように制御することで画面共有を開始する。なお、ＵＳＢが抜き出されたことを表すＵＳＢの挿抜イベントの通知などの外部入力画面共有終了のイベントの発生によりテレビ会議アプリケーション３２の起動部４０はステップＳ４０において、外部入力表示アプリケーション３０を終了する。なお、ステップＳ３０において、情報処理装置１０のＯＳ６０はＵＳＢが差し込まれたことを表すＵＳＢの挿抜イベントをテレビ会議アプリケーション３２のデバイス検知部４２に通知するが、キャプチャデバイス１６が予め情報処理装置１０に接続された状態において、情報処理端末１４の挿抜イベントを検知して、テレビ会議アプリケーション３２のデバイス検知部４２に通知してもよい。この場合には、キャプチャデバイス１６が情報処理装置１０に接続された段階にて、ステップＳ３６における画面共有の対象のキャプチャデバイス１６を選択しておく。その後、情報処理端末１４がＨＤＭＩ等を介してキャプチャデバイス１６に接続される。キャプチャデバイス１６は、情報処理端末１４からのＨＤＭＩ接続（映像入力）を検知すると、その旨をテレビ会議アプリケーション３２のデバイス検知部４２に通知する。通知を受けると、ステップＳ３８において、情報処理端末１４の出力画像を表示装置１２に表示させるように制御することで画面共有を開始する。

以上、本実施形態によれば、会議室に設置された共用の端末（情報処理装置１０）にユーザが操作する情報処理端末１４を接続して、同じ会議室内に設置された外部ディスプレイに情報処理端末１４の画面を表示させて他の参加者と共有する仕組みを実現できる。したがって、本実施形態によれば、情報処理装置１０に接続する情報処理端末１４の画面共有の手間を軽減できる。また、情報処理端末１４の出力画像の画面共有を行う外部入力表示アプリケーション３０を用意し、外部入力表示アプリケーション３０を自動で起動する仕組みを実現できる。したがって、本実施形態によれば、外部入力表示アプリケーション３０を用いた情報処理端末１４の画面共有の手間を軽減できる。

［第２の実施形態］
第１の実施形態に示した情報処理端末１４の出力画像の画面共有は、第２の実施形態に示すように複数の拠点間で行うことができる。図９は本実施形態に係る複数の拠点の情報処理システムの一例の構成図である。

例えば、情報処理システム１００は、複数の通信端末１３０ａ～１３０ｄ間で双方向の画像および音声によるテレビ会議を行なうための情報処理システムである。なお、会議の内容を問わない。

図９の情報処理システム１００は、中継装置１２２、通信管理システム１２４、及び通信端末１３０ａ～１３０ｄを含む。なお、中継装置１２２及び通信管理システム１２４をサーバ群１２０とも呼ぶ。

図９の例では、通信端末１３０ａ、通信端末１３０ｂ、通信端末１３０ｃ、及び通信端末１３０ｄがテレビ会議に参加している。通信端末１３０ａは拠点Ａに設置されて利用者ａによって操作される情報処理装置１０である。通信端末１３０ｂは拠点Ｂに設置されて利用者ｂによって操作される情報処理端末である。通信端末１３０ｃは拠点Ｃに設置されて利用者ｃによって操作されるビデオ会議端末である。通信端末１３０ｄは拠点Ｄに設置されて利用者ｄによって操作される電子黒板である。

通信端末１３０ａ、１３０ｂ、１３０ｃ、及び１３０ｄは、通信ネットワークＮ１又はＮ２を介してサーバ群１２０と接続する。通信ネットワークＮ１又はＮ２は例えば無線通信部分を含む。通信ネットワークＮ１は例えばインターネットを含む。通信ネットワークＮ２は例えば基地局及び移動体通信網等を含む。これにより、通信端末１３０ａ、１３０ｂ、１３０ｃ、及び１３０ｄと、サーバ群１２０とは、相互に通信可能となる。

なお、実施例に記載された装置群は、本明細書に開示された実施形態を実施するための複数のコンピューティング環境のうちの１つを示すものにすぎない。例えば、ある実施形態の中継装置１２２及び通信管理システム１２４は、サーバクラスタといった複数のコンピューティングデバイスを含む。複数のコンピューティングデバイスは、ネットワークや共有メモリなどを含む任意のタイプの通信リンクを介して互いに通信するように構成されており、本明細書に開示された処理を実施する。

図１０は本実施形態に係るテレビ会議の通信の一例について説明する図である。上述したように、情報処理システム１００は、複数の通信端末１３０ａ～１３０ｄ、中継装置１２２、及び通信管理システム１２４によって構築されている。通信端末１３０ａ～１３０ｄは、コンテンツデータの一例としての画像データおよび音データの送受信による通信を行なう。なお、画像データの画像は、動画であっても静止画であってもよく、動画と静止画の両方であってもよい。

テレビ会議において画面共有の開始を要求する要求元としての通信端末は、要求元端末１１１と表す。画面共有の要求先である宛先（中継先）としての通信端末は、宛先端末１１２と表す。なお、各通信端末１３０ａ～１３０ｄは、複数の事業所間での通信や、同じ事業所内の異なる部屋間での通信だけでなく、同じ部屋内での通信や、屋外と屋内または屋外と屋外での通信で使ってもよい。

中継装置１２２は、複数の通信端末１３０ａ～１３０ｄ間で、コンテンツデータを中継する処理を行なう。通信管理システム１２４は、通信端末１３０ａ～１３０ｄからのログイン認証、通信端末１３０ａ～１３０ｄの通信状況の管理、宛先リストの管理、中継装置１２２の通信状況等を一元的に管理する。なお、中継装置１２２及び通信管理システム１２４は、単一のコンピュータによって構築してもよいし、各部（機能または手段）を分割して任意に割り当てられた複数のコンピュータによって構築してもよい。

情報処理システム１００において、要求元端末１１１と宛先端末１１２との間は、通信管理システム１２４を介して、各種の管理情報を送受信するための管理情報用セッションｓｅｉを確立する。

また、要求元端末１１１と宛先端末１１２との間は、中継装置１２２を介して、高解像度の画像データと、中解像度の画像データと、低解像度の画像データと、音データとの４つの各データを送受信するための４つのセッションを確立する。図１０では、これら４つのセッションをまとめて、画像・音データ用セッションｓｅｄとして示している。なお、画像・音データ用セッションｓｅｄは、必ずしも４つのセッションである必要はなく、４つのセッション数より少ない又は多いセッション数であってもよい。

低解像度の画像データは、例えば、横が１６０画素、縦が１２０画素から成り、ベース画像となる。中解像度の画像データは、例えば、横が３２０画素、縦が２４０画素から成る。高解像度の画像データは、例えば、横が６４０画素、縦が４８０画素から成る。狭帯域経路を経由する場合には、ベース画像となる低解像度の画像データのみから成る低画質の画像データを中継する。帯域が比較的広い場合には、ベース画像となる低解像度の画像データ及び中解像度の画像データから成る中画質の画像データを中継する。帯域が非常に広い場合には、ベース画像となる低解像度の画像データ、中画解像度の画像データ、及び高解像度の画像データから成る高画質の画像データを中継する。音データは画像データに比べてデータ量が少ないため、狭帯域経路であっても中継する。

図１１は本実施形態に係る一の拠点の情報処理システムの一例の構成図である。図１１は拠点Ａの情報処理装置１０を含む情報処理システム１を示している。図１１の情報処理システム１は図１の情報処理システム１が通信ネットワークＮ１及びＮ２等の通信ネットワークＮに接続されている。

図１２は本実施形態に係る一の拠点の情報処理装置の一例の機能ブロック図である。図１２の情報処理装置１０は図３の情報処理システム１の構成に、画面共有管理部４８が追加された構成である。画面共有管理部４８は通信ネットワークＮを介して接続された通信端末１３０ｂ～１３０ｄとの画面共有を管理する。

例えば画面共有管理部４８は、起動した外部入力表示アプリケーション３０の画面による画面共有の開始を通信端末１３０ｂ～１３０ｄに要求することで、複数の拠点間での画面共有が可能となる。また、画面共有管理部４８は、外部入力表示アプリケーション３０の画面による画面共有の開始後、通信端末１３０ｂ～１３０ｄの何れかから、画面共有の開始を要求されると、画面共有中の外部入力表示アプリケーション３０の画面による画面共有を終了し、新たな要求に従った画面共有を開始する。

図１３は本実施形態に係る一の拠点の情報処理装置の一例の画面遷移図である。情報処理装置１０が表示装置１２に表示させる画面は、例えば図１３に示すように遷移する。情報処理装置１０は電源ＯＮにより、表示装置１２にＯＳのログイン画面１０００を表示する。情報処理装置１０はユーザによるサインインによりデスクトップ画面１０２０を表示装置１２に表示する。

情報処理装置１０はユーザによるテレビ会議アプリケーション３２の起動により例えば拠点一覧画面１０３０を表示装置１２に表示する。また、情報処理装置１０はユーザによるテレビ会議を行う拠点の選択と、テレビ会議の開始要求により例えば図５に示したような会議画面１０４０を表示装置１２に表示し、選択した複数の拠点間でテレビ会議を開始する。

テレビ会議の開始後、情報処理装置１０を操作するユーザは画面共有ボタン１０４２を押下することで画面共有対象のリストを会議画面１０４０に表示する。ユーザは、画面共有対象のリストから外部ＰＣ入力１０４４を選択することで外部入力画面共有開始を要求して、情報処理端末１４の出力画像をテレビ会議中の他の拠点と画面共有できる。画面共有対象のリストから外部ＰＣ入力１０４４を選択する操作は、表示装置１２に表示させる画面を情報処理端末１４の出力画像に切り替える選択操作の一例である。なお、情報処理端末１４の出力画像に切り替える前に表示装置１２に表示されていた画面は、例えば情報処理装置１０に搭載されているアプリケーション（搭載アプリケーション）の画面などである。

外部入力画面共有開始を要求された情報処理装置１０は外部入力表示アプリケーション３０を起動し、情報処理端末１４の出力画像を表示装置１２に表示すると共に、他の拠点との情報処理端末１４の出力画像の画面共有を開始する。また、キャプチャデバイス１６が検知された場合、情報処理装置１０は外部入力表示アプリケーション３０を起動し、情報処理端末１４の出力画像を表示装置１２に表示すると共に、他の拠点との情報処理端末１４の出力画像の画面共有を開始する。

なお、情報処理装置１０は、他の拠点からの画面共有開始の要求を受信した場合、情報処理端末１４の出力画像による画面共有を終了し、他の拠点からの画面共有開始の要求に従って画面共有を行う。

図１４は本実施形態に係る複数の拠点の情報処理システムにおいて画面共有を行う場合の一の拠点の情報処理装置の処理の一例のシーケンス図である。図４のシーケンス図は一部を除いて図６のシーケンス図の処理と同様であるため、適宜説明を省略する。

図１４のステップＳ１００～Ｓ１０４は図６のステップＳ１０～Ｓ１４の処理と同様である。ステップＳ１０６において、テレビ会議アプリケーション３２の表示制御部５０は外部入力表示アプリケーション３０の起動を確認後、情報処理端末１４の出力画像を表示装置１２に表示させるように制御することで画面共有を開始する。また、画面共有管理部４８はステップＳ１０８において、ビデオ会議中の他の拠点の通信端末１３０ｂ～１３０ｄに画面共有開始の要求を行うことで、情報処理端末１４の出力画像の画面共有を行うことができる。

なお、外部入力画面共有終了の要求を受け付けるか、他の拠点から画面共有開始の要求を受け付けたテレビ会議アプリケーション３２の起動部４０は、ステップＳ１１０において外部入力表示アプリケーション３０を終了する。

図１５は本実施形態に係る複数の拠点の情報処理システムにおいて画面共有を行う場合の一の拠点の情報処理装置の処理の一例のシーケンス図である。図１５のシーケンス図は一部を除いて図７のシーケンス図の処理と同様であるため、適宜説明を省略する。

図１５のステップＳ１３０～Ｓ１３６は図７のステップＳ３０～Ｓ３６の処理と同様である。ステップＳ１３８において、テレビ会議アプリケーション３２の表示制御部５０は外部入力表示アプリケーション３０の起動を確認後、情報処理端末１４の出力画像を表示装置１２に表示させるように制御することで画面共有を開始する。また、画面共有管理部４８はステップＳ１４０において、ビデオ会議中の他の拠点の通信端末１３０ｂ～１３０ｄに画面共有開始の要求を行うことで、情報処理端末１４の出力画像の画面共有を行うことができる。なお、ステップＳ１３０において、情報処理装置１０のＯＳ６０はＵＳＢが差し込まれたことを表すＵＳＢの挿抜イベントをテレビ会議アプリケーション３２のデバイス検知部４２に通知するが、キャプチャデバイス１６が予め情報処理装置１０に接続された状態において、情報処理端末１４の挿抜イベントを検知して、テレビ会議アプリケーション３２のデバイス検知部４２に通知してもよい。この場合には、キャプチャデバイス１６が情報処理装置１０に接続された段階にて、ステップＳ１３６における画面共有の対象のキャプチャデバイス１６を選択しておく。その後、情報処理端末１４がＨＤＭＩ等を介してキャプチャデバイス１６に接続される。キャプチャデバイス１６は、情報処理端末１４からのＨＤＭＩ接続（映像入力）を検知すると、その旨をテレビ会議アプリケーション３２のデバイス検知部４２に通知する。通知を受けると、ステップ１Ｓ３８において、情報処理端末１４の出力画像を表示装置１２に表示させたり、他の拠点の通信端末１３０ｂ～１３０ｄへ情報処理端末１４の出力画像を送信するように制御したりすることで画面共有を開始する。

なお、外部入力画面共有終了の要求を受け付けるか、他の拠点から画面共有開始の要求を受け付けたテレビ会議アプリケーション３２の起動部４０は、ステップＳ１４２において外部入力表示アプリケーション３０を終了する。

図１６は本実施形態に係る複数の拠点の情報処理システムにおいて画面共有を行う処理の一例のシーケンス図である。図１６の通信端末１３０ａ～１３０ｄは同じテレビ会議に参加中である。

ステップＳ２００において、通信端末１３０ａは外部入力表示アプリケーション３０の起動を確認後、情報処理端末１４の出力画像を表示装置１２に表示させるように制御することで画面共有を開始する。また、ステップＳ２０２～Ｓ２０６において、通信端末１３０ａは同じテレビ会議に参加中の他の通信端末１３０ｂ～１３０ｄに、情報処理端末１４の出力画像による画面共有開始の要求を行う。通信端末１３０ａから画面共有開始の要求を受信した他の通信端末１３０ｂ～１３０ｄはステップＳ２０８～Ｓ２１２において、情報処理端末１４の出力画像の画面共有を行うことができる。これにより、同じテレビ会議に参加中の通信端末１３０ａ～１３０ｄは通信端末１３０ａに接続された情報処理端末１４からの出力画像（外部入力）の画面共有中となる。

ステップＳ２１４において、通信端末１３０ｂを操作するユーザは画面共有のための選択操作を行う。ステップＳ２１６～Ｓ２２０において、通信端末１３０ｂは同じテレビ会議に参加中の他の通信端末１３０ａ、１３０ｃ、及び１３０ｄに、画面共有開始の要求を行う。通信端末１３０ｂから画面共有開始の要求を受信した他の通信端末１３０ａ、１３０ｃ、及び１３０ｄはステップＳ２２２～Ｓ２２６において、通信端末１３０ｂから画面共有開始の要求に従った画面共有を行う。これにより、同じテレビ会議に参加中の通信端末１３０ａ～１３０ｄは、通信端末１３０ｂからの画面共有開始の要求に従った画面共有中となる。

図１６に示したように、第２の実施形態の情報処理システム１では後から送信された画面共有開始の要求が優先される。したがって、第２の実施形態の情報処理システム１では自動で起動した外部入力表示アプリケーション３０を、後から画面共有開始の要求が送信されたタイミングで終了できる。また、本実施形態によれば、会議室に設置された共用の端末（情報処理装置１０）にユーザが操作する情報処理端末１４を接続して、別の拠点に設置される他の情報処理端末や外部ディスプレイに情報処理端末の画面を表示させて共有する仕組みを実現できる。したがって、本実施形態によれば、情報処理装置１０に接続する情報処理端末１４の画面共有の手間を軽減できる。

上記で説明した実施形態の各機能は、一又は複数の処理回路によって実現することが可能である。ここで、本明細書における「処理回路」とは、電子回路により実装されるプロセッサのようにソフトウェアによって各機能を実行するようプログラミングされたプロセッサや、上記で説明した各機能を実行するよう設計されたASIC(Application Specific Integrated Circuit)、DSP（digital signal processor）、FPGA（field programmable gate array）や従来の回路モジュール等のデバイスを含むものとする。

１、１００ 情報処理システム
１０ 情報処理装置
１２ 表示装置
１４ 情報処理端末
１６ キャプチャデバイス
３０ 外部入力表示アプリケーション
３２ テレビ会議アプリケーション
３４ 対象デバイス情報記憶部
４０ 起動部
４２ デバイス検知部
４４ テレビ会議管理部
４６ ＵＩ部
４８ 画面共有管理部
５０ 表示制御部
５２ 入力受付部
１３０ａ～１３０ｄ 通信端末
１０４０ 会議画面
Ｎ１、Ｎ２ 通信ネットワーク

特開２０１６－３３８３７号公報

Claims (14)

1. 表示装置の画面に表示させる出力画像を制御する情報処理装置であって、
   該情報処理装置に接続される情報処理端末の出力画像の受信に利用するデバイスの検知、又は、該情報処理装置に接続される前記情報処理端末の検知、に基づき、前記情報処理端末の出力画像を、前記情報処理装置に接続される前記表示装置の画面に表示させる表示制御手段と、
   前記情報処理端末の出力画像の受信に利用するデバイスの検知、又は前記情報処理端末の出力画像を前記表示装置に表示させるユーザの選択操作、に基づき、前記情報処理端末の出力画像を前記表示装置に表示させる処理を行う外部入力表示アプリケーションを起動する起動手段と、
   を有し、
   前記表示制御手段は、前記起動した前記外部入力表示アプリケーションの画面を前記表示装置に表示させるように制御すること
   を特徴とする情報処理装置。
2. 表示装置の画面に表示させる出力画像を制御する情報処理装置であって、
   該情報処理装置に接続される情報処理端末の出力画像の受信に利用するデバイスの検知、又は、該情報処理装置に接続される前記情報処理端末の検知、に基づき、前記情報処理端末の出力画像を、前記情報処理装置に接続される前記表示装置の画面に表示させる表示制御手段、
   を有し、
   前記表示制御手段は、前記情報処理装置に搭載された搭載アプリケーションの画面又は前記情報処理端末の出力画像の画面を切り替えて前記表示装置に表示させるように制御すること
   を特徴とする情報処理装置。
3. 前記表示制御手段は、更に
   該情報処理装置に接続される前記情報処理端末の出力画像を前記表示装置に表示させるユーザの選択操作、に基づき、前記情報処理端末の出力画像を前記表示装置に表示させること
   を特徴とする請求項１又は２記載の情報処理装置。
4. 前記デバイスの接続を検知するデバイス検知手段、を更に有し、
   前記起動手段は、前記デバイス検知手段が前記デバイスの接続を検知すると、前記外部入力表示アプリケーションを起動すること
   を特徴とする請求項１記載の情報処理装置。
5. 前記デバイス検知手段は、対象の前記デバイスが記載されている情報を参照し、対象の前記デバイスの接続を検知すること
   を特徴とする請求項４記載の情報処理装置。
6. 前記表示装置に表示させる画面を前記情報処理端末の出力画像に切り替える選択操作をユーザから受け付ける入力受付手段、を更に有する
   請求項１乃至５の何れか一項に記載の情報処理装置。
7. ネットワークを介して接続された１以上の他の情報処理装置との画面共有を管理する画面共有管理手段を更に有し、
   前記画面共有管理手段は、前記表示装置に表示させる前記情報処理端末の出力画像による画面共有の開始を前記１以上の他の情報処理装置に要求すること
   を特徴とする請求項１乃至６の何れか一項に記載の情報処理装置。
8. 前記画面共有管理手段は、前記１以上の他の情報処理装置の何れかから、前記画面共有の開始を要求されると、前記情報処理端末の出力画像の前記表示装置への表示を終了させること
   を特徴とする請求項７記載の情報処理装置。
9. 表示装置の画面に表示させる出力画像を制御する情報処理装置を、
   該情報処理装置に接続される情報処理端末の出力画像の受信に利用するデバイスの検知、又は、該情報処理装置に接続される前記情報処理端末の検知、に基づき、前記情報処理端末の出力画像を、前記情報処理装置に接続される前記表示装置の画面に表示させる表示制御手段、
   前記情報処理端末の出力画像の受信に利用するデバイスの検知、又は前記情報処理端末の出力画像を前記表示装置に表示させるユーザの選択操作、に基づき、前記情報処理端末の出力画像を前記表示装置に表示させる処理を行う外部入力表示アプリケーションを起動する起動手段
   として機能させ、
   前記表示制御手段は、前記起動した前記外部入力表示アプリケーションの画面を前記表示装置に表示させるように制御すること
   を特徴とするプログラム。
10. 表示装置の画面に表示させる出力画像を制御する情報処理装置を、
    該情報処理装置に接続される情報処理端末の出力画像の受信に利用するデバイスの検知、又は、該情報処理装置に接続される前記情報処理端末の検知、に基づき、前記情報処理端末の出力画像を、前記情報処理装置に接続される前記表示装置の画面に表示させる表示制御手段、
    として機能させ、
    前記表示制御手段は、前記情報処理装置に搭載された搭載アプリケーションの画面又は前記情報処理端末の出力画像の画面を切り替えて前記表示装置に表示させるように制御すること
    を特徴とするプログラム。
11. 表示装置と、前記表示装置の画面に表示させる出力画像を制御する情報処理装置とを有する情報処理システムであって、
    前記情報処理装置は、
    該情報処理装置に接続される情報処理端末の出力画像の受信に利用するデバイスの検知、又は、該情報処理装置に接続される前記情報処理端末の検知、に基づき、前記情報処理端末の出力画像を、前記情報処理装置に接続される前記表示装置の画面に表示させる表示制御手段と、
    前記情報処理端末の出力画像の受信に利用するデバイスの検知、又は前記情報処理端末の出力画像を前記表示装置に表示させるユーザの選択操作、に基づき、前記情報処理端末の出力画像を前記表示装置に表示させる処理を行う外部入力表示アプリケーションを起動する起動手段と、
    を有し、
    前記表示装置は、
    前記表示制御手段の制御に基づき、前記情報処理端末の出力画像を表示する表示手段、
    を有し、
    前記表示制御手段は、前記起動した前記外部入力表示アプリケーションの画面を前記表示装置に表示させるように制御すること
    を特徴とする情報処理システム。
12. 表示装置と、前記表示装置の画面に表示させる出力画像を制御する情報処理装置とを有する情報処理システムであって、
    前記情報処理装置は、
    該情報処理装置に接続される情報処理端末の出力画像の受信に利用するデバイスの検知、又は、該情報処理装置に接続される前記情報処理端末の検知、に基づき、前記情報処理端末の出力画像を、前記情報処理装置に接続される前記表示装置の画面に表示させる表示制御手段、
    を有し、
    前記表示装置は、
    前記表示制御手段の制御に基づき、前記情報処理端末の出力画像を表示する表示手段、
    を有し、
    前記表示制御手段は、前記情報処理装置に搭載された搭載アプリケーションの画面又は前記情報処理端末の出力画像の画面を切り替えて前記表示装置に表示させるように制御すること
    を特徴とする情報処理システム。
13. 表示装置の画面に表示させる出力画像を制御する１以上の情報処理装置を有する情報処理システムであって、
    前記情報処理装置は、
    該情報処理装置に接続される情報処理端末の出力画像の受信に利用するデバイスの検知、又は、該情報処理装置に接続される前記情報処理端末の検知、に基づき、前記情報処理端末の出力画像を、前記情報処理装置に接続される前記表示装置の画面に表示させる表示制御手段と、
    ネットワークを介して接続された１以上の他の情報処理装置との前記情報処理端末の出力画像の画面共有を管理する画面共有管理手段と、
    前記情報処理端末の出力画像の受信に利用するデバイスの検知、又は前記情報処理端末の出力画像を前記表示装置に表示させるユーザの選択操作、に基づき、前記情報処理端末の出力画像を前記表示装置に表示させる処理を行う外部入力表示アプリケーションを起動する起動手段と、
    を有し、
    前記表示制御手段は、前記起動した前記外部入力表示アプリケーションの画面を前記表示装置に表示させるように制御すること
    を特徴とする情報処理システム。
14. 表示装置の画面に表示させる出力画像を制御する１以上の情報処理装置を有する情報処理システムであって、
    前記情報処理装置は、
    該情報処理装置に接続される情報処理端末の出力画像の受信に利用するデバイスの検知、又は、該情報処理装置に接続される前記情報処理端末の検知、に基づき、前記情報処理端末の出力画像を、前記情報処理装置に接続される前記表示装置の画面に表示させる表示制御手段と、
    ネットワークを介して接続された１以上の他の情報処理装置との前記情報処理端末の出力画像の画面共有を管理する画面共有管理手段と、
    を有し、
    前記表示制御手段は、前記情報処理装置に搭載された搭載アプリケーションの画面又は前記情報処理端末の出力画像の画面を切り替えて前記表示装置に表示させるように制御すること
    を特徴とする情報処理システム。

Images