JP6528566B2 - 表示制御方法、情報処理装置および表示制御プログラム - Google Patents

Description

本発明は、表示制御方法、情報処理装置および表示制御プログラムに関する。

ＡＲ（Augmented Reality、拡張現実）技術を用い、移動端末のカメラにより取得された現実空間の画像から所定のマーカを検出し、そのマーカに対応付けられた仮想オブジェクトを現実空間の画像に重畳してディスプレイに表示する技術が知られている（例えば、特許文献１等を参照。）。

このような技術の用途の一つとして、プラントやビル等の設備の点検作業等において、設備の所定箇所に予め貼り付けられたＡＲマーカ（基準物）に基づき、所定の手順等が定められていることを示すＡＲコンテンツのオブジェクトをカメラ画像に重畳して表示し、作業を支援することが行われている。作業者は、オブジェクトの示す手順等の詳細を知りたい場合、オブジェクトを選択して確定する操作を行うことで、作業時の注意事項や設備の詳細情報等が表示される。

特開２０１２−１０３７８９号公報

上述したオブジェクトの選択は、スマートフォンやタブレット等におけるタッチパネル操作においては何ら問題なく行うことができる。図１はＡＲコンテンツをタップ操作で選択する例を示す図であるが、「手順１」のオブジェクトの上を指等でタップすることで、タップした画面上の座標位置と、オブジェクトの四隅の座標位置により規定されるオブジェクトの座標領域とが比較され、オブジェクトの座標領域にタップ位置が含まれている場合はそのオブジェクトが選択される。

しかし、現場での作業においては、作業効率の観点からＨＭＤ（Head Mounted Display）等を使用することも多く、タッチパネルを指等でタップするといった操作を行うことができない場合が多い。このような手を使えない環境では、音声コマンドにより端末に対して操作を行うものとされる。その場合、端末は、表示用のＡＲコンテンツとして予め用意された全てのオブジェクトのリストに基づき、例えば「つぎ」という音声コマンドに従って次のオブジェクトにフォーカスを遷移していく。そのため、現在のフォーカスのあるオブジェクトから遷移先が近い場合は問題ないが、遷移先が遠い場合は、所望のオブジェクトにフォーカスが遷移するまでに多くの音声コマンドを発しなければならず、操作性が悪かった。

図２はＡＲコンテンツを音声コマンドで選択する例を示す図である。図２（ａ）は「手順１」にフォーカスがあり、「手順３」にフォーカスを遷移したい場合、「手順１」から「手順２」に音声コマンドでフォーカスを遷移し、更に「手順２」から「手順３」に音声コマンドでフォーカスを遷移することで済む。図２（ｂ）は「手順１」にフォーカスがあり、「手順１００」にフォーカスを遷移したい場合であるが、「手順１」から「手順１００」にフォーカスを遷移するために計９９回の音声コマンドを発しなければならず、非常に煩雑である。また、画面に表示されていないＡＲコンテンツにフォーカスが遷移してしまうこともあり、ユーザビリティが低下してしまう問題もある。

そこで、一側面では、表示中のオブジェクトの選択性を向上することのできる制御技術の提供を目的とする。

一つの態様では、撮像装置により撮影された画像から認識された各基準物に対する各ＡＲ（Augmented Reality）コンテンツを前記画像に重畳して表示し、順序情報が割り当てられたＡＲコンテンツ群のうち、表示部に表示する対象として選択された複数のＡＲコンテンツを特定し、特定した前記複数のＡＲコンテンツにそれぞれ割り当てられている第１順序情報に基づいて、特定した前記複数のＡＲコンテンツにそれぞれ第２順序情報を付与し、付与した前記第２順序情報に応じて、特定した前記複数のＡＲコンテンツの選択順を制御する、処理をコンピュータが実行する。

表示中のオブジェクトの選択性を向上することができる。

ＡＲコンテンツをタップ操作で選択する例を示す図である。 ＡＲコンテンツを音声コマンドで選択する例を示す図である。 一実施形態にかかるシステムの構成例を示す図である。 作業者端末のソフトウェア構成例を示す図である。 サーバのソフトウェア構成例を示す図である。 作業者端末のハードウェア構成例を示す図である。 サーバの構成例を示す図である。 作業者端末の保持するデータ例を示す図である。 サーバの保持するデータ例を示す図である。 作業者端末の処理例を示すフローチャートである。 ＡＲマーカの認識の例を示す図である。 音声コマンドによる操作例を示す図である。

以下、本発明の好適な実施形態につき説明する。

＜構成＞
図３は一実施形態にかかるシステムの構成例を示す図である。図３において、作業現場では作業者が使用する作業者端末１のカメラ（撮像装置）により撮影（撮像）が行われるようになっている。撮影される視野内に設備等の各所に付されたＡＲマーカ（基準物）Ｍが含まれる場合、ＡＲ技術により作業者に対してＡＲコンテンツの重畳表示が行われ、作業を支援する。作業者端末１における表示はＨＭＤ（Head Mounted Display）等により行われ、作業者から音声コマンドにより操作が行えることを想定している。ただし、ＨＭＤを用いていなくても、作業者が作業者端末１の操作を手で行うのが困難な状況に対応して音声コマンドにより操作が行われる場合も含まれる。サーバ２は、オンライン時に作業者端末１にＡＲ表示のための基礎データを提供する。

図４は作業者端末１のソフトウェア構成例を示す図である。図４において、作業者端末１は、ＡＲアプリケーション１１により実現される機能として、ＡＲコンテンツ生成部１２と撮影部１３とＡＲマーカ認識部１４とＡＲコンテンツ表示部１５とフォーカス順序制御部１６と音声コマンド適用部１７とを備えている。

ＡＲコンテンツ生成部１２は、オンライン環境においてサーバ２からＡＲ表示のための基礎データを取得し、オフライン環境において表示に用いるＡＲコンテンツを事前に生成する機能を有している。撮影部１３は、カメラ機能により撮影を行う機能を有している。ＡＲマーカ認識部１４は、撮影された画像中からＡＲマーカを認識（ＡＲマーカの特定および配置の認識等）する機能を有している。ＡＲコンテンツ表示部１５は、認識されたＡＲマーカに対応するＡＲコンテンツをカメラの画像に重畳して表示する機能を有している。フォーカス順序制御部１６は、画像上の重畳表示されるＡＲコンテンツに対するフォーカス遷移の順序を制御する機能を有している。音声コマンド適用部１７は、音声コマンドを受け付け、音声コマンドに対応する操作を適用する機能を有している。

図５はサーバ２のソフトウェア構成例を示す図である。図５において、サーバ２は、ＡＲコンテンツ情報提供部２１を備えている。ＡＲコンテンツ情報提供部２１は、作業者端末１からの要求に応じてＡＲ表示のための基礎データ（ＡＲコンテンツ情報）を提供する機能を有している。

図６は作業者端末１のハードウェア構成例を示す図である。図６において、作業者端末１は、バス１００に接続された、マイク１０１とスピーカ１０２とカメラ１０３と表示部１０４と操作部１０５とセンサ部１０６と電力部１０７と無線部１０８と近距離通信部１０９と補助記憶装置１１０と主記憶装置１１１とＣＰＵ１１２とドライブ装置１１３と記録媒体１１４とを備えている。

マイク１０１は、ユーザが発した音声や、その他の音を入力する。スピーカ１０２は、通話機能を使用した際の通話相手先の音声を出力したり、着信音やアプリケーションの効果音等を出力する。カメラ１０３は、端末に予め設定された画角内の実空間の画像（動画像、静止画像）を撮影する。表示部１０４は、ユーザに対してＯＳや各種アプリケーションで設定された画面（端末のＯＳが標準提供する画面、カメラで撮影した画像、画面に投影されるＡＲのオブジェクトデータ等）を表示する。表示部１０４の画面はタッチパネルディスプレイ等でもよく、その場合はユーザが画面に対してタップ／フリック／スクロール等を行った際にその入力情報を取得する入力部としての機能も有する。

操作部１０５は、表示部１０４の画面に表示された操作ボタンや、端末の外部に設けられたボタン等である。なお、操作ボタンは電源ボタンやホームボタン、音量調節ボタン、戻るボタン等でもよい。センサ部１０６は、端末のある時点または継続的な位置や向き、動作等を検出する。例として、ＧＰＳ、加速度センサ、方位センサ、地磁気センサ、ジャイロセンサ等が挙げられる。電力部１０７は、端末の各部に対して電力を供給する。無線部１０８は、例えば、基地局（モバイルネットワーク）からの無線信号／通信データをアンテナ等を用いて受信したり、無線信号を基地局に送信する通信データの送受信部である。近距離通信部１０９は、例えば、赤外線通信やWiFi、Bluetooth（登録商標）等の近距離通信手法を利用し、他の端末等のコンピュータと近距離通信を行うことを可能とする。

補助記憶装置１１０は、ＨＤＤ（Hard Disk Drive）やＳＳＤ（Solid State Drive）等のストレージである。ＣＰＵ１１２からの制御信号に基づき、アプリケーションプログラムやコンピュータに設けられた制御プログラム等を記録し、必要に応じて入出力を行う。主記憶装置１１１は、ＣＰＵ１１２からの指示により補助記憶装置１１０から読み出された実行プログラム等を格納したり、プログラム実行中に得られる各種情報等を記憶する。ＣＰＵ１１２は、ＯＳ等の制御プログラム、または主記憶装置に格納されている実行プログラムに基づき、各種演算や各ハードウェア構成部とのデータの入出力等、コンピュータ全体の処理を制御することにより、各処理を実現する。ドライブ装置１１３は、例えば、記憶媒体等を着脱自在にセットでき、セットした記録媒体に記録された各種情報を読み込んだり、所定の情報を記録媒体に書き込むことができる。記録媒体１１４は、実行プログラム等を格納するコンピュータで読み取り可能な記録媒体である。図４に示した作業者端末１の各部の機能はＣＰＵ１１２によるプログラムの実行により実現される。プログラムは記録媒体で提供されてもよいし、ネットワーク経由で提供されてもよい。

図７はサーバ２の構成例を示す図である。図７において、サーバ２は、システムバス２０１に接続されたＣＰＵ（Central Processing Unit）２０２、ＲＯＭ（Read Only Memory）２０３、ＲＡＭ（Random Access Memory）２０４、ＮＶＲＡＭ（Non-Volatile Random Access Memory）２０５を備えている。また、サーバ２は、Ｉ／Ｆ（Interface）２０６と、Ｉ／Ｆ２０６に接続された、Ｉ／Ｏ（Input/Output Device）２０７、ＨＤＤ（Hard Disk Drive）／フラッシュメモリ２０８、ＮＩＣ（Network Interface Card）２０９と、Ｉ／Ｏ２０７に接続されたモニタ２１０、キーボード２１１、マウス２１２等を備えている。Ｉ／Ｏ２０７にはＣＤ／ＤＶＤ（Compact Disk/Digital Versatile Disk）ドライブ等を接続することもできる。図５に示したサーバ２の各部の機能はＣＰＵ２０２によるプログラムの実行により実現される。プログラムは記録媒体で提供されてもよいし、ネットワーク経由で提供されてもよい。

図８は作業者端末１の保持するデータ例を示す図である。図８において、作業者端末１は、サーバ２から取得した情報に基づくＡＲコンテンツ管理テーブルと、作業者端末１内で生成する画面内表示ＡＲコンテンツ管理テーブルおよびフォーカス対象ＡＲコンテンツ管理テーブルと、予め音声対応のために設定された音声コマンド管理テーブルとを保持している。

ＡＲコンテンツ管理テーブルは、ＡＲマーカ毎に表示するＡＲコンテンツの情報を管理するためのテーブルであり、「マーカＩＤ」「ＡＲコンテンツＩＤ」「座標値」「回転角度」「拡縮率」「テクスチャパス」「選択確定時の表示情報」等の項目を含んでいる。「マーカＩＤ」は、ＡＲマーカを識別する情報である。「ＡＲコンテンツＩＤ」は、ＡＲコンテンツを識別する情報である。「座標値」は、ＡＲコンテンツを表示する位置（認識されたＡＲマーカの位置との相対値）である。「回転角度」は、ＡＲコンテンツを表示する際に画像を回転する角度である。「拡縮率」は、ＡＲコンテンツを表示する際に画像を拡大・縮小する比率である。「テクスチャパス」は、ＡＲコンテンツの画像が保存されているパスである。「選択確定時の表示情報」は、該ＡＲコンテンツが選択されて確定された場合に表示される詳細情報等が保存されているパスである。

画面内表示ＡＲコンテンツ管理テーブルは、認識されたＡＲマーカに対応するＡＲコンテンツのうち、画面内に表示されるＡＲコンテンツとフォーカスの遷移順序を管理するテーブルであり、「ＡＲコンテンツＩＤ」「フォーカス遷移順序」等の項目を含んでいる。「ＡＲコンテンツＩＤ」は、画面内に表示されるＡＲコンテンツを識別する情報である。「フォーカス遷移順序」は、テーブル内のＡＲコンテンツでフォーカスが遷移する順序を示すものであり、デフォルトとしてはＡＲコンテンツＩＤの小さい順となる。ただし、ＡＲコンテンツＩＤの画面内の表示位置に応じて新たな順序情報を付与してもよい。例えば、画面の左側に表示されるオブジェクトに対して、右側に表示されるオブジェクトよりも前の順を付与することができる。

フォーカス対象ＡＲコンテンツ管理テーブルは、トグル方式のフォーカス遷移に対応し、現時点でフォーカスのあるＡＲコンテンツと、次と前のＡＲコンテンツを管理するテーブルであり、「ＡＲコンテンツＩＤ」「次フォーカス遷移対象ＡＲコンテンツＩＤ」「前フォーカス遷移対象ＡＲコンテンツＩＤ」等の項目を含んでいる。「ＡＲコンテンツＩＤ」は、現時点でフォーカスのあるＡＲコンテンツを識別する情報である。「次フォーカス遷移対象ＡＲコンテンツＩＤ」は、順方向の遷移操作（音声コマンドの「つぎ」等）を受けた場合に遷移する先のＡＲコンテンツを識別する情報である。「前フォーカス遷移対象ＡＲコンテンツＩＤ」は、逆方向の遷移操作（音声コマンドの「まえ」等）を受けた場合に遷移する先のＡＲコンテンツを識別する情報である。

音声コマンド管理テーブルは、音声コマンドを管理するテーブルであり、「音声コマンドＩＤ」「音声コマンド」「処理」等の項目を含んでいる。「音声コマンドＩＤ」は、音声コマンドを識別する情報である。「音声コマンド」は、その音声コマンドの内容である。「処理」は、その音声コマンドにより実行される処理内容である。

図９はサーバ２の保持するデータ例を示す図であり、ＡＲコンテンツ管理テーブルを保持している。内容は図８に示したのと同様である。

＜動作＞
図１０は作業者端末１の処理例を示すフローチャートである。図１０において、作業者端末１は、処理を開始すると、ＡＲアプリケーション１１を起動する（ステップＳ１０１）。ＡＲアプリケーション１１は、起動に際し、カメラ機能も起動し、撮影部１３により撮影を開始する。

起動したＡＲアプリケーション１１のＡＲコンテンツ生成部１２は、オンライン環境である場合、最新のＡＲコンテンツ情報（ＡＲコンテンツ管理テーブル）等をサーバ２から取得し（ステップＳ１０２）、ＡＲコンテンツを生成する（ステップＳ１０３）。オンライン環境でない場合、ＡＲコンテンツ生成部１２は、以前に取得されているＡＲコンテンツ情報があれば、それに基づいてＡＲコンテンツを生成する。

次いで、ＡＲマーカ認識部１４は、撮影画像の中にＡＲマーカ（基準物）を認識するのを待機する（ステップＳ１０４）。図１１はＡＲマーカの認識の例を示す図である。すなわち、ＡＲマーカ認識部１４は、撮影画像内からＡＲマーカＭを輪郭により捕捉した上で、輪郭の内部に記録されたパターンによりＡＲマーカＩＤを特定する。そして、ＡＲマーカＭの画像の歪みにより、ＡＲマーカＭの３次元的な配置（ＡＲマーカＭの傾きや回転角度等）を認識する。

図１０に戻り、ＡＲマーカを認識した場合（ステップＳ１０４のＹｅｓ）、ＡＲコンテンツ表示部１５は、ＡＲマーカに対応する既に生成済のＡＲコンテンツを撮影画像に重畳して表示する（ステップＳ１０５）。

次いで、ＡＲコンテンツ表示部１５は、初回は表示したＡＲコンテンツのうち最もＡＲコンテンツＩＤの小さなＡＲコンテンツをフォーカス対象とし、ＡＲコンテンツの表示を強調する（ステップＳ１０６）。

次いで、フォーカス順序制御部１６は、撮像したカメラ画角内のＡＲコンテンツを算出し（ステップＳ１０７）、カメラ画角内のＡＲコンテンツのフォーカス順序を算出する（ステップＳ１０８）。カメラ画角内にＡＲコンテンツがあるか否かは、カメラ画面の四隅の座標値と、ＡＲコンテンツの表示座標値（矩形の場合は四隅の座標値）とを比較し、カメラ画面の座標値範囲内にＡＲコンテンツの表示座標値が含まれるか否かにより判断する。フォーカス順序は、原則として、ＡＲコンテンツＩＤの小さい方から順に付与するが、画面内の表示位置に応じて新たな順序情報を付与してもよい。例えば、画面の左側に表示されるオブジェクトに対して、右側に表示されるオブジェクトよりも前の順を付与することができる。算出したフォーカス順序は画面内表示ＡＲコンテンツ管理テーブルおよびフォーカス対象ＡＲコンテンツ管理テーブルに記録する。

次いで、音声コマンド適用部１７は、音声コマンドの入力を検知すると（ステップＳ１０９のＹｅｓ）、ＡＲコンテンツのフォーカス状態を遷移させる音声コマンドの入力であるか否か判断する（ステップＳ１１０）。図８の音声コマンド管理テーブルにおける音声コマンドＩＤ「１」〜「６」はＡＲコンテンツのフォーカス状態を遷移させる音声コマンドである。

図１０に戻り、フォーカス状態を遷移させる音声コマンドの入力である場合（ステップＳ１１０のＹｅｓ）、フォーカス順序制御部１６は、フォーカス対象となるＡＲコンテンツを変更する（ステップＳ１１１）。フォーカス対象となるＡＲコンテンツの変更はフォーカス対象ＡＲコンテンツ管理テーブルに対して行う。

フォーカス対象となるＡＲコンテンツの変更（ステップＳ１１１）の後、または、ＡＲマーカを認識しなかった場合（ステップＳ１０４のＮｏ）、音声コマンドの入力でない場合（ステップＳ１０９のＮｏ）、フォーカス状態を遷移させる音声コマンドの入力でない場合（ステップＳ１１０のＮｏ）は、ＡＲアプリケーション１１の終了の判断（ステップＳ１１２）に移行する。

ＡＲアプリケーション１１が終了しない場合（ステップＳ１１２のＮｏ）、ＡＲマーカ認識の判断（ステップＳ１０４）に戻る。ＡＲアプリケーション１１が終了する場合（ステップＳ１１２のＹｅｓ）、ＡＲアプリケーション１１を終了する（ステップＳ１１３）。

図１２は音声コマンドによる操作例を示す図である。図１２（ａ）は「手順１」「手順２」「手順１００」のＡＲコンテンツが表示された状態を示しており、「手順１」のＡＲコンテンツにフォーカスがある。

この状態で作業者が「つぎ」または「した」または「みぎ」という音声コマンドを発すると、図１２（ｂ）に示すように、「手順２」のＡＲコンテンツにフォーカスが遷移する。

更に、作業者が「つぎ」または「した」または「みぎ」という音声コマンドを発すると、図１２（ｃ）に示すように、「手順１００」のＡＲコンテンツにフォーカスが遷移する。

フォーカスを逆方向に遷移させる場合には、「まえ」または「うえ」または「ひだり」という音声コマンドを発することで、操作することができる。

なお、日本語による音声コマンドに加え、または、それらに代えて、英語等の他の言語による音声コマンドとしてもよい。例えば、「つぎ」に対応するものとして「ネクスト」がある。

＜総括＞
以上説明したように、本実施形態によれば、表示中のオブジェクトの選択性を向上することができる。

以上、好適な実施の形態により説明した。ここでは特定の具体例を示して説明したが、特許請求の範囲に定義された広範な趣旨および範囲から逸脱することなく、これら具体例に様々な修正および変更を加えることができることは明らかである。すなわち、具体例の詳細および添付の図面により限定されるものと解釈してはならない。

ＡＲコンテンツ管理テーブル（図８）でＡＲコンテンツＩＤが付されて管理されるＡＲコンテンツは「オブジェクトデータ群」の一例である。画面内表示ＡＲコンテンツ管理テーブル（図８）にＡＲコンテンツＩＤが登録されて管理されるＡＲコンテンツは「複数のオブジェクトデータ」の一例である。画面内表示ＡＲコンテンツ管理テーブル（図８）のフォーカス遷移順序は「順序情報」の一例である。表示部１０４（図６）は「表示部」の一例である。

以上の説明に関し、更に以下の項を開示する。
（付記１） 順序情報が割り当てられたオブジェクトデータ群のうち、表示部に表示する対象として選択された複数のオブジェクトデータを特定し、
特定した前記複数のオブジェクトデータについて新たに順序情報を付与し、
付与した前記順序情報に応じて、前記オブジェクトデータの選択順を制御する、
処理をコンピュータが実行することを特徴とする表示制御方法。
（付記２） 特定した前記複数のオブジェクトデータについて表示位置に応じて、前記新たな順序情報を付与する、
ことを特徴とする付記１記載の表示制御方法。
（付記３） 特定した前記複数のオブジェクトデータについて、前記表示部の左側に表示されるオブジェクトに対して、前記表示部の右側に表示されるオブジェクトよりも、前の順を付与する、
ことを特徴とする付記１記載の表示制御方法。
（付記４） 入力された音声情報を解析して、前記音声情報に所定の指示を示す音声が含まれていることを検出すると、第１のオブジェクトデータの選択から、選択順が該第１のオブジェクトの次に該当する第２のオブジェクトデータの選択に切り替える、
ことを特徴とする付記１に記載の表示制御方法。
（付記５） 前記音声は、右、又は、次、又は、ネクストに対応する音声である、
ことを特徴とする付記４に記載の表示制御方法。
（付記６） 順序情報が割り当てられたオブジェクトデータ群のうち、表示部に表示する対象として選択された複数のオブジェクトデータを特定する手段と、
特定した前記複数のオブジェクトデータについて新たに順序情報を付与する手段と、
付与した前記順序情報に応じて、前記オブジェクトデータの選択順を制御する手段と、
を備えたことを特徴とする情報処理装置。
（付記７） 特定した前記複数のオブジェクトデータについて表示位置に応じて、前記新たな順序情報を付与する、
ことを特徴とする付記６記載の情報処理装置。
（付記８） 特定した前記複数のオブジェクトデータについて、前記表示部の左側に表示されるオブジェクトに対して、前記表示部の右側に表示されるオブジェクトよりも、前の順を付与する、
ことを特徴とする付記６記載の情報処理装置。
（付記９） 入力された音声情報を解析して、前記音声情報に所定の指示を示す音声が含まれていることを検出すると、第１のオブジェクトデータの選択から、選択順が該第１のオブジェクトの次に該当する第２のオブジェクトデータの選択に切り替える、
ことを特徴とする付記６記載の情報処理装置。
（付記１０） 前記音声は、右、又は、次、又は、ネクストに対応する音声である、
ことを特徴とする付記９記載の情報処理装置。
（付記１１） 順序情報が割り当てられたオブジェクトデータ群のうち、表示部に表示する対象として選択された複数のオブジェクトデータを特定し、
特定した前記複数のオブジェクトデータについて新たに順序情報を付与し、
付与した前記順序情報に応じて、前記オブジェクトデータの選択順を制御する、
処理をコンピュータに実行させる表示制御プログラム。
（付記１２） 特定した前記複数のオブジェクトデータについて表示位置に応じて、前記新たな順序情報を付与する、
付記１１記載の表示制御プログラム。
（付記１３） 特定した前記複数のオブジェクトデータについて、前記表示部の左側に表示されるオブジェクトに対して、前記表示部の右側に表示されるオブジェクトよりも、前の順を付与する、
付記１１記載の表示制御プログラム。
（付記１４） 入力された音声情報を解析して、前記音声情報に所定の指示を示す音声が含まれていることを検出すると、第１のオブジェクトデータの選択から、選択順が該第１のオブジェクトの次に該当する第２のオブジェクトデータの選択に切り替える、
付記１１記載の表示制御プログラム。
（付記１５） 前記音声は、右、又は、次、又は、ネクストに対応する音声である、
付記１４記載の表示制御プログラム。

１ 作業者端末
１１ ＡＲアプリケーション
１２ ＡＲコンテンツ生成部
１３ 撮影部
１４ ＡＲマーカ認識部
１５ ＡＲコンテンツ表示部
１６ フォーカス順序制御部
１７ 音声コマンド適用部
２ サーバ
２１ ＡＲコンテンツ情報提供部

Claims (9)

1. 撮像装置により撮影された画像から認識された各基準物に対する各ＡＲ（Augmented Reality）コンテンツを前記画像に重畳して表示し、
   順序情報が割り当てられたＡＲコンテンツ群のうち、表示部に表示する対象として選択された複数のＡＲコンテンツを特定し、
   特定した前記複数のＡＲコンテンツにそれぞれ割り当てられている第１順序情報に基づいて、特定した前記複数のＡＲコンテンツにそれぞれ第２順序情報を付与し、
   付与した前記第２順序情報に応じて、特定した前記複数のＡＲコンテンツの選択順を制御する、
   処理をコンピュータが実行することを特徴とする表示制御方法。
2. 撮影装置により撮影された画像に基準物が含まれることを検出すると、前記基準物に対応付けられたオブジェクトデータ群を特定し、
   特定した前記オブジェクトデータ群のうち、表示装置に表示する対象とする複数のオブジェクトデータを抽出し、
   抽出した前記複数のオブジェクトデータにそれぞれ順序情報を付与し、
   付与した前記順序情報に応じて、抽出した前記複数のオブジェクトデータの選択順を制御する、
   処理をコンピュータが実行することを特徴とする表示制御方法。
3. 前記オブジェクトデータ群に含まれる複数のオブジェクトデータそれぞれの表示位置と、前記表示装置の表示範囲とに基づき、前記表示装置に表示する対象とする前記複数のオブジェクトデータを抽出する、
   ことを特徴とする請求項２に記載の表示制御方法。
4. 入力された音声情報を解析して、前記音声情報に所定の指示を示す音声が含まれていることを検出すると、第１のＡＲコンテンツの選択から、選択順が該第１のＡＲコンテンツの次に該当する第２のＡＲコンテンツの選択に切り替える、
   ことを特徴とする請求項１から３のいずれか一項に記載の表示制御方法。
5. 前記音声は、次、又は、ネクストに対応する音声である、
   ことを特徴とする請求項４に記載の表示制御方法。
6. 撮像装置により撮影された画像から認識された各基準物に対する各ＡＲ（Augmented Reality）コンテンツを前記画像に重畳して表示する手段と、
   順序情報が割り当てられたＡＲコンテンツ群のうち、表示部に表示する対象として選択された複数のＡＲコンテンツを特定する手段と、
   特定した前記複数のＡＲコンテンツにそれぞれ割り当てられている第１順序情報に基づいて、特定した前記複数のＡＲコンテンツにそれぞれ第２順序情報を付与する手段と、
   付与した前記第２順序情報に応じて、特定した前記複数のＡＲコンテンツの選択順を制御する手段と、
   を備えたことを特徴とする情報処理装置。
7. 撮影装置により撮影された画像に基準物が含まれることを検出すると、前記基準物に対応付けられたオブジェクトデータ群を特定する手段と、
   特定した前記オブジェクトデータ群のうち、表示装置に表示する対象とする複数のオブジェクトデータを抽出する手段と、
   抽出した前記複数のオブジェクトデータにそれぞれ順序情報を付与する手段と、
   付与した前記順序情報に応じて、抽出した前記複数のオブジェクトデータの選択順を制御する手段と、
   を備えたことを特徴とする情報処理装置。
8. 撮像装置により撮影された画像から認識された各基準物に対する各ＡＲ（Augmented Reality）コンテンツを前記画像に重畳して表示し、
   順序情報が割り当てられたＡＲコンテンツ群のうち、表示部に表示する対象として選択された複数のＡＲコンテンツを特定し、
   特定した前記複数のＡＲコンテンツにそれぞれ割り当てられている第１順序情報に基づいて、特定した前記複数のＡＲコンテンツにそれぞれ第２順序情報を付与し、
   付与した前記第２順序情報に応じて、特定した前記複数のＡＲコンテンツの選択順を制御する、
   処理をコンピュータに実行させる表示制御プログラム。
9. 撮影装置により撮影された画像に基準物が含まれることを検出すると、前記基準物に対応付けられたオブジェクトデータ群を特定し、
   特定した前記オブジェクトデータ群のうち、表示装置に表示する対象とする複数のオブジェクトデータを抽出し、
   抽出した前記複数のオブジェクトデータにそれぞれ順序情報を付与し、
   付与した前記順序情報に応じて、抽出した前記複数のオブジェクトデータの選択順を制御する、
   処理をコンピュータに実行させる表示制御プログラム。