JP5644635B2 - 情報配信装置および情報配信方法 - Google Patents

Description

本発明は、ネットワークに接続された各機器の情報を配信する技術に関する。

特許文献１には、ユーザの設定操作を容易にすることができるデータ入出力処理システムが開示されている。

このデータ入出力処理システムにおいて、マルチファンクションプリンタの各ユニットには、シール等によりＱＲコード（登録商標）が貼付されている。ユーザが携帯端末のカメラ機能を使って、所望のユニットに貼付されたＱＲコードを撮影すると、携帯端末は、このＱＲコードをデータ入出力サーバに送信する。データ入出力サーバは、携帯端末からＱＲコードを受信すると、このＱＲコードに紐付けられているユニットの操作画面の表示指示をマルチファンクションプリンタに送信する。これを受けて、マルチファンクションプリンタは、自身の操作パネルに、このＱＲコードに紐付けられているユニットの操作画面を表示し、このユニットに対する操作をユーザから受け付ける。このため、ユーザは、操作したいユニットに貼付されたＱＲコードを携帯端末で撮影するだけで、このユニットの操作画面をマルチファンクションプリンタの操作パネルに表示させて、このユニットを操作することができる。

特開２００７−１０８９４７号公報

しかしながら、特許文献１に記載の技術は、ＱＲコードに紐付けられたユニットの操作画面を対象機器の操作パネルに表示させて、ユーザから操作を受け付けるものであり、対象機器がユーザの手の届かない場所にある場合を考慮していない。

なお、携帯端末を使って機器にアクセスして、この機器の保守・操作を行う技術が知られている。しかし、この技術では、機器のアドレス情報（例えばＩＰアドレス）と、機器専用の保守・操作プログラムとを、予め携帯端末に登録しておく必要があり、複数の機器を保守・操作対象とする場合の利便性が悪い。

本発明は上記事情に鑑みてなされたものであり、本発明の目的は、機器のアクセス情報を知らなくても、携帯端末から機器の保守・操作を行うことが可能な技術を提供することにある。

上記課題を解決するために、本発明において、ネットワーク接続機能を有する各機器には、ＱＲコード等のコードシンボルが付与（印刷、貼付、表示等）されている。情報配信装置は、ネットワークを介してこれらの機器に接続されており、これらの機器から、機器に関する情報を定期あるいは不定期に取得する。

また、情報配信装置は、カメラ機能付き携帯端末からアクセスされると、カメラ機能を利用した撮影プログラムがプラグインされた撮影操作画面データをカメラ機能付き携帯端末に送信する。これを受けて、カメラ機能付き携帯端末は、表示部に撮影操作画面を表示して、撮影プログラムにより、ユーザから撮影操作を受け付ける。そして、ユーザが、所望の機器を、この機器に付与されたコードシンボルを含むようにして撮影すると、撮像データを情報配信装置に送信する。

情報配信装置は、カメラ機能付き携帯端末から撮像データを受信すると、この撮像データに画像認識処理を施して、この撮像データからコードシンボルを検出し、このコードシンボルに紐付けられている機器を特定する。そして、この機器に関する情報が表示された情報ウインドウを備え、かつこの機器の操作プログラムがプラグインされた設定操作画面データを生成して、この設定操作画面データをカメラ機能付き携帯端末に送信する。

これを受けて、カメラ機能付き携帯端末は、表示部に設定操作画面を表示して、操作プログラムにより、ユーザから機器の設定操作を受け付ける。そして、ユーザから設定操作を受け付けると、その操作データを情報配信装置に送信する。

情報配信装置は、カメラ機能付き携帯端末から操作データを受信すると、その操作データに応じた設定指示を、保守・操作対象の機器に送信する。これを受けて、保守・操作対象の機器は、情報配信装置から受信した設定指示に従い設定処理を実施する。

例えば、本発明は、機器に付与されたコードシンボルを用いて、当該機器に関する情報をカメラ機能付き携帯端末に配信する情報配信装置であって、
複数の前記機器から、当該機器に関する情報を取得する情報取得手段と、
前記機器毎に、前記情報取得手段により当該機器から取得した当該機器に関する情報を記憶する情報記憶手段と、
前記機器毎に、前記カメラ機能付き携帯端末から当該機器の設定操作を受け付けるための操作プログラムを記憶するプログラム記憶手段と、
前記カメラ機能付き携帯端末からの要求に応じて、当該カメラ機能付き携帯端末のカメラ機能を利用して撮影された前記機器の撮像データを当該カメラ機能付き携帯端末から取得するための撮影プログラムがプラグインされた撮影操作画面データを当該カメラ機能付き携帯端末に送信する撮影操作画面データ送信手段と、
前記カメラ機能付き携帯端末から受信した前記撮像データに画像認識処理を施して、当該撮像データから前記コードシンボルを検出するコードシンボル検出手段と、
前記コードシンボル検出手段により検出された前記コードシンボルに紐付けられた機器に対応付けられて前記情報記憶手段に記憶されている前記機器に関する情報が表示された情報ウインドウを備え、かつ当該コードシンボルに紐付けられた前記機器に対応付けられて前記プログラム記憶手段に記憶されている前記操作プログラムがプラグインされた設定操作画面データを生成する設定操作画面データ生成手段と、
前記設定操作画面データ生成手段により生成された前記設定操作画面データを前記カメラ機能付き携帯端末に送信する設定操作画面データ送信手段と、
前記カメラ機能付き携帯端末から受信した操作データに応じた設定指示を、前記コードシンボルに紐付けられている前記機器に送信する設定指示送信手段と、
前記カメラ機能付き携帯端末から受信した操作データがメディアデータの再生操作に関するものである場合に、当該カメラ機能付き携帯端末より前記メディアデータを受信して、当該操作データで指定されている前記機器に、当該メディアデータを送信するメディア中継手段と、を有する。
あるいは、本発明は、機器に付与されたコードシンボルを用いて、当該機器に関する情報をカメラ機能付き携帯端末に配信する情報配信装置であって、
複数の前記機器から、当該機器に関する情報を取得する情報取得手段と、
前記機器毎に、前記情報取得手段により当該機器から取得した当該機器に関する情報を記憶する情報記憶手段と、
前記機器毎に、前記カメラ機能付き携帯端末から当該機器の設定操作を受け付けるための操作プログラムを記憶するプログラム記憶手段と、
前記カメラ機能付き携帯端末からの要求に応じて、当該カメラ機能付き携帯端末のカメラ機能を利用して撮影された前記機器の撮像データを当該カメラ機能付き携帯端末から取得するための撮影プログラムがプラグインされた撮影操作画面データを当該カメラ機能付き携帯端末に送信する撮影操作画面データ送信手段と、
前記カメラ機能付き携帯端末から受信した前記撮像データに画像認識処理を施して、当該撮像データから前記コードシンボルを検出するコードシンボル検出手段と、
前記コードシンボル検出手段により検出された前記コードシンボルに紐付けられた前記機器に対応付けられて前記情報記憶手段に記憶されている前記機器に関する情報が表示された情報ウインドウを備え、かつ当該コードシンボルに紐付けられた前記機器に対応付けられて前記プログラム記憶手段に記憶されている前記操作プログラムがプラグインされた設定操作画面データを生成する設定操作画面データ生成手段と、
前記設定操作画面データ生成手段により生成された前記設定操作画面データを前記カメラ機能付き携帯端末に送信する設定操作画面データ送信手段と、
前記カメラ機能付き携帯端末から受信した操作データに応じた設定指示を、前記コードシンボルに紐付けられている前記機器に送信する設定指示送信手段と、
前記機器毎に、当該機器の３次元モデルデータを記憶する３次元モデル記憶手段と、
前記撮像データに画像認識処理を施して、当該撮像データから検出された前記コードシンボルに紐付けられた前記機器に対応付けられて前記３次元モデル記憶手段に記憶されている前記３次元モデルデータを用いて、当該撮像データから前記機器の輪郭を特定し、当該特定した輪郭を用いて、前記機器に関する情報の、当該撮像データ上における表示位置を決定する表示位置決定手段と、を有し、
前記設定操作画面データ生成手段は、
前記撮像データから検出された前記コードシンボルに紐付けられた前記機器に対応付けられて前記情報記憶手段に記憶されている前記機器に関する情報が、当該撮像データとともに、前記表示位置決定手段により決定された当該撮像データ上の表示位置に重ねて表示されるように、前記情報ウインドウを生成する。

本発明によれば、機器のアクセス情報を知らなくても、つまり機器に直接アクセスしなくても、カメラ機能付き携帯端末から機器の保守・操作を行うことが可能となる。

図１は、本発明の一実施の形態に係る保守・操作システムの概略図である。 図２は、本発明の一実施の形態に係る保守・操作システムの動作例を説明するためのシーケンス図である。 図３は、情報配信サーバ１の概略機能構成図である。 図４は、機器関連情報記憶部１０４の登録内容を模式的に表した図である。 図５は、情報配信サーバ１の動作を説明するためのフロー図である。 図６（Ａ）は、カメラ機能付き携帯端末２における撮影操作画面の表示例を示す図であり、図６（Ｂ）は、カメラ機能付き携帯端末２における設定操作画面の表示例を示す図である。 図７（Ａ）および図７（Ｂ）は、カメラ機能付き携帯端末２における設定操作画面の表示例を示す図である。

以下に、本発明の実施の形態について説明する。

図１は、本発明の一実施の形態に係る保守・操作システムの概略図である。

図示するように、本実施の形態に係る保守・操作システムは、ＬＡＮ、ＷＡＮ等のネットワーク４に接続された情報配信サーバ１および複数の機器３と、無線ＡＰ（アクセスポイント）５を介してネットワーク４に接続されたカメラ機能付き携帯端末２と、を有する。ここで、機器３は、事務機器（コピー機、モニタ等）、家電機器（エアコン、冷蔵庫等）、照明機器（シーリングライト、スタンドライト等）、通信機器（電話機、ルータ、ハブ等）、センサ機器（温度計、湿度計、防犯センサ等）、アクチュエータ機器（各種スイッチ等）等に該当し、各機器３には、機器３の識別情報である機器ＩＤが記録されたＱＲコード等のコードシンボル６が付与されている。

以上のような構成において、本実施の形態に係る保守・操作システムは、機器３に付与されたコードシンボル６を用いることにより、情報配信サーバ１経由でカメラ機能付き携帯端末２による機器３の保守・操作を実現する。

図２は、本実施の形態に係る保守・操作システムの動作例を説明するためのシーケンス図である。ここでは、保守・操作対象の機器３がモニタ３Ａである場合を示している。

機器３、３Ａの各々は、機器情報、稼働状態、設定状態等を含む自身の機器関連情報を情報配信サーバ１に定期あるいは不定期に送信する（Ｓ１０１）。これを受けて、情報配信サーバ１は、機器関連情報を、送信元の機器３、３Ａに対応付けて登録・更新する（Ｓ１０２）。

さて、カメラ機能付き携帯端末２は、情報配信サーバ１へのアクセス操作をユーザから受け付けると（Ｓ１０３）、情報配信サーバ１にアクセス要求を送信する（Ｓ１０４）。これを受けて、情報配信サーバ１は、カメラ機能を利用した撮影プログラムがプラグインされた撮影操作画面データをアクセス要求元のカメラ機能付き携帯端末２に送信する（Ｓ１０５）。

つぎに、カメラ機能付き携帯端末２は、情報配信サーバ１から受信した撮影操作画面データに従い撮影操作画面を表示して（Ｓ１０６）、この撮影操作画面データにプラグインされた撮影プログラムによりユーザから撮影操作を受け付ける（Ｓ１０７）。そして、カメラ機能付き携帯端末２は、ユーザの撮影操作に従い、モニタ３Ａに付与されているコードシンボル６が撮像データに含まれるようにモニタ３Ａを撮影し（Ｓ１０８）、その撮像データを情報配信サーバ１に送信する（Ｓ１０９）。

つぎに、情報配信サーバ１は、カメラ機能付き携帯端末２から受信した撮像データに画像認識処理を施して、この撮像データからコードシンボル６を検出し（Ｓ１１０）、このコードシンボル６に記録されている機器ＩＤが付与されたモニタ３Ａの機器関連情報および操作プログラムを特定する（Ｓ１１１）。また、撮像データに画像認識処理を施して、この撮像データからモニタ３Ａの輪郭を特定し、この輪郭に基づいて、撮像データ上におけるモニタ３Ａの機器関連情報の表示位置を決定する（Ｓ１１２）。それから、情報配信サーバ１は、撮像データ上の決定された表示位置にモニタ３Ａの機器関連情報が重ねて表示された情報ウインドウを含み、かつモニタ３Ａの操作プログラムがプラグインされた設定操作画面データを生成する（Ｓ１１３）。そして、この設定操作画面データをカメラ機能付き携帯端末２に送信する（Ｓ１１４）。

つぎに、カメラ機能付き携帯端末２は、情報配信サーバ１から受信した設定操作画面データに従い設定操作画面を表示して（Ｓ１１５）、この設定操作画面データにプラグインされた操作プログラムによりユーザからモニタ３Ａの設定操作を受け付ける。ここで、カメラ機能付き携帯端末２に格納されているメディアデータ（例えばムービーファイルの再生対象データ）の再生操作をユーザより受け付けると（Ｓ１１６）、カメラ機能付き携帯端末２は、この再生操作の内容を示す操作データを情報配信サーバ１に送信する（Ｓ１１７）。

つぎに、情報配信サーバ１は、カメラ機能付き携帯端末２から受信した操作データに従い、カメラ機能付き携帯端末２に格納されているメディアデータの再生指示をモニタ３Ａに送信する（Ｓ１１８）。また、モニタ３Ａおよびカメラ機能付き携帯端末２間の中継処理を開始する（Ｓ１１９）。

モニタ３Ａは、情報配信サーバ１からメディアデータの再生指示を受信すると、この再生指示で指定されているメディアデータ（再生対象データ）の送信要求を情報配信サーバ１に送信する（Ｓ１２０）。そして、情報配信サーバ１は、この送信要求をカメラ機能付き携帯端末２に中継する（Ｓ１２１）。

つぎに、カメラ機能付き携帯端末２は、情報配信サーバ１を介してモニタ３Ａから送られてきた送信要求で指定されているメディアデータ（再生対象データ）を情報配信サーバ１に送信する（Ｓ１２２）。情報配信サーバ１は、この送信要求をモニタ３Ａに中継する（Ｓ１２３）。これを受けて、モニタ３Ａは、情報配信サーバ１を介してカメラ機能付き携帯端末２から受信したメディアデータを再生して表示する（Ｓ１２４）。

つぎに、情報配信サーバ１の詳細について説明する。

なお、カメラ機能付き携帯端末２には、表示部、カメラ機能および無線通信機能を備えたタブレット端末、ＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔ）、携帯電話機等の様々な情報処理装置を利用可能である。また、機器３には、ネットワーク接続機能および他の装置からの遠隔操作機能を備えた様々な装置を利用可能である。そこで、カメラ機能付き携帯端末２および機器３の詳細な説明を省略する。

図３は、情報配信サーバ１の概略機能構成図である。

図示するように、情報配信サーバ１は、ネットワークＩＦ部１０１と、機器通信部１０２と、携帯端末通信部１０３と、機器関連情報記憶部１０４と、操作プログラム記憶部１０５と、３次元モデル記憶部１０６と、機器関連情報取得部１０７と、撮影操作画面データ送信部１０８と、撮像データ受信部１０９と、コードシンボル検出部１１０と、表示位置決定部１１１と、設定操作画面データ生成部１１２と、設定操作画面データ送信部１１３と、操作データ受信部１１４と、設定指示送信部１１５と、中継処理部１１６と、を有する。

ネットワークＩＦ部１０１は、ネットワーク４に接続するためのインターフェースである。

機器通信部１０２は、ネットワークＩＦ部１０１を介して複数の機器３と通信する。

携帯端末通信部１０３は、ネットワークＩＦ部１０１を介してカメラ機能付き携帯端末２と通信する。

機器関連情報記憶部１０４には、複数の機器３各々の機器関連情報が記憶されている。図４は、機器関連情報記憶部１０４の登録内容を模式的に表した図である。図示するように、機器関連情報記憶部１０４には、機器３毎にレコード１０４０が記憶されている。レコード１０４０は、機器ＩＤが登録されたフィールド１０４１と、機器関連情報が登録されたフィールド１０４２と、を有する。また、フィールド１０４２は、機種名、型名、製造者名、ＭＡＣアドレス等の機器情報が登録されたサブフィールド１０４３と、電源のオンオフ状態、動作モード、障害情報、稼働環境情報、機器固有機能のオンオフ状態等の稼働状態が登録されたサブフィールド１０４４と、ＩＰアドレス設定、電源オンオフ設定、動作モード設定、機器固有機能のオンオフ設定等の設定状態が登録されたサブフィールド１０４５と、を有する。

ここで、機器３が複数のユニットで構成されている場合、サブフィールド１０４４、１０４５には、ユニット毎に、稼働状態、設定状態の情報が登録される。例えば、図４において、機器ＩＤ「０００３」の機器３は、本体、給紙トレイ１、および給紙トレイ２で構成されたコピー機であり、サブフィールド１０４４、１０４５には、本体、給紙トレイ１、および給紙トレイ２の各々について稼働状態、設定状態の情報が登録されている。

操作プログラム記憶部１０５には、複数の機器３各々の操作プログラムが機器ＩＤに対応付けられて記憶されている。ここで、操作プログラムは、機器３が情報配信サーバ１経由でカメラ機能付き携帯端末２から遠隔操作を受け付けるためのプログラムであり、カメラ機能付き携帯端末２に機器３固有のＧＵＩ（グラフィカルユーザインターフェース）を提供する。

３次元モデル記憶部１０６には、複数の機器３各々の３次元モデルデータが機器ＩＤに対応付けられて記憶されている。ここで、機器３が複数のユニットで構成されている場合、３次元モデルデータは、これら各ユニットの位置関係が把握できるように構成されている。例えば、コピー機の場合、本体および複数の給紙トレイを備えて構成されているが、コピー機の３次元モデルデータでは、これらのユニットが３次元モデルデータ上のどの部位に相当するかが把握できるように構成されている。

機器関連情報取得部１０７は、機器通信部１０２を介して複数の機器３の各々から定期あるいは不定期に受信した機器関連情報を、送信元の機器３の機器ＩＤに対応付けて、機器関連情報記憶部１０４に登録あるいは更新登録する。

撮影操作画面データ送信部１０８は、携帯端末通信部１０３を介してカメラ機能付き携帯端末２から受け付けたアクセス要求に応答して、携帯端末通信部１０３を介してカメラ機能付き携帯端末２に撮影操作画面データを送信する。ここで、撮影操作画面データには、カメラ機能を利用して撮影された機器３の撮像データをカメラ機能付き携帯端末２から取得するための撮影プログラムがプラグインされており、例えばＷｅｂページデータが利用される。

撮像データ受信部１０９は、携帯端末通信部１０３を介してカメラ機能付き携帯端末２から撮像データを受信する。

コードシンボル検出部１１０は、撮像データ受信部１０９により受信された撮像データに画像認識処理を施して、この撮像データからコードシンボル６を検出し、このコードシンボル６に記録されている機器ＩＤを読み取る。

表示位置決定部１１１は、撮像データ受信部１０９により受信された撮像データに画像認識処理を施し、コードシンボル検出部１１０により読み取られた機器ＩＤに対応付けられて３次元モデル記憶部１０６に記憶されている３次元モデルデータを用いて、この撮像データから、このコードシンボルが付与された機器３の輪郭を特定する。そして、この輪郭を用いて、撮像データ上における機器関連情報の表示位置を決定する。例えば、機器関連情報の表示位置を輪郭近傍（撮像データ内における機器３の近傍）に決定する。

なお、コードシンボル検出部１１０により読み取られた機器ＩＤに対応付けられて３次元モデル記憶部１０６に記憶されている３次元モデルデータが、機器３を構成する複数のユニット各々の位置関係が把握できるように構成されている場合、表示位置決定部１１１は、撮像データから特定した機器３の輪郭と、３次元モデルデータとを用いて、撮像データ上における、機器３を構成する各ユニットの座標情報を特定する。そして、撮像データ上における各ユニットの座標情報を用いて、機器関連情報のうち、各ユニットに関する部分の、撮像データ上における表示位置を決定する。例えば、ユニットに関する部分の機器関連情報の表示位置を、このユニットの座標近傍に決定する。

設定操作画面データ生成部１１２は、コードシンボル検出部１１０により読み取られた機器ＩＤに対応付けられて機器関連情報記憶部１０４に記憶されている機器関連情報が表示された情報ウインドウを備えた設定操作画面データを生成する。

ここで、設定操作画面データには、コードシンボル検出部１１０により読み取られた機器ＩＤに対応付けられて操作プログラム記憶部１０５に記憶された操作プログラムがプラグインされており、例えばＷｅｂページデータが利用される。

また、情報ウインドウは、機器関連情報が、撮像データとともに、表示位置決定部１１１で決定された表示位置に重ねて表示されるように生成される。機器３を構成するユニット毎の表示位置が表示位置決定部１１１により決定されているならば、各ユニットに関する機器関連情報が、撮像データとともに、ユニット毎に決定された表示位置に重ねて表示されるように生成される。

設定操作画面データ送信部１１３は、携帯端末通信部１０３を介してカメラ機能付き携帯端末２に、設定操作画面データ生成部１１２により生成された設定操作画面データを送信する。

操作データ受信部１１４は、携帯端末通信部１０３を介して、カメラ機能付き携帯端末２から操作データを受信する。

設定指示送信部１１５は、操作データ受信部１１４により受信された操作データに応じた設定指示を、この操作データで指定されている機器ＩＤにより特定される機器３に、機器通信部１０２を介して送信する。

中継処理部１１６は、操作データ受信部１１４により受信された操作データがメディアデータの再生操作に関するものである場合に、携帯端末通信部１０３および機器通信部１０２と連携して、カメラ機能付き携帯端末２と保守・操作対象の機器３との間を中継する。

図５は、情報配信サーバ１の動作を説明するためのフロー図である。

機器関連情報取得部１０７は、機器通信部１０２を介していずれかの機器３から、機器ＩＤを伴う機器関連情報を受信すると（Ｓ１００でＹＥＳ）、この機器ＩＤがフィールド１０４１に登録されているレコード１０４０を機器関連情報記憶部１０４から検索する。そして、検索したレコード１０４０のサブフィールド１０４３〜１０４５に、この機器関連情報に含まれている機器情報、稼働状態、および設定状態を登録あるいは更新登録する（Ｓ１０１）。その後、Ｓ１００に戻る。

また、撮影操作画面データ送信部１０８は、携帯端末通信部１０３を介してカメラ機能付き携帯端末２からアクセス要求を受信すると（Ｓ１１０でＹＥＳ）、携帯端末通信部１０３を介してカメラ機能付き携帯端末２に上述の撮影操作画面データを送信する（Ｓ１１１）。これを受けて、カメラ機能付き携帯端末２は、撮影操作画面データに従い撮影操作画面を表示部に表示する。

図６（Ａ）は、カメラ機能付き携帯端末２における撮影操作画面の表示例を示す図である。ここで、符号２０１は、カメラ機能付き携帯端末２のカメラ機能により撮影されている被写体の撮像データを表示するファインダ用ウインドウである。また、符号２０２〜２０４は、ユーザから撮影操作を受け付けるための操作受付ボタンである。例えば、操作受付ボタン２０２は、ファインダ用ウインドウ２０１に表示されている撮像データの記録操作を受け付けるためのボタンであり、操作受付ボタン２０３は、撮像データの記録の取消操作を受け付けるためのボタンであり、そして、操作受付ボタン２０４は、記録された撮像データの情報配信サーバ１への送信操作を受け付けるためのボタンである。

上述したように、撮影操作画面データには撮影プログラムがプラグインされており、カメラ機能付き携帯端末２は、この撮影プログラムを実行することにより、カメラ機能を有効にして撮像データをファインダ用ウインドウ２０１に表示する。また、ユーザによっていずれかの操作受付ボタン２０２〜２０４が選択された場合、選択された操作受付ボタン２０２〜２０４に割り当てられた処理を実行する。

つぎに、撮像データ受信部１０９は、携帯端末通信部１０３を介してカメラ機能付き携帯端末２から撮像データを受信する（Ｓ１１２）。コードシンボル検出部１１０は、この撮像データに画像認識処理を施して、この撮像データからコードシンボル６を検出する。そして、このコードシンボル６に記録されている機器ＩＤを読み取る（Ｓ１１３）。ここで、撮像データから複数のコードシンボル６が検出されたならば、各々のコードシンボル６から機器ＩＤを読み取る。

撮像データからのコードシンボル６の検出、あるいはコードシンボル６からの機器ＩＤの読み取りに失敗した場合（Ｓ１１４でＮＯ）、コードシンボル検出部１１０は、携帯端末通信部１０３を介してカメラ機能付き携帯端末２に失敗通知を送信し（Ｓ１１５）、その後、Ｓ１００に戻る。一方、撮像データからのコードシンボル６の検出、およびコードシンボル６からの機器ＩＤの読み取りに成功した場合（Ｓ１１４でＹＥＳ）、その旨を設定操作画面データ生成部１１２に通知する。

これを受けて、設定操作画面データ生成部１１２は、コードシンボル６から読み取った機器ＩＤがフィールド１０４１に登録されているレコード１０４０を機器関連情報記憶部１０４から読み出すとともに、この機器ＩＤに対応付けられて操作プログラム記憶部１０５に記憶されている操作プログラムを読み出す（Ｓ１１６）。また、表示位置決定部１１１に機器ＩＤを通知する。

ここで、コードシンボル検出部１１０により複数のコードシンボル６が検出され、各コードシンボル６から機器ＩＤが読み取られている場合、設定操作画面データ生成部１１２は、機器ＩＤ毎に機器関連情報のレコード１０４０および操作プログラムを読み出す。また、表示位置決定部１１１に各機器ＩＤを通知する。

表示位置決定部１１１は、撮像データ受信部１０９により受信された撮像データに画像認識処理を施し、設定操作画面データ生成部１１２より通知された機器ＩＤに対応付けられて３次元モデル記憶部１０６に記憶されている３次元モデルデータを用いて、この撮像データから、このコードシンボル６が付与された機器３の輪郭を特定する。そして、この輪郭を用いて、撮像データ上における機器関連情報の表示位置を決定する（Ｓ１１７）。

ここで、設定操作画面データ生成部１１２により複数の機器ＩＤが通知されている場合、表示位置決定部１１１は、機器ＩＤ毎に撮像データ上における機器関連情報の表示位置を決定する。

また、機器３を構成する複数のユニット各々の位置関係が把握できるように３次元モデルデータが構成されている場合、表示位置決定部１１１は、撮像データから特定した機器３の輪郭と、この３次元モデルデータとを用いて、機器３を構成するユニットごとに、撮像データ上における座標情報を特定する。そして、撮像データ上における各ユニットの座標情報を用いて、機器関連情報のうち、各ユニットに関する部分の、撮像データ上における表示位置を決定する。

つぎに、設定操作画面データ生成部１１２は、機器関連情報記憶部１０４から読み出したレコード１０４０のフィールド１０４２に登録されている機器関連情報が、撮像データ受信部１０９により受信された撮像データとともに、表示位置決定部１１１で決定された撮像データ上の表示位置に重ねて表示された情報ウインドウを生成する（Ｓ１１８）。

ここで、コードシンボル検出部１１０により複数のコードシンボル６が検出され、各コードシンボル６から機器ＩＤが読み取られている場合、設定操作画面データ生成部１１２は、機器ＩＤ毎に読み出したレコード１０４０のフィールド１０４２に登録されている機器関連情報が、表示位置決定部１１１によって機器ＩＤ毎に決定された撮像データ上の表示位置に表示されるように情報ウインドウを生成する。

また、表示位置決定部１１１によって機器３を構成する複数のユニット各々の表示位置が決定されている場合、設定操作画面データ生成部１１２は、機器関連情報記憶部１０４から読み出したレコード１０４０のサブフィールド１０４４、１０４５に登録されている稼働状態、設定状態の情報をユニット毎に分割する。そして、ユニット毎に分割されたこれらの情報が、ユニット毎に決定された撮像データ上の表示位置に表示されるよう情報ウインドウを生成する。

それから、設定操作画面データ生成部１１２は、この情報ウインドウを備え、かつ操作プログラム記憶部１０５から読み出した操作プログラムがプラグインされた設定操作画面データを生成し、設定操作画面データ送信部１１３は、携帯端末通信部１０３を介してカメラ機能付き携帯端末２に、この設定操作画面データを送信する（Ｓ１１９）。これを受けて、カメラ機能付き携帯端末２は、設定操作画面データに従い設定操作画面を表示部に表示する。

図６（Ｂ）は、カメラ機能付き携帯端末２における設定操作画面の第一の表示例を示す図である。ここで、符号２１０は、情報ウインドウであり、符号２２０は、設定操作画面データにプラグインされた操作プログラムによって提供されるＧＵＩ（操作ウインドウ）である。

図示するように、情報ウインドウ２１０には、コードシンボル６が付与された機器３（エアコン）の撮像データ上に、このコードシンボル６に記録されている機器ＩＤに対応付けられて機器関連情報記憶部１０４に記憶されている機器関連情報２１１が、この機器３の撮像データ上の座標情報に応じて決定された表示位置に重ねて表示されている。

また、操作ウインドウ２２０には、機器３（エアコン）に対する設定操作をユーザから受け付けるための操作受付ボタン２２１Ａ〜２２１Ｄが表示されている。例えば、操作受付ボタン２２１Ａは、電源のオンオフ設定操作を受け付けるためのボタンであり、操作受付ボタン２２１Ｂは、動作モードの切換え操作を受け付けるためのボタンであり、操作受付ボタン２２１Ｃは、室温設定操作を受け付けるためのボタンであり、そして、操作受付ボタン２２１Ｄは、タイマの切換え操作を受け付けるためのボタンである。

図７（Ａ）は、カメラ機能付き携帯端末２における設定操作画面の第二の表示例を示す図である。ここで、図６（Ｂ）に示す第一の表示例と同じものには同じ符号を付している。この例では、２台の機器３（シーリングライト、スタンドライト）が撮像データに含まれている場合の表示例を示している。

図示するように、情報ウインドウ２１０には、２台の機器３（シーリングライト、スタンドライト）が表示されており、これらの機器３各々に付与されたコードシンボル６に記録されている機器ＩＤに対応する機器関連情報２１１Ａ、２１１Ｂが、それぞれ対応する機器３の撮像データ上の座標情報に応じて決定された表示位置に表示されている。

また、情報ウインドウ２１０に表示されている機器３毎の操作プログラムが設定操作画面データにプラグインされており、これにより、各機器３の操作ウインドウ２２０Ａ、２２０Ｂが設定操作画面上に表示されている。また、操作ウインドウ２２０Ａ、２２０Ｂには、機器３（シーリングライト、スタンドライト）に対する設定操作をユーザから受け付けるための操作受付ボタン２２１Ｅ、２２１Ｆが表示されている。例えば、操作受付ボタン２２１Ｅは、電源のオンオフ設定操作を受け付けるためのボタンであり、操作受付ボタン２２１Ｆは、動作モードの切換え操作を受け付けるためのボタンである。

図７（Ｂ）は、カメラ機能付き携帯端末２における設定操作画面の第三の表示例を示す図である。ここで、図６（Ｂ）、図７（Ａ）に示す第一、第二の表示例と同じものには同じ符号を付している。この例では、複数のユニット（本体、トレイ１、トレイ２）で構成された機器３（コピー機）が撮像データに含まれている場合の表示例を示している。

図示するように、情報ウインドウ２１０には、コードシンボル６が付与された機器３（コピー機）の撮像データ上に、このコードシンボル６に記録されている機器ＩＤに対応付けられて機器関連情報記憶部１０４に記憶されている機器関連情報２１１Ｃ〜２１１Ｆが重ねて表示されている。ここで、機器関連情報２１１Ｃは機器情報であり、機器３の座標情報に応じて決定された表示位置に表示される。機器関連情報２１１Ｄ〜２１１Ｆは、機器３を構成する各ユニット（本体、給紙トレイ１、給紙トレイ２）の稼働状態および設定状態であり、各ユニットの座標情報に応じて決定された表示位置に表示される。

また、操作ウインドウ２２０には、機器３（コピー機）に対する設定操作をユーザから受け付けるための操作受付ボタン２２１Ｇ〜２２１Ｊが表示されている。例えば、操作受付ボタン２２１Ｇは、電源のオンオフ設定操作を受け付けるためのボタンであり、操作受付ボタン２２１Ｈは、動作モード（給紙種別）の切換え操作を受け付けるためのボタンであり、操作受付ボタン２２１Ｊは、動作モード（印刷方式）の切換え操作を受け付けるためのボタンである。

上述したように、設定操作画面データには、情報ウインドウ２１０内の機器３に付与されたコードシンボル６に記録されている機器ＩＤに対応する操作プログラムがプラグインされており、カメラ機能付き携帯端末２は、この操作プログラムを実行することにより、設定操作画面内に操作ウインドウ２２０を表示する。ユーザによっていずれかの操作受付ボタン２２１Ａ〜２２１Ｊが選択された場合に、選択された操作受付ボタン２２１Ａ〜２２１Ｊの設定内容を示す操作データを、この機器ＩＤとともに、情報配信サーバ１に送信する。

つぎに、操作データ受信部１１４が、携帯端末通信部１０３を介してカメラ機能付き携帯端末２から操作データを受信すると（Ｓ１２０でＹＥＳ）、設定指示送信部１１５は、操作データ受信部１１４により受信された操作データの内容に応じた設定指示を生成する。また、この操作データで指定されている機器ＩＤがフィールド１０４１に登録されているレコード１０４０を機器関連情報記憶部１０４から読み出し、このレコード１０４０のサブフィールド１０４５に登録されている設定状態から保守・操作対象の機器３のＩＰアドレスを特定する。そして、機器通信部１０２を介して、このＩＰアドレスが付与された機器３に設定指示を送信する（Ｓ１２１）。

つぎに、操作データ受信部１１４により受信された操作データが、カメラ機能付き携帯端末２に格納されているメディアデータの再生操作に関するものである場合（Ｓ１２２でＹＥＳ）、設定指示送信部１１５は、中継処理部１１６に、この操作データの送信元であるカメラ機能付き携帯端末２のアドレス情報と、この操作データに基づく設定指示の送信先である機器３のアドレス情報とを通知して、両者間の中継開始を指示する。これを受けて、中継処理部１１６は、携帯端末通信部１０３および機器通信部１０２と連携して、操作データ送信元のカメラ機能付き携帯端末２と操作データに基づく設定指示送信先の機器３との間に中継路を確立し、カメラ機能付き携帯端末２から機器３へのメディアデータの送信を中継する（Ｓ１２３）。ここで、カメラ機能付き携帯端末２から送られてくるメディアデータの符号化方式が、機器３側で復号できない方式である場合、中継処理部１１６が、このメディアデータを、機器３側で復号可能な方式の符号化データに変換してから、機器３へ送信するようにしてもよい。

さて、操作データ受信部１１４が、携帯端末通信部１０３を介してカメラ機能付き携帯端末２から終了操作データを受信すると（Ｓ１２４でＹＥＳ）、設定指示送信部１１５は、カメラ機能付き携帯端末２および機器３間に中継路が確立されているならば、中継処理部１１６にこれを切断させ（Ｓ１２５）、その後、Ｓ１００に戻る。なお、終了操作データは、カメラ機能付き携帯端末２において、例えばユーザが表示中の設定操作画面を閉じる操作をした場合に、カメラ機能付き携帯端末２から情報配信サーバ１に送信されるようにすればよい。

以上、本発明の一実施の形態について説明した。

本実施の形態に係る保守・操作システムにおいて、ネットワーク接続機能を有する各機器３には、コードシンボル６が付与（印刷、貼付、表示等）されている。情報配信サーバ１は、ネットワーク４を介してこれらの機器３に接続されており、これらの機器３から機器関連情報を定期あるいは不定期に取得する。

また、情報配信サーバ１は、カメラ機能付き携帯端末２からアクセス要求を受信すると、カメラ機能を利用した撮影プログラムがプラグインされた撮影操作画面データをカメラ機能付き携帯端末２に送信する。これを受けて、カメラ機能付き携帯端末２は、撮影操作画面を表示して、撮影プログラムにより、ユーザから撮影操作を受け付ける。そして、ユーザが所望の機器３を、この機器３に付与されたコードシンボル６を含むようにして撮影すると、撮像データを情報配信サーバ１に送信する。

情報配信サーバ１は、カメラ機能付き携帯端末２から撮像データを受信すると、この撮像データに画像認識処理を施して、この撮像データからコードシンボル６を検出する。そして、このコードシンボル６に紐付けられている機器３を特定して、この機器３の機器関連情報が表示された情報ウインドウ２１０を備え、かつ操作プログラムがプラグインされた設定操作画面データを生成し、この設定操作画面データをカメラ機能付き携帯端末２に送信する。これを受けて、カメラ機能付き携帯端末２は、設定操作画面を表示して、操作プログラムにより、ユーザから設定操作を受け付ける。そして、ユーザから受け付けた設定操作の内容を示す操作データを情報配信サーバ１に送信する。

情報配信サーバ１は、カメラ機能付き携帯端末２から操作データを受け付けると、その操作データに応じた設定指示を、この操作データで指定されている機器３に送信する。機器３は、情報配信サーバ１から受け取った設定指示に従い設定処理を実施する。

したがって、本実施の形態によれば、ユーザは、機器３のアクセス情報を知らなくても、つまり機器３に直接アクセスしなくても、カメラ機能付き携帯端末２から機器３の保守・操作を行うことが可能となる。

また、本実施の形態において、情報配信サーバ１は、カメラ機能付き携帯端末２から受信した撮像データに画像認識処理を施し、この撮像データから検出されたコードシンボル６に紐付けられている３次元モデルデータを用いて、この撮像データから機器３の輪郭を特定する。そして、この輪郭を用いて、この機器３の機器関連情報の、撮像データ上における表示位置を決定し、この機器３の機器関連情報が、この撮像データとともに、この決定された表示位置に重ねて表示されるように、情報ウインドウ２１０を生成する。

したがって、本実施の形態によれば、例えば撮像データに複数の機器３が含まれている場合でも、機器３とこの機器３の機器関連情報との対応関係の把握が容易となり、使い勝手が向上する。

また、本実施の形態において、保守・操作対象の機器３が複数のユニットで構成されている場合、情報配信サーバ１は、撮像データから特定したこの機器３の輪郭と、この機器３の３次元モデルデータとを用いて、この機器３を構成する各ユニットに関する機器関連情報の、撮像データ上における表示位置を決定する。そして、この機器３を構成する各ユニットに関する機器関連情報が、この撮像データとともに、それぞれの表示位置に重ねて表示されるように、情報ウインドウ２１０を生成する。

したがって、本実施の形態によれば、撮像データに含まれている機器３が複数のユニットで構成されている場合に、各ユニットとこのユニットに関する機器関連情報との対応関係の把握が容易となり、使い勝手が向上する。

また、本実施の形態において、情報配信サーバ１は、カメラ機能付き携帯端末２から受信した操作データがメディアデータの再生操作に関するものである場合に、このカメラ機能付き携帯端末２よりメディアデータを受信し、このメディアデータを、この操作データで指定されている機器３に中継する。

したがって、本実施の形態によれば、カメラ機能付き携帯端末２に格納されているメディアデータを、カメラ機能付き携帯端末２の表示画面よりも大きなサイズの表示画面で再生させることが可能となる。

なお、本発明は上記の実施の形態に限定されるものではなく、その要旨の範囲内で数々の変形が可能である。

例えば、上記の実施の形態において、情報配信サーバ１は、カメラ機能付き携帯端末２から受信した撮像データから検出したコードシンボル６が付与された機器３の３次元モデルデータを用いて、この機器３の輪郭を特定し、この輪郭を用いて、この機器３の機器関連情報の、撮像データ上における表示位置を決定している。しかし、本発明はこれに限定されない。例えば、撮像データから検出したコードシンボル６の、撮像データ上における座標情報に基づいて、このコードシンボル６が付与されている機器３の機器関連情報の、撮像データ上における表示位置（例えばコードシンボル６の近傍の位置）を決定するようにしてもよい。

また、上記の実施の形態では、機器ＩＤが記録されたＱＲコード等のコードシンボル６が各機器３に付与されている場合を例にとり説明したが、本発明はこれに限定されない。機器３に付与するコードシンボルは、機器ＩＤを保持できるマーカであればよい。また、例えば電源ランプなどに使用されるＬＥＤの点灯パターンであってもよい。ＬＥＤの点灯パターンを用いることで、離れた場所にある機器３の機器ＩＤの検出を容易にすることができる。ただし、この場合、動画の撮像データから機器３の電源ランプ等の点灯パターンを認識して、その機器３の機器ＩＤを検出することになる。

また、上記の実施の形態において、図３に示す情報配信サーバ１の機能構成は、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）、およびＦＰＧＡ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）などの集積ロジックＩＣによりハード的に実現されるものでもよいし、あるいは、ＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）などの計算機によりソフトウエア的に実現されるものでもよい。もしくは、ＣＰＵ、メモリ、ＨＤＤ、ＤＶＤ−ＲＯＭ等の補助記憶装置、およびＮＩＣ（Ｎｅｔｗｏｒｋ Ｉｎｔｅｒｆａｃｅ Ｃａｒｄ）、モデム等の通信インターフェースを備えたＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）等の汎用コンピュータにおいて、ＣＰＵが所定のプログラムを補助記憶装置からメモリ上にロードして実行することで実現されるものでもよい。

１：情報配信サーバ、２：カメラ機能付き携帯端末、３：機器、４：ネットワーク、５：無線ＡＰ、６：コードシンボル、１０１：ネットワークＩＦ部、１０２：機器通信部、１０３：携帯端末通信部、１０４：機器関連情報記憶部、１０５：操作プログラム記憶部、１０６：３次元モデル記憶部、１０７：機器関連情報取得部、１０８：撮影操作画面データ送信部、１０９：撮像データ受信部、１１０：コードシンボル検出部、１１１：表示位置決定部、１１２：設定操作画面データ生成部、１１３：設定操作画面データ送信部、１１４：操作データ受信部、１１５：設定指示送信部、１１６：中継処理部

Claims (6)

1. 機器に付与されたコードシンボルを用いて、当該機器に関する情報をカメラ機能付き携帯端末に配信する情報配信装置であって、
   複数の前記機器から、当該機器に関する情報を取得する情報取得手段と、
   前記機器毎に、前記情報取得手段により当該機器から取得した当該機器に関する情報を記憶する情報記憶手段と、
   前記機器毎に、前記カメラ機能付き携帯端末から当該機器の設定操作を受け付けるための操作プログラムを記憶するプログラム記憶手段と、
   前記カメラ機能付き携帯端末からの要求に応じて、当該カメラ機能付き携帯端末のカメラ機能を利用して撮影された前記機器の撮像データを当該カメラ機能付き携帯端末から取得するための撮影プログラムがプラグインされた撮影操作画面データを当該カメラ機能付き携帯端末に送信する撮影操作画面データ送信手段と、
   前記カメラ機能付き携帯端末から受信した前記撮像データに画像認識処理を施して、当該撮像データから前記コードシンボルを検出するコードシンボル検出手段と、
   前記コードシンボル検出手段により検出された前記コードシンボルに紐付けられた機器に対応付けられて前記情報記憶手段に記憶されている前記機器に関する情報が表示された情報ウインドウを備え、かつ当該コードシンボルに紐付けられた前記機器に対応付けられて前記プログラム記憶手段に記憶されている前記操作プログラムがプラグインされた設定操作画面データを生成する設定操作画面データ生成手段と、
   前記設定操作画面データ生成手段により生成された前記設定操作画面データを前記カメラ機能付き携帯端末に送信する設定操作画面データ送信手段と、
   前記カメラ機能付き携帯端末から受信した操作データに応じた設定指示を、前記コードシンボルに紐付けられている前記機器に送信する設定指示送信手段と、
   前記カメラ機能付き携帯端末から受信した操作データがメディアデータの再生操作に関するものである場合に、当該カメラ機能付き携帯端末より前記メディアデータを受信して、当該操作データで指定されている前記機器に、当該メディアデータを送信するメディア中継手段と、を有する
   ことを特徴とする情報配信装置。
2. 機器に付与されたコードシンボルを用いて、当該機器に関する情報をカメラ機能付き携帯端末に配信する情報配信装置であって、
   複数の前記機器から、当該機器に関する情報を取得する情報取得手段と、
   前記機器毎に、前記情報取得手段により当該機器から取得した当該機器に関する情報を記憶する情報記憶手段と、
   前記機器毎に、前記カメラ機能付き携帯端末から当該機器の設定操作を受け付けるための操作プログラムを記憶するプログラム記憶手段と、
   前記カメラ機能付き携帯端末からの要求に応じて、当該カメラ機能付き携帯端末のカメラ機能を利用して撮影された前記機器の撮像データを当該カメラ機能付き携帯端末から取得するための撮影プログラムがプラグインされた撮影操作画面データを当該カメラ機能付き携帯端末に送信する撮影操作画面データ送信手段と、
   前記カメラ機能付き携帯端末から受信した前記撮像データに画像認識処理を施して、当該撮像データから前記コードシンボルを検出するコードシンボル検出手段と、
   前記コードシンボル検出手段により検出された前記コードシンボルに紐付けられた機器に対応付けられて前記情報記憶手段に記憶されている前記機器に関する情報が表示された情報ウインドウを備え、かつ当該コードシンボルに紐付けられた前記機器に対応付けられて前記プログラム記憶手段に記憶されている前記操作プログラムがプラグインされた設定操作画面データを生成する設定操作画面データ生成手段と、
   前記設定操作画面データ生成手段により生成された前記設定操作画面データを前記カメラ機能付き携帯端末に送信する設定操作画面データ送信手段と、
   前記カメラ機能付き携帯端末から受信した操作データに応じた設定指示を、前記コードシンボルに紐付けられている前記機器に送信する設定指示送信手段と、
   前記機器毎に、当該機器の３次元モデルデータを記憶する３次元モデル記憶手段と、
   前記撮像データに画像認識処理を施して、当該撮像データから検出された前記コードシンボルに紐付けられた前記機器に対応付けられて前記３次元モデル記憶手段に記憶されている前記３次元モデルデータを用いて、当該撮像データから前記機器の輪郭を特定し、当該特定した輪郭を用いて、前記機器に関する情報の、当該撮像データ上における表示位置を決定する表示位置決定手段と、を有し、
   前記設定操作画面データ生成手段は、
   前記撮像データから検出された前記コードシンボルに紐付けられた前記機器に対応付けられて前記情報記憶手段に記憶されている前記機器に関する情報が、当該撮像データとともに、前記表示位置決定手段により決定された当該撮像データ上の表示位置に重ねて表示されるように、前記情報ウインドウを生成する
   ことを特徴とする情報配信装置。
3. 請求項２に記載の情報配信装置であって、
   前記情報記憶手段は、
   前記機器毎に、当該機器に関する情報として、当該機器を構成する各ユニットに関する情報を記憶しており、
   前記３次元モデル記憶手段は、
   前記機器毎に、複数のユニットで構成される当該機器の前記３次元モデルデータを記憶しており、
   前記表示位置決定手段は、
   前記撮像データから特定した前記機器の輪郭と、当該機器に対応付けられて前記３次元モデル記憶手段に記憶されている前記３次元モデルデータとを用いて、当該機器を構成する各ユニットに関する情報の、当該撮像データ上における表示位置を決定し、
   前記設定操作画面データ生成手段は、
   当該機器を構成する各ユニットに関する情報が、当該撮像データとともに、前記表示位置決定手段により決定された当該撮像データ上の各表示位置に重ねて表示されるように、前記情報ウインドウを生成する
   ことを特徴とする情報配信装置。
4. 請求項２または３に記載の情報配信装置であって、
   前記カメラ機能付き携帯端末から受信した操作データがメディアデータの再生操作に関するものである場合に、当該カメラ機能付き携帯端末より前記メディアデータを受信して、当該操作データで指定されている前記機器に、当該メディアデータを送信するメディア中継手段をさらに有する
   ことを特徴とする情報配信装置。
5. 機器に付与されたコードシンボルを用いて、当該機器に関する情報を情報配信装置からカメラ機能付き携帯端末に配信する情報配信方法であって、
   複数の前記機器各々が、前記情報配信装置に、当該機器に関する情報を定期あるいは不定期に送信し、
   前記情報配信装置が、前記カメラ機能付き携帯端末の要求に従い、カメラ機能を利用した撮影プログラムがプラグインされた撮影操作画面データを、当該カメラ機能付き携帯端末に送信し、
   前記カメラ機能付き携帯端末が、前記情報配信装置から受信した前記撮影操作画面データに従い撮影操作画面を表示して、当該撮影操作画面データにプラグインされた前記撮影プログラムにより、ユーザから撮影操作を受け付けて、操作対象の前記機器の撮像データを前記情報配信装置に送信し、
   前記情報配信装置が、前記カメラ機能付き携帯端末から受信した前記撮像データに画像認識処理を施して、当該撮像データから前記コードシンボルを検出し、当該コードシンボルに紐付けられた操作対象の前記機器を特定して、当該機器に関する情報が表示された情報ウインドウを備え、かつ操作プログラムがプラグインされた設定操作画面データを生成し、当該設定操作画面データを前記カメラ機能付き携帯端末に送信し、
   前記カメラ機能付き携帯端末が、前記情報配信装置から受信した前記設定操作画面データに従い設定操作画面を表示して、当該設定操作画面データにプラグインされた前記操作プログラムにより、ユーザから設定操作を受け付けて、操作対象の前記機器の操作データを前記情報配信装置に送信し、
   前記情報配信装置が、前記カメラ機能付き携帯端末から受信した前記操作データに応じた設定指示を、操作対象の前記機器に送信するとともに、当該操作データがメディアデータの再生操作に関するものである場合に、当該カメラ機能付き携帯端末より前記メディアデータを受信して、当該操作データで指定されている前記機器に、当該メディアデータを送信し、
   複数の前記機器各々が、前記情報配信装置から受信した前記設定指示に従い、設定処理を実施するとともに、当該設定指示が再生指示である場合に、前記情報配信装置から前記メディアデータを受信して再生する
   ことを特徴とする情報配信方法。
6. 機器に付与されたコードシンボルを用いて、当該機器に関する情報を情報配信装置からカメラ機能付き携帯端末に配信する情報配信方法であって、
   複数の前記機器各々が、前記情報配信装置に、当該機器に関する情報を定期あるいは不定期に送信し、
   前記情報配信装置が、前記カメラ機能付き携帯端末の要求に従い、カメラ機能を利用した撮影プログラムがプラグインされた撮影操作画面データを、当該カメラ機能付き携帯端末に送信し、
   前記カメラ機能付き携帯端末が、前記情報配信装置から受信した前記撮影操作画面データに従い撮影操作画面を表示して、当該撮影操作画面データにプラグインされた前記撮影プログラムにより、ユーザから撮影操作を受け付けて、操作対象の前記機器の撮像データを前記情報配信装置に送信し、
   前記情報配信装置が、前記カメラ機能付き携帯端末から受信した前記撮像データに画像認識処理を施して、当該撮像データから前記コードシンボルを検出し、当該コードシンボルに紐付けられた操作対象の前記機器を特定するとともに、前記コードシンボルに紐付けられた前記機器に対応付けられて予め記憶された３次元モデルデータを用いて、前記撮像データから前記機器の輪郭を特定し、当該特定した輪郭を用いて、前記機器に関する情報の、前記撮像データ上における表示位置を決定し、前記コードシンボルに紐付けられた前記機器に関する情報が、前記撮像データとともに、当該決定された前記撮像データ上の表示位置に重ねて表示された情報ウインドウを備え、かつ操作プログラムがプラグインされた設定操作画面データを生成し、当該設定操作画面データを前記カメラ機能付き携帯端末に送信し、
   前記カメラ機能付き携帯端末が、前記情報配信装置から受信した前記設定操作画面データに従い設定操作画面を表示して、当該設定操作画面データにプラグインされた前記操作プログラムにより、ユーザから設定操作を受け付けて、操作対象の前記機器の操作データを前記情報配信装置に送信し、
   前記情報配信装置が、前記カメラ機能付き携帯端末から受信した前記操作データに応じた設定指示を、操作対象の前記機器に送信し、
   複数の前記機器各々が、前記情報配信装置から受信した前記設定指示に従い、設定処理を実施する
   ことを特徴とする情報配信方法。

Images