JP2007011963A - 端末装置による情報処理方法およびシステム - Google Patents

Abstract

【課題】 端末装置で対象物を指示することにより、その対象物の属性情報を端末装置に表示させる端末装置による情報処理方法およびシステムを提供する。
【解決手段】 本情報処理システムは、対象物１を指示して同心円状の干渉模様２の光を照射するポインタ３、通信装置４および表示画面５を有する携帯端末６と、干渉模様２を検出する検出装置７と、対象物の配置情報と属性情報とを対応させて格納した記憶装置９と、検出装置７からの検出信号に基いてポインタ３の光軸１１を算出し、この光軸１１と対象物の配置情報とに基づいて光軸１１が交差する対象物を特定する演算装置（ＰＣ）１０とを備える。この特定した対象物の属性情報は携帯端末６の通信装置４へ送信され、表示画面５に表示される。携帯端末６から操作コマンドを所望の対象物に送信することにより、その対象物を保守または制御する。
【選択図】 図１

Description

本発明は端末装置による情報処理方法およびシステムに係り、特に端末装置で対象物を指示することにより、その対象物の属性情報を端末装置に表示させる端末装置による情報処理方法およびシステムに関するものである。

今日の家庭やオフィスでは複数（種類）の電気電子機器が設置されていることが多く、その場合、これらの機器ごとに操作リモコンを用いて、あるいは機器付属の操作ボタンを用いて操作する必要がある。これらの機器の例としては、例えば、テレビ、ＤＶＤレコーダ、エアコン、冷蔵庫、洗濯機、シーリング（照明器具）、パソコン、プリンタ、ＦＡＸ装置、コピー機等が挙げられが、これらに限定されない。これらの機器を操作する場合、操作リモコンが手元にないときはそのリモコンの置き場を探す必要があり、またはその機器の位置する場所に行って機器を操作する必要があり、操作性が悪い。また、これらの機器について修理や交換品が必要な場合、その修理、その交換品あるいは交換方法は、その機器の操作説明書を探して見る、あるいはその機器を直に調べなければならず、不便である。

この種の問題に関連して、例えば特許文献１には、複数種類の電子機器の選択と各電子機器の複数種類の動作の選択を容易にする適応的操作支援装置が提案されている。この装置では、携帯電話装置を用い、電子機器の選択とその動作の選択を行う。これによって、テレビ、電話機、インターホンなどの電子機器の操作を行うことを可能にする。携帯電話装置の液晶表示パネルには、電子機器と、その動作とが表示される。各電子機器の１つを選択したとき、その選択された電子機器によって達成される複数種類の各動作を表示する。この表示にあたっては、操作の可能性が最も高いものから順に表示されて選択を可能にする。これによって最優先選択が可能になり、携帯電話装置の操作回数を低減し、操作性の向上が図られるというものである。
特開２００３−７００７５号公報

しかしながら、上記特許文献１の方法では、始めに複数の電子機器の中から所望の１つの電子機器を選択するという操作が必要であり、操作性の面で充分とは言えない。そして、この方法では、操作対象の電子機器の数が増えれば増えるほど操作性が悪くなるという問題がある。携帯電話装置の小さな表示画面で多数の電子機器の中から所望の１つの電子機器を選択することは容易ではないからである。また、従来の方法では、この種の機器について修理あるいは交換品が必要な場合には、当該操作説明書を参照し、電話やＦＡＸ等で個別に修理を依頼し、あるいは交換品を注文する必要があり、この点改善の余地があった。

従って本発明の目的は、端末装置で対象物を指示することにより、その対象物の属性情報を端末装置に表示させる端末装置による情報処理方法およびシステムを提供することにある。

上記目的は、端末装置に備えたポインタにより対象物を指示して同心円状の干渉模様の光を照射し、検出装置により前記干渉模様を検出し、前記検出装置からの検出信号に基いて前記ポインタの光軸を算出し、予め記憶装置に対象物の配置情報と属性情報とを対応させて格納しており、前記光軸が交差する対象物の配置情報から前記対象物の属性情報を特定し、前記特定した対象物の属性情報を前記端末装置に表示させる、端末装置による情報処理方法により達成される。前記端末装置は、携帯端末、例えば携帯電話やＰＤＡなどが好ましいが、それには限定されず、ＰＣ等のコンピュータ、例えばノートＰＣなどでもよい。

ここで、前記対象物を操作するための操作コマンドは、前記対象物の属性情報に基づいて前記端末装置から前記対象物に送信することができる。前記操作コマンドは、前記対象物を保守するためのもの、または前記対象物を制御するためのものとすることができる。前記操作コマンドはネットワーク経由で前記対象物に送信することができる。また、前記特定した対象物の属性情報はネットワーク経由で前記端末装置に送信することができる。さらに、２箇所における前記端末装置で前記ポインタの光軸をそれぞれ算出し、前記算出した２つの光軸の距離が閾値より小さい交差近傍領域を前記対象物の配置情報として前記記憶装置へ格納することができる。

上記目的はまた、対象物を指示して同心円状の干渉模様の光を照射するポインタおよび通信装置を有する端末装置と、前記干渉模様を検出する検出装置と、対象物の配置情報と属性情報とを対応させて格納した記憶装置と、前記検出装置からの検出信号に基いて前記ポインタの光軸を算出し、前記光軸と前記対象物の配置情報とに基づいて前記光軸が交差する対象物を特定する演算装置とを備え、前記特定した対象物の属性情報を前記端末装置の通信装置へ送信し表示させる、端末装置による情報処理システムにより、達成される。

ここで、前記端末装置は、前記対象物の属性情報に基づいて前記対象物を操作するための操作コマンドを前記対象物に送信可能である。前記操作コマンドは、前記対象物を保守するためのもの、または前記対象物を制御するためのものとすることができる。前記操作コマンドはネットワーク経由で前記対象物に送信可能である。前記特定した対象物の属性情報は前記演算装置に接続されたサーバーを介してネットワーク経由で前記端末装置に送信可能である。また、前記記憶装置は前記対象物の配置情報を格納する第１の記憶装置と前記対象物の属性情報を格納する第２の記憶装置とを含み、前記第１の記憶装置が前記演算装置に接続され、前記第２の記憶装置が前記サーバーに接続されるようにすることができる。前記演算装置は、２箇所における前記端末装置で前記ポインタの光軸をそれぞれ算出し、前記算出した２つの光軸の距離が閾値より小さい交差近傍領域を前記対象物の配置情報として前記記憶装置へ格納するようにすることができる。

本発明に係る端末装置は、対象物を指示して同心円状の干渉模様の光を照射するポインタと、前記干渉模様の検出信号に基いて算出された前記ポインタの光軸と交差する対象物の属性情報を受信する通信装置と、前記受信した対象物の属性情報を表示する表示装置とを有する。また、前記対象物を操作するための操作コマンドは、前記通信装置を介して前記対象物に送信可能である。前記表示装置は、例えば表示画面とすることができる。

本発明によれば、端末装置で対象物を指示することにより、その対象物の属性情報を端末装置に表示させる端末装置による情報処理方法およびシステムを得ることができる。これにより、実空間の対象物（物体）を指示する行為により、指示した対象物の情報を手元の端末装置の表示画面等の表示装置で閲覧でき、その表示装置を用いてキー操作あるいはタッチパネル操作等で対象物を操作でき、ユーザーにとって判りやすい操作を可能とする。また、対象物に関し、修理あるいは交換品が必要な場合には、端末装置の表示装置を用いてキー操作あるいはタッチパネル操作等でネットワーク、例えばインターネットを介して修理を依頼し、あるいは交換品を注文することが可能である。

以下、本発明の実施例を説明する。本実施例では、端末装置として携帯端末を例にとって説明するが、本発明はこれに限定されない。すなわち、本発明では、携帯端末、例えば携帯電話やＰＤＡなどが小型軽量で好ましいが、それには限定されず、ＰＣ等のコンピュータ、例えばノートＰＣなどでもよい。また、本実施例では、対象物の属性情報を端末装置に表示させる手段として表示画面を例にとって説明するが、本発明は表示画面等の可視表示を可能とする表示装置には限定されず、例えば音や音声などによる可聴表示あるいは紙などへの永久可視表示を可能とする表示装置を含む。

図１は、本発明に係る端末装置による情報処理システムの一実施例を示す図である。本システムは、図示のように、電気電子機器等の対象物１に同心円状の干渉模様２の光を照射するポインタ３、通信装置４および表示画面５を有する携帯端末６と、干渉模様２を検出する検出装置７と、対象物１の部屋８内の配置情報とその属性情報とを対応させてデータベース（ＤＢ）として格納した記憶装置９に接続された演算装置（例えばパソコン：ＰＣ）１０とを備える。ここで、対象物１の配置情報は、例えば対象物の配置された室内の領域を示す座標情報として格納される。対象物１の属性情報は、例えば、対象物がテレビの場合は現在のチャンネル、音量等であり、シーリングの場合は現在の蛍光灯の型番、取付日等であり、プリンタの場合は現在のプリンタの型番、運転状態等である。対象物１は１つまたは複数である。ＰＣ１０は、検出装置７からの検出信号に基いてポインタ３の光軸（指示方向）１１を算出し、この光軸１１と対象物の配置情報とに基づいて光軸１１が交差する対象物１を特定し、この特定した対象物１の属性情報を携帯端末６の通信装置４へ送信し、例えば液晶等を用いた表示画面５に表示させる。

このように、本実施例では、予め室内の複数の対象物の配置情報をデータベースとして記憶装置９に格納しておく。この記憶装置９はＰＣ１０の内部又は外部に備えることができる。携帯端末６には、同心円状の干渉模様の光を生成するための特殊レンズを有するポインタ３が組み込まれている。このポインタ３は、光の干渉模様発生装置であり、例えば、特開２００４−２８９７７号公報に記載の技術を用いて構成することができる。本実施例に好適なポインタ３の構成については後述する。また、室内にはこの干渉模様２を検出するＣＣＤなどの受光素子を備えた検出装置７が配置されている。そして、ユーザーが携帯端末６を用いて所望の対象物１の方向を指し示して同心円状の干渉模様２を照射すると、この干渉模様２が検出装置７により検出される。検出装置７に接続されたＰＣ１０によってその干渉模様２の検出情報からポインタ３の光軸１１が算出される。この光軸の算出方法は後述する。その光軸１１と前記対象物の配置情報から、ポインタ３の指し示している対象物を特定することができる。

ＰＣ１０からその対象物の属性情報を携帯端末６へ無線または有線で送信する。対象物の属性情報を受信した携帯端末６は、表示画面５に、受信した属性情報、および携帯端末に保存されている関連情報、およびリモコン画面を適宜表示することができる。一方、ユーザーが携帯端末６に表示されたリモコン画面を操作すると携帯端末６から操作コマンドが対応する対象物へＰＣ１０を介して送信される。携帯端末６からの操作コマンドは直接対象物に送信するように構成してもよい。これにより、携帯端末６により所望の対象物の操作が可能となる。携帯端末６とＰＣ１０または対象物との相互通信は、両者間で直接行うこともできるが、後述のようにインターネット等のネットワーク経由で行うこともできる。携帯端末６とＰＣ１０との通信手段は、無線ＬＡＮ、Ｂｌｕｅｔｏｏｔｈ、赤外通信などを用いることができるが、電子メールを介して通信することも可能である。また、演算装置（ＰＣ）１０および記憶装置９は携帯端末６に組み込むこともでき、この場合、上記属性情報の受信は内部配線で可能となる。このように、ポインタ３の方向指示機能と携帯端末６の入力・表示機能を融合することで、小型でユーザーフレンドリな指示端末を実現することができる。次に、携帯端末６に組み込まれるポインタ３の構成について説明する。

図２（ａ）、（ｂ）は、レンズの上半分を通過した光と下半分を通過した光が同心円状の干渉模様を形成する光学レンズ系を備えたポインタの一例を示す図である。
本例では、図２（ａ）に示すように、光軸に窪みのある光軸対象のリング形状レンズ１−３を用いる。図２（ｂ）において、レンズ１−３はレンズの断面図を示し、レンズ１−３ｕはレンズを光源方向から見た正面図を示すものである。ここで、レンズ外径は３ｍｍとした。光軸上の平面におけるレンズの入射面はｘ＝０．５＊（ｙ―１．５）^１．５（単位はｍｍ）の非球面で構成されている。ここで、ｘは光軸で光の進行方向を正とし、ｙは光軸に垂直な半径方向の軸である。レンズ１−３の光出射面は平面とした。レンズ素材の屈折率は１．５１とした。

レーザ光源２０から放射された光はコリメータレンズ１ｃを介して光学レンズ１−３に入射する。光軸より上側を通過した光は対象物１に光線軌跡２−３−１を経由して照射される。同様に、光軸より下側を通過した光は対象物１０に光線軌跡２−３−２を経由して照射される。対象物１上の同一点に到達した光は、同一光源より発されたレーザ光であるので干渉して干渉模様２を形成する。このように、一つの光源から放出されたレーザ光は光軸上平面において仮想的に２点の光源２−１、２−２から放出されたレーザ光であるように、対象物に投影される。本例では、点光源の光をコリメータレンズを用いて平行光とし、これを上記レンズに入射させているが、平行光は、無限遠の光源と考えることができ、この無限遠の光源を上記レンズにより、仮想的に２点の光源としている。

このレンズ１−３に半導体レーザ２０から出射した光をコリメータレンズ１ｃで平行光として入射させた場合にどのような干渉模様が形成されるかをシミュレーションにより調べた。半導体レーザの光は一般にガウシアン分布の強度分布を持つので、ここではレンズ外径３ｍｍの外径部を通過する光の強度は、レンズ中心部（光軸）を通過する光の強度の３．４％にまで減少する、としてシミュレーションを行った。その結果、４ｍ先の対象物に約直径４ｍの同心円干渉模様が形成されることが分かった。その干渉パタンの一部分を図３に示す。図３には円中心から１０００ｍｍ〜１０１０ｍｍ離れた位置の同心円干渉模様が示されている。このグラフでは、ちょうど１．０ｍｍピッチで同心円ができることが確認できる。

図４は、図１のＰＣで行う処理の一例を示すフローチャートである。まず、ステップ４０１にて、ポインタ３の光軸（指示方向）の計測処理を開始する。ステップ４０２にて、検出装置７にて検出した干渉模様の画像信号を取り込む。ステップ４０３にて、この干渉模様の画像信号から、ポインタ３の光軸を算出する。光軸の算出は例えば次のようにして行う。

図５（ａ）は検出装置による同心円状の干渉模様の検出の一例を示す図、（ｂ）は同心円状の干渉模様の中心位置を求める方法の一例を説明するための図である。図５（ａ）に示すように、ポインタ３から対象物１に向けて出射された同心円状の干渉模様２の光は検出装置７により検出される。ＰＣ１０は、この同心円状の干渉模様２の画像信号から、例えば次のようにしてその中心位置５０を求める。すなわち、図５（ｂ）に示すように、円弧５１上の任意の２点を抽出し、その２点を結ぶ直線を引き、その直線の中点を通る法線を引く。これを２箇所で行い、２つの法線５２、５３を得る。次いで、この２つの法線５２、５３が交わる点を求め、これをその円弧の中心位置５０とする。かかる処理を複数の画像にて行うことにより、その位置の検出精度を高めることが出来る。この円弧の中心位置５０がポインタ３の指示位置となる。そして、この同心円状の干渉模様の平面に垂直かつ中心位置５０を通る線がポインタ３の光軸（指示方向）となる。ここで、室内における検出装置７の配置位置の情報を予めデータベースとして記憶装置に格納しておくことで、干渉模様の中心位置５０の３次元座標を求めることができ、この座標値に基づいてポインタ３の光軸を算出することができる。

次に、図４に戻って説明を続ける。ステップ４０４にて、この算出したポインタ３の光軸に係る情報を後述の対象物特定処理で用いるため出力する。ステップ４０５にて、光軸計測処理が終了したかどうかを判定し、終了していない場合はステップ４０２に戻って上記ステップを繰り返し、終了した場合はステップ４０６にて本処理を終了する。

一方、ポインタ３が指示する対象物を特定するため、ステップ４１１にて、対象物特定処理を開始する。ステップ４１２にて、携帯端末６からのコマンドを待つ。ステップ４１３にて、対象物の特定の処理が終了したかどうかを判定する。終了した場合はステップ４１４にて本処理を終了し、終了していない場合は、ステップ４１５にて、コマンドの入力があったかどうかを判定する。コマンドの入力がない場合は、ステップ４１２に戻り上記ステップを繰り返す。コマンドの入力があった場合は、ステップ４１６にて、前述のステップ４０４からポインタ３の光軸に係る情報を取り込む。ステップ４１７にて、このポインタ３の光軸の情報と予め記憶装置に格納された複数の対象物の配置情報とに基づいて、この光軸が格納された対象物のどれかと交差するかを判定する。この交差如何は、上記のように算出された光軸を表わすベクトルが、記憶装置に格納された複数の対象物を表わすどの領域を通るかで判定することができる。この光軸が交差する対象物がない場合は、ステップ４１８にて、何も指示できなかったことを携帯端末６へ送信し、一方、この光軸が交差する対象物がある場合は、ステップ４１９にて、この光軸が交差する対象物を特定し、その対象物の属性情報を携帯端末６へ送信したのち、上記ステップ４１２に戻る。

このようにして、本実施例では、携帯端末６で、ある対象物を指し示すと、その対象物の情報が携帯端末６に送信され、対象物の属性情報と操作ユーザーインタフェースが携帯端末６の画面に表示される。その画面を見てユーザーは操作し、その操作コマンドが携帯端末から対象物へと送信されて、対象物を操作することができる。

図６は、本発明に係る端末装置による情報処理システムの他の実施例を示す図である。本実施例は、図１の実施例と比較すると、携帯端末６がＰＣ１０との通信を部屋８の外側に接続されたサーバー６１および基地局６２を介して行う点で異なるが、その他の点については同様である。本実施例では、無線ＬＡＮや携帯パケット通信によるＷｅｂ、電子メールあるいはインターネット等のネットワーク経由での通信を用いることができる。

本実施例では、図６に示すように、ユーザーが携帯端末６を用いて所望の対象物１の方向を指し示して同心円状の干渉模様２を照射すると、この干渉模様２が検出装置７により検出される。検出装置７に接続されたＰＣ１０によってその干渉模様２の検出情報からポインタ３の光軸１１が算出される。この光軸の算出方法は上述したとおりである。この光軸１１と予め記憶装置に格納された複数の対象物の配置情報から、ポインタ３の指し示している対象物を特定することができる。本実施例のＰＣ１０で行う処理は、上述の図４のフローチャートに示す処理と同じである。

ＰＣ１０は、その特定された対象物１の属性情報をサーバー６１および基地局６２を介して携帯端末６へ送信する。対象物１の属性情報を受信した携帯端末６は、表示画面５に、受信した属性情報、および携帯端末に保存されている関連情報、およびリモコン画面を適宜表示することができる。ユーザーが携帯端末６を操作すると携帯端末６から操作コマンドが対応する対象物へ基地局６２、サーバー６１およびＰＣ１０を介して送信される。これにより、携帯端末６を操作することにより所望の対象物の操作が可能となる。

本実施例では、対象物の属性情報はデータベース（ＤＢ）として、ＰＣ１０に接続した記憶装置９に格納することもできるが、サーバー６１に接続した記憶装置６３に格納することもできる。この記憶装置６３を用いる場合は、他の部屋あるいは別の部署の対象物に係る属性情報も一括して格納し管理することができる。

図７は、本発明に係る端末装置による情報処理システムの他の実施例を示す図である。本実施例は、対象物１をポインタ３で２箇所から指し示して部屋８内における対象物１の配置情報を対象物の仮想空間における領域（座標情報）として記憶装置に格納するものである。すなわち、対象物１の配置情報を得る場合、図示のように、まず、ある位置で携帯端末６のポインタ３で対象物１を指示する。この時の同心円状の干渉模様２の光が受光素子７により検出される。この検出装置７に接続されたＰＣ１０によってその干渉模様２の検出情報からポインタ３の光軸１１が上記のようにして算出される。次に、携帯端末６を移動して別の位置でポインタ３で対象物１を指示する。この時の同心円状の干渉模様２’の光も受光素子７により検出される。この検出装置７に接続されたＰＣ１０によってその干渉模様２’の検出情報からポインタ３の光軸１１’が上記のようにして算出される。この２つの光軸の交差近傍領域（交点を含む）を求め、その領域をその対象物１の座標値（座標情報）とする。この交差近傍領域の求め方については後述する。

図８は、図７のＰＣで行う処理の一例を示すフローチャートである。まず、ステップ８０１にて、ポインタ３の光軸（指示方向）の計測処理を開始する。ステップ８０２にて、検出装置７にて検出した干渉模様の画像信号を取り込む。ステップ８０３にて、この干渉模様の画像信号から、ポインタ３の光軸を算出する。光軸の算出は例えば上述のようにして行う。ステップ８０４にて、この算出したポインタ３の光軸に係る情報を後述の対象物座標値（座標情報）格納処理で用いるため出力する。ステップ８０５にて、光軸計測処理が終了したかどうかを判定し、終了していない場合はステップ８０２に戻って上記ステップを繰り返し、終了した場合はステップ８０６にて本処理を終了する。本例の場合は、携帯端末６を移動して上記ステップを繰り返し行い、２箇所におけるポインタ３の２つの光軸を算出し、出力する。

一方、ポインタ３が指示する対象物の配置情報（座標情報）を求めるため、ステップ８１１にて、対象物座標値（座標情報）処理を開始する。ステップ８１２にて、携帯端末６からのコマンドを待つ。ステップ８１３にて、コマンドの入力があったかどうかを判定する。コマンドの入力がない場合は、ステップ８１２に戻り上記ステップを繰り返す。コマンドの入力があった場合は、ステップ８１４にて、前述のステップ８０４からポインタ３の光軸に係る情報を取り込む。ステップ８１５にて、ポインタ３の光軸に係る情報を２回取り込んだかどうか判定する。２回取り込んでいない場合は、ステップ８１２に戻って、上記ステップを繰り返す。２回取り込んだ場合は、ステップ８１６にて、２つの光軸の線分距離を算出する。２つの線分距離の算出は例えば次のようにして行う。

図９は、２つの直線の最短距離の求め方の一例を説明するための図である。図示のように、いま、点ａを通る方向（単位）ベクトルｓの直線と点ｂを通る方向ベクトルｔの直線を考える。２つの直線間の最短距離の点となる各直線上の点をＰとＱとする。２つの直線は以下の式で表すことができる。

線分ＰＱが２つの直線間の最短距離ということは、線分ＰＱとそれぞれの直線が垂直な関係にあるということなので、各直線の方向ベクトルとベクトルＰＱの内積の和は０となる。

ここで、ａとｂ、ベクトルｓとｔは同心円状の干渉模様の計測から求められるので、未知数ｍとｎを求める。(1)と(2)式を(3)と(4)式に代入してｍとｎを求め、(1)と(2)式から点ＰとＱの座標が求められる。この点ＰとＱの座標から２つの光軸の線分距離を求めることができる。

次に、図８に戻って説明を続ける。ステップ８１７にて、求めた線分距離が閾値より小さいかどうかを判定する。小さくない場合は、対象物の座標値として格納するのは不適なので、ステップ８１８にて、登録ミスを携帯端末へ送信し、小さい場合は、ステップ８１９にて、上記の点ＰとＱの座標から交差近傍領域を求めて、対象物の座標値（座標情報）として記憶装置に格納し、ステップ８２０にて終了する。

ここで、２つの光軸の交差近傍領域は、上記の点ＰとＱの座標から例えば次のようにして求める。最も単純にはＰとＱを内包する適当な立体とすることができる。また自動的に求めるよりも会話的に入力したほうがより実体の形に近い領域を入力することができる。例えば、以下のような手順でおこなう
１．ＰとＱの座標をもとにその線分を中心とした直方体・円柱・円錐・四角錘・球などの立体の候補を提示する。
２．ユーザーがこれを選択すると、立体に応じたパラメータを入力するように促す。直方体なら幅、高さ、奥行きで、円柱なら直径と高さ、球なら直径である。
３．それぞれの数値が入力されると、位置の補正入力を行う。これはポインタで指した領域が必ずしも対象物の中心ではない場合があるためである。

以上のようにして、ある対象物の仮想空間における配置情報（座標パラメータ）の入力が完了する。本実施例によれば、室内の対象物の配置情報の入力手段として、携帯端末で対象物を２箇所から指し示し、２つの光軸の交差近傍領域（交点を含む）を対象物の配置情報として登録することができる。

図１０（ａ）〜（ｅ）は、本発明に係る端末装置による情報処理システムのさらに他の実施例を示す図である。本実施例は、携帯端末の表示画面で対象物の制御および／または保守を行うための手段を備えたものである。例えば、室内に設けられたプリンタを携帯端末で指示すると、携帯端末には図１０（ａ）に示すようなプリンタの保守のための画面が表示される。本例の表示画面では、そのプリンタの型番：Ｐ−１１１、および、そのプリンタの１：状態、２：消耗品の検索、３：サポートページ、４：後継機の検索等が表示される。

ここで、図１０（ａ）の画面で、携帯端末のテンキーで「１」をキーインすると、そのプリンタの現在の状態が図１０（ｂ）に示すように画面に表示される。本例では、そのプリンタの状態は、用紙：残り少、インク：黒：ＦＵＬＬ、カラー：ＥＭＰＴＹ、インクを発注？：Ｙｅｓ、Ｎｏと表示される。この場合、カラーインクがＥＭＰＴＹ（空）なので、例えば、画面上で「Ｙｅｓ」を選択して、替えインクをインターネット経由で発注することができる。即ち、本実施例では、携帯端末の表示画面からプリンタの消耗部品の電子発注等を行うことができる。

また、図１０（ａ）の画面で、携帯端末のテンキーで「４」をキーインすると、そのプリンタの後継機の検索結果が図１０（ｃ）に示すように表示画面に表示される。本例では、そのプリンタの後継機はＰ−２１２であることが表示され、さらに、次のような選択肢、１：情報を見る、２：発注、３：次の機種、違うメーカ、４：情報を見る、が用意されている。このように、本実施例では、対象物の属性情報を得て、その対象物と同様の商品をネットを介して検索し、必要に応じて電子発注等を行うことができる。

さらに、例えば、携帯端末で室内の冷蔵庫を指示すると、携帯端末には図１０（ｄ）に示すような冷蔵庫の状態とそれを制御するための画面が表示される。本例の表示画面では、冷蔵庫の型番：ＡＡＡ、状態：正常、温度：冷凍：−５℃、（上昇：１、下降：３）、冷蔵：９℃、（上昇：７、下降：９）等が表示される。ここで、携帯端末のテンキーで「１」をキーインすると冷凍設定温度が上昇し、「３」をキーインすると冷凍設定温度が下降する。また、携帯端末のテンキーで「７」をキーインすると冷蔵設定温度が上昇し、「９」をキーインすると冷蔵設定温度が下降する。即ち、本実施例では、携帯端末から冷蔵庫の庫内温度の制御を行うことができる。本例は、冷蔵庫の制御の例であるが、これに限らず、例えば対象物がテレビの場合は、携帯端末の表示画面に基づいて、テレビのオン・オフ、音量調節、チャンネルの変更等の制御を行うことができる。

また、例えば、携帯端末で室内のシーリング（照明器具）を指示すると、携帯端末には図１０（ｅ）に示すようなシーリングに関する画面が表示される。本例の表示画面では、シーリングの型番：ＡＢ−０３３、１００Ｗ蛍光灯電球色、取付：２００４．１２．２０、４０Ｗ蛍光灯電球色、取付：２００３．８．３０、のように表示されている。このシーリングの蛍光灯を交換したときに交換日などの情報をデータベース化して管理しているＰＣからではなく手元の携帯端末のテンキーから入力することができる。このように、本実施例では、携帯端末で対象物の属性情報を得て、その属性情報を携帯端末で変更することができる。
このように、本発明では、携帯端末から操作コマンドを所望の対象物に送信することにより、その対象物を保守したり制御したりすることができる。

本発明は端末装置による情報処理方法およびシステムに係り、特に端末装置で対象物を指示することにより、その対象物の属性情報を端末装置の表示画面に表示させる端末装置による情報処理方法およびシステムに関するものであり、産業上の利用可能性がある。

本発明に係る端末装置による情報処理システムの一実施例を示す図である。 （ａ）、（ｂ）は、レンズの上半分を通過した光と下半分を通過した光が同心円状の干渉模様を形成する光学レンズ系を備えたポインタの一例を示す図である。 同心円状の干渉模様の一部分を示す図である。 図１のＰＣで行う処理の一例を示すフローチャートである。 （ａ）は検出装置による同心円状の干渉模様の検出の一例を示す図、（ｂ）は同心円状の干渉模様の中心位置を求める方法の一例を説明するための図である。 本発明に係る端末装置による情報処理システムの他の実施例を示す図である。 本発明に係る端末装置による情報処理システムの他の実施例を示す図である。 図７のＰＣで行う処理の一例を示すフローチャートである。 ２つの直線の最短距離の求め方の一例を説明するための図である。 （ａ）〜（ｅ）は、本発明に係る端末装置による情報処理システムのさらに他の実施例を示す図である。

符号の説明

１ 対象物
２ 同心円状の干渉模様
３ ポインタ
４ 通信装置
５ 表示画面
６ 携帯端末
７ 検出装置
８ 部屋
９、６３ 記憶装置
１０ 演算装置（ＰＣ）
１１、１１’ 光軸（指示方向）
５０ 中心位置
５１ 円弧
５２、５３ 法線
６１ サーバー
６２ 基地局

Claims (18)

1. 端末装置に備えたポインタにより対象物を指示して同心円状の干渉模様の光を照射し、検出装置により前記干渉模様を検出し、前記検出装置からの検出信号に基いて前記ポインタの光軸を算出し、予め記憶装置に対象物の配置情報と属性情報とを対応させて格納しており、前記光軸が交差する対象物の配置情報から前記対象物の属性情報を特定し、前記特定した対象物の属性情報を前記端末装置に表示させることを特徴とする端末装置による情報処理方法。
2. 前記対象物を操作するための操作コマンドが、前記対象物の属性情報に基づいて前記端末装置から前記対象物に送信されることを特徴とする請求項１記載の端末装置による情報処理方法。
3. 前記操作コマンドが、前記対象物を保守するためのものであることを特徴とする請求項２記載の端末装置による情報処理方法。
4. 前記操作コマンドが、前記対象物を制御するためのものであることを特徴とする請求項２記載の端末装置による情報処理方法。
5. 前記操作コマンドがネットワーク経由で前記対象物に送信されることを特徴とする請求項２〜４のいずれかに記載の端末装置による情報処理方法。
6. 前記特定した対象物の属性情報がネットワーク経由で前記端末装置に送信されることを特徴とする請求項１〜５のいずれかに記載の端末装置による情報処理方法。
7. ２箇所における前記端末装置で前記ポインタの光軸をそれぞれ算出し、前記算出した２つの光軸の距離が閾値より小さい交差近傍領域を前記対象物の配置情報として前記記憶装置へ格納することを特徴とする請求項１〜６のいずれかに記載の端末装置による情報処理方法。
8. 対象物を指示して同心円状の干渉模様の光を照射するポインタおよび通信装置を有する端末装置と、前記干渉模様を検出する検出装置と、対象物の配置情報と属性情報とを対応させて格納した記憶装置と、前記検出装置からの検出信号に基いて前記ポインタの光軸を算出し、前記光軸と前記対象物の配置情報とに基づいて前記光軸が交差する対象物を特定する演算装置とを備え、前記特定した対象物の属性情報を前記端末装置の通信装置へ送信し表示させることを特徴とする端末装置による情報処理システム。
9. 前記端末装置が、前記対象物の属性情報に基づいて前記対象物を操作するための操作コマンドを前記対象物に送信可能であることを特徴とする請求項８記載の端末装置による情報処理システム。
10. 前記操作コマンドが、前記対象物を保守するためのものであることを特徴とする請求項９記載の端末装置による情報処理システム。
11. 前記操作コマンドが、前記対象物を制御するためのものであることを特徴とする請求項９記載の端末装置による情報処理システム。
12. 前記操作コマンドがネットワーク経由で前記対象物に送信可能であることを特徴とする請求項９〜１１のいずれかに記載の端末装置による情報処理システム。
13. 前記特定した対象物の属性情報が前記演算装置に接続されたサーバーを介してネットワーク経由で前記端末装置に送信可能であることを特徴とする請求項８〜１２のいずれかに記載の端末装置による情報処理システム。
14. 前記記憶装置が前記対象物の配置情報を格納する第１の記憶装置と前記対象物の属性情報を格納する第２の記憶装置とを含み、前記第１の記憶装置が前記演算装置に接続され、前記第２の記憶装置が前記サーバーに接続されることを特徴とする請求項１３記載の端末装置による情報処理システム。
15. 前記演算装置が、２箇所における前記端末装置で前記ポインタの光軸をそれぞれ算出し、前記算出した２つの光軸の距離が閾値より小さい交差近傍領域を前記対象物の配置情報として前記記憶装置へ格納することを特徴とする請求項８〜１３のいずれかに記載の端末装置による情報処理システム。
16. 対象物を指示して同心円状の干渉模様の光を照射するポインタと、前記干渉模様の検出信号に基いて算出された前記ポインタの光軸と交差する対象物の属性情報を受信する通信装置と、前記受信した対象物の属性情報を表示する表示装置とを有することを特徴とする端末装置。
17. 前記対象物を操作するための操作コマンドが、前記通信装置を介して前記対象物に送信可能であることを特徴とする請求項１６記載の端末装置。
18. 前記表示装置が、表示画面であることを特徴とする請求項１６または１７記載の端末装置。

Images