JP6913643B2 - 逸失防止サーバー装置、逸失防止システム、車載機、逸失防止端末および逸失防止方法 - Google Patents

Description

本発明は、逸失防止サーバー装置、逸失防止システム、車載機、逸失防止端末および逸失防止方法の技術に関するものである。

「車両に搭載されたナビゲーション機能を備えた車載装置と、該車載装置に無線通信可能に接続された端末装置とを備え、前記車載装置が、ＩＤタグ付きの物品に対し非接触で当該ＩＤ情報を読み取り可能なＩＤ読み取り部と、前記車両が自宅を出てから帰ってくるまでの１回の走行の単位毎に車内に存在するＩＤタグ付きの物品に関する情報を逐次格納するメモリ部と、前記ＩＤ読み取り部及びメモリ部に動作可能に接続された制御部とを有し、前記制御部は、前記端末装置から忘れ物検索要求の指示を受信したときに、前記ＩＤ読み取り部を起動させて車内に存在するＩＤタグ付きの全物品を検索し、該検索した全物品と前記メモリ部に格納されている情報を照合して、該照合に基づいた検索結果を前記端末装置に送信することを特徴とする車内忘れ物管理システム」に係る技術が、特許文献１に記載されている。

特開２００６−３０１９０９号公報

上記の特許文献１に係る技術では、ＩＤタグ付きの物品であれば忘れ物管理を行うことができるが、ＩＤタグが付いていない物品の忘れ物管理は考慮されていない。そのため、すべての管理対象物品には事前にタグをつける必要があるが、そのような管理は煩雑な場合が多く、管理上の漏れ等の問題が発生しがちである。

本発明の目的は、煩雑なＩＤタグの管理を必要としない逸失防止サーバー装置、逸失防止システム、車載機、逸失防止端末および逸失防止方法を提供することにある。

本発明は、上記課題の少なくとも一部を解決する手段を複数含んでいるが、その例を挙げるならば、以下のとおりである。上記課題を解決すべく、本発明に係るサーバー装置は、施設の属性情報と、上記施設の属性に応じて逸失防止対象物を特定する通知対象情報と、を記憶する記憶部と、所定の車載機および該車載機に対応付けられた所定の携帯端末とネットワークを介して通信する通信部と、上記車載機から、該車載機が搭載された車両から降車した乗員を撮像した画像を受信する画像受信部と、上記画像の被写体のうち、降車位置にある前記施設の属性に応じて前記逸失防止対象物を通知対象と特定する通知対象特定部と、上記通知対象について、所持を確認するための表示および音声による通知情報を作成する通知情報作成部と、上記携帯端末に上記通知情報を送信する通知情報配信部と、を備えることを特徴とする。

本願発明によれば、煩雑なＩＤタグの管理を必要としない逸失防止サーバー装置、逸失防止システム、車載機、逸失防止端末および逸失防止方法を提供することが可能となる。上記した以外の課題、構成および効果は、以下の実施形態の説明により明らかにされる。

本発明に係る実施形態を適用した逸失防止システムの構成例を示す図である。 車載機のハードウェア構造例を示す図である。 携帯端末のハードウェア構造例を示す図である。 通知管理情報のデータ構造例を示す図である。 施設情報のデータ構造例を示す図である。 通知対象情報のデータ構造例を示す図である。 通知情報のデータ構造例を示す図である。 降車時処理の流れを示す図である。 施設退出時処理の流れを示す図である。 逸失防止システムの利用シーンの例を示す図である。 本発明に係る実施形態を適用した逸失防止システムの別の例を示す図である。 本発明に係る実施形態を適用した逸失防止システムのさらに別の例を示す図である。

以下に、本発明に係る、逸失防止システムについて、図面を参照して説明する。なお、図１〜図１２は、逸失防止システム１の全ての構成を示すものではなく、理解容易のため、適宜、構成の一部を省略して描いている。なお、実施の形態を説明するための全図において、同一の部材には原則として同一の符号を付し、その繰り返しの説明は省略する場合がある。また、以下の実施の形態において、その構成要素（要素ステップ等も含む）は、特に明示した場合および原理的に明らかに必須であると考えられる場合等を除き、必ずしも必須のものではないことは言うまでもない。また、「Ａからなる」、「Ａよりなる」、「Ａを有する」、「Ａを含む」と言うときは、特にその要素のみである旨明示した場合等を除き、それ以外の要素を排除するものでないことは言うまでもない。同様に、以下の実施の形態において、構成要素等の形状、位置関係等に言及するときは、特に明示した場合および原理的に明らかにそうでないと考えられる場合等を除き、実質的にその形状等に近似または類似するもの等を含むものとする。

図１に、本発明に係る実施形態を適用した逸失防止システムの構造を示す。本発明に係る実施形態を適用した逸失防止システム１においては、車載機１００、携帯端末２００の制御の一部に、アプリケーションソフトウェアによる制御が含まれる。後述する変形例を適用した逸失防止システム１´では、サーバー装置３００の制御の一部に、アプリケーションソフトウェアによる制御が含まれる。また、車載機１００においては、アプリケーションソフトウェアの機能は、車載機１００のＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）等の管理下で動作するアプリケーションソフトウェアプログラムによりハードウェアが制御されて実現されるものとする。一方で、携帯端末２００およびサーバー装置３００においては、アプリケーションソフトウェアの機能は、携帯端末２００およびサーバー装置３００のＯＳ等の管理下で動作するアプリケーションソフトウェアプログラムによりハードウェアが制御されて実現されるものとする。

車載機１００は、車両に搭載され各種のソフトウェアを実行可能な情報処理装置である。なお、車載機１００は、本実施形態においては、ＯＳを備え、複数のソフトウェア等のコンテンツをウェブブラウザ等において使用可能であり、並列してアプリケーションソフトウェア等のコンテンツを実行することも可能であるものとするが、これに限られず、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）等のハードウェアで実現されてもよい。ただし、車載機１００は、車載の状態で使用される専用の装置に限られず、パーソナルコンピューターやスマートフォン、タブレット端末等の各種の独立動作可能な装置であってもよい。

車載機１００は、記憶部１１０と、制御部１２０と、通信部１３０と、を含んで構成される。記憶部１１０には、通知管理情報１１１と、施設情報１１２と、通知対象情報１１３と、が含まれる。制御部１２０には、降車検知部１２１と、画像取得部１２２と、画像認識部１２３と、通知対象特定部１２４と、通知情報作成部１２５と、カメラ制御部１２６と、の処理部が含まれる。

図４は、通知管理情報のデータ構造例を示す図である。通知管理情報１１１は、車載機１００を特定する情報と、携帯端末２００と、の対応付けを含む。具体的には、通知管理情報１１１は、車載機１００を識別可能な番号（ＭＡＣアドレス等）である車載機識別子１１１ａと、携帯端末２００を識別可能な番号（ＭＡＣアドレス等）である携帯端末識別子１１１ｂと、を対応付けて記憶する。

図５は、施設情報のデータ構造例を示す図である。施設情報１１２は、施設を特定する情報と、施設の位置と、施設の属性の情報を含む。具体的には、施設情報１１２は、施設識別子１１２ａと、位置（施設屋内出入口）１１２ｂと、施設属性（屋内外）１１２ｃと、施設属性（平均滞在時間）１１２ｄと、施設属性（敷地面積）１１２ｅと、を含む。

位置（施設屋内出入口）１１２ｂは、施設の代表位置および屋内施設が付属する場合に当該施設の屋内へ入り口の位置を特定する情報であり、緯度経度でそれぞれ表された座標を含む。なお、位置（施設屋内出入口）１１２ｂでは、施設の代表位置の座標と、屋内施設が付属する場合にはカッコ記号により施設の屋内への入り口の位置が表される。すなわち、「緯度、経度（緯度、経度）」の形式であれば屋内施設あり、「緯度、経度」の形式であれば屋内施設がないか不明であることを表す。

施設属性（屋内外）１１２ｃは、施設が屋内施設であるか否かを示す情報である。施設属性（平均滞在時間）１１２ｄは、施設の訪問者の平均滞在時間である。施設属性（敷地面積）１１２ｅは、施設の敷地面積を所定の有意な区分（本実施形態では、「小規模」「中規模」「大規模」の３区分）のいずれであるかを示す情報である。施設の広さ（規模）は、施設での服装や持ち物の変更に相関する要素となりうるためである。

図６は、通知対象情報のデータ構造例を示す図である。通知対象情報１１３は、予測滞在時間に応じた通知対象と、施設の規模に応じた通知対象と、施設の屋内外に応じた通知対象と、を含む。

具体的には、予測滞在時間に応じた通知対象は、予測滞在時間の第一の区分である５分未満１１３ａに応じた通知対象と、予測滞在時間の第二の区分である５分以上２０分未満１１３ｂに応じた通知対象と、予測滞在時間の第三の区分である２０分以上６０分未満１１３ｃに応じた通知対象と、予測滞在時間の第四の区分である６０分以上１１３ｄに応じた通知対象と、を含む。

また、施設の規模に応じた通知対象は、規模の第一の区分である小規模施設１１３ｅに応じた通知対象と、規模の第二の区分である中規模施設１１３ｆに応じた通知対象と、規模の第三の区分である大規模施設１１３ｇに応じた通知対象と、を含む。

また、施設の屋内外に応じた通知対象は、屋外施設１１３ｈに応じた通知対象と、屋内施設１１３ｉに応じた通知対象と、を含む。

図１の説明に戻る。降車検知部１２１は、車載機１００が搭載された車両から乗員が降車すると、これを検知する。検知の方法には、例えば着座センサー、温度センサー、ドア開閉センサー等による降車状態の検出等、公知の各種の技術を採用可能である。画像取得部１２２は、降車が検知されると、カメラ制御部１２６に撮像を指示し、車載機１００が搭載された車両から降車した乗員を撮像した画像データを取得する。画像認識部１２３は、画像取得部１２２が取得した画像データを公知の物体認識方法により解析し、被写体の物体を認識する。

通知対象特定部１２４は、降車が検知された位置を特定して、当該位置が属する施設あるいは最寄の施設を、施設情報１１２を参照して検索し、特定する。そして、当該施設の属性に応じて、通知対象情報１１３を参照して、通知対象の候補を特定する。具体的には、通知対象特定部１２４は、施設の予想滞在時間に応じて通知対象の候補を特定し、施設の規模に応じて通知対象の候補を特定し、施設の屋内外の区別に応じて通知対象の候補を特定し、これらの通知対象候補の和を算出する。そして、通知対象特定部１２４は、当該和に含まれる対象物と、画像データの被写体の物体との共通部分を算出し、これを通知対象と特定する。

例を挙げると、施設識別子「ＦＣ０００００１」が最寄の施設で降車が検知された場合には、通知対象特定部１２４は、当該施設の属性「平均滞在時間６０分」から「傘、マフラー、帽子、手袋、サングラス、バッグ、靴、コート」（６０分以上１１３ｄ）、当該施設の属性「中規模」から「傘、帽子、手袋、サングラス」（中規模施設１１３ｆ）、当該施設の属性「屋内」から「傘、マフラー、帽子、手袋、サングラス、バッグ、靴、コート」（屋内施設１１３ｉ）、を特定し、これらの和「傘、マフラー、帽子、手袋、サングラス、バッグ、靴、コート」を算出する。

そして、通知対象特定部１２４は、画像データの被写体の物体が「傘、マフラー、時計」である場合には、これとの共通部分となる「傘、マフラー」を通知対象として特定する。

通知情報作成部１２５は、通知対象特定部１２４が特定した通知対象について、施設から退場する際と、乗車の際に所持を確認するための表示および音声による通知情報を作成する。具体的には、通知情報作成部１２５は、施設屋内出入口および車両の通知位置ごとに、通知条件と、通知内容（言語情報）と、通知時の表示画像（画像情報）と、を対応付ける。なお、通知情報作成部１２５は、通知条件、通知内容（言語情報）は、予め定められたテンプレートに従い作成し、通知時の表示画像は、画像取得部１２２が取得した画像データから通知対象ごとにトリミング（または拡大）した画像を作成する。

そして、通知情報作成部１２５は、通信部１３０を介して無線通信経由で携帯端末２００に、作成した通知情報を送信する。

カメラ制御部１２６は、後述する車載カメラである撮像装置１０７の動作を制御する。例えば、車両のサイドミラーに取り付けられた側方を撮影する撮像装置１０７の、撮像タイミング、撮像範囲（画角）、撮像距離（フォーカス）、撮影感度（ＩＳＯ感度）、シャッタースピード（露光時間）等の制御を行う。

通信部１３０は、無線通信（ＷｉＦｉあるいはＢｌｕｅｔｏｏｔｈ（いずれも登録商標）等）を経由して、携帯端末２００と通信を行う。しかし、これに限られず、通信部１３０は、有線のＨＤＭＩ（Ｈｉｇｈ−Ｄｅｆｉｎｉｔｉｏｎ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｒｆａｃｅ）、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）等の通信を経由して携帯端末２００と通信を行うものであってもよい。

携帯端末２００は、記憶部２１０と、制御部２２０と、通信部２３０と、を含んで構成される。記憶部２１０には、通知情報２１１が含まれる。制御部２２０には、施設退場検出部２２１と、通知制御部２２２と、入力制御部２２３と、画面制御部２２４と、の処理部が含まれる。携帯端末２００は、いわゆるスマートフォンやタブレット、あるいはパーソナルコンピューター等の情報処理端末である。

図７は、通知情報のデータ構造例を示す図である。通知情報２１１は、通知位置を特定する情報と、通知条件と、通知内容（メッセージ）と、通知時に表示する画像と、を含む。具体的には、通知情報２１１は、通知位置２１１ａと、通知条件２１１ｂと、通知内容２１１ｃと、通知時表示画像２１１ｄと、を含む。

通知位置２１１ａは、「施設屋内出入口」または「車両接近時」のいずれかを特定する情報である。通知対象物ごとに、降車時の施設が屋内施設である場合にはそれぞれのレコードが格納され、施設が屋外施設である場合には車両接近時のみのレコードが格納される。

通知条件２１１ｂは、通知対象物ごとに、通知する条件が予め定められている場合にその条件を特定する情報である。例えば、「傘」が通知対象物である場合には、「降水なし」が通知の条件として格納される。これは、降水がない場合（つまり、傘を差す必要がない場合）には、傘を施設に置き忘れて逸失するケースが頻繁にあることを踏まえて、予め定められる条件である。同様に、「マフラー」が通知対象物である場合には、「気温１０度以上」が通知の条件として格納される。気温が高い場合には、防寒装備を脱いだまま逸失するケースがあるためである。ただし、これに限られず、気候や風習に応じて予め定められるものであってもよい。

通知内容２１１ｃは、通知対象物ごとに、通知する内容（文言）を特定する情報である。具体的には、通知内容２１１ｃには、「傘」が通知対象物である場合には、「傘を忘れていませんか？」というメッセージが格納される。

通知時表示画像２１１ｄは、通知対象物ごとに、通知する際に表示する画像を特定する情報である。具体的には、通知時表示画像２１１ｄには、「傘」が通知対象物である場合には、画像取得部１２２により撮像された画像のうち、認識された「傘」を拡大あるいはトリミングした画像が格納される。

図１の説明に戻る。施設退場検出部２２１は、施設からの退場を検出する。具体的には、施設退場検出部２２１は、携帯端末２００の位置を検出し、当該位置が降車時の最寄の施設の出入り口にあたるか否か判定し、出入り口にあたると判定した場合に、初回を除いて当該施設からの退場として検出する。

通知制御部２２２は、通信部２３０を介して車載機１００から通知情報を受信すると、通知情報２１１に格納する。そして、降車時の最寄の施設からの退場時に、通知条件を満たしていれば通知情報（通知対象物ごとのメッセージと画像）を画面制御部２２４に出力させる。また、通知制御部２２２は、降車した車両付近に戻った場合等、車載機１００との無線通信あるいは有線通信が確立されると、通知条件を満たしていれば通知情報（通知対象物ごとのメッセージと画像）を画面制御部２２４に出力させる。

入力制御部２２３は、画面のタッチやソフトウェアキーへの入力、あるいはハードウェアボタン等への入力を受け付ける。画面制御部２２４は、画面出力を制御する。

通信部２３０は、無線通信（ＷｉＦｉ／Ｂｌｕｅｔｏｏｔｈ等）を介して、車載機１００等の他の装置と通信する。しかし、これに限られず、通信部２３０は、有線のＨＤＭＩ、ＵＳＢ等の通信を経由して携帯端末２００と通信を行うものであってもよい。

図２は、車載機のハードウェア構造例を示す図である。車載機１００は、入力受付装置１０１と、演算装置１０２と、通信装置１０３と、主記憶装置１０４と、外部記憶装置１０５と、表示装置１０６と、撮像装置１０７と、位置検出装置１０８と、これらをつなぐバス１０９と、を含んで構成される。

入力受付装置１０１は、ハードウェアボタンやタッチパネル等の各種入力装置である。演算装置１０２は、例えばＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）などの演算装置である。

通信装置１０３は、無線ネットワーク等を介して、他の装置と通信経路を確立し情報を送受信するネットワークモジュール等の装置である。

主記憶装置１０４は、例えばＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）などのメモリ装置である。

外部記憶装置１０５は、例えばハードディスクやＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）、その他各種の不揮発性記憶媒体に情報を書き込み、あるいは不揮発性記憶媒体から所定の情報を読み出す装置である。

表示装置１０６は、例えば液晶ディスプレイや、有機ＥＬ（Ｅｌｅｃｔｒｏ Ｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイ等の表示出力を行う装置である。

撮像装置１０７は、例えば光学カメラや、赤外線カメラ等の暗視カメラであり、例えば車両に取り付けられて所定の方向を撮影する。なお、撮像装置１０７は、一つに限られず、複数車両に取り付けられ、それぞれは他の撮像装置１０７から独立して制御されるものであってもよい。

位置検出装置１０８は、車載機１００の位置を検出する装置である。例えば、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）、ロシアのＧＬＯＮＡＳＳ（Ｇｌｏｂａｌ Ｎａｖｉｇａｔｉｏｎ Ｓａｔｅｌｌｉｔｅ Ｓｙｓｔｅｍ）、欧州のＧａｌｉｌｅｏ、中国の北斗衛星導航系統等の衛星測位システムや、準天頂衛星システムを用いて、車載機１００の座標を取得する。

上記した制御部１２０の各機能部、すなわち降車検知部１２１、画像取得部１２２、画像認識部１２３、通知対象特定部１２４、通知情報作成部１２５、カメラ制御部１２６は、演算装置１０２が所定のプログラムを読み込み実行することにより構築される。そのため、主記憶装置１０４には、各機能部の処理を実現するためのプログラムが記憶されている。

また、上記した記憶部１１０は、主記憶装置１０４あるいは外部記憶装置１０５により、通信部１３０は、通信装置１０３により、それぞれ実現される。

なお、上記した各構成要素は、車載機１００の構成を、理解を容易にするために、主な処理内容に応じて分類したものである。そのため、構成要素の分類の仕方やその名称によって、本願発明が制限されることはない。車載機１００の構成は、処理内容に応じて、さらに多くの構成要素に分類することもできる。また、１つの構成要素がさらに多くの処理を実行するように分類することもできる。

また、制御部１２０の各機能部は、ＣＰＵに限らずハードウェア（ＡＳＩＣ、ＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）など）により構築されてもよい。また、各機能部の処理が一つのハードウェアで実行されてもよいし、複数のハードウェアで実行されてもよい。

図３は、携帯端末のハードウェア構造例を示す図である。携帯端末２００は、入力受付装置２０１と、演算装置２０２と、通信装置２０３と、主記憶装置２０４と、外部記憶装置２０５と、表示装置２０６と、位置検出装置２０７と、これらをつなぐバス２０９と、を含んで構成される。

入力受付装置２０１は、ハードウェアボタンやタッチパネル等の各種入力装置である。演算装置２０２は、例えばＣＰＵなどの演算装置である。

通信装置２０３は、無線ネットワーク等を介して、他の装置と通信経路を確立し情報を送受信するネットワークモジュール等の装置である。

主記憶装置２０４は、例えばＲＡＭなどのメモリ装置である。

外部記憶装置２０５は、例えばハードディスクやＳＳＤ、その他各種の不揮発性記憶媒体に情報を書き込み、あるいは不揮発性記憶媒体から所定の情報を読み出す装置である。

表示装置２０６は、例えば液晶ディスプレイや、有機ＥＬ（Ｅｌｅｃｔｒｏ Ｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイ等の表示出力を行う装置である。

位置検出装置２０７は、携帯端末２００の位置を検出する装置である。例えば、ＧＰＳ、ロシアのＧＬＯＮＡＳＳ、欧州のＧａｌｉｌｅｏ、中国の北斗衛星導航系統等の衛星測位システムや、準天頂衛星システムを用いて、携帯端末２００の座標を取得する。

上記した制御部２２０の各機能部、すなわち施設退場検出部２２１、通知制御部２２２、入力制御部２２３、画面制御部２２４は、演算装置２０２が所定のプログラムを読み込み実行することにより構築される。そのため、主記憶装置２０４には、各機能部の処理を実現するためのプログラムが記憶されている。

また、上記した記憶部２１０は、主記憶装置２０４あるいは外部記憶装置２０５により、通信部２３０は、通信装置２０３により、それぞれ実現される。

なお、上記した各構成要素は、携帯端末２００の構成を、理解を容易にするために、主な処理内容に応じて分類したものである。そのため、構成要素の分類の仕方やその名称によって、本願発明が制限されることはない。携帯端末２００の構成は、処理内容に応じて、さらに多くの構成要素に分類することもできる。また、１つの構成要素がさらに多くの処理を実行するように分類することもできる。

また、制御部２２０の各機能部は、ＣＰＵに限らずハードウェア（ＡＳＩＣ、ＧＰＵなど）により構築されてもよい。また、各機能部の処理が一つのハードウェアで実行されてもよいし、複数のハードウェアで実行されてもよい。

［動作の説明］次に、降車時の処理に関する動作について説明する。図８は、降車時処理の流れを示す図である。降車時処理は、車載機１００の起動時に開始される。

まず、降車検知部１２１は、降車を検知したか否か、判定する（ステップＳ００１）。降車を検知していない場合（ステップＳ００１にて「Ｎｏ」の場合）には、降車検知部１２１は、制御をステップＳ００１に戻す。

降車を検知した場合（ステップＳ００１にて「Ｙｅｓ」の場合）には、画像取得部１２２は、搭乗者の画像を取得する（ステップＳ００２）。具体的には、画像取得部１２２は、カメラ制御部１２６に撮像を指示し、車載機１００が搭載された車両から降車した乗員を撮像した画像データを取得する。

そして、画像認識部１２３は、画像を認識（被写体を特定）する（ステップＳ００３）。具体的には、画像認識部１２３は、画像取得部１２２が取得した画像データを公知の物体認識方法により解析し、被写体の物体（傘、マフラー、手袋等の予め定められた物体）を認識する。

そして、通知対象特定部１２４は、通知対象を特定する（ステップＳ００４）。具体的には、通知対象特定部１２４は、位置検出装置１０８を介して降車が検知された位置を特定して、当該位置が属する施設あるいは最寄の施設を、施設情報１１２を参照して検索し、特定する。そして、当該施設の属性に応じて通知対象情報１１３を参照して、通知対象の候補を特定する。具体的には、通知対象特定部１２４は、施設の予想滞在時間に応じて通知対象の候補を特定し、施設の規模に応じて通知対象の候補を特定し、施設の屋内外の区別に応じて通知対象の候補を特定し、これらの通知対象候補の和を算出する。そして、通知対象特定部１２４は、当該和に含まれる対象物と、画像データの被写体の物体との共通部分を算出し、これを通知対象と特定する。

そして、通知情報作成部１２５は、通知対象に応じた通知情報を作成する（ステップＳ００５）。具体的には、通知情報作成部１２５は、通知対象特定部１２４が特定した通知対象について、施設から退場する際と、乗車の際に所持を確認するための表示および音声による通知情報を作成する。より具体的には、通知情報作成部１２５は、施設屋内出入口および車両の通知位置ごとに、通知条件と、通知内容（言語情報）と、通知時の表示画像（画像情報）と、を対応付ける。なお、通知情報作成部１２５は、通知条件、通知内容（言語情報）は、予め定められたテンプレートに従い作成し、通知時の表示画像は、画像取得部１２２が取得した画像データから通知対象ごとにトリミング（または拡大）した画像を作成する。また、通知情報作成部１２５は、当該施設が屋内施設ではない場合には、車両への乗車時の通知情報のみを作成する。

そして、通知情報作成部１２５は、通知情報を送信する（ステップＳ００６）。具体的には、通知情報作成部１２５は、通知管理情報１１１を参照して、当該車載機１００に対応する携帯端末２００を特定し、通信部１３０を介して無線通信経由で携帯端末２００に作成した通知情報を送信する。

そして、通知制御部２２２は、通知情報を受信する（ステップＳ００７）。

そして、通知制御部２２２は、施設が屋内か否か判定する（ステップＳ００８）。具体的には、通知制御部２２２は、位置検出装置２０７を介して位置を特定して、当該位置が属する施設あるいは最寄の施設が屋内であるか否かを、通知情報に車両への乗車時の通知情報と施設内外出入口の通知情報が共に含まれるか否かにより判定する。施設が屋内でない場合（ステップＳ００８にて「Ｎｏ」の場合）には、通知制御部２２２は、制御をステップＳ０１０へ進める。

施設が屋内の場合（ステップＳ００８にて「Ｙｅｓ」の場合）には、通知制御部２２２は、施設屋内退出時の通知情報を登録する（ステップＳ００９）。具体的には、通知制御部２２２は、通知情報から通知位置が「施設屋内出入口」である通知情報を特定して、通知情報２１１に格納する。

そして、通知制御部２２２は、車両接近時の通知情報を登録する（ステップＳ０１０）。具体的には、通知制御部２２２は、通知情報から通知位置が「車両接近時」である通知情報を特定して、通知情報２１１に格納する。

以上が、降車時処理の流れである。降車時処理に寄れば、車両から降車した場合に、降車した乗員を撮像した画像を用いて、通知情報を携帯端末に転送できる。

図９は、施設退出時処理の流れを示す図である。施設退出時処理は、携帯端末２００において、通知情報が登録されている間、実施される。

まず、施設退場検出部２２１は、施設の屋内から退場したか否か判定する（ステップＳ１０１）。具体的には、施設退場検出部２２１は、携帯端末２００の位置を位置検出装置２０７を介して検出し、当該位置が降車時すなわち通知情報を受信した際の最寄の施設の出入り口にあたるか否か判定し、出入り口にあたると判定した場合に、初回を除いて当該施設からの退場として検出する。施設の屋内からの退場が検出されていない場合（ステップＳ１０１にて「Ｎｏ」の場合）には、施設退場検出部２２１は、制御をステップＳ１０５へ進める。

施設の屋内からの退場が検出された場合（ステップＳ１０１にて「Ｙｅｓ」の場合）には、通知制御部２２２は、通知情報２１１を読み出す（ステップＳ１０２）。具体的には、通知制御部２２２は、通知情報２１１を参照して、施設屋内出入口が通知位置となっている通知を抽出して読み出す。

そして、通知制御部２２２は、通知条件を満たすか否かを判定する（ステップＳ１０３）。具体的には、通知制御部２２２は、ステップＳ１０２にて読み出した通知に関して、通知条件２１１ｂを参照して通知条件を特定し、降水が通知条件である場合には湿度が所定の条件を満たすか否かを、気温が通知条件である場合には外気温が所定の条件を満たすか否かを、それぞれ判定することで、通知条件を満たすか否かを判定する。なお、湿度、温度等に関しては、図示しない湿度センサーや温度センサーを用いるものとする。その他、インターネット上の気象情報提供サービスを用いて近隣の湿度や温度を取得するものであってもよい。通知条件を満たさない場合（ステップＳ１０３にて「Ｎｏ」の場合）には、通知制御部２２２は、制御をステップＳ１０５へ進める。

そして、通知条件を満たしている場合（ステップＳ１０３にて「Ｙｅｓ」の場合）には、通知制御部２２２は、通知情報（通知対象物ごとのメッセージと画像）を出力する（ステップＳ１０４）。具体的には、通知制御部２２２は、ステップＳ１０２にて読み出した通知情報（通知対象物ごとのメッセージと画像）を画面制御部２２４に出力させる。

そして、通知制御部２２２は、車両に接近したか否か判定する（ステップＳ１０５）。具体的には、通知制御部２２２は、携帯端末２００の車両への接近を、車載機１００との通信の再開を検出することで判定する。例えば、通知制御部２２２は、車載機１００との間での無線ＬＡＮ（ＷｉＦｉ）、ＢｌｕｅｔｏｏｔｈあるいはＮＦＣ（Ｎｅａｒ Ｆｉｅｌｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ）等による無線通信、あるいはＵＳＢやＨＤＭＩ等の有線通信の確立を検出すると、車両に接近したと判定する。車両に接近していない場合（ステップＳ１０５にて「Ｎｏ」の場合）には、通知制御部２２２は、制御をステップＳ１０１へ戻す。

車両に接近した場合（ステップＳ１０５にて「Ｙｅｓ」の場合）には、通知制御部２２２は、通知情報２１１を読み出す（ステップＳ１０６）。具体的には、通知制御部２２２は、通知情報２１１を参照して、車両接近時が通知位置となっている通知を抽出して読み出す。

そして、通知制御部２２２は、通知条件を満たすか否かを判定する（ステップＳ１０７）。具体的には、通知制御部２２２は、ステップＳ１０６にて読み出した通知に関して、通知条件２１１ｂを参照して通知条件を特定し、降水が通知条件である場合には湿度が所定の条件を満たすか否かを、気温が通知条件である場合には外気温が所定の条件を満たすか否かを、それぞれ判定することで、通知条件を満たすか否かを判定する。なお、湿度、温度等に関しては、図示しない湿度センサーや温度センサーを用いるものとする。その他、インターネット上の気象情報提供サービスを用いて近隣の湿度や温度を取得するものであってもよい。通知条件を満たさない場合（ステップＳ１０７にて「Ｎｏ」の場合）には、通知制御部２２２は、施設退出時処理を終了させる。

そして、通知条件を満たしている場合（ステップＳ１０７にて「Ｙｅｓ」の場合）には、通知制御部２２２は、通知情報（通知対象物ごとのメッセージと画像）を出力する（ステップＳ１０８）。具体的には、通知制御部２２２は、ステップＳ１０６にて読み出した通知情報（通知対象物ごとのメッセージと画像）を画面制御部２２４に出力させる。

以上が、施設退出時処理の流れである。施設退出時処理によれば、施設から移動するために車両に接近した際と、施設に屋内の出入り口がある場合にはその屋内から退出する際とに、それぞれ、携帯端末２００の画面および音声により、降車時に保持していた傘やマフラー等の物品の逸失防止のための注意喚起を通知することができる。また、携帯端末２００の画面に表示される画像は、降車した乗員を撮像した画像に含まれる画像の一部であるため、具体的にどの物品の逸失の可能性があるかを知らせることができるため、より逸失防止効果を高めることができる。

図１０は、逸失防止システムの利用シーンの例を示す図である。逸失防止システム１を利用すると、降車時に降車時処理が実施され、屋内施設から退出時および乗車時に施設退出時処理が行われる。降車時処理では、車載機１００が搭載された車両１００Ａの撮像装置１０７により、傘とマフラーを含む乗員の姿が撮像され、通知情報が作成され、携帯端末２００に通知情報が送信される。

そして、屋内施設から退出時および乗車時に、携帯端末２００に画面４００が表示される。画面４００には、通知内容２１１ｃに格納されていたメッセージ４０１と、通知時表示画像２１１ｄに格納されていた傘の画像４０２、マフラーの画像４０３と、が含まれる。

以上が、本発明の第一の実施形態に係る逸失防止システム１である。逸失防止システム１によれば、煩雑なＩＤタグの管理を必要としない逸失防止サーバー装置、逸失防止システム、車載機、逸失防止端末および逸失防止方法を提供することができる。具体的には、施設の退出時に、施設到着時に保持していた所定の装備の保持を確認することができるため、逸失を未然に防止しうる。

ただし、本発明は、上記の実施形態に制限されない。上記の実施形態は、本発明の技術的思想の範囲内で様々な変形が可能である。例えば、車載機１００にて通知情報を作成しているが、所定のサーバー装置にインターネット等のネットワークを介して接続し降車位置と降車した乗員の画像とを送信し、当該サーバー装置にて通知情報を作成して携帯端末２００に配信するようにしてもよい。あるいは、車載機１００から携帯端末２００に降車位置と降車した乗員の画像とを送信し、当該携帯端末２００にて通知情報を作成するようにしてもよい。

図１１は、このような本発明に係る実施形態を適用した逸失防止システムの別の例を示す図である。逸失防止システム１´は、基本的に上記の実施形態と同様であり、相違点を中心に以下に説明する。逸失防止システム１´では、車載機１００´には、制御部１２０´と通信部１３０´とが含まれ、通信部１３０´は携帯電話網（ＬＴＥ：Ｌｏｎｇ Ｔｅｒｍ Ｅｖｏｌｕｔｉｏｎ）、あるいは無線ＬＡＮ（ＷｉＦｉ）等を介してサーバー装置３００と通信を行う。

制御部１２０´には、降車検知部１２１と、画像取得部１２２と、カメラ制御部１２６と、が含まれる点は第一の実施形態と同様である。しかし、制御部１２０´にはさらに、画像送信部１２７が含まれる。画像送信部１２７は、降車位置と、車載機１００´の識別子と、画像取得部１２２が取得した画像と、を通信部１３０´を経由してサーバー装置３００に送信する。

サーバー装置３００は、インターネット等のネットワークを介して車載機１００´および携帯端末２００と通信可能に接続される。サーバー装置３００は、いわゆるコンピューターサーバー装置であり、記憶部３１０と、制御部３２０と、通信部３３０と、を備える。

記憶部３１０には、通知管理情報３１１と、施設情報３１２と、通知対象情報３１３と、が格納される。通知管理情報３１１と、施設情報３１２と、通知対象情報３１３とは、それぞれ、上述の実施形態における通知管理情報１１１と、施設情報１１２と、通知対象情報１１３と同様のデータ構造を備える。

制御部３２０には、画像受信部３２１と、画像認識部３２２と、通知対象特定部３２３と、通知情報作成部３２４と、通知情報配信部３２５と、が含まれる。

画像受信部３２１は、車載機１００´から画像と、降車位置と、車載機１００´の識別子と、を受信する。画像認識部３２２は、画像受信部３２１が受信した画像データを公知の物体認識方法により解析し、被写体の物体を認識する。

通知対象特定部３２３は、降車が検知された位置が属する施設あるいは最寄の施設を、施設情報３１２を参照して検索し、特定する。そして、当該施設の属性に応じて、通知対象情報３１３を参照して、通知対象の候補を特定する。具体的には、通知対象特定部３２３は、施設の予想滞在時間に応じて通知対象の候補を特定し、施設の規模に応じて通知対象の候補を特定し、施設の屋内外の区別に応じて通知対象の候補を特定し、これらの通知対象候補の和を算出する。そして、通知対象特定部３２３は、当該和に含まれる対象物と、画像データの被写体の物体との共通部分を算出し、これを通知対象と特定する。

通知情報作成部３２４は、通知対象特定部３２３が特定した通知対象について、施設から退場する際と、乗車の際に所持を確認するための表示および音声による通知情報を作成する。具体的には、通知情報作成部３２４は、施設屋内出入口および車両の通知位置ごとに、通知条件と、通知内容（言語情報）と、通知時の表示画像（画像情報）と、を対応付ける。なお、通知情報作成部３２４は、通知条件、通知内容（言語情報）は、予め定められたテンプレートに従い作成し、通知時の表示画像は、画像受信部３２１が取得した画像データから通知対象ごとにトリミング（または拡大）した画像を作成する。

そして、通知情報配信部３２５は、通信部３３０を介してインターネット等の無線通信経由で携帯端末２００に、作成した通知情報を送信する。

通信部３３０は、携帯電話網（ＬＴＥ）、あるいは無線ＬＡＮ（ＷｉＦｉ）等を介して車載機１００´および携帯端末２００と通信を行う。

携帯端末２００は、基本的に上述の実施形態における携帯端末２００と同様であるが、通信部２３０´は、携帯電話網（ＬＴＥ）、あるいは無線ＬＡＮ（ＷｉＦｉ）等を介してサーバー装置３００と通信を行う点に相違がある。

以上が、上述の実施形態の別の例である。この例によれば、処理能力や施設情報の質・量等に勝ることが多いサーバー装置３００により車載機の処理負担を減らすことが可能となり、車載機１００´のハードウェア要求レベルを下げること、あるいは車載機１００´の応答速度を高めることができる。

図１２は、本発明に係る実施形態を適用した逸失防止システムのさらに別の例を示す図である。逸失防止システム１´´は、基本的に上記の実施形態と同様であり、相違点を中心に以下に説明する。逸失防止システム１´´では、車載機１００´´には、記憶部１１０´と、制御部１２０´と、通信部１３０と、が含まれる。記憶部１１０´には、通知管理情報１１１が含まれる。上述の実施形態のように施設情報１１２と通知対象情報１１３は記憶部１１０´には含まれるものではなく、この例では、携帯端末２００´の記憶部２１０´に施設情報２１２と通知対象情報２１３として含まれる。

制御部１２０´には、降車検知部１２１と、画像取得部１２２と、カメラ制御部１２６と、画像送信部１２７と、が含まれる。制御部１２０´には、画像認識部１２３と、通知対象特定部１２４と、通知情報作成部１２５と、は含まれず、携帯端末２００´の制御部２２０´にそれぞれ画像認識部２２６と、通知対象特定部２２７と、通知情報作成部２２８として含まれる。

携帯端末２００´は、記憶部２１０´と、制御部２２０´と、通信部２３０と、を備える。記憶部２１０´には、通知情報２１１と、施設情報２１２と、通知対象情報２１３と、が含まれる。通知情報２１１と、施設情報２１２と、通知対象情報２１３とは、それぞれ上述の実施形態における、通知情報２１１と、施設情報１１２と、通知対象情報１１３と同様のデータである。

制御部２２０´には、施設退場検出部２２１と、通知制御部２２２と、入力制御部２２３と、画面制御部２２４と、画像受信部２２５と、画像認識部２２６と、通知対象特定部２２７と、通知情報作成部２２８と、が含まれる。

画像受信部２２５は、車載機１００´´から画像と、降車位置と、車載機１００´´の識別子と、を受信する。画像認識部２２６は、画像受信部２２５が受信した画像データを公知の物体認識方法により解析し、被写体の物体を認識する。

通知対象特定部２２７は、降車が検知された位置が属する施設あるいは最寄の施設を、施設情報２１２を参照して検索し、特定する。そして、当該施設の属性に応じて、通知対象情報２１３を参照して、通知対象の候補を特定する。具体的には、通知対象特定部２２７は、施設の予想滞在時間に応じて通知対象の候補を特定し、施設の規模に応じて通知対象の候補を特定し、施設の屋内外の区別に応じて通知対象の候補を特定し、これらの通知対象候補の和を算出する。そして、通知対象特定部２２７は、当該和に含まれる対象物と、画像データの被写体の物体との共通部分を算出し、これを通知対象と特定する。

通知情報作成部２２８は、通知対象特定部２２７が特定した通知対象について、施設から退場する際と、乗車の際に所持を確認するための表示および音声による通知情報を作成する。具体的には、通知情報作成部２２８は、施設屋内出入口および車両の通知位置ごとに、通知条件と、通知内容（言語情報）と、通知時の表示画像（画像情報）と、を対応付ける。なお、通知情報作成部２２８は、通知条件、通知内容（言語情報）は、予め定められたテンプレートに従い作成し、通知時の表示画像は、画像受信部２２５が取得した画像データから通知対象ごとにトリミング（または拡大）した画像を作成する。

以上が、上述の実施形態のさらなる別の例である。この例によれば、処理能力や施設情報の質・量等に勝ることが多い携帯端末２００により車載機の処理負担を減らすことが可能となり、車載機１００´´のハードウェア要求レベルを下げること、あるいは車載機１００´´の応答速度を高めることができる。

１・・・逸失防止システム、１００・・・車載機、１１０・・・記憶部、１１１・・・通知管理情報、１１２・・・施設情報、１１３・・・通知対象情報、１２０・・・制御部、１２１・・・降車検知部、１２２・・・画像取得部、１２３・・・画像認識部、１２４・・・通知対象特定部、１２５・・・通知情報作成部、１２６・・・カメラ制御部、１３０・・・通信部、２００・・・携帯端末、２１０・・・記憶部、２２０・・・制御部、２２１・・・施設退場検出部、２２２・・・通知制御部、２２３・・・入力制御部、２２４・・・画面制御部、２３０・・・通信部

Claims (12)

1. 施設の属性情報と、前記施設の属性に応じて逸失防止対象物を特定する通知対象情報と、を記憶する記憶部と、
   所定の車載機および該車載機に対応付けられた所定の携帯端末とネットワークを介して通信する通信部と、
   前記車載機から、該車載機が搭載された車両から降車した乗員を撮像した画像を受信する画像受信部と、
   前記画像の被写体のうち、降車位置にある前記施設の属性に応じて前記逸失防止対象物を通知対象と特定する通知対象特定部と、
   前記通知対象について、所持を確認するための表示および音声による通知情報を作成する通知情報作成部と、
   前記携帯端末に前記通知情報を送信する通知情報配信部と、
   を備えることを特徴とするサーバー装置。
2. 請求項１に記載のサーバー装置であって、
   前記施設の属性情報には、前記施設ごとに予め定められた滞在時間が含まれ、
   前記通知対象特定部は、前記滞在時間に応じて前記逸失防止対象物を前記通知対象と特定する、
   ことを特徴とするサーバー装置。
3. 請求項１に記載のサーバー装置であって、
   前記施設の属性情報には、予め定められた前記施設の規模が含まれ、
   前記通知対象特定部は、前記施設の規模に応じて前記逸失防止対象物を前記通知対象と特定する、
   ことを特徴とするサーバー装置。
4. 請求項１に記載のサーバー装置であって、
   前記施設の属性情報には、屋内施設か否かが予め定められており、
   前記通知対象特定部は、前記施設が屋内施設か否かに応じて前記逸失防止対象物を前記通知対象と特定する、
   ことを特徴とするサーバー装置。
5. 請求項１に記載のサーバー装置であって、
   前記施設の属性情報には、前記施設ごとに予め定められた滞在時間、予め定められた前記施設の規模、または屋内施設か否か、が予め定められており、
   前記通知対象特定部は、前記施設の少なくとも２以上の属性情報の組み合わせに応じて前記逸失防止対象物を前記通知対象と特定する、
   ことを特徴とするサーバー装置。
6. サーバー装置と、車載機と、該車載機に対応付けられた携帯端末と、を通信可能にネットワークで接続する逸失防止システムであって、
   前記車載機は、
   乗員の降車を検知する降車検知部と、
   降車した前記乗員を撮像して画像を取得する画像取得部と、
   前記画像を前記サーバー装置へ送信する画像送信部と、を備え、
   前記サーバー装置は、
   施設の属性情報と、前記施設の属性に応じて逸失防止対象物を特定する通知対象情報と、を記憶する記憶部と、
   前記車載機から、前記画像を受信する画像受信部と、
   前記画像の被写体のうち、降車位置にある前記施設の属性に応じて前記逸失防止対象物を通知対象と特定する通知対象特定部と、
   前記通知対象について、所持を確認するための表示および音声による通知情報を作成する通知情報作成部と、
   前記携帯端末に前記通知情報を送信する通知情報配信部と、を備え、
   前記携帯端末は、
   前記通知情報を前記サーバー装置から受信する通知制御部と、
   前記施設からの退場を検出する施設退場検出部と、
   画面制御部と、を備え、
   前記通知制御部は、
   前記施設からの退場時に、前記通知情報を前記画面制御部に出力させる、
   ことを特徴とする逸失防止システム。
7. 車両に搭載される車載機であって、
   施設の属性情報と、前記施設の属性に応じて逸失防止対象物を特定する通知対象情報と、を記憶する記憶部と、
   乗員の降車を検知する降車検知部と、
   降車した前記乗員を撮像して画像を取得する画像取得部と、
   前記画像の被写体のうち、降車位置にある前記施設の属性に応じて前記逸失防止対象物を通知対象と特定する通知対象特定部と、
   前記通知対象について、所持を確認するための表示および音声による通知情報を作成する通知情報作成部と、
   を備えることを特徴とする車載機。
8. サーバー装置を用いた逸失防止方法であって、
   前記サーバー装置は、
   施設の属性情報と、前記施設の属性に応じて逸失防止対象物を特定する通知対象情報と、を記憶する記憶部と、
   所定の車載機および該車載機に対応付けられた所定の携帯端末とネットワークを介して通信する通信部と、制御部と、を備え、
   前記制御部は、
   前記車載機から、該車載機が搭載された車両から降車した乗員を撮像した画像を受信する画像受信ステップと、
   前記画像の被写体のうち、降車位置にある前記施設の属性に応じて前記逸失防止対象物を通知対象と特定する通知対象特定ステップと、
   前記通知対象について、所持を確認するための表示および音声による通知情報を作成する通知情報作成ステップと、
   前記携帯端末に前記通知情報を送信する通知情報配信ステップと、
   を実施することを特徴とする逸失防止方法。
9. 請求項８に記載の逸失防止方法であって、
   前記施設の属性情報には、前記施設ごとに予め定められた滞在時間が含まれ、
   前記通知対象特定ステップでは、前記滞在時間に応じて前記逸失防止対象物を前記通知対象と特定する、
   ことを特徴とする逸失防止方法。
10. 請求項８に記載の逸失防止方法であって、
    前記施設の属性情報には、予め定められた前記施設の規模が含まれ、
    前記通知対象特定ステップでは、前記施設の規模に応じて前記逸失防止対象物を前記通知対象と特定する、
    ことを特徴とする逸失防止方法。
11. 請求項８に記載の逸失防止方法であって、
    前記施設の属性情報には、屋内施設か否かが予め定められており、
    前記通知対象特定ステップでは、前記施設が屋内施設か否かに応じて前記逸失防止対象物を前記通知対象と特定する、
    ことを特徴とする逸失防止方法。
12. 請求項８に記載の逸失防止方法であって、
    前記施設の属性情報には、前記施設ごとに予め定められた滞在時間、予め定められた前記施設の規模、または屋内施設か否か、が予め定められており、
    前記通知対象特定ステップでは、前記施設の少なくとも２以上の属性情報の組み合わせに応じて前記逸失防止対象物を前記通知対象と特定する、
    ことを特徴とする逸失防止方法。

Images