Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP5286952B2 - Moving purpose estimation apparatus and moving purpose estimation method - Google Patents
[go: Go Back, main page]

JP5286952B2 - Moving purpose estimation apparatus and moving purpose estimation method - Google Patents

Moving purpose estimation apparatus and moving purpose estimation method Download PDF

Info

Publication number
JP5286952B2
JP5286952B2 JP2008147877A JP2008147877A JP5286952B2 JP 5286952 B2 JP5286952 B2 JP 5286952B2 JP 2008147877 A JP2008147877 A JP 2008147877A JP 2008147877 A JP2008147877 A JP 2008147877A JP 5286952 B2 JP5286952 B2 JP 5286952B2
Authority
JP
Japan
Prior art keywords
movement
information
movement purpose
vehicle
database
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2008147877A
Other languages
Japanese (ja)
Other versions
JP2009294080A (en
Inventor
悟 広瀬
俊行 清水
眞幸 渡部
起可 南部
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nissan Motor Co Ltd
Original Assignee
Nissan Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nissan Motor Co Ltd filed Critical Nissan Motor Co Ltd
Priority to JP2008147877A priority Critical patent/JP5286952B2/en
Publication of JP2009294080A publication Critical patent/JP2009294080A/en
Application granted granted Critical
Publication of JP5286952B2 publication Critical patent/JP5286952B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Navigation (AREA)
  • Traffic Control Systems (AREA)

Description

本発明は、車両の移動目的及び移動目的地を推定する移動目的推定装置及び移動目的推定方法に関する。   The present invention relates to a movement purpose estimation apparatus and a movement purpose estimation method for estimating a movement purpose and a movement destination of a vehicle.

従来、操作者が目的地を入力することなく、自車両位置等の情報と所定の走行情報記憶部に記憶された目的地情報とに基づいて目的地を推定するナビゲーション装置が提案されている(例えば、特許文献1参照。)。
特開2002−328035号公報
Conventionally, there has been proposed a navigation device that estimates a destination based on information such as the position of the host vehicle and destination information stored in a predetermined travel information storage unit without an operator inputting the destination ( For example, see Patent Document 1.)
JP 2002-328035 A

上述した特許文献1に記載された技術は、過去の走行履歴を用いて目的地を推定しているので、自車両の使用者にとって習慣性のある行動については過去の走行履歴の頻度が高くなるために目的地を精度よく推定することができるものの、例えば結婚式に行く等、習慣性の少ない行動の目的地については推定することが困難であるという問題があった。   Since the technique described in Patent Document 1 described above estimates the destination using the past travel history, the frequency of the past travel history increases for behaviors that are addictive to the user of the host vehicle. Therefore, although it is possible to accurately estimate the destination, there is a problem that it is difficult to estimate a destination of a less addictive action such as going to a wedding.

そこで、本発明は、上述した実情に鑑みて提案されたものであり、習慣性の少ない行動の目的地についても精度よく推定することができる移動目的推定装置及び移動目的推定方法を提供することを目的とする。   Therefore, the present invention has been proposed in view of the above-described circumstances, and provides a movement purpose estimation device and a movement purpose estimation method that can accurately estimate a destination of a less addictive action. Objective.

本発明に係る移動目的推定装置及び移動目的推定方法は、撮像された映像と当該映像から認識された前記車両の乗員の装飾状態とそのときの移動目的とを対応付けてデータベースに記憶されている映像と撮像された映像から認識された装飾状態とを比較し、その比較結果に基づいて当該車両の第1の移動目的を推定すると共に、人の装飾状態としての着衣及び装飾品を含む特徴情報と、当該特徴情報に対応する移動目的とを記憶するデータベースであって、汎用ネットワークに登録された情報を用いて作成されたデータベースに記憶されている特徴情報に基づいて車両の第2の移動目的を推定する。
本発明に係る移動目的推定装置及び移動目的推定方法は、第1の移動目的と第2の移動目的が大きく異ならない場合には第1の移動目的を優先的に推定し、第1の移動目的と第2の移動目的が大きく異なる場合には撮像された映像から認識された装飾状態を特異な条件として、撮像された映像と当該映像から認識された前記車両の乗員の装飾状態とそのときの移動目的とを対応付けてデータベースに記録することで、上述の課題を解決する。
In the movement purpose estimation device and the movement purpose estimation method according to the present invention, the captured image, the decoration state of the vehicle occupant recognized from the image, and the movement purpose at that time are associated with each other and stored in the database. Feature information including clothes and ornaments as a person's decoration state while comparing the image and the decoration state recognized from the captured image, estimating the first movement purpose of the vehicle based on the comparison result And a travel purpose corresponding to the feature information, the second travel purpose of the vehicle based on the feature information stored in the database created using the information registered in the general-purpose network Is estimated.
The movement purpose estimation device and the movement purpose estimation method according to the present invention preferentially estimate the first movement purpose when the first movement purpose and the second movement purpose are not significantly different from each other. If the second movement purpose is significantly different from the second moving purpose, the decoration state recognized from the captured image is a special condition, the captured image, the decoration state of the vehicle occupant recognized from the image, and the current state The above-mentioned problem is solved by associating the purpose of movement with the database and recording it in the database .

本発明に係る移動目的推定装置及び移動目的推定方法によれば、移動目的を得るために車両の乗員の装飾状態を認識するので、習慣性の少ない行動の目的地についても精度よく推定することができる。   According to the movement purpose estimation device and the movement purpose estimation method according to the present invention, since the decoration state of the vehicle occupant is recognized in order to obtain the movement purpose, it is possible to accurately estimate the destination of the less addictive action. it can.

以下、本発明の好適な実施形態としての移動目的推定装置について具体的に説明する。   Hereinafter, the movement purpose estimation apparatus as a preferred embodiment of the present invention will be described in detail.

[第1実施形態]
[移動目的推定装置の構成]
本発明の第1実施形態として示す移動目的推定装置は、図1に示すように、地図データを記憶する地図データベース11と、交通情報データを記憶する交通情報データベース12と、ウェブ情報データを記憶するウェブ情報データベース13と、放送データを記憶する放送データベース14と、自車両の運転者にとって有益な支援情報データを記憶する支援情報データベース15と、一般的な情報に基づいて作成された自車両の乗員の装飾状態と移動目的と移動目的地とをデータとして記憶する装飾状態・移動目的データベース16(第2の記憶手段)と、自車両内の状況を撮像する車内カメラ21と、CAN(Controller Area Network)を介して取得した車両データからなるCAN信号を取得するCAN信号取得部22と、自車両の位置を判定する自車位置判定部31と、自車両が走行する道路に関する情報を取得する道路情報取得部32と、車内カメラ21によって撮像された映像情報を解析して認識する映像解析認識部33と、自車両に乗車している乗員の装飾状態と移動目的と移動目的地とを取得する装飾状態・場所情報取得部41と、自車両が移動目的地として到達した場所を判定する移動場所判定部42と、個人情報に基づいて作成された自車両の乗員の装飾状態と移動目的と移動目的地とをデータとして記憶する装飾状態・移動場所記憶部43(第1の記憶手段)と、自車両の状態を判定する自車状態判定部44と、現在の自車両の移動目的及び移動目的地を推定する移動目的推定部45と、この移動目的推定部45によって推定された移動目的及び移動目的地に応じた提示情報を選択する提示情報選択部46と、自車両のルート案内を行う際の目的地を設定する目的地設定部51と、提示情報選択部46によって選択された提示情報を自車両の乗員に提示する情報提示部52とを備える。
[First Embodiment]
[Configuration of moving purpose estimation device]
As shown in FIG. 1, the movement purpose estimation apparatus shown as the first embodiment of the present invention stores a map database 11 that stores map data, a traffic information database 12 that stores traffic information data, and web information data. Web information database 13, broadcast database 14 for storing broadcast data, support information database 15 for storing support information data useful for the driver of the own vehicle, and a passenger of the own vehicle created based on general information Decoration state / movement purpose database 16 (second storage means) that stores the decoration state, movement purpose, and movement destination as data, an in-vehicle camera 21 that captures the situation in the host vehicle, and a CAN (Controller Area Network) ) To determine the position of the host vehicle, and a CAN signal acquisition unit 22 that acquires a CAN signal including vehicle data acquired via A host vehicle position determination unit 31, a road information acquisition unit 32 that acquires information about a road on which the host vehicle travels, a video analysis recognition unit 33 that analyzes and recognizes video information captured by the in-vehicle camera 21, and a host vehicle A decoration state / location information acquisition unit 41 that acquires a decoration state, a movement purpose, and a movement destination of an occupant riding in the vehicle; a movement location determination unit 42 that determines a location where the host vehicle has reached the movement destination; The decoration state / movement location storage unit 43 (first storage means) that stores the decoration state, movement purpose, and movement destination of the occupant of the own vehicle created based on the personal information as data, and the state of the own vehicle The vehicle state determination unit 44 for determining, the movement purpose estimation unit 45 for estimating the current movement purpose and the movement destination of the own vehicle, and the movement purpose and the movement destination estimated by the movement purpose estimation unit 45 Presentation A presentation information selection unit 46 for selecting information, a destination setting unit 51 for setting a destination for route guidance of the host vehicle, and presentation information selected by the presentation information selection unit 46 are presented to the passenger of the host vehicle. And an information presentation unit 52.

地図データベース11は、例えばハードディスク等からなり、自車両のルート案内を行う際に用いる道路情報や交差点情報を表すノード情報及びリンク情報を含む地図データを記憶する。また、この地図データには、ノード情報及びリンク情報に付随した店情報などの施設情報なども記憶されている。この地図データベース11に記憶されている地図データは、自車位置判定部31及び道路情報取得部32によって読み出される。   The map database 11 is composed of, for example, a hard disk or the like, and stores map data including node information and link information representing road information and intersection information used for route guidance of the host vehicle. The map data also stores facility information such as store information attached to node information and link information. The map data stored in the map database 11 is read by the own vehicle position determination unit 31 and the road information acquisition unit 32.

交通情報データベース12は、例えばハードディスク等からなり、FM多重放送等で道路の渋滞状況等の各種情報を提供するVICS情報データをはじめとする交通情報データを記憶する。この交通情報データベース12に記憶されている交通情報データは、道路情報取得部32によって読み出される。   The traffic information database 12 includes, for example, a hard disk and stores traffic information data such as VICS information data that provides various information such as traffic congestion on a road by FM multiplex broadcasting or the like. The traffic information data stored in the traffic information database 12 is read by the road information acquisition unit 32.

ウェブ情報データベース13は、例えばハードディスク等からなり、ウェブカメラによって撮像された映像をはじめとし、汎用ネットワークであるインターネット等にアクセスして得られたウェブ情報データを記憶する。このウェブ情報データベース13に記憶されているウェブ情報データは、装飾状態・場所情報取得部41及び提示情報選択部46によって読み出される。   The web information database 13 includes, for example, a hard disk, and stores web information data obtained by accessing the Internet, which is a general-purpose network, as well as video captured by a web camera. The web information data stored in the web information database 13 is read by the decoration state / location information acquisition unit 41 and the presentation information selection unit 46.

放送データベース14は、例えばハードディスク等からなり、地上ディジタル放送等、双方行で情報の授受が可能な放送サービスを受信する受信器によって受信した放送データを記憶する。この放送データベース14に記憶されている放送データは、装飾状態・場所情報取得部41及び提示情報選択部46によって読み出される。   The broadcast database 14 is composed of, for example, a hard disk or the like, and stores broadcast data received by a receiver that receives a broadcast service such as terrestrial digital broadcasting that can exchange information between both banks. Broadcast data stored in the broadcast database 14 is read by the decoration state / location information acquisition unit 41 and the presentation information selection unit 46.

支援情報データベース15は、例えばハードディスク等からなり、自車両の運転者にとって有益な支援情報データを記憶する。具体的には、支援情報データは、例えば自車両のルート案内を支援する情報を所定の情報配信センタから配信するサービスやその他の専用情報通信サービス、さらにはインターネット等から得られるデータであり、携帯電話機18等の通信手段を介して受信されるデータである。この支援情報データベース15に記憶されている支援情報データは、装飾状態・場所情報取得部41及び提示情報選択部46によって読み出される。   The support information database 15 is composed of, for example, a hard disk and stores support information data useful for the driver of the host vehicle. Specifically, the support information data is data obtained from, for example, a service that distributes information for supporting route guidance of the host vehicle from a predetermined information distribution center, other dedicated information communication services, and the Internet. Data received via communication means such as the telephone 18. The support information data stored in the support information database 15 is read by the decoration state / location information acquisition unit 41 and the presentation information selection unit 46.

装飾状態・移動目的データベース16は、例えばハードディスク等からなり、装飾状態・場所情報取得部41によって取得された装飾状態・場所情報に基づいて、自車両の乗員の装飾状態に対応する移動目的及び移動目的地をデータとして記憶する。すなわち、装飾状態・移動目的データベース16は、ウェブ情報データベース13から読み出したウェブ情報データ、放送データベース14から読み出した放送データ、及び支援情報データベース15から読み出した支援情報データ等、一般的な情報に基づいて作成される。なお、この装飾状態・移動目的データベース16は、自車両内のハードディスク等に記憶されても良く、情報を配信する所定の情報配信センタ側に記憶されても良い。この装飾状態・移動目的データベース16に記憶されているデータは、移動目的推定部45によって読み出される。   The decoration state / movement purpose database 16 includes, for example, a hard disk or the like, and based on the decoration state / location information acquired by the decoration state / location information acquisition unit 41, the movement purpose and movement corresponding to the decoration state of the occupant of the own vehicle. The destination is stored as data. That is, the decoration state / movement purpose database 16 is based on general information such as web information data read from the web information database 13, broadcast data read from the broadcast database 14, and support information data read from the support information database 15. Created. The decoration state / movement purpose database 16 may be stored in a hard disk or the like in the host vehicle, or may be stored in a predetermined information distribution center that distributes information. The data stored in the decoration state / movement purpose database 16 is read out by the movement purpose estimation unit 45.

GPS信号受信部17は、自車両位置を特定するために必要となるGPS情報をGPS衛星から配信されているGPS信号に基づいて取得する。このGPS信号受信部17によって取得されたGPS情報は、自車位置判定部31に供給される。   The GPS signal receiving unit 17 acquires GPS information necessary for specifying the position of the host vehicle based on the GPS signal distributed from the GPS satellite. The GPS information acquired by the GPS signal receiving unit 17 is supplied to the own vehicle position determining unit 31.

車内カメラ21は、自車両に乗車している乗員の装飾状態や持ち物等、自車両内の状況を撮像するような位置及び撮像範囲となっている。この車内カメラ21によって撮像された映像情報は、映像解析認識部33に供給される。   The in-vehicle camera 21 has a position and an imaging range for capturing an image of a situation in the host vehicle such as a decoration state or belongings of a passenger riding in the host vehicle. Video information captured by the in-vehicle camera 21 is supplied to the video analysis recognition unit 33.

CAN信号取得部22は、車両に搭載されたCAN通信ラインと接続されている。このCAN通信ラインには、車両データとしての車速やエンジン回転数、シフトポジション、ステアリング角度、アクセルペダル開度、ブレーキペダル操作、ウインカー操作等を取得するセンサが接続されている。そして、CAN信号取得部22は、自車両に関する車両データを一括して通信するためのCAN信号を取得する。具体的には、CAN信号出力部22は、車速やエンジン回転数、シフトポジション、ステアリング角度、アクセルペダル開度、ブレーキペダル操作、ウインカー操作等の車両データをCAN信号として取得する。CAN信号取得部22は、取得したCAN信号を自車状態判定部44に供給する。   The CAN signal acquisition unit 22 is connected to a CAN communication line mounted on the vehicle. The CAN communication line is connected to sensors for acquiring vehicle speed, engine speed, shift position, steering angle, accelerator pedal opening, brake pedal operation, turn signal operation, and the like as vehicle data. And the CAN signal acquisition part 22 acquires the CAN signal for communicating the vehicle data regarding the own vehicle collectively. Specifically, the CAN signal output unit 22 acquires vehicle data such as a vehicle speed, an engine speed, a shift position, a steering angle, an accelerator pedal opening, a brake pedal operation, and a winker operation as a CAN signal. The CAN signal acquisition unit 22 supplies the acquired CAN signal to the own vehicle state determination unit 44.

自車位置判定部31は、GPS信号受信部17によって取得されたGPS情報と、地図データベース11から読み出した地図データとに基づいて、自車両位置が地図上のどこにあるかを判定する。自車位置判定部31は、判定した自車位置情報を移動場所判定部42に供給する。   The own vehicle position determining unit 31 determines where the own vehicle position is on the map based on the GPS information acquired by the GPS signal receiving unit 17 and the map data read from the map database 11. The own vehicle position determination unit 31 supplies the determined own vehicle position information to the movement location determination unit 42.

道路情報取得部32は、地図データベース11から読み出した地図データと、交通情報データベース12から読み出した交通情報データとに基づいて、自車両が走行する道路に関する道路情報を取得する。道路情報取得部32は、取得した道路情報を移動場所判定部42に供給する。   The road information acquisition unit 32 acquires road information related to the road on which the vehicle travels based on the map data read from the map database 11 and the traffic information data read from the traffic information database 12. The road information acquisition unit 32 supplies the acquired road information to the movement location determination unit 42.

映像解析認識部33は、車内カメラ21によって撮像された映像情報を解析し、自車両に乗車している乗員の装飾状態等を認識する。映像解析認識部33は、認識した結果を示す認識情報を移動目的推定部45に供給する。   The video analysis recognizing unit 33 analyzes video information captured by the in-vehicle camera 21 and recognizes a decoration state or the like of an occupant on the own vehicle. The video analysis recognition unit 33 supplies recognition information indicating the recognition result to the movement purpose estimation unit 45.

装飾状態・場所情報取得部41は、装飾状態・移動目的データベース16を作成するために、ウェブ情報データベース13から読み出したウェブ情報データ、放送データベース14から読み出した放送データ、及び支援情報データベース15から読み出した支援情報データ等に基づいて、自車両に乗車している乗員の装飾状態と移動目的と移動目的地とを取得する。装飾状態・場所情報取得部41は、取得した乗員の装飾状態と移動目的と移動目的地とを示す装飾状態・場所情報を装飾状態・移動目的データベース16に記憶させる。なお、この実施形態においては、移動目的と当該移動目的に合致した移動目的地の双方を取得できる場合について説明するが、乗員の装飾状態から移動目的のみを取得できるものであっても良い。   The decoration state / location information acquisition unit 41 reads the web information data read from the web information database 13, the broadcast data read from the broadcast database 14, and the support information database 15 to create the decoration state / movement purpose database 16. Based on the support information data and the like, the decoration state, the movement purpose, and the movement destination of the occupant on the own vehicle are acquired. The decoration state / location information acquisition unit 41 stores the decoration state / location information indicating the acquired decoration state, movement purpose, and movement destination of the occupant in the decoration state / movement purpose database 16. In this embodiment, the case where both the movement purpose and the movement destination that matches the movement purpose can be acquired will be described. However, only the movement purpose may be acquired from the decoration state of the occupant.

移動場所判定部42は、自車位置判定部31から供給された自車位置情報、道路情報取得部32から供給された道路情報、及び自車状態判定部44から供給された自車状態情報等に基づいて、自車両が移動目的地として到達した場所を判定する。移動場所判定部42は、判定した移動場所情報を装飾状態・移動場所記憶部43に記憶させる。   The moving place determination unit 42 includes the own vehicle position information supplied from the own vehicle position determination unit 31, the road information supplied from the road information acquisition unit 32, the own vehicle state information supplied from the own vehicle state determination unit 44, and the like. Based on the above, the location where the host vehicle has reached as the moving destination is determined. The movement location determination unit 42 stores the determined movement location information in the decoration state / movement location storage unit 43.

装飾状態・移動場所記憶部43は、例えばハードディスク等からなり、映像解析認識部33から供給された認識情報と、移動場所判定部42から供給された移動場所情報とに基づいて、自車両の乗員の装飾状態に対応する移動目的及び移動目的地をデータとして記憶する。すなわち、装飾状態・移動場所記憶部43は、装飾状態・移動目的データベース16とは異なり、映像解析認識部33から供給された認識情報及び移動場所判定部42から供給された移動場所情報という個人情報、すなわち、自車両に固有の情報に基づいて作成される。この装飾状態・移動場所記憶部43に記憶されているデータは、移動目的推定部45によって読み出される。   The decoration state / movement location storage unit 43 is composed of, for example, a hard disk or the like, and is based on the recognition information supplied from the video analysis recognition unit 33 and the movement location information supplied from the movement location determination unit 42. The movement purpose and the movement destination corresponding to the decoration state are stored as data. That is, the decoration state / movement location storage unit 43 is different from the decoration state / movement purpose database 16, and includes personal information such as recognition information supplied from the video analysis recognition unit 33 and movement location information supplied from the movement location determination unit 42. That is, it is created based on information unique to the host vehicle. The data stored in the decoration state / movement location storage unit 43 is read out by the movement purpose estimation unit 45.

自車状態判定部44は、CAN信号取得部22から供給された車両データからなるCAN信号に基づいて、移動目的を推定し、自車両が移動目的地に到着したか否か等を含む当該自車両の状態を判定する。自車状態判定部44は、判定した自車状態情報を移動場所判定部42及び提示情報選択部46に供給する。   The own vehicle state determination unit 44 estimates the purpose of movement based on the CAN signal made up of the vehicle data supplied from the CAN signal acquisition unit 22 and includes whether the own vehicle has arrived at the movement destination. Determine the state of the vehicle. The own vehicle state determination unit 44 supplies the determined own vehicle state information to the movement location determination unit 42 and the presentation information selection unit 46.

移動目的推定部45は、映像解析認識部33から供給された認識情報と、装飾状態・移動目的データベース16及び装飾状態・移動場所記憶部43に記憶されているデータとを比較し、その比較結果に基づいて、過去に移動目的地として自車両が到達した場所の中から今回の自車両の移動目的及び移動目的地を推定する。移動目的推定部45は、推定した移動目的情報を提示情報選択部46及び目的地設定部51に供給する。   The movement purpose estimation unit 45 compares the recognition information supplied from the video analysis recognition unit 33 with the data stored in the decoration state / movement purpose database 16 and the decoration state / movement location storage unit 43, and the comparison result. Based on the above, the current travel destination and the travel destination of the host vehicle are estimated from the locations where the host vehicle has reached as the travel destination in the past. The movement purpose estimation unit 45 supplies the estimated movement purpose information to the presentation information selection unit 46 and the destination setting unit 51.

提示情報選択部46は、地図データベース11から読み出した地図データ、交通情報データベース12から読み出した交通情報データ、ウェブ情報データベース13から読み出したウェブ情報データ、放送データベース14から読み出した放送データ、支援情報データベース15から読み出した支援情報データ、及び自車状態判定部44から供給された自車状態情報等に基づいて、移動目的推定部45によって推定された移動目的及び移動目的地に応じた提示情報を選択する。提示情報選択部46は、選択した提示情報を情報提示部52に供給する。   The presentation information selection unit 46 includes map data read from the map database 11, traffic information data read from the traffic information database 12, web information data read from the web information database 13, broadcast data read from the broadcast database 14, and support information database. 15 based on the support information data read from 15 and the vehicle state information supplied from the vehicle state determination unit 44, etc., and the presentation information corresponding to the movement purpose and the movement destination estimated by the movement purpose estimation unit 45 are selected. To do. The presentation information selection unit 46 supplies the selected presentation information to the information presentation unit 52.

目的地設定部51は、移動目的推定部45から供給された移動目的情報に基づいて、自動的に又は提案型で運転者に確認後に、自車両のルート案内を行う際の目的地を設定する。自車両は、目的地設定部51によって目的地が設定されると、それにしたがったルート案内を開始することができる。   Based on the travel purpose information supplied from the travel purpose estimation unit 45, the destination setting unit 51 sets a destination for performing route guidance for the host vehicle automatically or after confirming with the driver in a proposal type. . When the destination is set by the destination setting unit 51, the host vehicle can start route guidance according to the destination.

情報提示部52は、例えばカーナビゲーションシステム等におけるTTS(Text to speech)システムや、視覚情報を表示する液晶ディスプレイ画面及び聴覚情報を出力するスピーカ等を利用して構成され、提示情報選択部46によって選択された提示情報を、主に音声情報として自車両に乗車している乗員に提示する。   The information presentation unit 52 is configured using, for example, a TTS (Text to Speech) system in a car navigation system, a liquid crystal display screen that displays visual information, a speaker that outputs auditory information, and the like. The selected presentation information is presented mainly to the occupants who are in the vehicle as voice information.

[移動目的推定装置の動作]
このような各部を備える移動目的推定装置は、図2に示すような一連の手順にしたがって、自車両に乗車している乗員の装飾状態に応じた移動目的を推定する。
[Operation of moving purpose estimation device]
Such a movement purpose estimation apparatus including each unit estimates a movement purpose according to the decoration state of a passenger on the host vehicle according to a series of procedures as shown in FIG.

まず、移動目的推定装置は、通常、車両のイグニッションキーが操作されたことをトリガとして車両が走行を開始するに際して行われる。この移動目的推定装置は、図2に示すように、ステップS1において、車内カメラ21によって撮像された映像を映像解析認識部33によって解析することにより、自車両内に乗員がいるか否かを判定する。   First, the movement purpose estimation apparatus is normally performed when the vehicle starts to travel with the operation of the ignition key of the vehicle as a trigger. As shown in FIG. 2, the moving purpose estimation device determines whether or not there is a passenger in the own vehicle by analyzing the video imaged by the in-vehicle camera 21 by the video analysis recognition unit 33 in step S <b> 1. .

ここで、移動目的推定装置は、乗員が正規なシート位置に着座していない場合などには、自車両内に乗員がいないと認識して、ステップS2に処理を進める。そして、このステップS2においては、自車両が移動しないと判断し、新たな移動目的を推定するために、以前に推定した移動目的をリセットする。ただし、以前の移動目的は、次の移動目的を推定する場合等に利用される。そのため、移動目的推定装置は、推定結果が得られた段階で、後述するメモリ等の記憶手段等に移動目的を記憶しており、且つ、実際の移動目的地との差異、すなわち、移動目的の推定結果が推定通りであったか推定が外れたかを示す情報をもあわせて記憶している。   Here, when the occupant is not seated at the normal seat position, the movement purpose estimation device recognizes that there is no occupant in the host vehicle, and proceeds to step S2. In step S2, it is determined that the host vehicle does not move, and the previously estimated movement purpose is reset in order to estimate a new movement purpose. However, the previous movement purpose is used when estimating the next movement purpose. Therefore, the movement purpose estimation device stores the movement purpose in a storage means such as a memory, which will be described later, at the stage when the estimation result is obtained, and the difference from the actual movement destination, that is, the movement purpose Information indicating whether the estimation result is as estimated or not estimated is also stored.

一方、自車両内に乗員がいると認識した場合には、ステップS3において、乗員の装飾状態を確認するために、主に人物をズームアップして車内カメラ21によって撮像された車内画像(映像)を取得する。移動目的推定装置は、このような車内画像のうち顔画像の部分に基づいて、映像解析認識部33によって個人認識を行うことができ、乗員個人毎の装飾状態を取得することができる。   On the other hand, when it is recognized that there is an occupant in the own vehicle, in step S3, in order to confirm the occupant's decoration state, the in-vehicle image (video) captured mainly by the in-vehicle camera 21 with the person zoomed up. To get. The movement purpose estimation device can perform personal recognition by the video analysis recognition unit 33 based on the face image portion of such an in-vehicle image, and can acquire a decoration state for each occupant.

そして、ステップS4においては、映像解析認識部33によって、乗員の顔、首、腕、胴体、足等を認識した後に、着衣情報を抽出する。具体的には、映像解析認識部33は、乗員が着用している服飾品のうち、袖の長さや形状、襟元、ネクタイの有無、柄(ロゴマークを含む)、色、テクスチャーなどの素材情報等、できるだけ多くの着衣情報を抽出する。移動目的推定装置は、映像解析認識部33によって認識された着衣情報を装飾状態・移動場所記憶部43に記憶させる。   In step S4, the image analysis recognition unit 33 recognizes the occupant's face, neck, arms, torso, legs, and the like, and then extracts clothing information. Specifically, the image analysis and recognition unit 33 includes material information such as the length and shape of the sleeve, the neck, the presence or absence of a tie, the pattern (including the logo mark), the color, the texture, etc. of the clothing worn by the occupant. Extract as much clothing information as possible. The movement purpose estimation device stores the clothing information recognized by the video analysis recognition unit 33 in the decoration state / movement location storage unit 43.

また、ステップS5において、移動目的推定部45により、映像解析認識部33によって認識された着衣情報を、装飾状態・移動目的データベース16に記憶されている一般的な着衣情報、及び、装飾状態・移動場所記憶部43に記憶されている着衣情報と比較する。これにより移動目的推定部45は、類似度の高い移動目的及び移動目的地を抽出した上で、ステップS10へと処理を移行する。   Also, in step S5, the clothing information recognized by the video analysis recognition unit 33 by the movement purpose estimation unit 45 is used as general clothing information stored in the decoration state / movement purpose database 16 and the decoration state / movement. It compares with the clothing information memorize | stored in the location memory | storage part 43. FIG. As a result, the movement purpose estimation unit 45 extracts a movement purpose and a movement destination having a high degree of similarity, and then proceeds to step S10.

なお、装飾状態・移動目的データベース16は、上述したように、一般的な情報に基づいて作成されるものであるが、この作成処理については、後述するものとする。また、映像解析認識部33によって認識された着衣情報と、装飾状態・移動目的データベース16及び装飾状態・移動場所記憶部43に記憶されている着衣情報との比較による類似度の算出についても、後述するものとする。   The decoration state / movement purpose database 16 is created based on general information as described above, and the creation process will be described later. Also, the calculation of similarity by comparing the clothing information recognized by the video analysis recognition unit 33 with the clothing information stored in the decoration state / movement purpose database 16 and the decoration state / movement location storage unit 43 will be described later. It shall be.

また、ステップS6においては、映像解析認識部33によって、乗員の髪型や化粧、髭の状態等、顔や頭部の状態を認識して状態情報を抽出する。すなわち、移動目的が結婚式等に行くことである場合には、女性の乗員であれば、髪型がアップであり化粧が濃くなる傾向にある。また、移動目的が就職面談や出張である場合には、髭を剃っている傾向にあるが、移動目的が日常的な外出である場合には、無精髭の状態である傾向にある。このように、乗員の髪型や化粧、髭の状態等、顔や頭部の状態は、移動目的の推定に寄与する情報である。   In step S6, the video analysis recognition unit 33 recognizes the state of the face and head, such as the occupant's hairstyle, makeup, and wrinkle state, and extracts state information. In other words, when the purpose of travel is to go to a wedding or the like, if it is a female occupant, the hairstyle tends to be up and the makeup tends to be dark. In addition, when the purpose of travel is a job interview or a business trip, there is a tendency to shave, but when the purpose of travel is outing on a daily basis, it tends to be a state of stubbornness. As described above, the face and head states such as the occupant's hairstyle, makeup, and wrinkle state are information that contributes to the estimation of the purpose of movement.

移動目的推定装置は、映像解析認識部33によって認識された状態情報を装飾状態・移動場所記憶部43に記憶させると共に、ステップS7において、移動目的推定部45により、映像解析認識部33によって認識された状態情報を、装飾状態・移動目的データベース16に記憶されている一般的な状態情報、及び、装飾状態・移動場所記憶部43に記憶されている状態情報と比較する。これにより移動目的推定部45は、類似度の高い移動目的及び移動目的地を抽出した上で、ステップS10へと処理を移行する。なお、映像解析認識部33によって認識された状態情報と、装飾状態・移動目的データベース16及び装飾状態・移動場所記憶部43に記憶されている状態情報との比較による類似度の算出についても、後述するものとする。   The movement purpose estimation device stores the state information recognized by the video analysis recognition unit 33 in the decoration state / movement location storage unit 43 and is recognized by the video analysis recognition unit 33 by the movement purpose estimation unit 45 in step S7. The state information is compared with general state information stored in the decoration state / movement purpose database 16 and state information stored in the decoration state / movement location storage unit 43. As a result, the movement purpose estimation unit 45 extracts a movement purpose and a movement destination having a high degree of similarity, and then proceeds to step S10. Note that the calculation of similarity by comparing the state information recognized by the video analysis recognition unit 33 with the state information stored in the decoration state / movement purpose database 16 and the decoration state / movement location storage unit 43 will also be described later. It shall be.

さらに、ステップS8においては、映像解析認識部33によって、アクセサリーや眼鏡等、乗員が着用している装飾品を含む特徴を認識して装飾品情報を抽出する。具体的には、映像解析認識部33は、パール(真珠)のネックレスやピアス、指輪、高級な眼鏡、タイピン、カフスボタン等、できるだけ多くの装飾品の特徴を示す装飾品情報を抽出する。移動目的推定装置は、映像解析認識部33によって認識された装飾品情報を装飾状態・移動場所記憶部43に記憶させると共に、ステップS9において、移動目的推定部45により、映像解析認識部33によって認識された装飾品情報を、装飾状態・移動目的データベース16に記憶されている一般的な装飾品情報、及び、装飾状態・移動場所記憶部43に記憶されている装飾品情報と比較する。そして、移動目的推定部45は、類似度の高い移動目的及び移動目的地を抽出した上で、ステップS10へと処理を移行する。なお、映像解析認識部33によって認識された装飾品情報と、装飾状態・移動目的データベース16及び装飾状態・移動場所記憶部43に記憶されている装飾品情報との比較による類似度の算出についても、後述する。   Furthermore, in step S8, the image analysis recognition unit 33 recognizes features including decorations worn by the occupant, such as accessories and glasses, and extracts decoration information. Specifically, the video analysis recognition unit 33 extracts ornament information indicating as many features of the ornament as possible, such as pearl necklaces, earrings, rings, high-grade glasses, tie pins, cufflinks, and the like. The movement purpose estimation device stores the ornament information recognized by the video analysis recognition unit 33 in the decoration state / movement location storage unit 43, and also recognizes by the video analysis recognition unit 33 by the movement purpose estimation unit 45 in step S9. The decorated ornament information is compared with the general ornament information stored in the ornament state / movement purpose database 16 and the ornament information stored in the ornament state / movement location storage unit 43. And the movement purpose estimation part 45 transfers a process to step S10, after extracting the movement objective and movement destination with high similarity. It should be noted that the similarity is also calculated by comparing the decoration information recognized by the video analysis recognition unit 33 with the decoration information stored in the decoration state / movement purpose database 16 and the decoration state / movement location storage unit 43. This will be described later.

次に、移動目的推定装置は、ステップS10において、ステップS5、ステップS7、及びステップS9のそれぞれにて推定された移動目的及び移動目的地に対する適合度の高さを移動目的推定部45によって比較し、最も適合度が高い移動目的及び移動目的地を求める。   Next, in step S10, the movement purpose estimation device 45 compares the movement purpose estimated in each of steps S5, S7, and S9 and the degree of fitness for the movement destination by the movement purpose estimation unit 45. Find the moving purpose and destination with the highest fitness.

次のステップS11において、移動目的推定装置は、ステップS10にて求めた移動目的及び移動目的地を最終的な推定結果として判定する。このとき、移動目的推定部45は、冠婚葬祭である結婚式や葬式、出張、デート、コンサートをはじめとする各種イベント等、習慣性の低い移動目的及び移動目的地と、通勤、買い物、送迎、通院、習い事、スポーツ、車両整備等、習慣性が高い移動目的及び移動目的地との双方を含めた全ての移動目的及び移動目的地と比較して、適合度が最も高い移動目的及び移動目的地を判定する。具体的には、移動目的推定部45は、習慣性の高い移動目的及び移動目的地として、会社のユニフォームやスーツ、ネクタイ、ジャケット、襟付きシャツ等に基づいて判定されたものがある場合には、会社への通勤が移動目的であると推定する。また、移動目的推定部45は、習慣性の高い移動目的及び移動目的地として、パジャマや自宅着等に基づいて判定されたものがある場合には、送迎が移動目的であると推定する。さらに、移動目的推定部45は、乗員がジャージやウインドブレーカ、帽子等を着用している場合には、スポーツのための移動であると推定することができる。このとき、移動目的推定部45は、判定する時の天候や時間帯等の情報を加味することにより、移動目的及び移動目的地の推定精度を更に向上させることもできる。   In the next step S11, the movement purpose estimation device determines the movement purpose and the movement destination obtained in step S10 as the final estimation result. At this time, the movement purpose estimation unit 45 is used for ceremonial occasions such as weddings, funerals, business trips, dates, concerts, and other events such as commuting, shopping, and pick-up. Compared to all travel purposes and travel destinations, including both highly customary travel purposes and travel destinations, such as hospital visits, lessons, sports, vehicle maintenance, etc. Determine the ground. Specifically, the movement purpose estimation unit 45 determines that there are things determined based on company uniforms, suits, ties, jackets, shirts with collars, etc. as highly addictive movement purposes and movement destinations. Estimate that commuting to the company is for mobile purposes. Moreover, the movement purpose estimation part 45 estimates that a pick-up is a movement purpose when there exists what was determined based on pajamas, home wear, etc. as a highly addictive movement purpose and a movement destination. Furthermore, the movement purpose estimation unit 45 can estimate that the movement is for sports when the occupant wears a jersey, a windbreaker, a hat, or the like. At this time, the movement purpose estimation unit 45 can further improve the estimation accuracy of the movement purpose and the movement destination by taking into account information such as the weather and time zone at the time of determination.

また、移動目的推定装置は、ステップS12において、ステップS11にて判定した移動目的及び移動目的地が現在地と一致するか否かを、移動目的推定部45によって判定する。ここで、移動目的推定装置は、移動目的及び移動目的地が、現在地と一致しない場合には、ステップS14及びステップS16へと処理を移行する。一方、移動目的及び移動目的地が、現在地と一致した場合には、ステップS13において、移動目的推定部45により、帰宅を移動目的として推定したり、現在の移動目的が結婚式であれば2次会への移動、葬式であれば告別式の後の火葬場への移動といったように、現在の移動目的に関連する次の移動目的を推定したりする。これは、過去の移動目的地の遷移を示すデータに基づいて推定することが可能である。このような移動目的地の遷移を示すデータは、ベイジアンネットワークのような遷移確率値を有しており、その確率が高い場所が第一候補として抽出されることになる。   In step S12, the movement purpose estimation apparatus 45 determines whether the movement purpose and the movement destination determined in step S11 coincide with the current position. Here, the movement purpose estimation device shifts the processing to step S14 and step S16 when the movement purpose and the movement destination do not coincide with the current location. On the other hand, if the travel purpose and the travel destination match the current location, in step S13, the travel purpose estimation unit 45 estimates the return home as the travel purpose, or if the current travel purpose is a wedding, For example, the next movement purpose related to the current movement purpose is estimated, such as movement to the society or movement to the crematorium after the farewell ceremony if it is a funeral. This can be estimated based on data indicating the transition of the past moving destination. The data indicating the transition of such a moving destination has a transition probability value like a Bayesian network, and a place with a high probability is extracted as the first candidate.

移動目的推定装置は、このようにして移動目的及び移動目的地を推定すると、ステップS14において、地図データベース11から読み出した地図データ、交通情報データベース12から読み出した交通情報データ、ウェブ情報データベース13から読み出したウェブ情報データ、放送データベース14から読み出した放送データ、支援情報データベース15から読み出した支援情報データ、及び自車状態判定部44から供給された自車状態情報等に基づいて、移動目的推定部45によって推定された移動目的及び移動目的地に適合した提示情報を選択する。そして、移動目的推定装置は、ステップS15において、情報提示部52により、ステップS14にて選択された提示情報を、音声情報及び図形情報や文字情報等として自車両に乗車している乗員に提示する。   When the movement purpose estimation device estimates the movement purpose and the movement destination in this way, in step S14, the map data read from the map database 11, the traffic information data read from the traffic information database 12, and the web information database 13 are read. Based on the web information data, the broadcast data read from the broadcast database 14, the support information data read from the support information database 15, the own vehicle state information supplied from the own vehicle state determination unit 44, and the like. The presentation information suitable for the movement purpose and the movement destination estimated by (1) is selected. Then, in step S15, the movement purpose estimation device presents the presentation information selected in step S14 to the occupant riding in the host vehicle as voice information, graphic information, character information, and the like by the information presentation unit 52. .

また、移動目的推定装置は、ステップS16において、目的地設定部51により、自車両のルート案内を行う際の目的地を自動的に設定したり、運転者に問いかけて合意が得られれば目的地を変更設定したりして一連の処理を終了する。   In step S16, the destination estimation unit 51 automatically sets the destination for the route guidance of the host vehicle, or asks the driver to obtain an agreement if the destination is obtained. Or change the setting to end the series of processing.

移動目的推定装置は、このような一連の手順にしたがって、自車両に乗車している乗員の装飾状態に応じた移動目的を適切に推定することができる。   The movement purpose estimation device can appropriately estimate the movement purpose according to the decoration state of the occupant riding the host vehicle according to such a series of procedures.

[装飾状態・移動目的データベースの作成処理]
つぎに、装飾状態・移動目的データベース16の作成処理について説明する。
[Creation process of decoration status / moving purpose database]
Next, a process for creating the decoration state / movement purpose database 16 will be described.

装飾状態・移動目的データベース16は、上述したように、一般的に使用可能な情報に基づいて作成されるデータベースであり、流行の髪型等についての情報も記憶するために、逐次インターネット等からの情報を用いて更新される。具体的には、装飾状態・移動目的データベース16は、図3に示すような一連の手順にしたがって作成される。   As described above, the decoration state / movement purpose database 16 is a database created based on generally available information. In order to store information on fashionable hairstyles, information from the Internet or the like is sequentially received. It is updated using. Specifically, the decoration state / movement purpose database 16 is created according to a series of procedures as shown in FIG.

まず、装飾状態・移動目的データベース16を作成するにあたっては、図3に示すように、ステップS21において、任意の施設に出入りする人の映像等、インターネット上のウェブカメラの映像を取得すると、ステップS22において、映像解析認識部33と同様の能力を有する所定の機器を用いて解析することによって着衣状態を抽出する。その後、ステップS23及びステップS24において、髪型や化粧等の状態情報と装飾品情報との抽出を行う。なお、個人情報保護の観点から、個人認識は行わずに、性別までの認識とするのが望ましい。また、これらの処理を所定の情報配信センタ側で一括して行うことにより、情報流出を防止する等の方法も適用することができる。   First, in creating the decoration state / movement purpose database 16, as shown in FIG. 3, when a video of a web camera on the Internet such as a video of a person entering or leaving an arbitrary facility is acquired in step S21, step S22 is performed. , The clothing state is extracted by analyzing using a predetermined device having the same capability as the video analysis recognition unit 33. Thereafter, in step S23 and step S24, the state information such as hairstyle and makeup and the decoration information are extracted. From the viewpoint of protecting personal information, it is desirable to recognize up to gender without performing personal recognition. In addition, a method of preventing information outflow or the like by applying these processes collectively on a predetermined information distribution center side can also be applied.

さらに、装飾状態・移動目的データベース16を作成するにあたっては、ステップS25において、インターネット上の装飾品カタログの情報を取得する。そして、ステップS26乃至ステップS28において、衣服の利用目的やターゲットとする客層を示す情報や、価格、素材、色、柄、サイズ等を示す情報を取得すると共に、販売地域や販売数、販売開始日等の情報も取得する。   Further, in creating the decoration state / movement purpose database 16, in step S25, information on the decoration catalog on the Internet is acquired. In steps S26 to S28, information indicating the purpose of use of clothes and target customers, information indicating price, material, color, pattern, size, and the like are acquired, and the sales area, the number of sales, and the sales start date are acquired. Etc. are also acquired.

さらにまた、装飾状態・移動目的データベース16を作成するにあたっては、ステップS29乃至ステップS32において、ウェブカメラの映像からの情報抽出と同様の方法で、地上ディジタル放送等の映像を利用して各場所における一般人の装飾状態の情報を取得したり、テレビショッピング等のカタログ情報等を取得したりする。   Furthermore, in creating the decoration state / moving purpose database 16, in steps S29 to S32, in the same manner as the information extraction from the video of the webcam, the video at each location is used by using the video such as digital terrestrial broadcasting. Information on the decoration state of ordinary people is obtained, catalog information on television shopping, etc. is obtained.

そして、移動目的推定装置は、ステップS33において、これらステップS21乃至ステップS32にて取得した情報が、既に装飾状態・移動目的データベース16に登録されているか否かを確認する。   In step S33, the movement purpose estimation apparatus checks whether the information acquired in steps S21 to S32 is already registered in the decoration state / movement purpose database 16.

ここで、移動目的推定装置は、装飾状態・移動目的データベース16に登録がない場合には、ステップS34乃至ステップS36において、例えば図4に示すように、場所(位置)や装飾状態(組み合わせ等)、さらには、その場所にいるとした場合の移動目的等を対応付けて登録し、装飾状態・移動目的データベース16の作成・更新処理を終了する。   Here, if the movement purpose estimation device is not registered in the decoration state / movement purpose database 16, in step S34 to step S36, for example, as shown in FIG. 4, the location (position) and decoration state (combination, etc.) In addition, the purpose of movement and the like in the case of being in the place are registered in association with each other, and the creation / update processing of the decoration state / movement purpose database 16 is ended.

一方、移動目的推定装置は、装飾状態・移動目的データベース16に既に登録があった場合には、ステップS37において、その登録されている情報のうち、場所と装飾状態を示す情報のみを比較し、ステップS38において、比較した結果、場所と装飾状態とが大きく異なるものであったか否かを判定する。移動目的推定装置は、比較した情報が大きく異なっておらず、略同一であると判定した場合には、ステップS21乃至ステップS32にて取得した情報を追加登録することなく、別な情報の取得へと移行する。また、移動目的推定装置は、比較した情報が大きく異なっており、相違すると判定した場合には、ステップS39において、さらに細かな条件として、曜日や午前/午後などの別を含む日時や、季節、天候、性別、年齢層等、詳細条件を付与した上で、ステップS34乃至ステップS36において、場所、装飾状態、及び移動目的等を対応付けて登録し、装飾状態・移動目的データベース16の作成処理を終了する。   On the other hand, when the movement purpose estimation device has already been registered in the decoration state / movement purpose database 16, in step S37, only the information indicating the location and the decoration state is compared among the registered information. In step S38, it is determined whether or not the place and the decoration state are greatly different as a result of the comparison. If it is determined that the compared information is not substantially different and is substantially the same, the movement purpose estimation device proceeds to acquisition of other information without additionally registering the information acquired in steps S21 to S32. And migrate. In addition, if the compared information is greatly different and the movement purpose estimation device determines that the information is different, in step S39, as a more detailed condition, the date and time including the day of the week or the morning / afternoon, the season, After giving detailed conditions such as weather, sex, age group, etc., in step S34 to step S36, the location, decoration state, movement purpose, etc. are associated and registered, and the decoration state / movement purpose database 16 is created. finish.

装飾状態・移動目的データベース16は、このような一連の手順にしたがって、一般的な情報に基づいて作成することができる。   The decoration state / movement purpose database 16 can be created based on general information according to such a series of procedures.

移動目的推定装置は、上述したように装飾状態・移動目的データベース16を利用することにより、一般的な装飾状態を着用しているときの移動目的を推定することができる。すなわち、移動目的推定装置は、上述した装飾状態・移動目的データベース16を利用することにより、現在の自車両の乗員の装飾状態を認識し、その装飾状態と装飾状態・移動目的データベース16に登録されている情報とを比較して移動目的を推定することができる。   The movement purpose estimation apparatus can estimate the movement purpose when wearing a general decoration state by using the decoration state / movement purpose database 16 as described above. That is, the movement purpose estimation device recognizes the current decoration state of the passenger of the host vehicle by using the decoration state / movement purpose database 16 described above, and is registered in the decoration state and the decoration state / movement purpose database 16. The purpose of movement can be estimated by comparing with the information that is present.

[類似度の算出処理]
移動目的推定装置は、図2中ステップS5、ステップS7、及びステップS9において、映像解析認識部33によって認識された装飾状態と、装飾状態・移動目的データベース16及び装飾状態・移動場所記憶部43に記憶されている装飾状態を示す情報とを比較して類似度を算出する。例えば、移動目的推定装置は、黒スーツに白ネクタイを着用している乗員が車内カメラ21によって撮像された場合には、移動目的推定部45により、装飾状態・移動目的データベース16を参照し、黒スーツと白ネクタイとを組み合わせた装飾状態を示す情報が記憶されているかを確認する。移動目的推定装置は、このような情報が装飾状態・移動目的データベース16に記憶されている場合、すなわち、装飾状態を示す情報が一致している場合には、その装飾状態の特徴を抽出することができる。また、移動目的推定装置は、このような着衣の場合には、移動目的推定部45により、その形状、色、柄、ロゴマーク等の画像と、装飾状態・移動目的データベース16に記憶されている画像との類似度を算出し、最も類似度が近いものを抽出して判定することもできる。
[Similarity calculation processing]
The moving purpose estimation device stores the decoration state recognized by the video analysis recognition unit 33 in step S5, step S7, and step S9 in FIG. 2, the decoration state / movement purpose database 16, and the decoration state / movement location storage unit 43. The degree of similarity is calculated by comparing with the stored information indicating the decoration state. For example, when the occupant wearing a white tie in a black suit is imaged by the in-vehicle camera 21, the movement purpose estimation device refers to the decoration state / movement purpose database 16 by the movement purpose estimation unit 45, It is checked whether information indicating a decoration state combining a suit and a white tie is stored. When such information is stored in the decoration state / movement purpose database 16, that is, when the information indicating the decoration state matches, the movement purpose estimation device extracts the feature of the decoration state. Can do. In addition, in the case of such clothes, the movement purpose estimation device is stored in the decoration state / movement purpose database 16 by the movement purpose estimation unit 45 and its shape, color, pattern, logo mark and other images. It is also possible to calculate the degree of similarity with an image and extract and determine the one with the closest degree of similarity.

このような類似度は、画像加工技術であるモーフィング技術のような異なる2画像間を線形補完することによる両画像間の距離に基づいて比較する方法がある。このような方法は、定量的で判定がしやすく便利であるという利点を有する。モーフィング処理は、ある画像が2画像のうちいずれの画像に近いかの判定を、その2画像間のフレーム数に基づいて、その画像のフレームが2画像のいずれに近いかを求めることによって行う。また、装飾状態の特徴を画像から抽出する方法としては、例えば結婚式の場合には、男性であれば黒スーツに白ネクタイを着用し、胸ポケットから白チーフが少し出ているといった情報が装飾状態・移動目的データベース16に登録されており、映像解析認識部33によって認識された装飾状態のうち、装飾状態・移動目的データベース16に登録されている情報に対応するものを特徴として抽出すればよい。さらに、移動目的推定装置は、最近販売された高価なドレスを着用している乗員がいる場合には、パーティーや食事等に行く移動目的を推定することができる。   There is a method of comparing such similarity based on a distance between two images by linearly complementing two different images, such as a morphing technique which is an image processing technique. Such a method has the advantage that it is quantitative, easy to judge and convenient. The morphing process is performed by determining which one of the two images is closer to the image by determining which of the two images is closer to the frame based on the number of frames between the two images. In addition, as a method of extracting the feature of the decoration state from the image, for example, in the case of a wedding, if a man wears a white tie on a black suit and the white chief comes out of the chest pocket a little Of the decoration states registered in the state / movement purpose database 16 and recognized by the video analysis recognition unit 33, those corresponding to the information registered in the decoration state / movement purpose database 16 may be extracted as features. . Furthermore, the movement purpose estimation device can estimate a movement purpose to go to a party or a meal when there is an occupant wearing a recently sold expensive dress.

具体的には、移動目的推定装置は、図5に示すような一連の手順にしたがって、モーフィングを利用して類似度を算出する。   Specifically, the movement purpose estimation device calculates the similarity using morphing according to a series of procedures as shown in FIG.

まず、移動目的推定部45は、図5に示すように、ステップS41において、映像解析認識部33によって新しい装飾状態が認識されると、ステップS42において、図4に示したようなジャンル別に分類された装飾状態・移動目的データベース16を参照し、袖や襟元等の着衣形状を認識する。そして、移動目的推定部45は、ステップS43において、ステップS41にて認識された画像と、ステップS42にて認識したジャンル別に分類された着衣形状の画像とに基づいてモーフィングを行い、各ジャンル間のモーフィング距離が0.5以上であるか否かを判定する。ここで、移動目的推定部45は、モーフィング距離が0.5以上であった場合には、ステップS45へと処理を移行する。一方、モーフィング距離が0.5未満であった場合には、ステップS44において、移動目的推定部45によって、新たな着衣ジャンルを装飾状態・移動目的データベース16に追加してステップS45へと処理を移行する。   First, as shown in FIG. 5, the movement purpose estimation unit 45 is classified by genre as shown in FIG. 4 in step S42 when a new decoration state is recognized by the video analysis recognition unit 33 in step S41. Referring to the decoration state / movement purpose database 16, it recognizes clothing shapes such as sleeves and collars. In step S43, the movement purpose estimation unit 45 performs morphing based on the images recognized in step S41 and the clothing shape images classified by genre recognized in step S42. It is determined whether the morphing distance is 0.5 or more. Here, when the morphing distance is 0.5 or more, the movement purpose estimation unit 45 shifts the processing to step S45. On the other hand, if the morphing distance is less than 0.5, in step S44, the movement purpose estimation unit 45 adds a new clothing genre to the decoration state / movement purpose database 16, and the process proceeds to step S45. To do.

続いて、移動目的推定部45は、ステップS45において、映像解析認識部33によって認識された装飾状態の柄や色、及びそれら柄や位置を認識する。そして、移動目的推定部45は、ステップS46において、映像解析認識部33によって認識された画像と、ステップS45にて認識したジャンル別に分類された柄や色の画像とに基づいてモーフィングを行い、各ジャンル間のモーフィング距離が0.5以上であるか否かを判定する。ここで、移動目的推定部45は、モーフィング距離が0.5以上であった場合には、ステップS48へと処理を移行する。一方、移動目的推定部45は、モーフィング距離が0.5未満であった場合には、ステップS47において、新たな柄や色ジャンルを装飾状態・移動目的データベース16に追加してステップS48へと処理を移行する。   Subsequently, in step S45, the movement purpose estimation unit 45 recognizes the pattern and color of the decoration state recognized by the video analysis recognition unit 33, and the pattern and position. In step S46, the movement purpose estimation unit 45 performs morphing based on the image recognized by the video analysis recognition unit 33 and the pattern and color images classified by genre recognized in step S45. It is determined whether the morphing distance between genres is 0.5 or more. Here, when the morphing distance is 0.5 or more, the movement purpose estimation unit 45 proceeds to step S48. On the other hand, if the morphing distance is less than 0.5, the movement purpose estimation unit 45 adds a new pattern or color genre to the decoration state / movement purpose database 16 and proceeds to step S48 in step S47. To migrate.

続いて、移動目的推定部45は、ステップS48において、映像解析認識部33によって認識された装飾状態の素材(テクスチャー)を認識する。そして、移動目的推定部45は、ステップS49において、映像解析認識部33によって認識された画像と、ステップS48にて認識したジャンル別に分類された素材の画像とに基づいてモーフィングを行い、各ジャンル間のモーフィング距離が0.5以上であるか否かを判定する。ここで、移動目的推定部45は、モーフィング距離が0.5以上であった場合には、ステップS51へと処理を移行する。一方、移動目的推定部45は、モーフィング距離が0.5未満であった場合には、ステップS50において、新たな素材ジャンルを装飾状態・移動目的データベース16に追加してステップS51へと処理を移行する。   Subsequently, the movement purpose estimation unit 45 recognizes the decorative material (texture) recognized by the video analysis recognition unit 33 in step S48. In step S49, the movement purpose estimation unit 45 performs morphing based on the image recognized by the video analysis recognition unit 33 and the image of the material classified by genre recognized in step S48. It is determined whether or not the morphing distance is 0.5 or more. Here, when the morphing distance is 0.5 or more, the movement purpose estimation unit 45 proceeds to step S51. On the other hand, if the morphing distance is less than 0.5, the movement purpose estimation unit 45 adds a new material genre to the decoration state / movement purpose database 16 in step S50 and shifts the process to step S51. To do.

そして、移動目的推定部45は、ステップS51において、映像解析認識部33によって認識された装飾状態の装飾品を抽出する。そして、移動目的推定部45は、ステップS52において、映像解析認識部33によって認識された画像と、ステップS51にて抽出したジャンル別に分類された装飾品の画像とに基づいてモーフィングを行い、各ジャンル間のモーフィング距離が0.5以上であるか否かを判定する。ここで、移動目的推定部45は、モーフィング距離が0.5以上であった場合には、ステップS41からの処理を繰り返す。一方、移動目的推定部45は、モーフィング距離が0.5未満であった場合には、ステップS53において、新たな装飾品ジャンルを装飾状態・移動目的データベース16に追加してステップS41からの処理を繰り返す。   Then, in step S51, the movement purpose estimation unit 45 extracts the decoration item in the decoration state recognized by the video analysis recognition unit 33. In step S52, the movement purpose estimation unit 45 performs morphing based on the image recognized by the video analysis recognition unit 33 and the ornament images classified by genre extracted in step S51. It is determined whether the morphing distance between them is 0.5 or more. Here, the movement purpose estimation unit 45 repeats the processing from Step S41 when the morphing distance is 0.5 or more. On the other hand, if the morphing distance is less than 0.5, the movement purpose estimation unit 45 adds a new decoration item genre to the decoration state / movement purpose database 16 in step S53 and performs the processing from step S41. repeat.

移動目的推定装置は、このような一連の手順にしたがって、モーフィングを利用して類似度を算出し、その結果に応じて装飾状態・移動目的データベース16の内容を拡張及び更新することができる。   The movement purpose estimation device can calculate the similarity using morphing according to such a series of procedures, and can expand and update the contents of the decoration state / movement purpose database 16 according to the result.

なお、移動目的推定装置は、装飾状態・移動目的データベース16のみならず、自車両専用のデータベースである装飾状態・移動場所記憶部43に記憶されている装飾状態を示す情報についても、映像解析認識部33によって認識された装飾状態と比較することにより、移動目的及び移動目的地の推定精度を向上させている。   Note that the movement purpose estimation device recognizes not only the decoration state / movement purpose database 16 but also information indicating the decoration state stored in the decoration state / movement location storage unit 43 which is a database dedicated to the own vehicle. By comparing with the decoration state recognized by the unit 33, the estimation accuracy of the movement purpose and the movement destination is improved.

装飾状態・移動場所記憶部43は、一般的な情報に基づく装飾状態・移動目的データベース16と同様に、着衣情報、髪型や化粧等の状態情報、及びアクセサリー等の特徴を表す装飾品情報と共に、移動場所判定部42によって判定された移動場所情報を記憶するものである。移動目的推定装置は、車内カメラ21によって撮像された映像を映像解析認識部33によって認識すると、移動目的推定部45により、装飾状態・移動場所記憶部43を参照し、映像解析認識部33によって認識された映像と、装飾状態・移動場所記憶部43に記憶されている情報とを比較し、最も適合度が高い移動目的及び移動目的地を判定する。   Similarly to the decoration state / movement purpose database 16 based on general information, the decoration state / movement location storage unit 43 includes clothing information, state information such as hairstyle and makeup, and ornament information representing features such as accessories, The moving location information determined by the moving location determination unit 42 is stored. When the video captured by the in-vehicle camera 21 is recognized by the video analysis recognition unit 33, the movement purpose estimation device refers to the decoration state / movement location storage unit 43 by the movement purpose estimation unit 45 and is recognized by the video analysis recognition unit 33. The moving image and the information stored in the decoration state / movement location storage unit 43 are compared, and the movement purpose and the movement destination having the highest fitness are determined.

このとき、移動目的推定装置は、装飾状態・移動場所記憶部43と比較して推定された移動目的及び移動目的地と、装飾状態・移動目的データベース16と比較して推定された移動目的及び移動目的地とが大きく異ならない限り、装飾状態・移動場所記憶部43に記憶されている情報に基づく移動目的及び移動目的地を優先的に推定する。一方、移動目的推定装置は、装飾状態・移動場所記憶部43と比較して推定された移動目的及び移動目的地と、装飾状態・移動目的データベース16と比較して推定された移動目的及び移動目的地とが大きく異なった場合には、特異条件として装飾状態・移動場所記憶部43に登録した上で、今回の結果の適否判断を行い、次回以降の推定にフィードバックできるように重みを付与する。   At this time, the movement purpose estimation device uses the movement purpose and movement destination estimated in comparison with the decoration state / movement location storage unit 43 and the movement purpose and movement estimated in comparison with the decoration state / movement destination database 16. Unless the destination is significantly different, the moving destination and the moving destination based on the information stored in the decoration state / moving location storage unit 43 are preferentially estimated. On the other hand, the movement purpose estimation device includes the movement purpose and the movement destination estimated in comparison with the decoration state / movement place storage unit 43 and the movement purpose and movement purpose estimated in comparison with the decoration state / movement destination database 16. If it is significantly different from the ground, it is registered in the decoration state / movement location storage unit 43 as a unique condition, and then the suitability of the current result is determined, and a weight is given so that it can be fed back to the subsequent estimation.

これにより、移動目的推定装置は、装飾状態・移動目的データベース16に基づいて判定した移動目的地と、装飾状態・移動場所記憶部43に基づいて判定した移動目的地とが同じである場合であっても、その移動目的が異なるような場合に有効である。例えば、移動目的推定装置は、スポーツ施設とショッピングセンターとが併設されているような施設が移動目的地として判定された場合には、その移動目的がスポーツを行うことであるのか、買い物に行くことであるのかを装飾状態に基づいて推定することができる。したがって、移動目的推定装置は、買い物に行くことが移動目的であった場合には、買い得情報を提示したり、スポーツを行うことが移動目的であった場合には、テニスコートの混雑具合やスクールの講習内容等を提示したりすることができる。このように、移動目的推定装置は、それぞれの移動目的に適した情報提示を行うことが可能となり、移動目的地が同じであっても移動目的の優先順位が異なる場合に非常に有効である。   Thereby, the movement purpose estimation apparatus is a case where the movement destination determined based on the decoration state / movement purpose database 16 and the movement destination determined based on the decoration state / movement place storage unit 43 are the same. However, it is effective when the purpose of movement is different. For example, the movement purpose estimation device, when a facility where a sports facility and a shopping center are attached is determined as a movement destination, whether the purpose of movement is to perform sports or go shopping It can be estimated based on the decoration state. Therefore, when the purpose of travel is to go shopping, the travel purpose estimation device presents bargain information or when the purpose of travel is to travel, the tennis court is crowded or schooled. You can present the contents of the class. In this way, the movement purpose estimation device can present information suitable for each movement purpose, and is very effective when the priority of movement purposes is different even if the movement destination is the same.

なお、移動目的推定装置は、車内カメラ21等によって撮像された映像について画像認識を行わずに、そのまま保存するようにしてもよく、また、その画像を用いて類似度の比較判定を行うようにしてもよい。これは、ウェブカメラや放送用映像の場合にも同様である。これにより、移動目的推定装置は、映像のデータサイズが大きくなるものの、画像認識の誤認識によって推定を誤ってしまうのを軽減することができる。さらに、移動目的推定装置は、画像認識を行わない映像のままの解析と画像認識を行った結果による解析との双方を行い、推定精度の結果が良好であった方法を優先して用いるようにしてもよい。さらにまた、移動目的推定装置は、ジャンル等によって推定精度が異なることが予想されるので、これら両方法をジャンル別に使い分けるようにしてもよい。例えば、移動目的推定装置は、ウェブカメラ等の一般的な情報に基づく装飾状態・移動目的データベース16を用いた解析については画像認識を行った結果を用い、自車両の乗員の装飾状態及び持ち物については画像認識を行わない映像のままで解析するようにすればよい。   Note that the movement purpose estimation device may store the video captured by the in-vehicle camera 21 or the like without performing image recognition, and perform similarity determination using the image. May be. The same applies to a web camera or a broadcast video. Thereby, although the data size of a video | video becomes large, the movement purpose estimation apparatus can reduce that an estimation is mistaken by misrecognition of image recognition. Furthermore, the moving purpose estimation device performs both the analysis of the image without image recognition and the analysis based on the result of the image recognition, and preferentially uses the method having the good estimation accuracy result. May be. Furthermore, since the movement purpose estimation apparatus is expected to have different estimation accuracy depending on the genre or the like, both of these methods may be used for each genre. For example, the movement purpose estimation device uses the result of image recognition for the analysis using the decoration state / movement purpose database 16 based on general information such as a web camera, etc., and the decoration state and belongings of the occupant of the own vehicle May be analyzed in the form of video without image recognition.

また、車内カメラ21等の映像から認識するものは、上述したものの組み合わせに限らず、それぞれ別々でもよく、全てを組み合わせてもよい。同様に、移動目的推定装置は、装飾状態・移動目的データベース16及び装飾状態・移動場所記憶部43の双方を用いて移動目的及び移動目的地の推定を行わずに、いずれか一方を選択的に用いて推定を行うようにしてもよい。   In addition, what is recognized from the image of the in-vehicle camera 21 or the like is not limited to the combination of the above-described ones, but may be separate from each other, or may be combined. Similarly, the movement purpose estimation device selectively uses either the decoration state / movement purpose database 16 and the decoration state / movement location storage unit 43 without estimating the movement purpose and the movement destination. It is also possible to use it for estimation.

さらに、移動目的推定装置は、乗員の装飾状態で相反する状況が起こった場合には、類似度の高い方、又は、推定誤りの少ない方を採用して推定を行うのが望ましい。このとき、移動目的推定装置は、類似度が同じだった場合には、発生頻度の低い移動目的及び移動目的地を推定すればよい。また、移動目的推定装置は、乗員の家族内での優先度に応じた重み付けを行うようにしてもよい。さらに、移動目的推定装置は、同乗者がある場合には、運転者が移動する目的が同乗者よりも低くなることが予想されるため、運転者の重み付けを低くして、同乗者の重み付けを高くして推定を行うようにしてもよい。   Furthermore, it is desirable that the movement purpose estimation device performs estimation by adopting a higher similarity degree or a lower estimation error when a conflicting situation occurs in the passenger's decoration state. At this time, if the similarity is the same, the movement purpose estimation device may estimate a movement purpose and a movement destination with a low occurrence frequency. Further, the movement purpose estimation device may perform weighting according to the priority in the passenger's family. Furthermore, the movement purpose estimation device, when there is a passenger, is expected that the purpose of the driver's movement will be lower than that of the passenger, so the driver's weight is lowered and the passenger's weight is reduced. You may make it estimate by making it high.

[第1実施形態の効果]
以上詳細に説明したように、本発明の第1実施形態として示した移動目的推定装置によれば、自車両内の状況の映像から認識された自車両の乗員の装飾状態に基づいて、自車両の移動目的を推定し、更に、移動目的地を推定するので、当該自車両の移動目的及び移動目的地を高精度に推定することができ、習慣性の少ない行動の目的地を精度よく推定することができる。
[Effect of the first embodiment]
As described above in detail, according to the movement purpose estimation device shown as the first embodiment of the present invention, the own vehicle is based on the decoration state of the occupant of the own vehicle recognized from the video of the situation in the own vehicle. The movement purpose and the movement destination of the subject vehicle can be estimated with high accuracy, and the destination of the less addictive behavior can be estimated with high accuracy. be able to.

また、この移動目的推定装置は、自車両内の映像と移動目的(地)とを対応付けて装飾状態・移動場所記憶部43に記憶しておき、記憶映像と撮像映像から認識された装飾状態とを比較し、その比較結果に基づいて、過去に移動目的地として自車両が到達した場所の中から今回の当該自車両の移動目的及び移動目的地を推定するので、乗員の装飾状態と過去の移動目的地との履歴を個別のデータベースとして作成することができ、このデータベースに基づいて移動目的及び移動目的地を高精度に推定することができる。   In addition, the movement purpose estimation device associates the image in the host vehicle with the movement purpose (ground) and stores them in the decoration state / movement location storage unit 43, and recognizes the decoration state recognized from the stored image and the captured image. Based on the comparison result, the current travel destination and travel destination of the host vehicle are estimated from the locations where the host vehicle has arrived as a travel destination in the past. The history with the moving destination can be created as an individual database, and the moving destination and the moving destination can be estimated with high accuracy based on this database.

さらに、この移動目的推定装置は、自車両内の撮像映像から認識された自車両の乗員の装飾状態と、そのときの移動目的(地)とを対応付けて装飾状態・移動場所記憶部43に記憶しておき、この記憶されている装飾状態と撮像映像から認識された装飾状態とを移動目的推定部45によって比較し、その比較結果に基づいて、過去に移動目的地として自車両が到達した場所の中から今回の当該自車両の移動目的及び移動目的地を推定するので、装飾状態をテキストデータとして記憶させることができるので、映像を記憶する場合に比べて情報量を削減したデータベースを作成することができ、このデータベースに基づいて移動目的及び移動目的地を高精度に推定することができる。   Further, the movement purpose estimation device associates the decoration state of the occupant of the own vehicle recognized from the captured image in the own vehicle with the movement purpose (ground) at that time in the decoration state / movement location storage unit 43. The stored decoration state and the decoration state recognized from the captured image are compared by the movement purpose estimation unit 45, and based on the comparison result, the host vehicle has arrived as a movement destination in the past. Since the current purpose and destination of the subject vehicle are estimated from the location, the decoration state can be stored as text data, creating a database that reduces the amount of information compared to storing video The movement purpose and the movement destination can be estimated with high accuracy based on this database.

さらにまた、この移動目的推定装置は、人の装飾状態としての着衣及び装飾品を示す特徴情報と、これら着衣及び装飾品に対応する場所とを装飾状態・移動目的データベース16に記憶しておき、この記憶されている着衣及び装飾品を示す特徴情報に基づいて、自車両の移動目的及び移動目的地を推定するので、例えば着衣、髪型や化粧等の状態、アクセサリー等の装飾品を装飾状態から移動目的地との関連を詳細に把握することができ、移動目的及び移動目的地を高精度に推定することができる。   Furthermore, the movement purpose estimation device stores feature information indicating clothes and decorations as a person's decoration state and locations corresponding to these clothes and decorations in the decoration state / movement purpose database 16. Based on the memorized feature information indicating the clothes and decorations, the movement purpose and the movement destination of the own vehicle are estimated. For example, the clothes, the state of hairstyle, makeup, etc. The relationship with the movement destination can be grasped in detail, and the movement destination and the movement destination can be estimated with high accuracy.

また、この移動目的推定装置によれば、装飾状態・移動目的データベース16を、汎用ネットワークであるインターネット上の情報を含む一般的な情報に基づいて作成及び更新することにより、一般的な移動目的及び移動目的地を最新のデータベースを用いて推定することができる。   Moreover, according to this movement purpose estimation device, the general state of movement and the movement purpose database 16 are created and updated based on general information including information on the Internet, which is a general-purpose network. The moving destination can be estimated using the latest database.

更に、この移動目的推定装置によれば、装飾状態・移動目的データベース16を、インターネット上のウェブカメラによって撮像された各場所における人の映像を含む一般的な情報に基づいて作成、拡張及び更新することにより、インターネット上の映像をそのまま利用して、一般的な移動目的及び移動目的地を最新のデータベースを用いて推定することができる。   Furthermore, according to this movement purpose estimation device, the decoration state / movement purpose database 16 is created, extended, and updated based on general information including images of people in each place taken by a web camera on the Internet. Thus, it is possible to estimate a general movement destination and a movement destination using the latest database by using the video on the Internet as it is.

更にまた、この移動目的推定装置によれば、装飾状態・移動場所記憶部43に記憶されている情報と、装飾状態・移動目的データベース16に記憶されている情報とを双方又はいずれか一方を選択的に用いて自車両の移動目的及び移動目的地を推定するので、状況に適した移動目的及び移動目的地を高精度に推定することができる。   Furthermore, according to the movement purpose estimation apparatus, either or both of the information stored in the decoration state / movement location storage unit 43 and the information stored in the decoration state / movement purpose database 16 are selected. Therefore, the movement purpose and the movement destination of the host vehicle are estimated, so that the movement purpose and the movement destination suitable for the situation can be estimated with high accuracy.

また、この移動目的推定装置によれば、移動目的推定部45によって推定された移動目的及び移動目的地に応じた提示情報を提示情報選択部46によって選択し、選択した提示情報を情報提示部52によって自車両の乗員に提示することにより、移動目的及び移動目的地の推定結果から乗員に有効で必要な情報を積極的に提示して、より楽しい運転環境を提供することができる。   Further, according to this movement purpose estimation device, the presentation information corresponding to the movement purpose and the movement destination estimated by the movement purpose estimation unit 45 is selected by the presentation information selection unit 46, and the selected presentation information is selected by the information presentation unit 52. By presenting to the passenger of the own vehicle, it is possible to actively present necessary and necessary information to the passenger from the estimation result of the moving purpose and the moving destination, and provide a more enjoyable driving environment.

更に、この移動目的推定装置によれば、移動目的推定部45によって推定された移動地を自車両のルート案内を行う際の目的地として目的地設定部51によって設定することにより、目的地設定の操作を行う乗員の手間を省略することができる。   Furthermore, according to this movement purpose estimation apparatus, the destination setting unit 51 sets the movement place estimated by the movement purpose estimation unit 45 as the destination when performing route guidance of the host vehicle, thereby enabling the destination setting. It is possible to save the time and effort of the occupant who performs the operation.

更にまた、この移動目的推定装置によれば、目的地設定部51により、移動目的推定部45によって推定された移動目的地を自車両のルート案内を行う際の目的地として設定する旨を、当該自車両の乗員に対して問いかけてから当該移動目的地を当該目的地として設定するので、煩雑な手間を削減して運転者の意思に沿った目的地設定を行うことができる。   Furthermore, according to this travel purpose estimation apparatus, the destination setting unit 51 sets the travel destination estimated by the travel purpose estimation unit 45 as a destination when performing route guidance of the host vehicle. Since the travel destination is set as the destination after inquiring the passenger of the host vehicle, the destination can be set in accordance with the driver's intention while reducing troublesome work.

[第2実施形態]
つぎに、本発明の第2実施形態について説明する。
[Second Embodiment]
Next, a second embodiment of the present invention will be described.

この第2実施形態は、装飾状態として、乗員の持ち物や自車両に持ち込まれた物品を車内カメラ等による撮像装置及び画像処理装置によって認識し、その結果に基づいて移動目的及び移動目的地を推定するものである。したがって、この第2実施形態においては、第1実施形態にて説明した部位と同一部位については、それぞれ、同一符号を付し、その詳細な説明を省略する。   In the second embodiment, as a decoration state, an occupant's belongings and an article brought into the host vehicle are recognized by an imaging device such as an in-vehicle camera and an image processing device, and a movement purpose and a movement destination are estimated based on the result. To do. Therefore, in this 2nd Embodiment, about the site | part same as the site | part demonstrated in 1st Embodiment, respectively, the same code | symbol is attached | subjected and the detailed description is abbreviate | omitted.

[移動目的推定装置の構成]
本発明の第2実施形態として示す移動目的推定装置は、図6に示すように、上述した地図データベース11、交通情報データベース12、ウェブ情報データベース13、放送データベース14、支援情報データベース15、車内カメラ21、CAN信号取得部22、自車位置判定部31、道路情報取得部32、映像解析認識部33、移動場所判定部42、自車状態判定部44、提示情報選択部46、目的地設定部51、及び情報提示部52の他に、自車両に乗車している乗員が当該自車両に持ち込んだ物品と移動目的と移動目的地とを取得する持ち物・場所情報取得部101と、一般的な情報に基づいて作成された自車両の乗員が当該自車両に持ち込んだ物品(車両持込品)と移動目的と移動目的地とをデータとして記憶する持ち物・移動目的データベース102と、個人情報に基づいて作成された自車両の乗員が車両持込品と移動目的と移動目的地とをデータとして記憶する装飾状態・移動場所記憶部103と、現在の自車両の移動目的及び移動目的地を推定する移動目的推定部104とを備える。すなわち、この移動目的推定装置は、第1実施形態として示した移動目的推定装置における装飾状態・移動目的データベース16に代えて、持ち物・移動目的データベース102を備え、装飾状態・場所情報取得部41に代えて、持ち物・場所情報取得部101を備え、装飾状態・移動場所記憶部43に代えて、装飾状態・移動場所記憶部103を備え、移動目的推定部45に代えて、装飾状態・移動場所記憶部104を備える。
[Configuration of moving purpose estimation device]
As shown in FIG. 6, the movement purpose estimation apparatus shown as the second embodiment of the present invention includes the map database 11, the traffic information database 12, the web information database 13, the broadcast database 14, the support information database 15, and the in-vehicle camera 21. , CAN signal acquisition unit 22, own vehicle position determination unit 31, road information acquisition unit 32, video analysis recognition unit 33, moving place determination unit 42, own vehicle state determination unit 44, presentation information selection unit 46, destination setting unit 51 In addition to the information presentation unit 52, a belonging / location information acquisition unit 101 that acquires an article, a movement purpose, and a movement destination that an occupant on the own vehicle has brought into the own vehicle, and general information Carrying items / moving eyes that are stored based on the article (carrying goods), movement purpose, and movement destination that the occupant of the own vehicle has brought into the vehicle. A database 102, a decoration state / movement location storage unit 103 in which an occupant of the own vehicle created based on personal information stores vehicle carry-on items, a movement purpose, and a movement destination as data, and current movement of the own vehicle And a movement purpose estimation unit 104 for estimating a purpose and a movement destination. That is, this movement purpose estimation apparatus includes a belonging / movement purpose database 102 instead of the decoration state / movement purpose database 16 in the movement purpose estimation apparatus shown as the first embodiment, and the decoration state / location information acquisition unit 41 includes Instead, a belonging / location information acquisition unit 101 is provided, a decoration state / movement location storage unit 103 is provided instead of the decoration state / movement location storage unit 43, and a decoration state / movement location is provided instead of the movement purpose estimation unit 45. A storage unit 104 is provided.

持ち物・場所情報取得部101は、持ち物・移動目的データベース102を作成するために、ウェブ情報データベース13から読み出したウェブ情報データ、放送データベース14から読み出した放送データ、及び支援情報データベース15から読み出した支援情報データ等に基づいて、自車両に乗車している乗員が車両持込品と移動目的と移動目的地とを取得する。持ち物・場所情報取得部101は、取得した乗員の車両持込品と移動目的と移動目的地とを示す持ち物・場所情報を持ち物・移動目的データベース102に記憶させる。   The property / location information acquisition unit 101 creates the property / movement purpose database 102, the web information data read from the web information database 13, the broadcast data read from the broadcast database 14, and the support read from the support information database 15. On the basis of the information data and the like, an occupant riding in the host vehicle acquires a carry-on item, a movement purpose, and a movement destination. The personal belongings / location information acquisition unit 101 stores the personal belongings / location information indicating the acquired items carried by the occupant, the purpose of movement, and the destination of movement in the personal belongings / location database 102.

持ち物・移動目的データベース102は、例えばハードディスク等からなり、持ち物・場所情報取得部101によって取得された持ち物・場所情報に基づいて、車両持込品に対応する移動目的及び移動目的地をデータとして記憶する。すなわち、持ち物・移動目的データベース102は、ウェブ情報データベース13から読み出したウェブ情報データ、放送データベース14から読み出した放送データ、及び支援情報データベース15から読み出した支援情報データ等、一般的な情報に基づいて作成される。なお、この持ち物・移動目的データベース102は、自車両に搭載されてもよく、情報を配信する所定の情報配信センタ側に搭載されてもよい。この持ち物・移動目的データベース102に記憶されているデータは、移動目的推定部104によって読み出される。   The belonging / moving purpose database 102 includes, for example, a hard disk, and stores, as data, the moving purpose and the moving destination corresponding to the carry-on goods based on the belonging / location information acquired by the belonging / location information acquiring unit 101. To do. That is, the possession / movement purpose database 102 is based on general information such as web information data read from the web information database 13, broadcast data read from the broadcast database 14, and support information data read from the support information database 15. Created. The belonging / movement purpose database 102 may be mounted on the own vehicle or on a predetermined information distribution center side for distributing information. The data stored in the belonging / movement purpose database 102 is read out by the movement purpose estimation unit 104.

持ち物・移動場所記憶部103は、例えばハードディスク等からなり、映像解析認識部33から供給された認識情報と、移動場所判定部42から供給された移動場所情報とに基づいて、車両持込品に対応する移動目的及び移動目的地をデータとして記憶する。すなわち、持ち物・移動場所記憶部103は、持ち物・移動目的データベース102とは異なり、映像解析認識部33から供給された認識情報及び移動場所判定部42から供給された移動場所情報という個人情報、すなわち、自車両に固有の情報に基づいて作成される。この持ち物・移動場所記憶部103に記憶されているデータは、移動目的推定部104によって読み出される。   The belonging / moving place storage unit 103 is composed of, for example, a hard disk and the like, based on the recognition information supplied from the video analysis recognition unit 33 and the moving place information supplied from the moving place determination unit 42. The corresponding movement purpose and movement destination are stored as data. That is, the personal belongings / moving place storage unit 103 is different from the personal belongings / moving purpose database 102, that is, personal information such as recognition information supplied from the video analysis recognition unit 33 and moving place information supplied from the moving place determination unit 42, that is, It is created based on information unique to the vehicle. The data stored in the belonging / movement location storage unit 103 is read by the movement purpose estimation unit 104.

移動目的推定部104は、映像解析認識部33から供給された認識情報と、持ち物・移動目的データベース102及び持ち物・移動場所記憶部103に記憶されているデータとを比較し、その比較結果に基づいて、過去に移動目的地として自車両が到達した場所の中から今回の自車両の移動目的及び移動目的地を推定する。移動目的推定部104は、推定した移動目的情報を提示情報選択部46及び目的地設定部51に供給する。   The movement purpose estimation unit 104 compares the recognition information supplied from the video analysis recognition unit 33 with the data stored in the property / movement object database 102 and the property / movement location storage unit 103, and based on the comparison result. Thus, the current travel destination and the travel destination of the host vehicle are estimated from the locations where the host vehicle has reached as the travel destination in the past. The movement purpose estimation unit 104 supplies the estimated movement purpose information to the presentation information selection unit 46 and the destination setting unit 51.

[移動目的推定装置の動作]
このような各部を備える移動目的推定装置は、図7に示すような一連の手順にしたがって、車両持込品に応じた移動目的を推定する。
[Operation of moving purpose estimation device]
Such a movement purpose estimation device including each unit estimates a movement purpose according to a vehicle carry-in according to a series of procedures as shown in FIG.

まず、移動目的推定装置は、図7に示すように、ステップS61において、自車両に持ち込まれた新規の車両持込品があるか否かを判定する。すなわち、移動目的推定装置は、新規の車両持込品が認識されるまでは移動目的及び移動目的地を変更しない。なお、移動目的推定装置は、新規の車両持込品の有無を判定するために、乗員の自宅内の画像や自宅にある物品の情報を記録したICタグの情報を取得し、自宅する構成であっても良い。すなわち、車両持込品がICタグを備え、移動目的推定装置がICタグリーダを備える構成となる。そして、移動目的推定装置は、持ち出し物品が前回と同じ場合には、移動目的及び移動目的地面を変更しないような処理を行う。実際には持ち込み物品が全く同じ場合は滅多にないが、処理装置の省力化が図れる等の利点がある。   First, as shown in FIG. 7, the movement purpose estimation apparatus determines whether or not there is a new vehicle-carrying item brought into the host vehicle in step S61. That is, the movement purpose estimation device does not change the movement purpose and the movement destination until a new vehicle carry-on item is recognized. In addition, in order to determine the presence or absence of a new vehicle carry-in apparatus, the movement purpose estimation device acquires information on an IC tag that records an image of an occupant's home and information on an article at home, and is configured to be at home. There may be. In other words, the vehicle carry-in item includes an IC tag, and the movement purpose estimation device includes an IC tag reader. Then, the movement purpose estimation device performs processing so as not to change the movement purpose and the movement destination ground when the taken-out article is the same as the previous one. Actually, there are rare cases where the items brought in are exactly the same, but there are advantages such as saving the labor of the processing apparatus.

ここで、移動目的推定装置は、自車両に持ち込まれた新規の車両持込品があると認識した場合には、ステップS62において、車内カメラ21によって撮像された車内画像(映像)を取得し、ステップS63において、映像解析認識部33によって車両持込品の形状情報を抽出する。移動目的推定装置は、映像解析認識部33によって認識された形状情報を持ち物・移動場所記憶部103に記憶させると共に、ステップS64において、移動目的推定部104により、映像解析認識部33によって認識された形状情報を、持ち物・移動目的データベース102に記憶されている一般的な形状情報、及び、持ち物・移動場所記憶部103に記憶されている形状情報と比較して類似度の高い移動目的及び移動目的地を抽出した上で、ステップS67へと処理を移行する。   Here, when the movement purpose estimation device recognizes that there is a new carry-in item brought into the host vehicle, in step S62, the in-vehicle image (video) captured by the in-vehicle camera 21 is acquired. In step S63, the image analysis recognition unit 33 extracts the shape information of the carry-on goods. The movement purpose estimation device stores the shape information recognized by the video analysis recognition unit 33 in the belongings / movement location storage unit 103 and is recognized by the video analysis recognition unit 33 by the movement purpose estimation unit 104 in step S64. Compared with the general shape information stored in the belonging / movement object database 102 and the shape information stored in the belonging / movement location storage unit 103, the movement information and the movement object having a high degree of similarity. After extracting the ground, the process proceeds to step S67.

また、移動目的推定装置は、ステップS65において、映像解析認識部33によって物品の色や柄等の情報を抽出する。移動目的推定装置は、映像解析認識部33によって認識された色や柄等の情報を持ち物・移動場所記憶部103に記憶させると共に、ステップS66において、移動目的推定部104により、映像解析認識部33によって認識された色や柄等の情報を、持ち物・移動目的データベース102に記憶されている一般的な色や柄等の情報、及び、持ち物・移動場所記憶部43に記憶されている色や柄等の情報と比較して類似度の高い移動目的及び移動目的地を抽出した上で、ステップS67へと処理を移行する。   Further, in step S65, the movement purpose estimation apparatus extracts information such as the color and pattern of the article by the video analysis recognition unit 33. The movement purpose estimation device stores information such as colors and patterns recognized by the video analysis recognition unit 33 in the belongings / movement location storage unit 103, and in step S66, the movement purpose estimation unit 104 causes the video analysis recognition unit 33 to store the information. Information on colors and patterns recognized by the information, information on general colors and patterns stored in the possession / movement purpose database 102, and colors and patterns stored in the possession / movement location storage unit 43 After extracting a movement purpose and a movement destination having a high degree of similarity compared to the information such as the information, the process proceeds to step S67.

なお、車両持込品による移動目的及び移動目的地の推定を行っている使用開始当初は、持ち物・移動場所記憶部103の情報量が少ないために持ち物・移動目的データベース102を用いて移動目的及び移動目的地を推定することになる。しかし、自車両での移動が増えるのに応じて、持ち物・移動場所記憶部103の情報量も増加し、徐々に持ち物・移動場所記憶部103を用いた移動目的及び移動目的地の推定頻度が多くなることになる。   Note that at the beginning of use, when the movement purpose and the movement destination are estimated based on the carry-on goods, since the amount of information in the belonging / movement location storage unit 103 is small, the movement purpose and the movement purpose database 102 are used. The moving destination will be estimated. However, as the movement of the own vehicle increases, the amount of information in the belonging / movement location storage unit 103 also increases, and the movement frequency and the estimated frequency of the movement destination using the belongings / movement location storage unit 103 gradually increase. Will increase.

また、持ち物・移動目的データベース102は、第1実施形態と同様に、一般的な情報に基づいて作成され、例えば結婚式場であれば花や着替え用のスーツ等が車両持込品として場所に対応して登録され、テニスコートであればラケットやボール等が車両持込品として場所に対応して登録され、ショッピングセンターであればショッピングバックや個人用カート等が車両持込品として場所に対応して登録される。さらに、持ち物・移動目的データベース102を作成するにあたっては、インターネット上の装飾品カタログの情報を取得し、衣服の利用目的やターゲットとする客層を示す情報や、価格、素材、色、柄、サイズ等を示す情報を取得すると共に、販売地域や販売数、販売開始日等の情報も取得する。さらにまた、持ち物・移動目的データベース102を作成するにあたっては、ウェブカメラの映像からの情報抽出と同様の方法で、地上ディジタル放送等の映像を利用して各場所における一般人の持ち物情報を取得したり、テレビショッピング等のカタログ情報等を取得したりする。   Similarly to the first embodiment, the personal belongings / movement purpose database 102 is created based on general information. For example, in a wedding hall, flowers, suits for changing clothes, etc. correspond to places as items brought in by the vehicle. If it is a tennis court, rackets and balls etc. are registered as carry-on items according to the place, and if it is a shopping center, shopping bags and personal carts correspond to places as carry-in items. Registered. Furthermore, when creating the personal belongings / movement purpose database 102, information on the ornament catalog on the Internet is acquired, information indicating the purpose of use of the clothes and the target audience, price, material, color, pattern, size, etc. Is acquired, and information such as the sales area, the number of sales, and the sales start date is also acquired. Furthermore, when creating the personal belongings / moving purpose database 102, the personal belonging information of each place can be obtained using video such as digital terrestrial broadcasting in the same manner as information extraction from the video of the webcam. Get catalog information for TV shopping.

そして、移動目的推定装置は、取得した情報が既に持ち物・移動目的データベース102に登録されているか否かを確認し、登録がない場合には、場所(位置)や車両持込品、さらには、その場所にいるとした場合の移動目的等を対応付けて持ち物・移動目的データベース102に登録する。一方、移動目的推定装置は、登録があった場合には、場所と車両持込品を示す情報のみを比較し、比較した結果、大きく異なっておらず、「同一」であると判定した場合には、取得した情報を追加登録することなく、別な情報の取得へと移行する。また、移動目的推定装置は、比較した情報が大きく異なっており、「相違」すると判定した場合には、さらに細かな条件として、曜日や午前/午後の別を含む日時や、季節、天候、性別、年齢層等、詳細条件を付与した上で、場所、物品、及び移動目的等を対応付けて持ち物・移動目的データベース102に登録する。なお、移動目的推定装置は、持ち物・移動目的データベース102のみならず、自車両専用のデータベースである持ち物・移動場所記憶部103に記憶されている持ち物を示す情報についても、映像解析認識部33によって認識された持ち物と比較することにより、移動目的及び移動目的地の推定精度を向上させている。   Then, the movement purpose estimation device checks whether or not the acquired information has already been registered in the belongings / movement purpose database 102. If there is no registration, the location (position), the vehicle carry-in item, The movement purpose and the like in the case of being in that place are registered in the belongings / movement purpose database 102 in association with each other. On the other hand, if there is a registration, the movement purpose estimation device compares only the information indicating the location and the items brought in by the vehicle. Shifts to acquiring other information without additionally registering the acquired information. In addition, if the compared information is greatly different and it is determined that the information is “difference”, the movement purpose estimation device further includes the date and time including the day of the week and the morning / afternoon, the season, the weather, and the sex. After assigning detailed conditions such as age group, the location, the article, the movement purpose, and the like are associated with each other and registered in the belongings / movement purpose database 102. Note that the moving purpose estimation device uses not only the belonging / movement purpose database 102 but also information indicating belongings stored in the belonging / movement location storage unit 103 which is a database dedicated to the own vehicle by the video analysis recognition unit 33. By comparing with the recognized belongings, the estimation accuracy of the movement purpose and the movement destination is improved.

移動目的推定装置は、ステップS64及びステップS66のそれぞれにてこのような持ち物・移動目的データベース102及び持ち物・移動場所記憶部103との比較を行うと、図7中ステップS67において、推定された移動目的及び移動目的地に対する適合度の高さを移動目的推定部104によって比較する。そして、最も適合度が高い移動目的及び移動目的地を求め、ステップS68において、その移動目的及び移動目的地を最終的な推定結果として判定する。このとき、移動目的推定部104は、冠婚葬祭である結婚式や葬式、出張、デート、コンサートをはじめとする各種イベント等、習慣性の少ない移動目的及び移動目的地と、通勤、買い物、送迎、通院、習い事、スポーツ、車両整備等、習慣性のある移動目的及び移動目的地との双方を含め、全ての移動目的及び移動目的地と比較して適合度が最も高い移動目的及び移動目的地を判定する。   When the movement purpose estimation device compares the property / movement purpose database 102 and the property / movement location storage unit 103 with each of the possession / movement object database 102 and the possession / movement location storage unit 103 in each of steps S64 and S66, the estimated movement is performed in step S67 in FIG. The high degree of fitness for the purpose and the moving destination is compared by the moving purpose estimation unit 104. Then, the moving purpose and the moving destination having the highest fitness are obtained, and the moving purpose and the moving destination are determined as the final estimation result in step S68. At this time, the movement purpose estimation unit 104 has less customary movement purposes and destinations such as weddings, funerals, business trips, dates, concerts and other events such as ceremonial occasions, commuting, shopping, pick-up Travel destinations and destinations that have the highest fitness compared to all destinations and destinations, including both customary destinations and destinations, such as hospital visits, lessons, sports, vehicle maintenance, etc. Determine.

また、移動目的推定装置は、ステップS69において、ステップS68にて判定した移動目的及び移動目的地が、現在地と一致するか否かを移動目的推定部104によって判定する。ここで、移動目的及び移動目的地が、現在地と一致しない場合には、ステップS71及びステップS73へと処理を移行する。一方、移動目的及び移動目的地が、現在地と一致した場合には、ステップS70において、第1実施形態と同様に、移動目的推定部104により、例えば帰宅等、現在の移動目的に関連する次の移動目的となる項目を移動目的として推定する。   In step S69, the movement purpose estimation apparatus determines whether the movement purpose and the movement destination determined in step S68 coincide with the current position by the movement purpose estimation unit 104. Here, when the movement destination and the movement destination do not coincide with the current location, the process proceeds to step S71 and step S73. On the other hand, if the movement purpose and the movement destination coincide with the current location, the next step related to the current movement purpose, such as going home, is performed by the movement purpose estimation unit 104 in step S70, as in the first embodiment. The item to be moved is estimated as the movement purpose.

このようにして移動目的及び移動目的地を推定すると、ステップS71において、地図データベース11から読み出した地図データ、交通情報データベース12から読み出した交通情報データ、ウェブ情報データベース13から読み出したウェブ情報データ、放送データベース14から読み出した放送データ、支援情報データベース15から読み出した支援情報データ、及び自車状態判定部44から供給された自車状態情報等に基づいて、移動目的推定部104によって推定された移動目的及び移動目的地に適合した提示情報を選択する。そして、ステップS72においては、情報提示部52により、ステップS71にて選択された提示情報を、音声情報及び図形情報や文字情報等として自車両に乗車している乗員に提示する。   When the movement purpose and the movement destination are estimated in this way, in step S71, map data read from the map database 11, traffic information data read from the traffic information database 12, web information data read from the web information database 13, broadcast Based on the broadcast data read from the database 14, the support information data read from the support information database 15, the own vehicle state information supplied from the own vehicle state determination unit 44, and the like, the movement purpose estimated by the movement purpose estimation unit 104. And select the presentation information suitable for the moving destination. In step S72, the information presenting unit 52 presents the presentation information selected in step S71 to the occupant who is on the vehicle as voice information, graphic information, character information, and the like.

また、ステップS73においては、目的地設定部51により、自車両のルート案内を行う際の目的地を自動的に設定したり、運転者に問いかけて合意が得られれば目的地を変更設定したりして一連の処理を終了する。   In step S73, the destination setting unit 51 automatically sets a destination when performing route guidance for the host vehicle, or changes and sets the destination if an inquiry is obtained from the driver. Then, a series of processing is completed.

移動目的推定装置は、このような一連の手順にしたがって、自車両に乗車している乗員の車両持込品に応じた移動目的を適切に推定することができる。   The movement purpose estimation device can appropriately estimate the movement purpose according to the carry-on goods of the occupant on the host vehicle according to such a series of procedures.

具体的には、移動目的推定装置は、例えば車両持込品がテニスラケット等の場合には、そのラケットの形状、大きさ、カバーに記載されたメーカー名、ボディーの型番等に基づいて、テニスの練習に行くのか、テニスの試合に行くのかを推定することができる。同様に、移動目的推定装置は、買い物専用のショッピングバックを認識した場合には、ショッピングを移動目的として推定することができ、ショッピングバックの中身が空である場合には、これから店舗に買い物に行く旨を推定し、ショッピングバックの中身が入っている場合には、帰宅を移動目的として推定することができる。この場合、移動目的推定装置は、購入したものが生鮮食料品である場合には、即座に帰宅を移動目的として推定するが、長持ちするような日用品である場合には、食料品等の他の買い物に行く可能性を考慮する。そして、移動目的推定装置は、週末の買い物である場合には、さらに他の買い物に行くための移動であるとする等、日時等の他の要素を加味することにより、推定精度(確度)を向上させることができる。また、移動目的推定装置は、バッグが認識された場合には、そのバックが通勤用鞄や出張用鞄である場合には、会社への通勤や取引先への出張等を移動目的として推定し、冠婚葬祭用の鞄である場合には、結婚式場となるホテルや葬儀場等を移動目的として推定する。さらに、移動目的推定装置は、買い物専用のバックの他に、移動当日及びその前日、前々日程度の新聞の折り込み広告を車内カメラ21によって撮像される(見える)ように乗員が手に持った状態で自車両に持ち込むことにより、そのチラシの店舗に行く可能性が高くなるので、移動目的として買い物を推定し、移動目的地としてチラシの店舗を推定することができる。さらにまた、移動目的推定装置は、キャンプ用品や海で使用する物品が自車両に持ち込まれた場合には、海水浴やキャンプ場への移動目的を推定し、土産となる菓子や自宅の不用品を自車両に搭載していて長期休暇の場合には、帰省を移動目的として推定することができる。   Specifically, the movement purpose estimation device, for example, if the vehicle carry-on item is a tennis racket or the like, based on the shape and size of the racket, the manufacturer name written on the cover, the model number of the body, etc. You can estimate whether you are going to practice or playing tennis. Similarly, the movement purpose estimation device can estimate shopping as a movement purpose when a shopping bag dedicated to shopping is recognized, and when the contents of the shopping bag are empty, go to the store for shopping from now on. If the contents are estimated and the contents of the shopping bag are contained, the return home can be estimated for the purpose of movement. In this case, if the purchased item is fresh food, the movement purpose estimation device immediately estimates the return home as the purpose of movement. Consider the possibility of going shopping. The movement purpose estimation device further increases the estimation accuracy (accuracy) by taking into account other factors such as the date and time, such as a movement for going to another shopping if it is a weekend shopping. Can be improved. In addition, when the bag is recognized, if the bag is a commuter bag or a business trip bag, the movement purpose estimation device estimates a commute to a company or a business trip to a business partner as a movement purpose. In the case of a casket for a ceremonial occasion, a hotel or a funeral hall serving as a wedding hall is estimated for the purpose of movement. Furthermore, in addition to the bag dedicated to shopping, the movement purpose estimation device was held by the occupant so that the in-car camera 21 could capture (view) newspaper insert advertisements on the day of movement, the day before, and the day before. Since the possibility of going to the flyer store increases by bringing it into the host vehicle in a state, shopping can be estimated as a moving purpose, and the flyer store can be estimated as a moving destination. Furthermore, when the camping equipment or articles used at sea are brought into the vehicle, the movement purpose estimation device estimates the purpose of movement to sea bathing or camping, and provides souvenirs such as confectionery and home waste. In the case of long vacations that are installed in the host vehicle, homecoming can be estimated as the purpose of travel.

また、移動目的推定装置は、自車両に持ち込まれた物品を認識する精度を向上させるために、乗員の自宅内の画像や自宅にある物品の情報を記録したICタグの情報を用いて、自宅から持ち出されたものが自車両に持ち込まれたか否かを車内カメラ21の映像によって確認するのが望ましい。これにより、移動目的推定装置によれば、認識すべき対象物を絞り込むことができるため、認識精度の向上を図ることができる。   In addition, the movement purpose estimation device uses an IC tag information in which an image of an occupant's home or information on an article at home is recorded in order to improve the accuracy of recognizing an article brought into the host vehicle. It is desirable to confirm from the video of the in-vehicle camera 21 whether the item taken out from the vehicle has been brought into the host vehicle. Thereby, according to the movement purpose estimation device, it is possible to narrow down the objects to be recognized, so that the recognition accuracy can be improved.

更に、移動目的推定装置によれば、車両持込品の情報に加え、第1実施形態にて説明したような乗員の装飾状態を考慮することにより、移動目的及び移動目的地の推定精度をより向上させることが可能となる。例えば、移動目的推定装置は、車両持込品がテニスラケットであった場合に、乗員の着衣等もテニス用品のメーカーの上着だったり、テニスができる格好をしていたり、着替えのしやすい格好であったりした場合には、テニスをすることを移動目的として精度よく推定することができる。このとき、移動目的推定装置は、乗員の着衣の上等さに基づいて、テニスの練習に行くのか、テニスの試合に行くのかまでをも推定することができる。また、移動目的推定装置は、自車両に持ち込まれた物品がキャンプ用品であった場合に、乗員の着衣等もキャンプ用のものであった場合には、移動目的をキャンプに絞り込むことができ、大型のスーツケースを所持してウエストポーチを着用していた場合には、海外旅行で空港に移動していると推定することができる。さらに、移動目的推定装置は、肌着や差し入れ用の食べ物や読み物、ゲーム等が多く自車両に持ち込まれている場合には、入院している家族の見舞いや看病に行くことを移動目的として推定することができる。このとき、移動目的推定装置は、面会時間と移動時間とを考慮することにより、推定精度を向上させることができる。   Furthermore, according to the movement purpose estimation device, in addition to the information on the items brought in by the vehicle, the estimation accuracy of the movement purpose and the movement destination can be further improved by taking into account the decoration state of the passenger as described in the first embodiment. It becomes possible to improve. For example, the movement purpose estimation device is a tennis racquet when the carry-on item is a tennis racket. In such a case, it is possible to accurately estimate playing tennis for the purpose of movement. At this time, the movement purpose estimation device can also estimate whether to go to tennis practice or to go to a tennis game based on the degree of occupant clothing. In addition, the movement purpose estimation device can narrow down the movement purpose to camping when the article brought into the host vehicle is camping equipment and the occupant's clothes are also for camping, If you have a large suitcase and wear a waist pouch, you can assume that you are traveling to the airport on an overseas trip. Furthermore, the movement purpose estimation device estimates that a visit to a hospitalized family member or going to nursery is a movement purpose when a lot of underwear, food for insertion, reading materials, games, etc. are brought into the vehicle. be able to. At this time, the movement purpose estimation apparatus can improve the estimation accuracy by considering the meeting time and the movement time.

以上のように、移動目的推定装置によれば、従来では不可能であった移動目的及び移動目的地の推定を行うことができ、その結果、習慣性の少ない移動目的地の推定までをも行うことができる。また、移動目的推定装置によれば、移動目的地が同じ場合であっても、移動目的が異なる場合にも有効であり、乗員の状況に適した情報提供を行うことができる。   As described above, according to the movement destination estimation device, it is possible to estimate a movement destination and a movement destination that were not possible in the past, and as a result, even a movement destination with less habituality is estimated. be able to. Further, according to the movement purpose estimation device, even when the movement destination is the same, the movement purpose is effective even when the movement purpose is different, and it is possible to provide information suitable for the situation of the occupant.

[第2実施形態の効果]
以上詳細に説明したように、本発明の第2実施形態として示した移動目的推定装置によれば、車両持込品を撮像して認識された物品に基づいて、自車両の移動目的及び移動目的地を推定するので、当該自車両の移動目的及び移動目的地を高精度に推定することができ、習慣性の少ない行動の目的地についても精度よく推定することができる。
[Effects of Second Embodiment]
As described above in detail, according to the movement purpose estimation device shown as the second embodiment of the present invention, the movement purpose and the movement purpose of the own vehicle based on the article recognized by imaging the goods brought in the vehicle. Since the ground is estimated, the movement purpose and the movement destination of the subject vehicle can be estimated with high accuracy, and the destination of behavior with less habit can be estimated with high accuracy.

また、この移動目的推定装置によれば、自車両の乗員の自宅内の画像又は自宅にある物品の情報を記録したICタグの情報を用いて、自宅から持ち出された物品が自車両に持ち込まれたか否かを撮像映像から映像解析認識部33によって認識することにより、物品を認識する処理能力を抑制した上で認識精度を向上させることができ、その結果、移動目的及び移動目的地の推定精度をも向上させることができる。   Further, according to this movement purpose estimation apparatus, an article taken out of the house is brought into the own vehicle using information on an IC tag in which an image of an occupant of the own vehicle or information on an article at home is recorded. Recognition by the video analysis and recognition unit 33 from the captured video, the processing accuracy for recognizing the article can be suppressed and the recognition accuracy can be improved. As a result, the estimation accuracy of the movement purpose and the movement destination can be improved. Can also be improved.

なお、上述の実施の形態は本発明の一例である。このため、本発明は、上述の実施の形態に限定されることはなく、この実施の形態以外の形態であっても、本発明に係る技術的思想を逸脱しない範囲であれば、設計などに応じて種々の変更が可能であることは勿論である。   The above-described embodiment is an example of the present invention. For this reason, the present invention is not limited to the above-described embodiment, and even if it is a form other than this embodiment, as long as it does not depart from the technical idea according to the present invention, the design and the like Of course, various modifications are possible.

本発明の第1実施形態として示す移動目的推定装置の構成について示すブロック図である。It is a block diagram shown about the structure of the movement purpose estimation apparatus shown as 1st Embodiment of this invention. 本発明の第1実施形態として示す移動目的推定装置において、自車両に乗車している乗員の装飾状態に応じた移動目的を推定する際の一連の手順について示すフローチャートである。In the movement purpose estimation device shown as the first embodiment of the present invention, it is a flowchart showing a series of procedures when estimating the movement purpose according to the decoration state of the occupant riding the host vehicle. 本発明の第1実施形態として示す移動目的推定装置において、装飾状態・移動目的データベースを作成する際の一連の手順について示すフローチャートである。It is a flowchart shown about a series of procedures at the time of creating a decoration state / movement objective database in the movement objective estimation apparatus shown as 1st Embodiment of this invention. 装飾状態・移動目的データベースの構造例について示す図である。It is a figure shown about the structural example of a decoration state / movement objective database. 本発明の第1実施形態として示す移動目的推定装置において、映像解析認識部によって認識された装飾状態と、装飾状態・移動目的データベース及び装飾状態・移動場所記憶部に記憶されている装飾状態を示す情報とを比較して類似度を算出する際の一連の手順について示すフローチャートである。In the movement purpose estimation apparatus shown as the first embodiment of the present invention, the decoration state recognized by the video analysis recognition unit and the decoration state stored in the decoration state / movement purpose database and the decoration state / movement location storage unit are shown. It is a flowchart shown about a series of procedures at the time of calculating similarity by comparing with information. 本発明の第2実施形態として示す移動目的推定装置の構成について示すブロック図である。It is a block diagram shown about the structure of the movement purpose estimation apparatus shown as 2nd Embodiment of this invention. 本発明の第2実施形態として示す移動目的推定装置において、自車両に乗車している乗員が車両持込品に応じた移動目的を推定する際の一連の手順について示すフローチャートである。In the movement purpose estimation device shown as the second embodiment of the present invention, it is a flowchart showing a series of procedures when an occupant on the own vehicle estimates a movement purpose according to a vehicle carry-on item.

符号の説明Explanation of symbols

11 地図データベース
12 交通情報データベース
13 ウェブ情報データベース
14 放送データベース
15 支援情報データベース
16 装飾状態・移動目的データベース
21 車内カメラ
22 CAN信号取得部
31 自車位置判定部
32 道路情報取得部
33 映像解析認識部
41 装飾状態・場所情報取得部
42 移動場所判定部
43 装飾状態・移動場所記憶部
44 自車状態判定部
45 移動目的推定部
46 提示情報選択部
51 目的地設定部
52 情報提示部
DESCRIPTION OF SYMBOLS 11 Map database 12 Traffic information database 13 Web information database 14 Broadcast database 15 Support information database 16 Decoration state and movement purpose database 21 In-vehicle camera 22 CAN signal acquisition part 31 Own vehicle position determination part 32 Road information acquisition part 33 Image | video analysis recognition part 41 Decoration state / location information acquisition unit 42 Movement location determination unit 43 Decoration state / movement location storage unit 44 Vehicle state determination unit 45 Movement purpose estimation unit 46 Presentation information selection unit 51 Destination setting unit 52 Information presentation unit

Claims (7)

車両内の状況を撮像する撮像手段と、
前記撮像手段によって撮像された映像当該映像から認識された前記車両の乗員の装飾状態とそのときの移動目的とを対応付けてデータベースとして記憶する第1の記憶手段と、
人の装飾状態としての着衣及び装飾品を含む特徴情報と、当該特徴情報に対応する移動目的とを記憶するデータベースであって、汎用ネットワークに登録された情報を用いて作成されたデータベースとして記憶する第2の記憶手段と、
車両の移動目的を推定する移動目的推定手段とを備え、
前記移動目的推定手段は、
前記第1の記憶手段に記憶されている映像と前記撮像手段によって撮像された映像から認識された装飾状態とを比較し、その比較結果に基づいて当該車両の第1の移動目的を推定すると共に、前記第2の記憶手段に記憶されている特徴情報に基づいて前記車両の第2の移動目的を推定し、
前記第1の移動目的と前記第2の移動目的が大きく異ならない場合には前記第1の移動目的を優先的に推定し、前記第1の移動目的と前記第2の移動目的が大きく異なる場合には前記撮像手段によって撮像された映像から認識された装飾状態を特異な条件として前記第1の記憶手段に記録することを特徴とする移動目的推定装置。
Imaging means for imaging the situation in the vehicle;
First storage means for storing the video imaged by the imaging means, the decoration state of the occupant of the vehicle recognized from the video image, and the movement purpose at that time in association with each other as a database;
A database that stores feature information including clothes and ornaments as a person's decoration state, and a movement purpose corresponding to the feature information, and is stored as a database created using information registered in a general-purpose network A second storage means;
A movement purpose estimating means for estimating a movement purpose of the vehicle,
The movement purpose estimation means includes
The video stored in the first storage means and the decoration state recognized from the video imaged by the imaging means are compared, and the first moving purpose of the vehicle is estimated based on the comparison result. , Estimating the second movement purpose of the vehicle based on the feature information stored in the second storage means,
When the first movement purpose and the second movement purpose are not significantly different from each other, the first movement purpose is preferentially estimated, and the first movement purpose and the second movement purpose are greatly different from each other. The movement purpose estimation apparatus characterized in that the decoration state recognized from the video imaged by the imaging means is recorded in the first storage means as a unique condition.
前記移動目的推定手段によって推定された移動目的に応じた提示情報を選択する提示情報選択手段と、
前記提示情報選択手段によって選択された提示情報を、前記車両の乗員に提示する情報提示手段と
を備えることを特徴とする請求項に記載の移動目的推定装置。
Presentation information selection means for selecting presentation information corresponding to the movement purpose estimated by the movement purpose estimation means;
The presentation information selected by the presentation information selecting means, the moving object estimating apparatus according to claim 1, characterized in that it comprises an information presenting means for presenting the occupant of the vehicle.
前記移動目的推定手段によって推定された移動目的に基づいて前記車両のルート案内を行う際の目的地を設定する目的地設定手段を備えることを特徴とする請求項に記載の移動目的推定装置。 The movement purpose estimation apparatus according to claim 1 , further comprising destination setting means for setting a destination when performing route guidance of the vehicle based on the movement purpose estimated by the movement purpose estimation means. 前記目的地設定手段は、前記移動目的推定手段によって推定された移動目的に基づいて前記車両のルート案内を行う際の目的地を設定することを、当該車両の乗員に対して問いかけた後に当該移動目的に基づいて当該目的地を設定することを特徴とする請求項に記載の移動目的推定装置。 The destination setting means asks the occupant of the vehicle to set a destination when performing route guidance for the vehicle based on the movement purpose estimated by the movement purpose estimation means, and then moves the destination. The movement purpose estimation apparatus according to claim 3 , wherein the destination is set based on a purpose. 前記移動目的推定手段は、前記撮像手段によって撮像された映像から認識された乗員の車両持込品に基づいて、当該車両の移動目的を推定することを特徴とする請求項1乃至請求項の何れか1項に記載の移動目的推定装置。 The moving object estimating means, on the basis of the vehicle occupant carryons recognized from the captured image by the imaging means, of claims 1 to 4, characterized in that estimating the movement target of the vehicle The movement purpose estimation apparatus according to any one of the preceding claims. 前記移動目的推定手段は、前記撮像手段によって撮像された映像から認識された車両構造物以外の車両内の物品のうち、予め記憶された物品画像又は物品に備えられたICタグ情報を用いて、当該車両内の物品が車両持ち込み物であるか否かを判定することを特徴とする請求項に記載の移動目的推定装置。 The movement purpose estimation means uses a pre-stored article image or IC tag information provided in the article among articles in the vehicle other than the vehicle structure recognized from the video imaged by the imaging means, 6. The moving purpose estimation apparatus according to claim 5 , wherein it is determined whether or not an article in the vehicle is a carry-on item. 車両が走行を開始するに際して車両内の状況を撮像し、
前記撮像された映像当該映像から認識された前記車両の乗員の装飾状態とそのときの移動目的とを対応付けてデータベースとして記憶する第1の記憶手段に記憶されている情報と、人の装飾状態としての着衣及び装飾品を含む特徴情報と、当該特徴情報に対応する移動目的とを記憶するデータベースであって、汎用ネットワークに登録された情報を用いて作成されたデータベースとして記憶する第2の記憶手段に記憶されている情報とを用いて、前記第1の記憶手段に記憶されている映像と前記撮像された映像から認識された装飾状態とを比較し、その比較結果に基づいて当該車両の第1の移動目的を推定すると共に、前記第2の記憶手段に記憶されている特徴情報に基づいて前記車両の第2の移動目的を推定し、
前記第1の移動目的と前記第2の移動目的が大きく異ならない場合には前記第1の移動目的を優先的に推定し、前記第1の移動目的と前記第2の移動目的が大きく異なる場合には前記撮像された映像から認識された装飾状態を特異な条件として前記第1の記憶手段に記録することを特徴とする移動目的推定方法。
When the vehicle starts running, it captures the situation inside the vehicle,
Information stored in first storage means for storing the captured image , the decoration state of the vehicle occupant recognized from the image, and the purpose of movement at that time as a database, and human decoration A second database that stores feature information including clothes and ornaments as states and a movement purpose corresponding to the feature information, and that is stored as a database created using information registered in the general-purpose network. and have use of the information stored in the storage means, the first comparing the decorative state recognized from the image and the captured image stored in the storage means, the vehicle on the basis of the comparison result Estimating the first movement purpose of the vehicle and estimating the second movement purpose of the vehicle based on the feature information stored in the second storage means,
When the first movement purpose and the second movement purpose are not significantly different from each other, the first movement purpose is preferentially estimated, and the first movement purpose and the second movement purpose are greatly different from each other. The method for estimating the purpose of movement, wherein the decoration state recognized from the captured video is recorded in the first storage means as a unique condition.
JP2008147877A 2008-06-05 2008-06-05 Moving purpose estimation apparatus and moving purpose estimation method Expired - Fee Related JP5286952B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008147877A JP5286952B2 (en) 2008-06-05 2008-06-05 Moving purpose estimation apparatus and moving purpose estimation method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008147877A JP5286952B2 (en) 2008-06-05 2008-06-05 Moving purpose estimation apparatus and moving purpose estimation method

Publications (2)

Publication Number Publication Date
JP2009294080A JP2009294080A (en) 2009-12-17
JP5286952B2 true JP5286952B2 (en) 2013-09-11

Family

ID=41542384

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008147877A Expired - Fee Related JP5286952B2 (en) 2008-06-05 2008-06-05 Moving purpose estimation apparatus and moving purpose estimation method

Country Status (1)

Country Link
JP (1) JP5286952B2 (en)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013120473A (en) * 2011-12-07 2013-06-17 Nikon Corp Electronic device, information processing method, and program
KR101927270B1 (en) * 2012-04-05 2018-12-10 (주)파인디지털 A method for navigation service comprising displaying the expected destination and a navigation terminal therefor
JP6558234B2 (en) * 2015-12-09 2019-08-14 トヨタ自動車株式会社 Destination estimation device
DE102022110157A1 (en) 2022-04-27 2023-11-02 Bayerische Motoren Werke Aktiengesellschaft Method for providing a navigation destination by a vehicle, computer-readable medium, system, and vehicle
JP7848872B2 (en) * 2022-07-26 2026-04-21 日産自動車株式会社 Vehicle dispatch traffic system, shared terminal control device, and shared terminal control method

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4375142B2 (en) * 2004-07-05 2009-12-02 株式会社デンソー Equipment loading support device and equipment loading / unloading support device
JP2006145494A (en) * 2004-11-24 2006-06-08 Matsushita Electric Ind Co Ltd Destination setting support device
JP2008120289A (en) * 2006-11-14 2008-05-29 Toyota Motor Corp Clothing service provider

Also Published As

Publication number Publication date
JP2009294080A (en) 2009-12-17

Similar Documents

Publication Publication Date Title
JP7582371B2 (en) Search Support System
US7472134B2 (en) Image distributing system
JP5286952B2 (en) Moving purpose estimation apparatus and moving purpose estimation method
US20200334454A1 (en) People stream analysis method, people stream analysis apparatus, and people stream analysis system
US10691197B2 (en) Information presenting apparatus and control method therefor
Schouten et al. Subcultures of consumption: An ethnography of the new bikers
JP4258585B2 (en) Destination setting device
JP4080649B2 (en) Human navigation system
US12182904B2 (en) Information processing device and information processing method
JP2017211932A (en) Information processing device, information processing system, program and information processing method
US20020001468A1 (en) Image collecting system and method thereof
JP2020129356A (en) Program, information processing method, and information processing terminal
US10497020B2 (en) Information processing device, communication system, and information processing method
JP2020016696A (en) Information provision program
US20090281922A1 (en) Method and system for selecting clothing items according to predetermined criteria
Stasik et al. Station waka-waka: The temporalities and temptations of (not) working in Ghanaian bus stations
JPH11272640A (en) Agent device
US20210150195A1 (en) Clothing information acquisition system and clothing information acquisition method
JP2023114273A (en) Image display device and image display method
CN109191229A (en) Augmented reality ornament recommended method and device
JPWO2006082971A1 (en) Image information display system and image information display method
JP2009099143A (en) Terminal unit for coordinated fashion, softwear, reservation system for coordinated fashion products,and system for coordinated fashion
Club 50th Anniversary
KR100483098B1 (en) Driving guidance apparatus for vehicles which generates expression change of artificial humans and guidance method thereof
KR20190028893A (en) the object information providing system using the image analysis

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110527

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120828

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120829

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20121026

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130108

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130311

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130507

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130520

LAPS Cancellation because of no payment of annual fees