JP7659024B2 - 移動体予測装置、学習方法、交通安全支援システム、及びコンピュータプログラム - Google Patents
移動体予測装置、学習方法、交通安全支援システム、及びコンピュータプログラム Download PDFInfo
- Publication number
- JP7659024B2 JP7659024B2 JP2023168752A JP2023168752A JP7659024B2 JP 7659024 B2 JP7659024 B2 JP 7659024B2 JP 2023168752 A JP2023168752 A JP 2023168752A JP 2023168752 A JP2023168752 A JP 2023168752A JP 7659024 B2 JP7659024 B2 JP 7659024B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- traffic
- prediction
- driver
- behavior
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/01—Detecting movement of traffic to be counted or controlled
- G08G1/0104—Measuring and analyzing of parameters relative to traffic conditions
- G08G1/0125—Traffic data processing
- G08G1/0133—Traffic data processing for classifying traffic situation
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N20/00—Machine learning
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/77—Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
- G06V10/774—Generating sets of training patterns; Bootstrap methods, e.g. bagging or boosting
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/77—Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
- G06V10/80—Fusion, i.e. combining data from various sources at the sensor level, preprocessing level, feature extraction level or classification level
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
- G06V20/54—Surveillance or monitoring of activities, e.g. for recognising suspicious objects of traffic, e.g. cars on the road, trains or boats
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
- G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/01—Detecting movement of traffic to be counted or controlled
- G08G1/0104—Measuring and analyzing of parameters relative to traffic conditions
- G08G1/0108—Measuring and analyzing of parameters relative to traffic conditions based on the source of data
- G08G1/0112—Measuring and analyzing of parameters relative to traffic conditions based on the source of data from the vehicle, e.g. floating car data [FCD]
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/01—Detecting movement of traffic to be counted or controlled
- G08G1/0104—Measuring and analyzing of parameters relative to traffic conditions
- G08G1/0108—Measuring and analyzing of parameters relative to traffic conditions based on the source of data
- G08G1/0116—Measuring and analyzing of parameters relative to traffic conditions based on the source of data from roadside infrastructure, e.g. beacons
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/01—Detecting movement of traffic to be counted or controlled
- G08G1/0104—Measuring and analyzing of parameters relative to traffic conditions
- G08G1/0125—Traffic data processing
- G08G1/0129—Traffic data processing for creating historical data or processing based on historical data
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/01—Detecting movement of traffic to be counted or controlled
- G08G1/04—Detecting movement of traffic to be counted or controlled using optical or ultrasonic detectors
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
- G08G1/164—Centralised systems, e.g. external to vehicles
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
- G08G1/166—Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
- G08G1/167—Driving aids for lane monitoring, lane changing, e.g. blind spot detection
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/08—Detecting or categorising vehicles
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Analytical Chemistry (AREA)
- Chemical & Material Sciences (AREA)
- Software Systems (AREA)
- Artificial Intelligence (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computing Systems (AREA)
- Evolutionary Computation (AREA)
- Medical Informatics (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- General Engineering & Computer Science (AREA)
- Mathematical Physics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Biomedical Technology (AREA)
- Biophysics (AREA)
- Computational Linguistics (AREA)
- Molecular Biology (AREA)
- Traffic Control Systems (AREA)
Description
予測ユニット62は、移動状態情報取得部620と、周囲状態情報取得部621と、交通環境情報取得部622と、運転者状態情報取得部623と、交通シーン特定部624と、行動パターン選択部625と、行動予測部626と、衝突予測部627と、支援行動情報生成部628と、を備え、これらを用いることによって予測対象の監視エリアにおける将来のリスクを予測する。
いて算出した衝突リスク値が所定の衝突判定閾値以上である場合、予測対象は衝突する可能性が高いと予測し、衝突リスク値が衝突判定閾値未満である場合、予測対象は衝突する可能性が低いと予測する。
評価値=1/(最大リスク値+a×移動時間+b×加減速度) (1)
2…四輪自動車(移動体、交通参加者)
20…車載装置群
21…車載運転支援装置
22…車載通知装置
3…自動二輪車(移動体、交通参加者)
30…車載装置群
31…車載運転支援装置
32…車載通知装置
6…交通管理サーバ
60…対象交通エリア認識ユニット
61…運転主体情報取得ユニット
62…予測ユニット(移動体予測装置)
620…移動状態情報取得部
621…周囲状態情報取得部
622…交通環境情報取得部
623…運転者状態情報取得部
624…交通シーン特定部
625…行動パターン選択部
626…行動予測部
627…衝突予測部
628…支援行動情報生成部
65…協調支援情報通知ユニット(支援情報通知装置)
9…対象交通エリア
80,90…監視エリア
81,91…第1交通参加者
82,92…第2交通参加者
83,93…第3交通参加者
Claims (10)
- 交通エリア内を移動する移動体を予測対象とし、当該予測対象の前記交通エリアにおける将来を予測する移動体予測装置であって、
前記予測対象の移動状態に関する移動状態情報を取得する移動状態情報取得部と、
前記交通エリアにおける前記予測対象の周囲の交通参加者の移動状態に関する周囲状態情報を取得する周囲状態情報取得部と、
前記交通エリアにおける前記予測対象の周囲の交通環境情報を取得する交通環境情報取得部と、
前記予測対象の運転者の状態に関する情報を取得し、取得した情報に基づいて前記運転者の焦りの強さを数値化した焦りパラメータ値を算出する運転者状態情報取得部と、
前記移動状態情報、前記周囲状態情報、及び前記交通環境情報に基づいて前記予測対象の交通シーンを特定する交通シーン特定部と、
前記交通シーン及び前記焦りパラメータ値に基づいて、予め定められた複数の行動パターンの中から少なくとも1つを予測行動パターンとして選択する行動パターン選択部と、
前記予測行動パターンに基づいて前記予測対象の将来の行動を予測する行動予測部と、を備えることを特徴とする移動体予測装置。 - 前記運転者状態情報取得部は、前記運転者の運転能力と相関のある情報に基づいて前記焦りパラメータ値を算出することを特徴とする請求項1に記載の移動体予測装置。
- 運転者状態情報取得部は、前記予測対象に設けられた生体情報センサによって検出された前記運転者の生体情報に基づいて前記焦りパラメータ値を生成することを特徴とする請求項2に記載の移動体予測装置。
- 請求項1に記載の移動体予測装置の学習方法であって、
前記行動パターン選択部は、前記交通シーン及び前記焦りパラメータ値を入力すると少なくとも1つの前記行動パターンを出力する行動パターン予測モデルを利用することによって前記予測行動パターンを選択し、
所定の第1期間において取得された前記交通シーン及び前記焦りパラメータ値に基づいて前記行動パターン予測モデルに対する入力データを生成する工程と、
前記第1期間の直後の第2期間において取得された前記移動状態情報に基づいて前記行動パターン予測モデルの出力に対する正解データを生成する工程と、
前記入力データ及び前記正解データを組み合わせた学習データを用いて前記行動パターン予測モデルを学習する工程と、を備えることを特徴とする学習方法。 - 前記移動状態情報、前記周囲状態情報、前記交通環境情報、及び前記行動予測部の予測結果に基づいて前記予測対象の将来における衝突の有無を予測する衝突予測部をさらに備えることを特徴とする請求項1に記載の移動体予測装置。
- 前記予測対象と共に移動する車載装置群と、
前記車載装置群と通信可能な交通管理サーバと、を備える交通安全支援システムであって、
前記交通管理サーバは、請求項5に記載の移動体予測装置と、前記衝突予測部によって前記予測対象が衝突すると予測された場合、前記衝突予測部の予測結果に関する情報を含む支援情報を前記車載装置群へ送信する支援情報通知装置と、を備え、
前記車載装置群は、前記支援情報に基づいて生成した情報を画像及び音の少なくとも何れかによって前記運転者に通知する車載通知装置を備えることを特徴とする交通安全支援システム。 - 前記移動体予測装置は、前記衝突予測部によって前記予測対象が衝突すると予測された場合、衝突を回避するための行動又は衝突による被害を軽減するための行動に関する支援行動情報を前記移動状態情報及び前記周囲状態情報に基づいて生成する支援行動情報生成部をさらに備え、
前記支援情報通知装置は、前記予測結果に関する情報及び前記支援行動情報を含む前記支援情報を前記車載装置群へ送信し、
前記車載通知装置は、前記運転者が前記支援行動情報に従って運転操作を行うように生成した情報を画像及び音の少なくとも何れかによって前記運転者に通知することを特徴とする請求項6に記載の交通安全支援システム。 - 前記予測対象と共に移動する車載装置群と、
前記車載装置群と通信可能な交通管理サーバと、を備える交通安全支援システムであって、
前記交通管理サーバは、請求項5に記載の移動体予測装置と、前記衝突予測部によって前記予測対象が衝突すると予測された場合、前記衝突予測部の予測結果に関する情報を含む支援情報を前記車載装置群へ送信する支援情報通知装置と、を備え、
前記車載装置群は、前記支援情報に基づいて前記予測対象の挙動を自動で制御する車載運転支援装置を備えることを特徴とする交通安全支援システム。 - 前記移動体予測装置は、前記衝突予測部によって前記予測対象が衝突すると予測された場合、衝突を回避するための行動又は衝突による被害を軽減するための行動に関する支援行動情報を前記移動状態情報及び前記周囲状態情報に基づいて生成する支援行動情報生成部をさらに備え、
前記支援情報通知装置は、前記予測結果に関する情報及び前記支援行動情報を含む前記支援情報を前記車載装置群へ送信し、
前記車載運転支援装置は、前記支援行動情報に基づいて前記予測対象の挙動を自動で制御することを特徴とする請求項8に記載の交通安全支援システム。 - 交通エリア内を移動する移動体を予測対象とし、当該予測対象の前記交通エリアにおける将来を予測するコンピュータに対し、
前記予測対象の移動状態に関する移動状態情報を取得するステップと、
前記交通エリアにおける前記予測対象の周囲の交通参加者の移動状態に関する周囲状態情報を取得するステップと、
前記交通エリアにおける前記予測対象の周囲の交通環境情報を取得するステップと、
前記予測対象の運転者の状態に関する情報を取得し、取得した情報に基づいて前記運転者の焦りの強さを数値化した焦りパラメータ値を算出するステップと、
前記移動状態情報、前記周囲状態情報、及び前記交通環境情報に基づいて前記予測対象の交通シーンを特定するステップと、
前記交通シーン及び前記焦りパラメータ値に基づいて、予め定められた複数の行動パターンの中から少なくとも1つを予測行動パターンとして選択するステップと、
前記予測行動パターンに基づいて前記予測対象の将来の行動を予測するステップと、を実行せることを特徴とするコンピュータプログラム。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US17/936,854 | 2022-09-30 | ||
| US17/936,854 US20240112570A1 (en) | 2022-09-30 | 2022-09-30 | Moving body prediction device, learning method, traffic safety support system, and storage medium |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2024052614A JP2024052614A (ja) | 2024-04-11 |
| JP7659024B2 true JP7659024B2 (ja) | 2025-04-08 |
Family
ID=90432451
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2023168752A Active JP7659024B2 (ja) | 2022-09-30 | 2023-09-28 | 移動体予測装置、学習方法、交通安全支援システム、及びコンピュータプログラム |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US20240112570A1 (ja) |
| JP (1) | JP7659024B2 (ja) |
| CN (1) | CN117809485A (ja) |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2019053377A (ja) | 2017-09-13 | 2019-04-04 | 株式会社デンソーアイティーラボラトリ | 車両行動予測装置、車両行動予測方法および車両行動予測用のニューラルネットワークの学習方法 |
| US20190118834A1 (en) | 2017-10-20 | 2019-04-25 | Honda Research Institute Europe Gmbh | Gaze-guided communication for assistance in mobility |
| WO2019198449A1 (ja) | 2018-04-10 | 2019-10-17 | 住友電気工業株式会社 | 情報提供システム、移動端末、情報提供装置、情報提供方法、及びコンピュータプログラム |
-
2022
- 2022-09-30 US US17/936,854 patent/US20240112570A1/en not_active Abandoned
-
2023
- 2023-09-28 CN CN202311268588.4A patent/CN117809485A/zh active Pending
- 2023-09-28 JP JP2023168752A patent/JP7659024B2/ja active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2019053377A (ja) | 2017-09-13 | 2019-04-04 | 株式会社デンソーアイティーラボラトリ | 車両行動予測装置、車両行動予測方法および車両行動予測用のニューラルネットワークの学習方法 |
| US20190118834A1 (en) | 2017-10-20 | 2019-04-25 | Honda Research Institute Europe Gmbh | Gaze-guided communication for assistance in mobility |
| JP2019091432A (ja) | 2017-10-20 | 2019-06-13 | ホンダ リサーチ インスティテュート ヨーロッパ ゲーエムベーハーHonda Research Institute Europe GmbH | 移動性における支援のための視線主導型伝達 |
| WO2019198449A1 (ja) | 2018-04-10 | 2019-10-17 | 住友電気工業株式会社 | 情報提供システム、移動端末、情報提供装置、情報提供方法、及びコンピュータプログラム |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2024052614A (ja) | 2024-04-11 |
| CN117809485A (zh) | 2024-04-02 |
| US20240112570A1 (en) | 2024-04-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6937335B2 (ja) | 車両制御システム | |
| KR102184598B1 (ko) | 자율주행차량의 운전자 응급상황발생판단에 기반한 주행예측 및 안전주행시스템 | |
| JP7671815B2 (ja) | 交通安全支援システム、及びコンピュータプログラム | |
| CN109841088B (zh) | 车辆驾驶辅助系统及方法 | |
| JP6269360B2 (ja) | 運転支援システム及び運転支援方法 | |
| JP7671861B2 (ja) | 交通安全支援システム及び交通安全支援方法 | |
| US12374223B2 (en) | Traffic safety support system | |
| JP7656676B2 (ja) | 交通安全支援システム及びコンピュータプログラム | |
| JP7469358B2 (ja) | 交通安全支援システム | |
| JP2019079363A (ja) | 車両制御装置 | |
| JP2023073264A (ja) | 自動運転車用情報提示装置 | |
| CN115257813B (zh) | 通过施工障碍物的智能驾驶控制方法及车辆 | |
| CN116895180A (zh) | 交通安全辅助系统 | |
| JP7652855B2 (ja) | 移動体予測装置、交通安全支援システム、及びコンピュータプログラム | |
| JP7659024B2 (ja) | 移動体予測装置、学習方法、交通安全支援システム、及びコンピュータプログラム | |
| JP7610039B2 (ja) | 運転支援装置及びコンピュータプログラム並びにコンピュータプログラムを記録した記録媒体 | |
| CN116895183A (zh) | 交通安全辅助系统及其学习方法 | |
| JP7184694B2 (ja) | 車両制御システム | |
| CN116895161B (zh) | 交通安全辅助系统 | |
| CN116895176B (zh) | 交通安全辅助系统 | |
| CN116895182B (zh) | 交通安全辅助系统 | |
| US20260021823A1 (en) | Control apparatus and control method | |
| JP7726829B2 (ja) | 交通安全支援システム | |
| WO2024257138A1 (ja) | 運転支援システム及び運転支援処理方法並びに記録媒体 | |
| WO2025126857A1 (ja) | 車両制御装置、車両制御方法、およびプログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231023 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20240327 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20241113 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20241119 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20250129 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20250325 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20250327 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7659024 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |