JP7652855B2 - 移動体予測装置、交通安全支援システム、及びコンピュータプログラム - Google Patents
移動体予測装置、交通安全支援システム、及びコンピュータプログラム Download PDFInfo
- Publication number
- JP7652855B2 JP7652855B2 JP2023168735A JP2023168735A JP7652855B2 JP 7652855 B2 JP7652855 B2 JP 7652855B2 JP 2023168735 A JP2023168735 A JP 2023168735A JP 2023168735 A JP2023168735 A JP 2023168735A JP 7652855 B2 JP7652855 B2 JP 7652855B2
- Authority
- JP
- Japan
- Prior art keywords
- prediction
- state information
- information
- traffic
- future
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
- G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/01—Detecting movement of traffic to be counted or controlled
- G08G1/0104—Measuring and analyzing of parameters relative to traffic conditions
- G08G1/0137—Measuring and analyzing of parameters relative to traffic conditions for specific applications
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
- G08G1/164—Centralised systems, e.g. external to vehicles
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
- G08G1/166—Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
- G06T2207/30201—Face
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30252—Vehicle exterior; Vicinity of vehicle
- G06T2207/30261—Obstacle
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30268—Vehicle interior
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- Traffic Control Systems (AREA)
- Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
Description
予測ユニット62は、移動状態情報取得部620と、周囲状態情報取得部621と、交通環境情報取得部622と、確認状態情報取得部623と、移動速度予測部624と、衝突予測部625と、支援行動情報生成部626と、を備え、これらを用いることによって予測対象の監視エリアにおける将来のリスクを予測する。
評価値=1/(最大リスク値+a×移動時間+b×加減速度) (1)
2…四輪自動車(移動体、交通参加者)
20…車載装置群
21…車載運転支援装置
22…車載通知装置
3…自動二輪車(移動体、交通参加者)
30…車載装置群
31…車載運転支援装置
32…車載通知装置
6…交通管理サーバ
60…対象交通エリア認識ユニット
61…運転主体情報取得ユニット
62…予測ユニット(移動体予測装置)
620…移動状態情報取得部
621…周囲状態情報取得部
622…交通環境情報取得部
623…確認状態情報取得部
624…移動速度予測部
6241…基準リスクマップ生成部
6242…認知状態推定マップ生成部
6243…将来移動速度算出部
625…衝突予測部
626…支援行動情報生成部
65…協調支援情報通知ユニット(支援情報通知装置)
9…対象交通エリア
90…監視エリア
91…第1交通参加者
92…第2交通参加者
93…第3交通参加者
Claims (15)
- 交通エリア内を移動する移動体を予測対象とし、当該予測対象の前記交通エリアにおける将来を予測する移動体予測装置であって、
前記予測対象の移動状態に関する移動状態情報を取得する移動状態情報取得部と、
前記交通エリアにおける前記予測対象の周囲の交通参加者の移動状態に関する周囲状態情報を取得する周囲状態情報取得部と、
前記予測対象の運転者の周囲確認状態に関する確認状態情報を取得する確認状態情報取得部と、
前記移動状態情報、前記周囲状態情報、及び前記確認状態情報に基づいて現在から予測時間先までの間の各時刻における前記予測対象の移動速度と当該予測対象の将来におけるリスク値とを関連付けるマップを生成し、当該マップに基づいて前記予測対象の将来移動速度を予測する移動速度予測部と、
前記移動状態情報、前記周囲状態情報、及び前記将来移動速度に基づいて前記予測対象の将来における衝突の有無を予測する衝突予測部と、を備えることを特徴とする移動体予測装置。 - 前記確認状態情報取得部は、前記予測対象に設けられたカメラによって撮影された前記運転者の顔画像データ及び前記周囲状態情報に基づいて前記確認状態情報を生成することを特徴とする請求項1に記載の移動体予測装置。
- 前記確認状態情報は、前記運転者による周囲確認回数を含み、
前記移動速度予測部は、前記周囲確認回数が確認回数閾値未満である場合、前記周囲確認回数が前記確認回数閾値以上である場合よりも前記将来移動速度を高く予測することを特徴とする請求項2に記載の移動体予測装置。 - 前記確認状態情報取得部は、前記顔画像データに基づいて前記運転者の視線方向を算出するとともに、前記視線方向が前記周囲状態情報に基づいて定められた範囲内であることを条件として前記周囲確認回数をカウントアップすることを特徴とする請求項3に記載の移動体予測装置。
- 前記確認状態情報は、前記運転者による周囲確認時間を含み、
前記移動速度予測部は、前記周囲確認時間が確認時間閾値未満である場合、前記周囲確認時間が前記確認時間閾値以上である場合よりも前記将来移動速度を高く予測することを特徴とする請求項2に記載の移動体予測装置。 - 前記確認状態情報取得部は、前記顔画像データに基づいて前記運転者の視線方向を算出するとともに、前記視線方向が前記周囲状態情報に基づいて定められた範囲内であることを条件として前記周囲確認時間をカウントアップすることを特徴とする請求項5に記載の移動体予測装置。
- 前記確認状態情報取得部は、前記予測対象に設けられた生体情報センサによって検出された前記運転者の生体情報に基づいて前記確認状態情報を生成することを特徴とする請求項2に記載の移動体予測装置。
- 交通エリア内を移動する移動体を予測対象とし、当該予測対象の前記交通エリアにおける将来を予測する移動体予測装置であって、
前記予測対象の移動状態に関する移動状態情報を取得する移動状態情報取得部と、
前記交通エリアにおける前記予測対象の周囲の交通参加者の移動状態に関する周囲状態情報を取得する周囲状態情報取得部と、
前記予測対象の運転者の周囲確認状態に関する確認状態情報を取得する確認状態情報取得部と、
前記移動状態情報、前記周囲状態情報、及び前記確認状態情報に基づいて前記予測対象の将来移動速度を予測する移動速度予測部と、
前記移動状態情報、前記周囲状態情報、及び前記将来移動速度に基づいて前記予測対象の将来における衝突の有無を予測する衝突予測部と、を備え、
前記移動速度予測部は、
前記移動状態情報及び前記周囲状態情報に基づいて前記予測対象の移動速度と当該予測対象の将来におけるリスク値とを関連付ける基準リスクマップを生成する基準リスクマップ生成部と、
前記確認状態情報に基づいて前記基準リスクマップを補正することによって認知状態推定マップを生成する認知状態推定マップ生成部と、
前記認知状態推定マップに基づいて前記将来移動速度を算出する将来移動速度算出部と、を備えることを特徴とする移動体予測装置。 - 前記将来移動速度算出部は、前記認知状態推定マップに基づいて算出されるリスク値及び前記予測対象の加減速度が共に小さくなるように前記将来移動速度を算出することを特徴とする請求項8に記載の移動体予測装置。
- 前記予測対象と共に移動する車載装置群と、
前記車載装置群と通信可能な交通管理サーバと、を備える交通安全支援システムであって、
前記交通管理サーバは、請求項1に記載の移動体予測装置と、前記衝突予測部によって前記予測対象が衝突すると予測された場合、前記衝突予測部の予測結果に関する情報を含む支援情報を前記車載装置群へ送信する支援情報通知装置と、を備え、
前記車載装置群は、前記支援情報に基づいて生成した情報を画像及び音の少なくとも何れかによって前記運転者に通知する車載通知装置を備えることを特徴とする交通安全支援システム。 - 前記移動体予測装置は、前記衝突予測部によって前記予測対象が衝突すると予測された場合、衝突を回避するための行動又は衝突による被害を軽減するための行動に関する支援行動情報を前記移動状態情報及び前記周囲状態情報に基づいて生成する支援行動情報生成部をさらに備え、
前記支援情報通知装置は、前記予測結果に関する情報及び前記支援行動情報を含む前記支援情報を前記車載装置群へ送信し、
前記車載通知装置は、前記運転者が前記支援行動情報に従って運転操作を行うように生成した情報を画像及び音の少なくとも何れかによって前記運転者に通知することを特徴とする請求項10に記載の交通安全支援システム。 - 前記予測対象と共に移動する車載装置群と、
前記車載装置群と通信可能な交通管理サーバと、を備える交通安全支援システムであって、
前記交通管理サーバは、請求項1に記載の移動体予測装置と、前記衝突予測部によって前記予測対象が衝突すると予測された場合、前記衝突予測部の予測結果に関する情報を含む支援情報を前記車載装置群へ送信する支援情報通知装置と、を備え、
前記車載装置群は、前記支援情報に基づいて前記予測対象の挙動を自動で制御する車載運転支援装置を備えることを特徴とする交通安全支援システム。 - 前記移動体予測装置は、前記衝突予測部によって前記予測対象が衝突すると予測された場合、衝突を回避するための行動又は衝突による被害を軽減するための行動に関する支援行動情報を前記移動状態情報及び前記周囲状態情報に基づいて生成する支援行動情報生成部をさらに備え、
前記支援情報通知装置は、前記予測結果に関する情報及び前記支援行動情報を含む前記支援情報を前記車載装置群へ送信し、
前記車載運転支援装置は、前記支援行動情報に基づいて前記予測対象の挙動を自動で制御することを特徴とする請求項12に記載の交通安全支援システム。 - 交通エリア内を移動する移動体を予測対象とし、当該予測対象の前記交通エリアにおける将来を予測するコンピュータに対し、
前記予測対象の移動状態に関する移動状態情報を取得するステップと、
前記交通エリアにおける前記予測対象の周囲の交通参加者の移動状態に関する周囲状態情報を取得するステップと、
前記予測対象の運転者の周囲確認状態に関する確認状態情報を取得するステップと、
前記移動状態情報、前記周囲状態情報、及び前記確認状態情報に基づいて現在から予測時間先までの間の各時刻における前記予測対象の移動速度と当該予測対象の将来におけるリスク値とを関連付けるマップを生成し、当該マップに基づいて前記予測対象の将来移動速度を予測するステップと、
前記移動状態情報、前記周囲状態情報、及び前記将来移動速度に基づいて前記予測対象の将来における衝突の有無を予測するステップと、を実行させることを特徴とするコンピュータプログラム。 - 交通エリア内を移動する移動体を予測対象とし、当該予測対象の前記交通エリアにおける将来を予測するコンピュータに対し、
前記予測対象の移動状態に関する移動状態情報を取得するステップと、
前記交通エリアにおける前記予測対象の周囲の交通参加者の移動状態に関する周囲状態情報を取得するステップと、
前記予測対象の運転者の周囲確認状態に関する確認状態情報を取得するステップと、
前記移動状態情報及び前記周囲状態情報に基づいて前記予測対象の移動速度と当該予測対象の将来におけるリスク値とを関連付ける基準リスクマップを生成するステップと、
前記確認状態情報に基づいて前記基準リスクマップを補正することによって認知状態推定マップを生成するステップと、
前記認知状態推定マップに基づいて前記予測対象の将来移動速度を予測するステップと、
前記移動状態情報、前記周囲状態情報、及び前記将来移動速度に基づいて前記予測対象の将来における衝突の有無を予測するステップと、を実行させることを特徴とするコンピュータプログラム。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US17/936,857 | 2022-09-30 | ||
| US17/936,857 US12087165B2 (en) | 2022-09-30 | 2022-09-30 | Moving body prediction device, traffic safety support system, and storage medium |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2024052613A JP2024052613A (ja) | 2024-04-11 |
| JP7652855B2 true JP7652855B2 (ja) | 2025-03-27 |
Family
ID=90432401
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2023168735A Active JP7652855B2 (ja) | 2022-09-30 | 2023-09-28 | 移動体予測装置、交通安全支援システム、及びコンピュータプログラム |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US12087165B2 (ja) |
| JP (1) | JP7652855B2 (ja) |
| CN (1) | CN117809484A (ja) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN119247955B (zh) * | 2024-09-26 | 2025-11-21 | 奇勃(深圳)科技有限公司 | 清洁机器人控制方法、装置、设备及介质 |
Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002304700A (ja) | 2001-04-06 | 2002-10-18 | Honda Motor Co Ltd | 移動体警報システム |
| JP2009276991A (ja) | 2008-05-14 | 2009-11-26 | Toyota Motor Corp | 危険回避システム |
| JP2010195207A (ja) | 2009-02-25 | 2010-09-09 | Toyota Motor Corp | 運転支援装置 |
| JP2011210098A (ja) | 2010-03-30 | 2011-10-20 | Toyota Motor Corp | 運転支援装置及び運転支援方法 |
| JP2011210102A (ja) | 2010-03-30 | 2011-10-20 | Mazda Motor Corp | 車両用運転支援装置 |
| JP2012212357A (ja) | 2011-03-31 | 2012-11-01 | Panasonic Corp | 車載用表示装置 |
| JP2016200929A (ja) | 2015-04-09 | 2016-12-01 | トヨタ自動車株式会社 | 衝突回避支援装置 |
| DE102015225135A1 (de) | 2015-12-14 | 2017-06-14 | Continental Automotive Gmbh | System und Verfahren zur Anpassung einer akustischen Ausgabe eines Navigationssystems |
| JP2019114118A (ja) | 2017-12-25 | 2019-07-11 | 日本電産コパル株式会社 | 警告装置、自動車、警告方法、及びプログラム |
| US20220089163A1 (en) | 2020-09-18 | 2022-03-24 | GM Global Technology Operations LLC | Lane change maneuver intention detection systems and methods |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH06150199A (ja) * | 1992-11-13 | 1994-05-31 | Mitsubishi Electric Corp | 車両予防安全装置 |
| JP2011118723A (ja) | 2009-12-04 | 2011-06-16 | Honda Motor Co Ltd | 車両の衝突を回避するための装置 |
| JP6905433B2 (ja) | 2017-09-13 | 2021-07-21 | 株式会社デンソーアイティーラボラトリ | 車両行動予測装置、車両行動予測方法および車両行動予測用のニューラルネットワークの学習方法 |
| JP7382327B2 (ja) * | 2018-08-09 | 2023-11-16 | ソニーセミコンダクタソリューションズ株式会社 | 情報処理装置、移動体、情報処理方法及びプログラム |
-
2022
- 2022-09-30 US US17/936,857 patent/US12087165B2/en active Active
-
2023
- 2023-09-27 CN CN202311259573.1A patent/CN117809484A/zh active Pending
- 2023-09-28 JP JP2023168735A patent/JP7652855B2/ja active Active
Patent Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002304700A (ja) | 2001-04-06 | 2002-10-18 | Honda Motor Co Ltd | 移動体警報システム |
| JP2009276991A (ja) | 2008-05-14 | 2009-11-26 | Toyota Motor Corp | 危険回避システム |
| JP2010195207A (ja) | 2009-02-25 | 2010-09-09 | Toyota Motor Corp | 運転支援装置 |
| JP2011210098A (ja) | 2010-03-30 | 2011-10-20 | Toyota Motor Corp | 運転支援装置及び運転支援方法 |
| JP2011210102A (ja) | 2010-03-30 | 2011-10-20 | Mazda Motor Corp | 車両用運転支援装置 |
| JP2012212357A (ja) | 2011-03-31 | 2012-11-01 | Panasonic Corp | 車載用表示装置 |
| JP2016200929A (ja) | 2015-04-09 | 2016-12-01 | トヨタ自動車株式会社 | 衝突回避支援装置 |
| DE102015225135A1 (de) | 2015-12-14 | 2017-06-14 | Continental Automotive Gmbh | System und Verfahren zur Anpassung einer akustischen Ausgabe eines Navigationssystems |
| JP2019114118A (ja) | 2017-12-25 | 2019-07-11 | 日本電産コパル株式会社 | 警告装置、自動車、警告方法、及びプログラム |
| US20220089163A1 (en) | 2020-09-18 | 2022-03-24 | GM Global Technology Operations LLC | Lane change maneuver intention detection systems and methods |
Also Published As
| Publication number | Publication date |
|---|---|
| US20240112582A1 (en) | 2024-04-04 |
| CN117809484A (zh) | 2024-04-02 |
| JP2024052613A (ja) | 2024-04-11 |
| US12087165B2 (en) | 2024-09-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10875545B2 (en) | Autonomous driving system | |
| CN109080641B (zh) | 驾驶意识推定装置 | |
| CN111383477B (zh) | 信息提示装置 | |
| JP6937335B2 (ja) | 車両制御システム | |
| KR102184598B1 (ko) | 자율주행차량의 운전자 응급상황발생판단에 기반한 주행예측 및 안전주행시스템 | |
| JP7671815B2 (ja) | 交通安全支援システム、及びコンピュータプログラム | |
| CN111762189A (zh) | 车辆控制系统 | |
| JP7151495B2 (ja) | 自動運転システム | |
| JP2020166659A (ja) | 車両制御システム | |
| JP6269360B2 (ja) | 運転支援システム及び運転支援方法 | |
| JP7035447B2 (ja) | 車両制御装置 | |
| JP2019098779A (ja) | 運転アドバイス装置及び運転アドバイス方法 | |
| JP7671861B2 (ja) | 交通安全支援システム及び交通安全支援方法 | |
| JP7656676B2 (ja) | 交通安全支援システム及びコンピュータプログラム | |
| JP7652855B2 (ja) | 移動体予測装置、交通安全支援システム、及びコンピュータプログラム | |
| JP7659024B2 (ja) | 移動体予測装置、学習方法、交通安全支援システム、及びコンピュータプログラム | |
| CN119734693A (zh) | 车辆用控制装置、车辆控制方法及存储介质 | |
| JP7610039B2 (ja) | 運転支援装置及びコンピュータプログラム並びにコンピュータプログラムを記録した記録媒体 | |
| JP7184694B2 (ja) | 車両制御システム | |
| CN116895161B (zh) | 交通安全辅助系统 | |
| US20240092376A1 (en) | Vehicle control device, vehicle control method, and storage medium | |
| WO2024201901A1 (ja) | 運転支援装置、運転支援方法、およびプログラム | |
| WO2024201906A1 (ja) | 運転支援装置、運転支援方法、およびプログラム | |
| WO2025126857A1 (ja) | 車両制御装置、車両制御方法、およびプログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231023 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20240327 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20241121 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20241203 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20250228 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20250311 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20250314 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7652855 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |