JP7652154B2 - 走行管理装置、走行管理方法、プログラム - Google Patents
走行管理装置、走行管理方法、プログラム Download PDFInfo
- Publication number
- JP7652154B2 JP7652154B2 JP2022132681A JP2022132681A JP7652154B2 JP 7652154 B2 JP7652154 B2 JP 7652154B2 JP 2022132681 A JP2022132681 A JP 2022132681A JP 2022132681 A JP2022132681 A JP 2022132681A JP 7652154 B2 JP7652154 B2 JP 7652154B2
- Authority
- JP
- Japan
- Prior art keywords
- remote
- vehicle
- driving
- remote assistance
- time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/20—Control system inputs
- G05D1/22—Command input arrangements
- G05D1/221—Remote-control arrangements
- G05D1/222—Remote-control arrangements operated by humans
- G05D1/224—Output arrangements on the remote controller, e.g. displays, haptics or speakers
- G05D1/2244—Optic
- G05D1/2247—Optic providing the operator with simple or augmented images from one or more cameras
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/0011—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
- G05D1/0022—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement characterised by the communication link
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W60/00—Drive control systems specially adapted for autonomous road vehicles
- B60W60/001—Planning or execution of driving tasks
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/20—Control system inputs
- G05D1/22—Command input arrangements
- G05D1/221—Remote-control arrangements
- G05D1/226—Communication links with the remote-control arrangements
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/20—Control system inputs
- G05D1/22—Command input arrangements
- G05D1/221—Remote-control arrangements
- G05D1/227—Handing over between remote control and on-board control; Handing over between remote control arrangements
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2554/00—Input parameters relating to objects
- B60W2554/40—Dynamic objects, e.g. animals, windblown objects
- B60W2554/404—Characteristics
- B60W2554/4041—Position
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2556/00—Input parameters relating to data
- B60W2556/45—External transmission of data to or from the vehicle
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D2105/00—Specific applications of the controlled vehicles
- G05D2105/20—Specific applications of the controlled vehicles for transportation
- G05D2105/22—Specific applications of the controlled vehicles for transportation of humans
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D2107/00—Specific environments of the controlled vehicles
- G05D2107/10—Outdoor regulated spaces
- G05D2107/13—Spaces reserved for vehicle traffic, e.g. roads, regulated airspace or regulated waters
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D2109/00—Types of controlled vehicles
- G05D2109/10—Land vehicles
Landscapes
- Engineering & Computer Science (AREA)
- Automation & Control Theory (AREA)
- Aviation & Aerospace Engineering (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Traffic Control Systems (AREA)
Description
走行管理装置は、
車両に搭載された認識センサからセンサ情報を順次取得することと、
順次取得したセンサ情報に基づいて、車両の周囲に存在する物標の将来時点での位置を表す予測情報を順次生成することと、
遠隔支援者に遠隔支援要求を送信することと、
遠隔支援要求に応じた遠隔支援者からの遠隔支援を受信することと、
遠隔支援を受信した時点以降の判定時点に取得されるセンサ情報から得られる物標の位置と、判定時点を上記将来時点とする予測情報から得られる物標の位置が一致していることの確認を受けて、遠隔支援に従って車両を自律走行させることと、を実行するように構成される。
走行管理方法は、
車両に搭載された認識センサからセンサ情報を順次取得することと、
順次取得したセンサ情報に基づいて、車両の周囲に存在する物標の将来時点での位置を表す予測情報を順次生成することと、
遠隔支援者に遠隔支援要求を送信することと、
遠隔支援要求に応じた遠隔支援者からの遠隔支援を受信することと、
遠隔支援を受信した時点以降の判定時点に取得されるセンサ情報から得られる物標の位置と、判定時点を上記将来時点とする予測情報から得られる物標の位置が一致していることの確認を受けて、遠隔支援に従って車両を自律走行させることと、を含む。
本開示の実施形態に係る走行管理装置は、遠隔支援システムによって支援される自動運転車両の走行を管理する。遠隔支援システムの構成は図1を用いて説明される。遠隔支援システム100は自律走行機能を有する自動運転車両20の自動運転を遠隔支援者40の遠隔操作によって支援するシステムである。遠隔支援者40は自動運転車両20を遠隔支援するオペレータであり、遠隔オペレータとも呼ばれる。自動運転車両20の自動運転レベルとしては、例えば、レベル4又はレベル5が想定される。以下、自動運転車両20を単に車両20と呼ぶ。
遠隔支援の概要について、車両20が交差点を右折する場面を例に挙げて説明する。図4には、車両20の時刻t-x及び時刻t-yにおける様子が図示されている。車両20の周囲の移動体として、交差点周辺には交差車線を直進中の車両50、交差点を右折中の車両60、及び歩行者70が存在する。
交通状況の一致及び不一致の判断には予測情報が用いられる。予測情報は、走行管理装置によって生成される、車両20の周囲に存在する移動体の将来の位置を表した情報である。予測情報は、認識センサから順次取得されるセンサ情報に基づいて順次生成される。認識センサによって検出され、走行管理装置21による予測情報の生成の対象となる移動体は物標とも呼ばれる。車両、歩行者、自転車など、車両20の周囲に存在する任意の移動体が物標となり得る。
4-1.概要
次に、遠隔支援の受信時点と遠隔支援要求の送信時点とにおける交通状況の一致又は不一致の判断について説明する。遠隔支援を受信した場合、走行管理装置21は、遠隔支援の受信時点における物標の位置をセンサ情報から得る。以下、遠隔支援の受信時点における物標の位置を実際位置という。また、走行管理装置21は、メモリ21bに一時的に記憶されている予測情報の中から、遠隔支援要求の送信時点において予測された遠隔支援の受信時点における物標の位置を取得する。以下、予測情報から得られる物標の位置を予測位置という。走行管理装置21は、物標の実際位置と物標の予測位置が一致しているときは交通状況が一致していると判断し、物標の実際位置と物標の予測位置が一致していないときは交通状況が一致していない、つまり遠隔支援要求の送信時点から遠隔支援の受信時点までの間に交通状況が変化していると判断する。
交通状況の一致又は不一致の判断は、次のように行われてもよい。走行管理装置21は、遠隔支援の受信時点での物標の実際位置と遠隔支援要求の送信時点で予測された物標の予測位置を比較して、一致度合いを示す値を算出する。そして、一致度合いを示す値が閾値以上の場合に交通状況が一致していると判断し、閾値未満の場合に交通状況が一致していないと判断する。ここで、遠隔支援受信時と遠隔支援要求送信時とにおける交通状況の一致度合いを示す値を一致性Xとする。一致性Xの計算方法の例を説明する。
走行管理装置21が備える機能について、図9を用いて説明する。それぞれの機能部は、プロセッサ21aがプログラム21cを実行することにより実現される。
6-1.1つ目の例
遠隔支援が要求される場面の例として、交差点への進入時に走行管理装置21が行う処理について説明する。図10は走行管理装置21によって行われる処理の一例を示すフローチャートである。走行管理装置21のメモリ21bに記憶されたプログラム21cは、図10のフローチャートに示される一連の処理をプロセッサ21aに実行させる。
図11は、交差点への進入時に走行管理装置21によって行われる処理の別の例を示すフローチャートである。走行管理装置21のメモリ21bに記憶されたプログラム21cは、図11のフローチャートに示される一連の処理をプロセッサ21aに実行させる。
以上の説明では、走行管理装置21は、遠隔支援を受信した時点を判定時点として、遠隔支援要求を送信した時点との交通状況の一致又は不一致についての判定を行った。ただし、走行管理装置21が交通状況の一致又は不一致についての判定を行う時点は、遠隔支援の受信時点でなくてもよい。例えば、走行管理装置21が遠隔支援要求を送信してから予め決められた所定の時間が経過した時点で、遠隔支援要求を送信した時点との交通状況の一致又は不一致についての判定が行われてもよい。この場合は、例えば、所定の時間は車両20と遠隔支援端末30との間に発生する遅延の平均時間や最大時間とすることが想定される。
8-1.1つ目の変形例
図12は、1つ目の変形例における走行管理装置21の構成の例を示す。1つ目の変形例においては、走行管理装置21は、図9で説明した各機能部に加えて、画像処理部210を備える。画像処理部210は、センサ情報に含まれるカメラ画像に物標についての情報が重ねて投影されるようにカメラ画像を処理する機能部である。処理された情報は遠隔支援端末30に送信され、遠隔支援要求部205が送信する情報とともに、或いは遠隔支援要求部205が送信する情報に代えて表示装置32に表示される。
2つ目の変形例は、車両20の交差点への進入に際して遠隔支援が行われる場合に取り得る変形例である。たとえ交差点への進入開始時に遠隔支援が有効と判断されていたとしても、交差点進入後に交通状況が変化したと判断される場合には、遠隔支援者40が遠隔支援時には意図していなかった状況が新たに発生している可能性がある。そこで、走行管理装置21は、交通状況の一致又は不一致の判断を、遠隔支援受信時だけでなく、車両20の交差点への進入後も継続して行う。つまり、交差点への進入後も所定の周期で交通状況の一致又は不一致の判断が繰り返される。なお、このとき、物標の実際位置と比較される予測位置は、判定時点よりも所定時間だけ前の時点に生成された予測情報から得られるものであってもよいし、遠隔支援要求送信時点或いは遠隔支援受信時点に生成された予測情報から得られるものであってもよい。
3つ目の変形例では、交通状況の一致の判定の際に、物標の実際位置と予測位置との比較ではなく、予測位置同士の比較が行われる。比較されるのは、未来の同じ時点を予測する2つの予測位置である。1つは遠隔支援要求送信時に生成された予測情報から得られる予測位置であり、もう1つは遠隔支援受信時に生成される予測情報から得られる予測位置である。未来の同じ時点は、例えば、判定時点よりも所定時間だけ進んだ時点であってもよいし、車両20が道路上のある地点に到達すると予想される時点であってもよい。例えば、交差点通過時に遠隔支援が行われる場合は、車両20が交差点の中央に到達すると予想される時点や、交差点を通過し終わると予想される時点が未来の同じ時点とされてもよい。このとき、交通状況一致判断部207は、走行計画生成部208から車両20が道路上のある地点に到達するまでの予測時間を取得することで、未来の同じ時点をどの時点とするか決定することができる。
以上に説明したように、本開示の実施形態における走行管理装置は、遠隔支援を受け取ったら、遠隔支援受信時における交通状況が遠隔支援要求送信時の交通状況と一致していることの確認を受けて、遠隔支援に従った車両の制御を実行する。これにより、遅延による状況の変化によって有効でなくなった遠隔支援に従って車両が走行することを防ぎ、車両の走行の安全性を高めることができる。
20 自動運転車両
21 走行管理装置
21a プロセッサ
21b メモリ
21c プログラム
22 外部センサ
23 内部センサ
24 アクチュエータ
25 通信装置
30 遠隔支援端末
31 コンピュータ
31a プロセッサ
31b メモリ
31c プログラム
32 表示装置
33 入力装置
35 通信装置
40 遠隔支援者
50 車両
60 車両
70 歩行者
80 歩行者
100 遠隔支援システム
201 物標検出部
202 予測部
203 予測結果記憶部
204 判断部
205 遠隔支援要求部
206 遠隔支援受信部
207 交通状況一致判断部
208 走行計画生成部
209 車両制御部
210 画像処理部
Claims (4)
- 自律走行機能を有する車両の走行を管理する走行管理装置であって、
前記車両に搭載された認識センサからセンサ情報を順次取得することと、
順次取得した前記センサ情報に基づいて、前記車両の周囲に存在する物標の将来時点での位置を表す予測情報を順次生成することと、
遠隔支援者に遠隔支援要求を送信することと、
前記遠隔支援要求に応じた前記遠隔支援者からの遠隔支援を受信することと、
前記遠隔支援を受信した時点以降の判定時点に取得されるセンサ情報から得られる物標の位置と、前記遠隔支援要求を送信した時点で生成された前記判定時点を前記将来時点とする予測情報から得られる物標の位置が一致していることの確認を受けて、前記遠隔支援に従って前記車両を自律走行させることと、を実行するように構成されている
ことを特徴とする走行管理装置。 - 請求項1に記載の走行管理装置であって、
前記判定時点は、前記遠隔支援を受信した時点である
ことを特徴とする走行管理装置。 - 自律走行機能を有する車両の走行を管理する走行管理方法であって、
前記車両に搭載された認識センサからセンサ情報を順次取得することと、
順次取得した前記センサ情報に基づいて、前記車両の周囲に存在する物標の将来時点での位置を表す予測情報を順次生成することと、
遠隔支援者に遠隔支援要求を送信することと、
前記遠隔支援要求に応じた前記遠隔支援者からの遠隔支援を受信することと、
前記遠隔支援を受信した時点以降の判定時点に取得されるセンサ情報から得られる物標の位置と、前記遠隔支援要求を送信した時点で生成された前記判定時点を前記将来時点とする予測情報から得られる物標の位置が一致していることの確認を受けて、前記遠隔支援に従って前記車両を自律走行させることと、を含む
ことを特徴とする走行管理方法。 - 自律走行機能を有する車両の走行を管理するためのプログラムであって、
前記車両に搭載された認識センサからセンサ情報を順次取得することと、
順次取得した前記センサ情報に基づいて、前記車両の周囲に存在する物標の将来時点での位置を表す予測情報を順次生成することと、
遠隔支援者に遠隔支援要求を送信することと、
前記遠隔支援要求に応じた前記遠隔支援者からの遠隔支援を受信することと、
前記遠隔支援を受信した時点以降の判定時点に取得されるセンサ情報から得られる物標の位置と、前記遠隔支援要求を送信した時点で生成された前記判定時点を前記将来時点とする予測情報から得られる物標の位置が一致していることの確認を受けて、前記遠隔支援に従って前記車両を自律走行させることと、をコンピュータに実行させるように構成される
ことを特徴とするプログラム。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2022132681A JP7652154B2 (ja) | 2022-08-23 | 2022-08-23 | 走行管理装置、走行管理方法、プログラム |
| US18/352,481 US20240069541A1 (en) | 2022-08-23 | 2023-07-14 | Apparatus and method for managing travel of vehicle having autonomous travel function, and non-transitory computer-readable storage medium |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2022132681A JP7652154B2 (ja) | 2022-08-23 | 2022-08-23 | 走行管理装置、走行管理方法、プログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2024030111A JP2024030111A (ja) | 2024-03-07 |
| JP7652154B2 true JP7652154B2 (ja) | 2025-03-27 |
Family
ID=90000299
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2022132681A Active JP7652154B2 (ja) | 2022-08-23 | 2022-08-23 | 走行管理装置、走行管理方法、プログラム |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US20240069541A1 (ja) |
| JP (1) | JP7652154B2 (ja) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2018002985A1 (ja) | 2016-06-27 | 2018-01-04 | 日産自動車株式会社 | 物体追跡方法及び物体追跡装置 |
| JP2019513617A (ja) | 2016-04-07 | 2019-05-30 | ロベルト・ボッシュ・ゲゼルシャフト・ミト・ベシュレンクテル・ハフツングRobert Bosch Gmbh | 車両を運転する方法 |
| US20200346641A1 (en) | 2019-04-30 | 2020-11-05 | Retrospect Technology, LLC | Operational Risk Assessment for Autonomous Vehicle Control |
| JP2021033612A (ja) | 2019-08-23 | 2021-03-01 | トヨタ自動車株式会社 | 車両遠隔指示システム |
-
2022
- 2022-08-23 JP JP2022132681A patent/JP7652154B2/ja active Active
-
2023
- 2023-07-14 US US18/352,481 patent/US20240069541A1/en active Pending
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2019513617A (ja) | 2016-04-07 | 2019-05-30 | ロベルト・ボッシュ・ゲゼルシャフト・ミト・ベシュレンクテル・ハフツングRobert Bosch Gmbh | 車両を運転する方法 |
| WO2018002985A1 (ja) | 2016-06-27 | 2018-01-04 | 日産自動車株式会社 | 物体追跡方法及び物体追跡装置 |
| US20200346641A1 (en) | 2019-04-30 | 2020-11-05 | Retrospect Technology, LLC | Operational Risk Assessment for Autonomous Vehicle Control |
| JP2021033612A (ja) | 2019-08-23 | 2021-03-01 | トヨタ自動車株式会社 | 車両遠隔指示システム |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2024030111A (ja) | 2024-03-07 |
| US20240069541A1 (en) | 2024-02-29 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN112660156B (zh) | 车辆控制系统 | |
| CN110281930B (zh) | 车辆控制装置、车辆、车辆控制方法以及存储介质 | |
| US11970186B2 (en) | Arithmetic operation system for vehicles | |
| CN108986540B (zh) | 车辆控制系统和方法、以及行驶辅助服务器 | |
| US20200339128A1 (en) | Vehicle control apparatus | |
| CN111727145B (zh) | 车辆控制系统、车辆控制方法及存储介质 | |
| US20210403037A1 (en) | Arithmetic operation system for vehicles | |
| CN112660150A (zh) | 车辆控制系统 | |
| US10803307B2 (en) | Vehicle control apparatus, vehicle, vehicle control method, and storage medium | |
| CN110077395A (zh) | 自动驾驶系统 | |
| CN107004368A (zh) | 车辆的行驶控制装置、行驶控制方法以及行驶控制程序 | |
| US12242266B2 (en) | Remote assistance method, remote assistance system, and non-transitory computer-readable storage medium | |
| CN110036426A (zh) | 控制装置和控制方法 | |
| CN113899307B (zh) | 处理装置、处理方法及存储介质 | |
| CN115175837B (zh) | 停车辅助装置以及停车辅助方法 | |
| CN111373456A (zh) | 车辆、信息处理装置及它们的控制方法以及系统 | |
| JP7559677B2 (ja) | 遠隔操作依頼装置、遠隔操作依頼システム、遠隔操作依頼方法、及び遠隔操作依頼プログラム | |
| CN115716473B (zh) | 车辆控制装置、车辆控制方法及存储介质 | |
| CN110281925B (zh) | 行驶控制装置、车辆以及行驶控制方法 | |
| JP7754034B2 (ja) | 車両制御システム | |
| CN114954515B (zh) | 远程支持系统、远程支持方法以及非暂时性存储介质 | |
| US20230100834A1 (en) | Vehicle collision avoidance assist apparatus and vehicle collision avoidance assist program | |
| US20220342417A1 (en) | Remote function selection device | |
| JP7652154B2 (ja) | 走行管理装置、走行管理方法、プログラム | |
| US20210312814A1 (en) | Vehicle, device, and method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20240305 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20241031 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20241203 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20250128 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20250212 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20250225 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7652154 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |