Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP6413898B2 - 歩行者判定装置 - Google Patents
[go: Go Back, main page]

JP6413898B2 - 歩行者判定装置 - Google Patents

歩行者判定装置 Download PDF

Info

Publication number
JP6413898B2
JP6413898B2 JP2015075826A JP2015075826A JP6413898B2 JP 6413898 B2 JP6413898 B2 JP 6413898B2 JP 2015075826 A JP2015075826 A JP 2015075826A JP 2015075826 A JP2015075826 A JP 2015075826A JP 6413898 B2 JP6413898 B2 JP 6413898B2
Authority
JP
Japan
Prior art keywords
target
likelihood
pedestrian
unit
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015075826A
Other languages
English (en)
Other versions
JP2016197278A (ja
Inventor
崇弘 馬場
崇弘 馬場
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Corp
Original Assignee
Denso Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Corp filed Critical Denso Corp
Priority to JP2015075826A priority Critical patent/JP6413898B2/ja
Priority to US15/562,398 priority patent/US10482332B2/en
Priority to PCT/JP2016/060955 priority patent/WO2016159364A1/ja
Publication of JP2016197278A publication Critical patent/JP2016197278A/ja
Application granted granted Critical
Publication of JP6413898B2 publication Critical patent/JP6413898B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/02Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
    • G01S7/41Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
    • G01S7/411Identification of targets based on measurements of radar reflectivity
    • G01S7/412Identification of targets based on measurements of radar reflectivity based on a comparison between measured values and known or stored values
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60TVEHICLE BRAKE CONTROL SYSTEMS OR PARTS THEREOF; BRAKE CONTROL SYSTEMS OR PARTS THEREOF, IN GENERAL; ARRANGEMENT OF BRAKING ELEMENTS ON VEHICLES IN GENERAL; PORTABLE DEVICES FOR PREVENTING UNWANTED MOVEMENT OF VEHICLES; VEHICLE MODIFICATIONS TO FACILITATE COOLING OF BRAKES
    • B60T7/00Brake-action initiating means
    • B60T7/12Brake-action initiating means for automatic initiation; for initiation not subject to will of driver or passenger
    • B60T7/22Brake-action initiating means for automatic initiation; for initiation not subject to will of driver or passenger initiated by contact of vehicle, e.g. bumper, with an external object, e.g. another vehicle, or by means of contactless obstacle detectors mounted on the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60TVEHICLE BRAKE CONTROL SYSTEMS OR PARTS THEREOF; BRAKE CONTROL SYSTEMS OR PARTS THEREOF, IN GENERAL; ARRANGEMENT OF BRAKING ELEMENTS ON VEHICLES IN GENERAL; PORTABLE DEVICES FOR PREVENTING UNWANTED MOVEMENT OF VEHICLES; VEHICLE MODIFICATIONS TO FACILITATE COOLING OF BRAKES
    • B60T8/00Arrangements for adjusting wheel-braking force to meet varying vehicular or ground-surface conditions, e.g. limiting or varying distribution of braking force
    • B60T8/17Using electrical or electronic regulation means to control braking
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/86Combinations of radar systems with non-radar systems, e.g. sonar, direction finder
    • G01S13/867Combination of radar systems with cameras
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/166Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60TVEHICLE BRAKE CONTROL SYSTEMS OR PARTS THEREOF; BRAKE CONTROL SYSTEMS OR PARTS THEREOF, IN GENERAL; ARRANGEMENT OF BRAKING ELEMENTS ON VEHICLES IN GENERAL; PORTABLE DEVICES FOR PREVENTING UNWANTED MOVEMENT OF VEHICLES; VEHICLE MODIFICATIONS TO FACILITATE COOLING OF BRAKES
    • B60T2201/00Particular use of vehicle brake systems; Special systems using also the brakes; Special software modules within the brake system controller
    • B60T2201/02Active or adaptive cruise control system; Distance control
    • B60T2201/022Collision avoidance systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60TVEHICLE BRAKE CONTROL SYSTEMS OR PARTS THEREOF; BRAKE CONTROL SYSTEMS OR PARTS THEREOF, IN GENERAL; ARRANGEMENT OF BRAKING ELEMENTS ON VEHICLES IN GENERAL; PORTABLE DEVICES FOR PREVENTING UNWANTED MOVEMENT OF VEHICLES; VEHICLE MODIFICATIONS TO FACILITATE COOLING OF BRAKES
    • B60T2210/00Detection or estimation of road or environment conditions; Detection or estimation of road shapes
    • B60T2210/30Environment conditions or position therewithin
    • B60T2210/32Vehicle surroundings
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60YINDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
    • B60Y2400/00Special features of vehicle units
    • B60Y2400/30Sensors
    • B60Y2400/301Sensors for position or displacement
    • B60Y2400/3015Optical cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60YINDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
    • B60Y2400/00Special features of vehicle units
    • B60Y2400/30Sensors
    • B60Y2400/301Sensors for position or displacement
    • B60Y2400/3017Radars
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/93185Controlling the brakes

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Electromagnetism (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Traffic Control Systems (AREA)
  • Radar Systems Or Details Thereof (AREA)

Description

本発明は歩行者判定装置に関する。
従来、自車両の前方に位置する物標を検出し、その物標と自車両との衝突可能性が高いと判断した場合、衝突を回避するための処理(例えば、警報、自動ブレーキ等)を実行するプリクラッシュセーフティシステム(PCS)が知られている。
市街地等の歩行者が多いところで、全ての歩行者に対し、一律にPCSを動作させると、自車両の前方を横断する意思がなく、単に横断方向に少し移動しただけである歩行者に対し、警報等を行ってしまうことになる。そのため、歩行者が自車両の前方を横断しようとしているか否かを精度よく判定し、その判定結果に応じてPCSの動作条件を変更することが求められている。特許文献1記載の技術は、物標(歩行者)の移動履歴に基づき、歩行者が自車両の前方を横断しようとしているか否かを判定する。
特開2014−197325号公報
しかしながら、自車両の周囲の環境等によっては、歩行者が自車両の前方を横断しようとしているか否かを必ずしも精度よく判定できないことがあった。本発明は、こうした問題にかんがみてなされたものであり、歩行者が自車両の前方を横断しようとしているか否かを精度よく判定できる歩行者判定装置を提供することを目的としている。
本発明の歩行者判定装置は、レーダを用いて物標を検出する物標検出ユニットと、物標検出ユニットが検出した物標について、自車両の前方を横断する歩行者である尤度を算出する歩行者らしさ算出ユニットと、前記尤度が予め設定された閾値以上である場合、物標を、前記歩行者と判定する歩行者判定ユニットと、を備え、歩行者らしさ算出ユニットは、物標が一定間隔で配列されている物標群の一部である場合、それ以外の場合よりも、その物標の前記尤度を小さくする。
本発明の歩行者判定装置は、一定間隔で配列されている物標群の一部である物標については、自車両の前方を横断する歩行者である尤度を小さくする。そのことにより、道路に沿って一定間隔で設けられたポール等を、自車両の前方を横断する歩行者と判定してしまうことを抑制できる。その結果、本発明の歩行者判定装置は、歩行者が自車両の前方を横断しようとしているか否かを精度よく判定することができる。
制御ECU1と、それに関連する構成とを表すブロック図である。 制御ECU1が実行する処理を表すフローチャートである。 物標群33の例を表す説明図である。 オプティカルフロー41の取得例を表す説明図である。 物標38の横方向での移動速度Vを表す説明図である。
本発明の実施形態を図面に基づき説明する。
<第1の実施形態>
1.制御ECU1等の構成
制御ECU1と、それに関連する構成とを図1に基づき説明する。制御ECU1は歩行者判定装置の一例である。制御ECU1は車両に搭載される車載装置である。以下では、制御ECU1を搭載する車両を自車両とする。制御ECU1は、CPU、RAM、ROM等を備える公知のコンピュータである。制御ECU1は、ROMに記憶したプログラムにより、後述する処理を実行する。
制御ECU1は、機能的に、物標検出ユニット3、歩行者らしさ算出ユニット5、歩行者判定ユニット7、画像取得ユニット9、画像認識ユニット11、一致度取得ユニット13、オプティカルフロー取得ユニット15、移動速度取得ユニット17、移動量取得ユニット19、ブレーキ実行条件設定ユニット21、及びブレーキ実行判断ユニット22を備える。各ユニットの機能は後述する。
自車両は、制御ECU1に加えて、画像センサ23、ミリ波レーダ25、及びブレーキECU27を備える。
画像センサ23は、自車両の前方(進行方向)の風景を所定の周期ごとに撮影し、画像データを生成する。ミリ波レーダ25は、周波数変調されたミリ波帯のレーダ波を送受信することにより、自車両前方の物標(例えば、他の車両、歩行者、路側物、障害物等)を検出する。また、ミリ波レーダ25は、自車両から物標までの距離、自車両を基準とする物標の方位、及び自車両を基準とする物標の相対速度を取得可能である。
ブレーキECU27は、CPU、RAM、ROM等を備える公知のコンピュータである。ブレーキECU27は、ROMに記憶されたプログラムにより、種々の処理を実行する。その処理の1つとして、ブレーキECU27は、後述する実行指示を制御ECU1から受信したとき、自動ブレーキの処理を行う。
2.制御ECU1が実行する処理
制御ECU1が所定時間ごとに繰り返し実行する処理を図2〜図5に基づき説明する。図2のステップ1では、物標検出ユニット3が、ミリ波レーダ25を用いて、自車両の前方に存在する物標を検出する。また、自車両から物標までの距離、自車両を基準とする物標の方位、及び自車両を基準とする物標の相対速度を取得する。
ステップ2では、歩行者らしさ算出ユニット5が、前記ステップ1で検出した物標について、以下のようにして反射波に関する、歩行者である尤度(以下では反射波尤度とする)を算出する。
歩行者らしさ算出ユニット5は、前記ステップ1で物標を検出したときの反射波(ミリ波レーダ25が送出したレーダ波が物標で反射した電波)の強度、及び反射波のゆらぎ(時間の経過にともない反射波の強度が変動する程度)の大きさを取得する。
歩行者らしさ算出ユニット5は、反射波の強度、及びゆらぎの大きさを入力すると反射波尤度を出力するマップを予め備えている。このマップに、上記のように取得した反射の強度及びゆらぎの大きさを入力し、反射波尤度を算出する。
上記のように算出される、反射波尤度は、反射波の強度が予め設定された閾値以下である場合は、それ以外の場合よりも大きい。また、反射波尤度は、反射波におけるゆらぎの大きさが予め設定された閾値以上である場合は、それ以外の場合よりも大きい。
なお、反射波尤度は、物標が自車両の前方を横断する歩行者であることの確からしさ(尤度)を表すパラメータである。反射波尤度は正の数であり、その値が大きいほど、物標が自車両の前方を横断する歩行者であることの確からしさが大きい。
ステップ3では、歩行者らしさ算出ユニット5が、前記ステップ1で検出した物標について、以下のようにして配列に関する、歩行者である尤度(以下では配列尤度とする)を算出する。
歩行者らしさ算出ユニット5は、前記ステップ1において、一定間隔で配列されている複数の物標(以下、物標群とする)を検出し、配列尤度を算出しようとしている物標が、その物標群の一部であるか否かを判断する。物標群の例を図3に示す。この例では、自車両29の前方に、一定間隔で配列された複数の物標31から成る物標群33が存在している。物標群33としては、例えば、道路に沿って一定間隔で設けられたポールの列等が挙げられる。
配列尤度を算出しようとしている物標が物標群の一部である場合、歩行者らしさ算出ユニット5は、その物標における、配列尤度の値をA1とする。一方、配列尤度を算出しようとしている物標が物標群の一部ではない場合、歩行者らしさ算出ユニット5は、その物標における、配列尤度の値をA2とする。ここで、A1、A2は定数であり、それらの大小関係は、0<A1<A2である。
なお、配列尤度は、物標が自車両の前方を横断する歩行者であることの確からしさを表すパラメータである。配列尤度は正の数であり、その値が大きいほど、物標が自車両の前方を横断する歩行者であることの確からしさが大きい。
ステップ4では、画像取得ユニット9が、画像センサ23を用いて、自車両前方の画像を取得する。
ステップ5では、画像認識ユニット11が、前記ステップ4で取得した画像において、周知の画像認識技術により、物標を認識する。物標の認識は、物標の種類ごとに予め用意された辞書とのマッチングにより行われる。辞書には、歩行者用の辞書、車両用の辞書、路側物用の辞書等がある。
ステップ6では、一致度取得ユニット13及び歩行者らしさ算出ユニット5が、前記ステップ1で検出した物標について、以下のようにして一致度に関する、歩行者である尤度(以下では一致度尤度とする)を算出する。
まず、一致度取得ユニット13は、前記ステップ5で認識された物標のうち、前記ステップ1で検出した物標と同一のもの(以下では同一物標とする)を特定する。このとき、一致度取得ユニット13は、前記ステップ5で認識された物標のうち、自車両からの距離及び方位が前記ステップ1で検出された物標と同一又は近似している物標を、同一物標とすることができる。そして、一致度取得ユニット13は、同一物標と歩行者用の辞書とのマッチングにおける一致度を取得する。ここで、一致度とは、物標と辞書とのマッチングにおける一致の程度を意味する。同一物標と辞書とが共通する特徴を多く有するほど、一致度は高くなる。
次に、歩行者らしさ算出ユニット5は、上記のように取得された一致度から、一致度尤度を算出する。すなわち、歩行者らしさ算出ユニット5は、一致度を入力すると一致度尤度を出力するマップを予め備えており、このマップに、上記のように取得した一致度を入力し、一致度尤度を算出する。このように算出される、一致度尤度は、一致度が高いほど大きい。
なお、一致度尤度は、物標が自車両の前方を横断する歩行者であることの確からしさを表すパラメータである。一致度尤度は正の数であり、その値が大きいほど、物標が自車両の前方を横断する歩行者であることの確からしさが大きい。
ステップ7では、オプティカルフロー取得ユニット15が、前記ステップ4で取得した画像上で同一物標における特徴点を設定し、その特徴点のオプティカルフロー(画像上での見かけの動き)を取得する。オプティカルフローは、時間差をおいて取得された複数の画像において、特徴点を追跡することで得られる。特徴点は、画像における物標のエッジ(隣接する画素間で輝度の差が所定値以上となる部位)とすることができる。
オプティカルフローの取得例を図4に示す。この例では、画像35において、同一物標(歩行者)37が認識されている。そして、同一物標37における特徴点39のオプティカルフロー41が取得されている。
ステップ8では、歩行者らしさ算出ユニット5が、前記ステップ1で検出した物標について、以下のようにしてオプティカルフローに関する、歩行者である尤度(以下ではオプティカルフロー尤度とする)を算出する。
歩行者らしさ算出ユニット5は、前記ステップ7で取得したオプティカルフローが、画像上での横方向の動きであるか否かを判断する。オプティカルフローが画像上での横方向の動きである場合、歩行者らしさ算出ユニット5は、前記ステップ1で検出した物標におけるオプティカルフロー尤度の値をB1とする。一方、オプティカルフローが画像上での横方向の動きではない場合、歩行者らしさ算出ユニット5は、その物標におけるオプティカルフロー尤度の値をB2とする。ここで、B1、B2は定数であり、それらの大小関係は、0<B2<B1である。
なお、オプティカルフロー尤度は、物標が自車両の前方を横断する歩行者であることの確からしさを表すパラメータである。オプティカルフロー尤度は正の数であり、その値が大きいほど、物標が自車両の前方を横断する歩行者であることの確からしさが大きい。
ステップ9では、移動速度取得ユニット17が、前記ステップ1で検出した物標について横方向での移動速度を取得するとともに、移動量取得ユニット19が、前記ステップ1で検出した物標について横方向での移動量を取得する。
ここで、図5に基づき、横方向での移動速度と横方向での移動量を説明する。前記ステップ1で検出した物標38の相対速度がVであるとする。横方向での移動速度Vは、相対速度Vのうち、自車両29の車幅方向における成分である。また、横方向での移動量は、移動速度Vの、所定の期間における積分量である。
移動速度取得ユニット17は、ミリ波レーダ25の検出結果から、横方向での移動速度と横方向での移動量を取得することができる。また、移動速度取得ユニット17は、画像センサ23により取得した複数の画像から、横方向での移動速度と横方向での移動量を取得してもよい。
ステップ10では、歩行者らしさ算出ユニット5が、前記ステップ1で検出した物標について、以下のようにして横方向での移動速度に関する、歩行者である尤度(以下では移動速度尤度とする)を算出する。
歩行者らしさ算出ユニット5は、前記ステップ9で取得した横方向での移動速度が、予め設定された範囲内であるか否かを判断する。なお、この範囲は、自車両の前方を横断する歩行者の一般的な速度を含む範囲である。
横方向での移動速度が上記の範囲内である場合、歩行者らしさ算出ユニット5は、前記ステップ1で検出した物標における移動速度尤度の値をC1とする。一方、横方向での移動速度が上記の範囲外である場合、歩行者らしさ算出ユニット5は、その物標における移動速度尤度の値をC2とする。ここで、C1、C2は定数であり、それらの大小関係は、0<C2<C1である。
なお、移動速度尤度は、物標が自車両の前方を横断する歩行者であることの確からしさを表すパラメータである。移動速度尤度は正の数であり、その値が大きいほど、物標が自車両の前方を横断する歩行者であることの確からしさが大きい。
ステップ11では、歩行者らしさ算出ユニット5が、前記ステップ1で検出した物標について、以下のようにして横方向での移動量に関する、歩行者である尤度(以下では移動量尤度とする)を算出する。
歩行者らしさ算出ユニット5は、前記ステップ9で取得した横方向での移動量が、予め設定された範囲内であるか否かを判断する。なお、この範囲は、自車両の前方を横断する歩行者の一般的な移動量を含む範囲である。
横方向での移動量が上記の範囲内である場合、歩行者らしさ算出ユニット5は、前記ステップ1で検出した物標における移動量尤度の値をD1とする。一方、横方向での移動量が上記の範囲外である場合、歩行者らしさ算出ユニット5は、その物標における移動量尤度の値をD2とする。ここで、D1、D2は定数であり、それらの大小関係は、0<D2<D1である。
なお、移動量尤度は、物標が自車両の前方を横断する歩行者であることの確からしさを表すパラメータである。移動量尤度は正の数であり、その値が大きいほど、物標が自車両の前方を横断する歩行者であることの確からしさが大きい。
ステップ12では、歩行者らしさ算出ユニット5が、前記ステップ2で算出した反射波尤度と、前記ステップ3で算出した配列尤度と、前記ステップ6で算出した一致度尤度と、前記ステップ8で算出したオプティカルフロー尤度と、前記ステップ10で算出した移動速度尤度と、前記ステップ11で算出した移動量尤度とを乗算し、総合した、歩行者である尤度(以下では総合尤度とする)を算出する。
この総合尤度は、物標をミリ波レーダ25で検出したときの反射波の強度が予め設定された閾値以下である場合は、それ以外の場合よりも大きく、反射波におけるゆらぎの大きさが予め設定された閾値以上である場合は、それ以外の場合よりも大きい。
また、総合尤度は、物標が物標群の一部である場合は、それ以外の場合より小さい。また、総合尤度は、同一物標のマッチングにおける一致度が高いほど大きい。また、総合尤度は、同一物標の特徴点におけるオプティカルフローが画像上での横方向の動きである場合は、それ以外の場合よりも大きい。また、総合尤度は、物標の横方向での移動速度が予め設定された範囲内である場合は、それ以外の場合よりも大きい。また、総合尤度は、物標の横方向での移動量が予め設定された範囲内である場合は、それ以外の場合よりも大きい。
ステップ13では、前記ステップ12で算出した、総合尤度が、予め設定された閾値以上であるか否かを歩行者判定ユニット7が判定する。総合尤度が閾値以上である場合はステップ14に進み、閾値未満である場合はステップ17に進む。
ステップ14では、歩行者判定ユニット7が、前記ステップ1で検出した物標を、自車両の前方を横断する歩行者と判定する。
ステップ15では、ブレーキ実行条件設定ユニット21が、第1のブレーキ実行条件を設定する。この第1のブレーキ実行条件とは、前記ステップ1で検出した物標がその条件を充足していれば、ブレーキECU27に対し、自動ブレーキの実行指示を出力するというものである。第1のブレーキ実行条件は、例えば、衝突余裕時間(TTC)、自車両から物標までの距離、自車両を基準とする物標の方位等に関する条件とすることができる。第1のブレーキ実行条件は、物標が自車両の前方を横断する歩行者である場合に好適な条件である。例えば、第1のブレーキ実行条件は、後述する第2のブレーキ実行条件よりも、充足しにくい条件とすることができる。
ステップ16では、前記ステップ1で検出した物標が、ブレーキ実行条件(前記ステップ15に進んだ場合は第1のブレーキ実行条件、後述するステップ18に進んだ場合は第2のブレーキ実行条件)を充足するか否かを判断し、充足する場合は自動ブレーキの実行指示をブレーキECU27に出力し、充足しない場合は本処理を終了する。
一方、前記ステップ13で否定判断した場合はステップ17に進み、歩行者判定ユニット7が、前記ステップ1で検出した物標を、自車両の前方を横断する歩行者ではないと判定する。
ステップ18では、ブレーキ実行条件設定ユニット21が、第2のブレーキ実行条件を設定する。この第2のブレーキ実行条件とは、前記第1のブレーキ実行条件と同様に、前記ステップ1で検出した物標がその条件を充足していれば、ブレーキECU27に対し、自動ブレーキの実行指示を出力するというものである。第2のブレーキ実行条件は、例えば、TTC、自車両から物標までの距離、自車両を基準とする物標の方位等に関する条件とすることができる。第2のブレーキ実行条件は、自車両の前方を横断する歩行者以外の物標(例えば他の車両等)に対し好適な条件である。
なお、前記ステップ1で複数の物標を検出した場合は、それぞれの物標について前記ステップ2以降の処理を実行する。
3.制御ECU1が奏する効果
(1A)制御ECU1は、一定間隔で配列されている物標群の一部である物標については、配列尤度を小さくする。そのことにより、道路に沿って一定間隔で設けられたポール等を、自車両の前方を横断する歩行者と判定してしまうことを抑制できる。
(1B)制御ECU1は、同一物標と歩行者用辞書とのマッチングにおける一致度が高いほど、ミリ波レーダ25を用いて検出した物標の、一致度尤度を大きくする。そのことにより、物標が自車両の前方を横断する歩行者であるか否かを一層精度よく判定できる。
(1C)制御ECU1は、同一物標のオプティカルフローが画像上での横方向の動きである場合は、それ以外の場合よりも、ミリ波レーダ25を用いて検出した物標のオプティカルフロー尤度を大きくする。オプティカルフローが画像上での横方向の動きであることは、自車両の前方を横断する歩行者に対応する事象である。よって、制御ECU1は、オプティカルフロー尤度を上記のように算出することで、物標が自車両の前方を横断する歩行者であるか否かを一層精度よく判定できる。
(1D)制御ECU1は、ミリ波レーダ25を用いて物標を検出したときのレーダの反射波における強度が予め設定された閾値以下である場合、又は、反射波におけるゆらぎの大きさが予め設定された閾値以上である場合は、それら以外の場合よりも、反射波尤度を大きくする。
反射波の強度が低いことや、反射波におけるゆらぎが大きいことは、自車両の前方を横断する歩行者に対応する事象である。よって、制御ECU1は、反射波尤度を上記のように算出することで、物標が自車両の前方を横断する歩行者であるか否かを一層精度よく判定できる。
(1E)制御ECU1は、物標の横方向での移動速度が予め設定された範囲内である場合、それ以外の場合よりも、その物標の、移動速度尤度を大きくする。
物標の横方向での移動速度が前記範囲内であることは、自車両の前方を横断する歩行者に対応する事象である。よって、制御ECU1は、移動速度尤度を上記のように算出することで、物標が自車両の前方を横断する歩行者であるか否かを一層精度よく判定できる。
(1F)制御ECU1は、物標の横方向での移動量が予め設定された範囲内である場合、それ以外の場合よりも、その物標の、移動量尤度を大きくする。
物標の横方向での移動量が前記範囲内であることは、自車両の前方を横断する歩行者に対応する事象である。よって、制御ECU1は、移動量尤度を上記のように算出することで、物標が自車両の前方を横断する歩行者であるか否かを一層精度よく判定できる。
<その他の実施形態>
以上、本発明の実施形態について説明したが、本発明は上記実施形態に限定されることなく、種々の形態を採り得る。
(1)制御ECU1は、反射波尤度と、配列尤度と、一致度尤度と、オプティカルフロー尤度と、移動速度尤度と、移動量尤度とのうち、選択した1〜5の歩行者である尤度を乗算して、総合尤度を算出してもよい。
例えば、配列尤度を、そのまま、総合尤度とすることができる。また、配列尤度と、一致度尤度とを乗算した値を、総合尤度とすることができる。また、配列尤度と、オプティカルフロー尤度とを乗算した値を、総合尤度とすることができる。また、配列尤度と、一致度尤度と、オプティカルフロー尤度とを乗算した値を、総合尤度とすることができる。
また、制御ECU1は、上述した6つの歩行者である尤度の全部又は一部に加えて、他の歩行者である尤度も乗算して、総合尤度を算出してもよい。
(2)制御ECU1は、乗算以外の方法で、総合尤度を算出してもよい。例えば、上述した6つの歩行者である尤度の全部又は一部を加算して、総合尤度を算出してもよい。また、適宜設定した数式に、上述した6つの歩行者である尤度の全部又は一部を代入して、総合尤度を算出してもよい。
(3)制御ECU1は、ミリ波レーダ25以外のセンサを用いて物標を検出してもよい。例えば、ミリ波以外の波長の電磁波を用いるレーダ、ライダ等を用いることができる。
(4)制御ECU1は、ミリ波レーダ25により検出した物標が一定間隔で配列されている物標群の一部であるか否かを、画像センサ23により取得した画像から判断してもよい。
(5)制御ECU1は、反射波の強度には影響されず、反射波におけるゆらぎの大きさに基づき、反射波尤度を算出してもよい。また、制御ECU1は、反射波におけるゆらぎの大きさには影響されず、反射波の強度に基づき、反射波尤度を算出してもよい。
(6)上記実施形態における1つの構成要素が有する機能を複数の構成要素として分散させたり、複数の構成要素が有する機能を1つの構成要素に統合させたりしてもよい。また、上記実施形態の構成の少なくとも一部を、同様の機能を有する公知の構成に置き換えてもよい。また、上記実施形態の構成の一部を省略してもよい。また、上記実施形態の構成の少なくとも一部を、他の上記実施形態の構成に対して付加又は置換してもよい。なお、特許請求の範囲に記載した文言のみによって特定される技術思想に含まれるあらゆる態様が本発明の実施形態である。
(7)上述した制御ECU1の他、当該制御ECU1を構成要素とするシステム、当該制御ECU1としてコンピュータを機能させるためのプログラム、このプログラムを記録した媒体、歩行者判定方法等、種々の形態で本発明を実現することもできる。
1…制御ECU、3…物標検出ユニット、5…歩行者らしさ算出ユニット、7…歩行者判定ユニット、9…画像取得ユニット、11…画像認識ユニット、13…一致度取得ユニット、15…オプティカルフロー取得ユニット、17…移動速度取得ユニット、19…移動量取得ユニット、21…ブレーキ実行条件設定ユニット、22…ブレーキ実行判断ユニット、23…画像センサ、25…ミリ波レーダ、27…ブレーキECU、29…自車両、31…物標、33…物標群、35…画像、37…同一物標、38…物標、39…特徴点、41…オプティカルフロー

Claims (5)

  1. レーダ(25)を用いて物標を検出する物標検出ユニット(3)と、
    前記物標検出ユニットが検出した物標について、自車両の前方を横断する歩行者である尤度を算出する歩行者らしさ算出ユニット(5)と、
    前記尤度が予め設定された閾値以上である場合、前記物標を前記歩行者と判定する歩行者判定ユニット(7)と、
    自車両前方の画像を取得する画像取得ユニット(9)と、
    前記画像において物標を認識する画像認識ユニット(11)と、
    前記画像認識ユニットで認識した物標のうち、前記物標検出ユニットが検出した物標と同一の物標と、歩行者用辞書とのマッチングにおける一致度を取得する一致度取得ユニット(13)と、
    を備え、
    前記歩行者らしさ算出ユニットは、前記物標検出ユニットが検出した前記物標が一定間隔で配列されている物標群の一部である場合、それ以外の場合よりも、その物標の前記尤度を小さくするとともに、前記一致度が高いほど、前記物標検出ユニットが検出した前記物標の前記尤度を大きくすることを特徴とする歩行者判定装置(1)。
  2. 請求項1記載の歩行者判定装置であって、
    自車両前方の画像を取得する画像取得ユニット(9)と、
    前記画像において物標を認識する画像認識ユニット(11)と、
    前記画像認識ユニットで認識した物標のうち、前記物標検出ユニットが検出した物標と同一の物標における特徴点のオプティカルフローを取得するオプティカルフロー取得ユニット(15)と、
    を備え、
    前記歩行者らしさ算出ユニットは、前記オプティカルフローが前記画像上での横方向の動きである場合は、それ以外の場合よりも、前記物標検出ユニットが検出した物標の前記尤度を大きくすることを特徴とする歩行者判定装置。
  3. 請求項1又は2に記載の歩行者判定装置であって、
    前記歩行者らしさ算出ユニットは、前記レーダの反射波における強度が予め設定された閾値以下である場合、又は、前記反射波におけるゆらぎの大きさが予め設定された閾値以上である場合は、それら以外の場合よりも、前記物標の前記尤度を大きくすることを特徴とする歩行者判定装置。
  4. 請求項1〜のいずれか1項に記載の歩行者判定装置であって、
    前記物標の横方向での移動速度を取得する移動速度取得ユニット(17)を備え、
    前記歩行者らしさ算出ユニットは、前記横方向での移動速度が予め設定された範囲内である場合、それ以外の場合よりも、前記物標の前記尤度を大きくすることを特徴とする歩行者判定装置。
  5. 請求項1〜のいずれか1項に記載の歩行者判定装置であって、
    前記物標の横方向での移動量を取得する移動量取得ユニット(19)を備え、
    前記歩行者らしさ算出ユニットは、前記横方向での移動量が予め設定された範囲内である場合、それ以外の場合よりも、前記物標の前記尤度を大きくすることを特徴とする歩行者判定装置。
JP2015075826A 2015-04-02 2015-04-02 歩行者判定装置 Active JP6413898B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2015075826A JP6413898B2 (ja) 2015-04-02 2015-04-02 歩行者判定装置
US15/562,398 US10482332B2 (en) 2015-04-02 2016-04-01 Pedestrian determining apparatus for determining whether an object is a pedestrian crossing ahead of an own vehicle
PCT/JP2016/060955 WO2016159364A1 (ja) 2015-04-02 2016-04-01 歩行者判定装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015075826A JP6413898B2 (ja) 2015-04-02 2015-04-02 歩行者判定装置

Publications (2)

Publication Number Publication Date
JP2016197278A JP2016197278A (ja) 2016-11-24
JP6413898B2 true JP6413898B2 (ja) 2018-10-31

Family

ID=57005177

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015075826A Active JP6413898B2 (ja) 2015-04-02 2015-04-02 歩行者判定装置

Country Status (3)

Country Link
US (1) US10482332B2 (ja)
JP (1) JP6413898B2 (ja)
WO (1) WO2016159364A1 (ja)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6256239B2 (ja) * 2014-07-25 2018-01-10 株式会社デンソー 歩行者検出装置および歩行者検出方法
US10852418B2 (en) * 2016-08-24 2020-12-01 Magna Electronics Inc. Vehicle sensor with integrated radar and image sensors
JP6717240B2 (ja) 2017-03-08 2020-07-01 株式会社デンソー 物標検出装置
JP2019156180A (ja) * 2018-03-13 2019-09-19 本田技研工業株式会社 車両制御装置、車両制御方法、およびプログラム
DE102020117741A1 (de) * 2020-07-06 2022-01-13 Elmos Semiconductor Se Dopplerbasierte Bestimmung der Geschwindigkeitsrichtung
KR20220010900A (ko) * 2020-07-20 2022-01-27 현대모비스 주식회사 차량용 레이더 장치 및 제어방법
CN113163110B (zh) * 2021-03-05 2022-04-08 北京宙心科技有限公司 一种人流密度分析系统及分析方法
JP7524820B2 (ja) * 2021-04-12 2024-07-30 トヨタ自動車株式会社 降車支援装置
WO2026063199A1 (ja) * 2024-09-20 2026-03-26 住友電気工業株式会社 電波センサ、管理端末、検知方法、およびコンピュータプログラム

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5029436B2 (ja) * 2008-03-12 2012-09-19 オムロン株式会社 横断物体検知装置および横断物体検知方法、並びにプログラム
JP5120627B2 (ja) * 2008-03-26 2013-01-16 トヨタ自動車株式会社 画像処理装置および画像処理プログラム
JP5136504B2 (ja) * 2009-04-02 2013-02-06 トヨタ自動車株式会社 物体識別装置
JP5872764B2 (ja) * 2010-12-06 2016-03-01 富士通テン株式会社 画像表示システム
JP2012203884A (ja) * 2011-03-28 2012-10-22 Toyota Central R&D Labs Inc 飛び出し歩行者判定装置及びプログラム
JP2012229947A (ja) * 2011-04-25 2012-11-22 Denso Corp 物標検出装置、物標検出方法およびプログラム
JP5905846B2 (ja) 2013-03-29 2016-04-20 株式会社日本自動車部品総合研究所 横断判定装置およびプログラム
JP2016124389A (ja) * 2014-12-26 2016-07-11 トヨタ自動車株式会社 車両制動制御装置

Also Published As

Publication number Publication date
JP2016197278A (ja) 2016-11-24
WO2016159364A1 (ja) 2016-10-06
US10482332B2 (en) 2019-11-19
US20180114074A1 (en) 2018-04-26

Similar Documents

Publication Publication Date Title
JP6413898B2 (ja) 歩行者判定装置
JP6717240B2 (ja) 物標検出装置
JP5870908B2 (ja) 車両の衝突判定装置
JP5892129B2 (ja) 道路形状認識方法、道路形状認識装置、プログラムおよび記録媒体
JP6682833B2 (ja) 物体認識アルゴリズムの機械学習のためのデータベース構築システム
CN112660128B (zh) 用于确定自动驾驶车辆的车道变更路径的设备及其方法
US9975550B2 (en) Movement trajectory predicting device and movement trajectory predicting method
JP6212880B2 (ja) 物標認識装置
CN110194162B (zh) 用于基于可用空间信号来检测靠近切入车辆的系统和方法
JP5316572B2 (ja) 物体認識装置
JP5986949B2 (ja) 境界線認識装置
EP3467545A1 (en) Object classification
US20180370531A1 (en) Object detection device and object detection method
JP6544168B2 (ja) 車両制御装置、及び車両制御方法
US20160188984A1 (en) Lane partition line recognition apparatus
EP2894618A1 (en) Speed calculating device and speed calculating method, and collision determination device
US12411235B2 (en) Object detection device, object detection method, and computer-readable storage medium
EP3495222B1 (en) Image-capturing device
US11983937B2 (en) Intersecting road estimation device
EP2720211B1 (en) Other-vehicle detection device and other-vehicle detection method
WO2016158491A1 (ja) 衝突回避支援装置
JP7526858B2 (ja) 測定装置、測定方法およびプログラム
JP2012230604A (ja) データ処理装置
WO2023033040A1 (ja) フレア検出システム、フレア検出装置、フレア検出方法、フレア検出プログラム
US12461225B2 (en) Object detection device and object detection method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170403

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180220

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180320

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180904

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180917

R151 Written notification of patent or utility model registration

Ref document number: 6413898

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250