JP6414540B2 - Object detection device - Google Patents
Object detection device Download PDFInfo
- Publication number
- JP6414540B2 JP6414540B2 JP2015228319A JP2015228319A JP6414540B2 JP 6414540 B2 JP6414540 B2 JP 6414540B2 JP 2015228319 A JP2015228319 A JP 2015228319A JP 2015228319 A JP2015228319 A JP 2015228319A JP 6414540 B2 JP6414540 B2 JP 6414540B2
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- collision
- mirror
- unit
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
- Traffic Control Systems (AREA)
Description
本発明は、車両に搭載された物体検出装置に関するものである。 The present invention relates to an object detection device mounted on a vehicle.
信号のない見通しの悪い交差点やカーブ(ブラインドカーブ)などでは、車、二輪車、自転車、及び歩行者などの物体が突然飛び出してきて、出会い頭の事故が発生するケースがある。このような出会い頭の事故は、一見、防ぐ方法がないよう思われるが、信号のない見通しの悪い交差点やブラインドカーブなどには、カーブミラーが取り付けられてあることが多く、これをドライバが確認するとで事故の軽減が期待できる。 At intersections and curves (blind curves) where there is no signal and there is a bad view, objects such as cars, motorcycles, bicycles, and pedestrians may suddenly jump out, causing encounter accidents. There seems to be no way to prevent such encounter accidents at first glance, but there are often curved mirrors attached to intersections and blind curves where there is no signal and the prospect is bad, and the driver confirms this Can be expected to reduce accidents.
しかし、通常、カーブミラーは、非優先道路を走行している車両のドライバが確認すべきものとの認識が強く、優先道路を走行している車両のドライバが、カーブミラーを確認することは少ない。よって、事故軽減ツールとしてせっかく設けられたカーブミラーが十分に活かされていないという問題がある。 However, in general, it is strongly recognized that the driver of the vehicle traveling on the non-priority road should confirm the curve mirror, and the driver of the vehicle traveling on the priority road rarely confirms the curve mirror. Therefore, there is a problem that the curved mirror provided as an accident mitigation tool is not fully utilized.
また、夜間などで歩行者や無灯火の自転車などが飛び出した場合、カーブミラーが設けられていても、ドライバーはこれらの物体を目視することが困難である場合が多い。ここで、カーブミラーは、何かが飛び出してくる可能性があるから設けられていると考えることができる。そこで、センサにカーブミラーを監視させ、交差点などから飛び出してくる物体との衝突可能性を判定する装置を車両に搭載することは、車両の安全性を確保するうえで有用である。 In addition, when a pedestrian or a lightless bicycle jumps out at night or the like, it is often difficult for the driver to see these objects even if a curved mirror is provided. Here, it can be considered that the curve mirror is provided because something may come out. Therefore, it is useful for ensuring the safety of the vehicle to install a device that monitors the curve mirror and determines the possibility of collision with an object jumping out from an intersection or the like on the vehicle.
例えば、特許文献1は、カーブミラーに超音波を放射し、放射した超音波の周波数と、カーブミラーで反射されて電動車両に向けて帰来してくる超音波の周波数との偏移から別道路を走行する車両を検出する技術を開示する。 For example, Patent Document 1 discloses another road from a shift between the frequency of an ultrasonic wave radiated to a curve mirror and the frequency of the ultrasonic wave reflected by the curve mirror and returning to the electric vehicle. Disclosed is a technique for detecting a vehicle traveling on the road.
ところで、カーブミラーのミラー面と自車との相対的な位置関係によっては、カーブミラーに自車が映り込んでしまうことがある。この場合、カーブミラーに映り込んだ自車が検出対象物として誤検出されるという問題がある。また、このような誤検出をした場合において、自車との衝突可能性を判定しても無駄である。 By the way, depending on the relative positional relationship between the mirror surface of the curved mirror and the own vehicle, the own vehicle may be reflected on the curved mirror. In this case, there is a problem that the own vehicle reflected on the curve mirror is erroneously detected as a detection target. Further, in the case of such erroneous detection, it is useless to determine the possibility of collision with the own vehicle.
しかし、特許文献1では、カーブミラーに自車が映り込んだ場合の対策が何ら講じられていないので、自車を検出対象物として誤検出するという問題を解決できない。 However, in Patent Document 1, since no measures are taken when the vehicle is reflected on the curve mirror, the problem of erroneously detecting the vehicle as a detection target cannot be solved.
本発明の目的は、カーブミラーに自車が映り込んだ場合であっても、自車を検出対象物として検出することを防止できる物体検出装置を提供することである。 An object of the present invention is to provide an object detection device that can prevent the vehicle from being detected as a detection target even when the vehicle is reflected on a curved mirror.
本発明の一態様による物体検出装置は、自車の前方の画像を撮像する画像センサと、
前記画像センサで撮像された画像からカーブミラーを示す画像を抽出し、抽出結果を用いて、実在するカーブミラーの方向を検出するミラー検出部と、
前記ミラー検出部により検出された方向に計測波を照射し、前記カーブミラーに映り込んでいる物体からの反射波を前記カーブミラーを介して受信することで、前記自車から物体までの距離及び前記物体の前記自車に対する相対速度を計測する距離センサと、
前記距離センサによる計測結果を用いて、前記自車と前記物体との衝突可能性を判定する衝突判定部と、
前記自車の速度を検出する車速センサと、
前記距離センサにより計測された相対速度が前記車速センサが検出した速度と同じ速度である場合、前記物体は自車であると判定する自車判定部とを備え、
前記衝突判定部は、前記自車判定部により前記物体が自車であると判定された場合、前記衝突可能性を判定する処理を禁止する。
An object detection device according to an aspect of the present invention includes an image sensor that captures an image in front of the host vehicle,
A mirror detection unit that extracts an image showing a curve mirror from an image captured by the image sensor and detects the direction of the existing curve mirror using the extraction result;
By irradiating the measurement wave in the direction detected by the mirror detection unit and receiving the reflected wave from the object reflected on the curve mirror via the curve mirror, the distance from the own vehicle to the object and A distance sensor for measuring a relative speed of the object with respect to the vehicle;
A collision determination unit that determines the possibility of collision between the host vehicle and the object using the measurement result of the distance sensor;
A vehicle speed sensor for detecting a speed of said vehicle,
When the relative speed measured by the distance sensor is the same speed as the speed detected by the vehicle speed sensor, the vehicle includes a vehicle determination unit that determines that the object is the vehicle.
The collision determination unit prohibits the process of determining the collision possibility when the host vehicle determination unit determines that the object is the host vehicle.
本態様によれば、距離センサは、カーブミラーに映り込んでいる物体からの反射波をカーブミラーを介して受信する。そして、距離センサが計測した、物体の車両に対する相対速度が、車両の速度と同じであれば、カーブミラーに映っている物体は自車と判定される。そのため、本態様によれば、自車が検出対象物として誤検出されることを防止できる。 According to this aspect, the distance sensor receives the reflected wave from the object reflected on the curve mirror via the curve mirror. If the relative speed of the object relative to the vehicle measured by the distance sensor is the same as the speed of the vehicle, the object reflected on the curve mirror is determined as the own vehicle. Therefore, according to this aspect, it is possible to prevent the vehicle from being erroneously detected as a detection target.
更に、カーブミラーに映っている物体が自車と判定された場合、衝突可能性の判定処理が禁止されるので、自車との衝突可能性を判定するといった無駄な処理が発生することを防止できる。 In addition, if the object reflected on the curve mirror is determined to be the host vehicle, the collision possibility determination process is prohibited, preventing unnecessary processing such as determining the possibility of collision with the host vehicle. it can.
上記態様において、前記物体との衝突可能性を報知する報知部と、
前記物体との衝突を回避するための衝突回避制御を前記自車に実行させる車両制御部とを更に備え、
前記報知部は、前記自車判定部により前記物体が自車であると判定された場合、前記報知を禁止し、
前記車両制御部は、前記自車判定部により前記物体が自車であると判定された場合、前記衝突回避制御を禁止してもよい。
In the above aspect, a notification unit that notifies the possibility of collision with the object;
A vehicle control unit that causes the host vehicle to execute collision avoidance control for avoiding a collision with the object;
The notification unit prohibits the notification when the vehicle determination unit determines that the object is the vehicle.
The vehicle control unit may prohibit the collision avoidance control when the vehicle determination unit determines that the object is a vehicle.
本態様によれば、自車判定部によりミラーに映っている物体が自車であると判定された場合、衝突回避制御及び衝突可能性の警報が禁止されるので、ドライバーの運転が妨げられることを防止できる。 According to this aspect, when the vehicle determination unit determines that the object reflected on the mirror is the vehicle, the collision avoidance control and the collision possibility warning are prohibited, so that the driver's driving is hindered. Can be prevented.
上記態様において、前記報知部は、
前記カーブミラーへの注意喚起を促す画像を表示する注意喚起部と、
音声及び映像の少なくとも一方を用いて前記物体との衝突に関する警報を行う警報部とを備え、
前記注意喚起部は、前記自車判定部により前記物体が自車であると判定された場合、前記注意喚起を促す画像を表示し、
前記警報部は、前記自車判定部により前記物体が自車であると判定された場合、前記警報を禁止してもよい。
In the above aspect, the notification unit includes:
An alerting part for displaying an image prompting attention to the curve mirror;
An alarm unit for performing an alarm on a collision with the object using at least one of audio and video,
When the vehicle determination unit determines that the object is the vehicle, the alerting unit displays an image for prompting the alert,
The warning unit may prohibit the warning when the vehicle determination unit determines that the object is a vehicle.
本態様によれば、自車判定部によりミラーに映っている物体が自車であると判定された場合、カーブミラーへの注意喚起を促す画像は表示されるが、音声又は映像を用いた物体との衝突の警報は禁止される。そのため、ドライバーに対して物体への注意喚起を促すことができる一方、ドライバーに対して不必要に警報が行われることを防止できる。その結果、ドライバーの運転への集中力の低下を防止できる。 According to this aspect, when the vehicle determination unit determines that the object reflected in the mirror is the vehicle, an image that prompts attention to the curve mirror is displayed, but an object using sound or video Collision warning is prohibited. Therefore, the driver can be alerted to the object, while the driver can be prevented from being unnecessarily warned. As a result, it is possible to prevent the driver's ability to concentrate on driving.
上記態様において、前記距離センサは、電波式レーダであってもよい。 In the above aspect, the distance sensor may be a radio wave radar.
本態様によれば、電波式レーダを用いて物体が検出されるので、高分解能で物体を検出できる。 According to this aspect, since the object is detected using the radio wave type radar, the object can be detected with high resolution.
上記態様において、前記電波式レーダが放射する前記計測波は、マイクロ波帯からミリ波帯までの周波数帯域内のいずれかの周波数を持っていてもよい。 In the above aspect, the measurement wave radiated by the radio wave radar may have any frequency within a frequency band from a microwave band to a millimeter wave band.
本態様によれば、マイクロ波帯からミリ波帯までの周波数帯域内のいずれかの周波数をもつ計測波を用いて物体が検出されるので、高分解能で物体を検出できる。 According to this aspect, since the object is detected using the measurement wave having any frequency within the frequency band from the microwave band to the millimeter wave band, the object can be detected with high resolution.
上記態様において、前記自車判定部は、前記反射波の強度が所定強度より大きいという条件を更に満たす場合、前記物体は自車と判定してもよい。 In the above aspect, the own vehicle determination unit may determine that the object is the own vehicle when the condition that the intensity of the reflected wave is greater than a predetermined intensity is further satisfied.
自車がカーブミラーに映り込んでいる場合、距離センサはカーブミラーで反射された反射波を直接受信するので、自車がカーブミラーに映り込んでいない場合に比べて、反射波の受信強度が大幅に大きくなる。本態様では、自車の速度が相対速度と同じという条件に加えて、反射波の強度が所定強度より大きいという条件を更に満たす場合、物体は自車と判定される。よって、本態様によれば、カーブミラーに映り込んでいる物体が自車であるか否かの判断を正確に行うことができる。 When the vehicle is reflected on the curved mirror, the distance sensor directly receives the reflected wave reflected by the curved mirror. Therefore, compared to when the vehicle is not reflected on the curved mirror, the received intensity of the reflected wave is higher. Significantly larger. In this aspect, in addition to the condition that the speed of the own vehicle is the same as the relative speed, the object is determined to be the own vehicle when the condition that the intensity of the reflected wave is greater than the predetermined intensity is further satisfied. Therefore, according to this aspect, it is possible to accurately determine whether or not the object reflected on the curve mirror is the own vehicle.
上記態様において、前記自車判定部は、第1物体と前記第1物体に対して距離が倍離れた第2物体とを前記距離センサが検出するという条件を更に満たす場合、前記物体は自車と判定してもよい。 In the above aspect, when the vehicle determination unit further satisfies the condition that the distance sensor detects a first object and a second object that is twice as far as the first object, the object is May be determined.
自車がカーブミラーに映り込んでいる場合、受信波の受信強度が高くなるので、距離センサは、カーブミラーから直接反射された反射波に加えて、カーブミラーにより2回反射された反射波も検出できる。そのため、距離センサは、第1物体よりも倍の距離だけ離れた位置に、あたかも第2物体が存在しているかのように、第2物体を検出する。 When the vehicle is reflected on the curved mirror, the received intensity of the received wave is high. Therefore, the distance sensor also reflects the reflected wave reflected twice by the curved mirror in addition to the reflected wave directly reflected from the curved mirror. It can be detected. Therefore, the distance sensor detects the second object as if the second object is present at a position that is twice as far as the first object.
本態様は、第1物体と第1物体に対して距離が倍離れた第2物体とを距離センサが検出するという条件を更に満たす場合、物体は自車と判定するので、カーブミラーに映り込んでいる物体が自車であるか否かの判断を正確に行うことができる。 In this aspect, when the condition that the distance sensor detects the first object and the second object that is twice the distance from the first object is further satisfied, the object is determined to be the own vehicle, and therefore reflected in the curve mirror. It is possible to accurately determine whether or not the object in the vehicle is the own vehicle.
本発明によれば、自車が検出対象物として誤検出されることを防止できる。 ADVANTAGE OF THE INVENTION According to this invention, it can prevent that the own vehicle is misdetected as a detection target object.
図1は、本発明の実施の形態による物体検出装置の概要を説明する図である。車両11には本実施の形態による物体検出装置が搭載されている。車両11としては、例えば、4輪自動車が採用されている。車両11は交差点にさしかかっている。この交差点は、車両11が走行する道路12に対して道路16が直交するT字路である。車両11の右斜め前方であって、道路16の手前には、道路12及び道路16に隣接して建屋15が存在する。そのため、道路16は、車両11の死角となり、車両11のドライバは道路16を走行する自転車14を目視できない。
FIG. 1 is a diagram illustrating an outline of an object detection apparatus according to an embodiment of the present invention. The
そこで、この交差点では、道路12と道路16とが交差する領域17の左側にカーブミラー13が設けられている。これにより、死角に位置する自転車14がカーブミラー13に映り込み、車両11のドライバはカーブミラー13を通じて自転車14を目視できる。
Therefore, at this intersection, the
しかし、道路12が優先道路であれば、車両11のドライバは、カーブミラー13を目視する義務は非優先道路である道路16側を走行する者にあるとの考えから、カーブミラー13の目視を怠ることがある。また、夜間などでは、車両11のドライバがカーブミラー13を目視できないこともある。
However, if the
そこで、車両11には物体検出装置が搭載されている。物体検出装置は、車両11の前面に設けられた距離センサ22を備えている。物体検出装置は、カーブミラー13を検出すると、カーブミラー13の方向に向けて距離センサ22に計測波B1を放射させる。計測波B1はカーブミラー13で反射される。ここで、カーブミラー13に自転車14が映り込んでいると、カーブミラー13で反射された計測波B1は自転車14に到達する。そして、この計測波B1は自転車14で反射され、その反射波は、カーブミラー13で更に反射され、距離センサ22に戻ってくる。よって、距離センサ22は、車両11から自転車14までの距離や、車両11に対する自転車14の相対速度を検出できる。
Therefore, an object detection device is mounted on the
図2は、本実施の形態による物体検出装置が搭載された車両11の側面図である。物体検出装置は、車両11の例えば前面に設けられた距離センサ22と、車両11の例えばフロントガラスに設けられた画像センサ21とを備えている。画像センサ21は、側面視においてセンサ面から放射状に延びる一定の画角221を持ち、常時、車両11の前方を撮像している。物体検出装置は、画像センサ21が撮像した画像にカーブミラー13が含まれているか否かを常時監視している。そして、物体検出装置は、カーブミラー13を検出すると、その方向に向けて距離センサ21の計測波B1を放射させる。そして、物体検出装置は、カーブミラー13に映り込んでいるターゲットからの反射波をカーブミラー13を介して受信し、死角に位置する検出対象となる物体(以下、「ターゲット」と呼ぶ。)を検出する。そして、ターゲットを検出すると、物体検出装置は、音声や画像を用いてドライバに衝突の危険性を報知したり、必要に応じて衝突回避制御などを行い、交差点での出会い頭の事故を防止する。
FIG. 2 is a side view of the
ここで、カーブミラー13が何らかの要因で正しい位置からずれて設置されていたり、カーブミラー13と道路12を走行する車両11との相対的な位置関係によっては、カーブミラー13に車両11が映り込むことがある。この場合、距離センサ22は、カーブミラー13から直接反射された反射波を受信することになる。そして、距離センサ22は、検出したターゲットが車両11であるか否かを判別できないので、車両11を車両11とは別のターゲットとして誤検出してしまう。この場合、誤検出しているにも拘わらず、衝突の警報や車両11に対する衝突回避制御が行われてしまうと、ドライバの運転が妨げられてしまう。このような課題を解決することが、本実施の形態による物体検出装置の目的である。
Here, the
以下、本実施の形態による物体検出装置の詳細について説明する。図3は、本発明の実施の形態による物体検出装置のブロック図である。物体検出装置は、図2で示す画像センサ21及び距離センサ22の他、車速センサ23、制御部24、報知部25、ブレーキユニット26、PT(パワートレーン)ユニット27、ヘッドライト28、及びクラクション29を備える。図3において、画像センサ21、距離センサ22、及び制御部24は、一体化されても良い。
Hereinafter, the details of the object detection device according to the present embodiment will be described. FIG. 3 is a block diagram of the object detection apparatus according to the embodiment of the present invention. In addition to the
画像センサ21は、例えば、COMSエリアセンサやCCDエリアセンサ等で構成され、所定のフレームレート(例えば、60fps)で車両11の前方の画像を撮像する。なお、画像センサ21は、単眼カメラであってもよいし、距離計測が可能なステレオカメラ或いは深度センサであってもよい。なお、車両11において、例えば、前方の車両との車間距離を検出するために、ステレオカメラや深度センサが取り付けられているのであれば、これらの既存のステレオカメラや深度センサが画像センサ21として採用されればよい。
The
距離センサ22は、例えば、電波レーダで構成され、ミラー検出部241により検出された方向に計測波を照射し、カーブミラーに映り込んでいる物体からの反射波をカーブミラーを介して受信することで、車両11からターゲットまでの距離と、車両11に対するターゲットの相対速度とを計測する。電波レーダとしては、マイクロ波を放射してターゲットを検出するマイクロ波レーダ、ミリ波を放射してターゲットを検出するミリ波レーダ、或いはテラヘルツ波を放射してターゲットを検出するテラヘルツレーダが採用できる。或いは、距離センサ22としては、赤外線を放射してターゲットを検出する赤外線ライダーが採用されてもよい。
The
ここで、距離センサ22は、計測波が戻ってくるまでの時間を検出し、検出した時間と計測波の速度とを用いてターゲットまでの距離を算出すればよい。また、距離センサ22は、反射波のドップラー周波数を検出することで、ターゲットの相対速度を算出すればよい。
Here, the
また、距離センサ22は、送信及び受信の少なくとも一方がカーブミラーからはみ出さない程度に計測波のビーム径を絞ることが可能なセンサで構成されている。また、距離センサ22は、フェイズドアレーやディジタルビームフォーミングのような電子的に計測波が走査可能なセンサ、或いはメカスキャンなどのように機械的に計測波が走査可能なセンサで構成されている。
The
ビーム径を絞る方法は、アンテナ面積を大きくする、或いは計測波の周波数を高くすることで実現できる。例えば、距離センサ22は、カーブミラーを走査できるまでビーム径を絞ることが可能なn(nは2以上の整数)個のアンテナを備えており、通常時は例えばn/2個のアンテナを駆動させ、カーブミラーが検出されると、n個のアンテナを駆動させることで、ビーム径を絞ってもよい。
The method of narrowing the beam diameter can be realized by increasing the antenna area or increasing the frequency of the measurement wave. For example, the
また、距離センサ22は、通常時は、ミリ波より小さな周波数の計測波を放射し、カーブミラーが検出されると、周波数をミリ波〜THz帯まで引き上げることでビーム径を絞り込んでもよい。これより、精密にターゲットの位置を検出できる。
Further, the
車速センサ23は、車両11の速度を計測する。ここで、車速センサ23は、車両11が搭載する既存の車速センサで構成されればよい。
The
制御部24は、CPU、ROM、及びRAM等を備えるコンピュータで構成され、ミラー検出部241、衝突判定部242、自車判定部243、及び車両制御部244を備える。なお、ミラー検出部241〜車両制御部244は、例えば、CPUがROMに記憶されたプログラムを実行することによって実現される。
The
ミラー検出部241は、画像センサ21で撮像された画像からカーブミラーを示す画像を抽出し、抽出結果を用いて、実在するカーブミラーの方向を検出する。
The
ここで、ミラー検出部241は、カーブミラーの特徴量を示すテンプレートを予め備えており、このテンプレートを画像センサ21が撮像した各画像データと照合することで、カーブミラーを検出すればよい。具体的には、テンプレートとしては、カーブミラーの形状を特徴量として持つテンプレートが採用できる。
Here, the
カーブミラーのミラー部分の形状は、正面から見ると円形であるが、車両11からは楕円状に見えるケースが多い。また、カーブミラーは、垂直方向に延びる一本の棒の上にミラー部分が載置された形状を持つ。そこで、テンプレートとしては、一本の棒の上に楕円が載置された形状を特徴量として持つテンプレートが採用できる。
The shape of the mirror part of the curved mirror is circular when viewed from the front, but in many cases it appears to be elliptical from the
そして、ミラー検出部241は、画像センサ21で撮像された各画像データに対してテンプレートマッチングといった画像処理の手法を用いて、カーブミラーが存在するか否かを判定する。具体的には、ミラー検出部241は、各画像データにおけるカーブミラーの類似度を算出し、類似度が基準類似度以上であれば、カーブミラーが存在すると判定すればよい。
Then, the
また、ミラー検出部241は、画像データからカーブミラーを検出すると、検出したカーブミラーの画像データ内での2次元座標から、実在するカーブミラーの車両11に対する方向を算出する。具体的には、ミラー検出部241は、車両11のある位置(例えば、画像センサ21の画角の頂点)を原点とする3次元の車両座標空間内において、予め設定された画像センサ22のセンサ面に相当する領域に、検出したカーブミラーの2次元座標をプロットし、プロットした2次元座標と原点とを繋ぐ直線の方向を、車両11に対する実空間でのカーブミラーの方向として決定すればよい。なお、カーブミラーの2次元座標の位置としては、例えば、ミラー部分の中心が採用できる。
Further, when the
そして、ミラー検出部241は、検出した実空間でのカーブミラーの方向に、計測波を放射するように、距離センサ22に指示する。この指示を受けた距離センサ22は、例えば、計測波のビーム径を絞り、ミラー部分の全域に計測波を走査させればよい。
Then, the
衝突判定部242は、距離センサ22の計測結果を用いて、車両11とターゲットとの衝突可能性を判定する。ここで、衝突判定部242は、まず、現時点から一定期間内(例えば30秒)におけるターゲットの予測走行パターンを算出する。ここで、衝突判定部242は、以下のようにしてターゲットの予測走行パターンを算出すればよい。まず、現時点までのターゲットの相対速度の推移からターゲットの加速度を算出し、算出した加速度と現時点での相対速度とを用いて、所定時間間隔(例えば1秒)毎にターゲットの予測位置を算出し、算出した予測位置からなる点群を予測走行パターンとして算出すればよい。同様にして、衝突判定部242は、現時点から一定期間が経過するまで、所定時間間隔毎に車両11の予測位置を算出することで車両11の予測走行パターンを算出する。そして、衝突判定部242は、車両11とターゲットとの各予測位置において、車両11の大きさを示す領域とターゲットの大きさとを示す領域を設定し、同一タイミングでの予測位置において両領域が重なった場合、衝突可能性が有ると判定すればよい。
The
また、衝突判定部242は、自車判定部243によりターゲットが車両11であると判定された場合、上記の衝突可能性を判定する処理を禁止する。これにより、車両11との衝突可能性を判定するといった無駄な処理の発生を防止できる。
In addition, when the own
自車判定部243は、距離センサ22により計測された相対速度が車速センサ23が検出した速度と同じ速度である場合、ターゲットは車両11であると判定する。カーブミラーに車両11が映り込んでいる場合、距離センサ22から放射された計測波は、カーブミラーで直接反射されて車両11に戻ってくるので、距離センサ22は、車両11と同一速度で車両11に近づいているターゲットを検出する。これにより、ターゲットが自車であるか否かの判別ができる。
The own
車両制御部244は、自車判定部243によりターゲットが車両11であると判定された場合、ターゲットとの衝突を回避するための衝突回避制御をブレーキユニット26及びPTユニット27に実行させることを禁止する。
When the
報知部25は、ターゲットと車両11との衝突可能性を報知する。本実施の形態では、報知部25は、自車判定部243によりターゲットが車両11であると判定された場合、衝突可能性の報知を禁止する。
The
具体的には、報知部25は、警報部251及び注意喚起部252を備える。警報部251は、例えば、スピーカ、ヘッドアップディスプレイ、警報灯などで構成され、音声及び映像を用いてターゲットとの衝突に関する警報を行う。警報の態様としては、スピーカから警報音や「対向車と衝突します」といった音声を出力する態様、ヘッドアップディスプレイにアノテーションマークを表示する態様や、警報ランプを点滅させる態様が挙げられる。
Specifically, the
そして、警報部251は、自車判定部243によりターゲットが車両11であると判定された場合、警報を禁止する。
The
注意喚起部252は、例えばヘッドアップディスプレイで構成され、カーブミラーへの注意喚起を促す画像を表示する。注意喚起の態様としては、カーブミラーをマーキングした画像をヘッドアップディスプレイに表示させる態様、或いは建物等の障害物上にターゲットを仮想的に示す画像をヘッドアップディスプレイに表示させる態様が採用される。或いは、注意喚起部252として、ヘッドライトが採用されているのであれば、ヘッドライトをカーブミラーの方向に向けて灯光する態様が採用されてもよい。
The alerting
そして、注意喚起部252は、自車判定部243によりターゲットが車両11であると判定された場合、注意喚起を促す画像を表示したり、ヘッドライトにカーブミラーを灯光させたりする。
Then, when the own
ブレーキユニット26は、例えば、車両11を制動させるブレーキ、及び車両制御部244の制御の下、ブレーキの操作量を自動的に設定する自動制動機構を備える。なお、自動制動機構としては、車両11の制動時の横滑りを防止することが可能なDSC(ダイナミックスタビリティコントロールシステム)制御機能を備えるものが採用できる。
The
PTユニット27は、操舵ユニット271及びエンジンユニット272を備える。操舵ユニット271は、例えば、車両制御部244の制御の下、ステアリングの操作量を自動設定し、タイヤの操舵角を自動的に変更する自動操舵機構を備える。
The
エンジンユニット272は、例えば、エンジン、変速機、及び車両制御部244の制御の下、変速機のギアの段数及びエンジンの回転数を自動設定する自動設定機構を備える。
The
ヘッドライト28は、車両11の前面に搭載され、車両11の前方を照射する。クラクション29は、車両11に搭載され、対向車等に注意喚起を促すための警報音を鳴らす。
The
次に、本実施の形態における物体検出装置の処理について説明する。図4は、本発明の実施の形態にかかる物体検出装置の処理を示すフローチャートである。 Next, processing of the object detection device in the present embodiment will be described. FIG. 4 is a flowchart showing processing of the object detection apparatus according to the embodiment of the present invention.
まず、ミラー検出部241は、カーブミラーのテンプレートを用いて、画像センサ21が撮像した画像データにカーブミラーが含まれているか否かを判定する(S401)。カーブミラーが検出できた場合(S401でYES)、ミラー検出部241は、カーブミラーの画像データ内の2次元座標から実空間でのカーブミラーの車両11に対する方向を算出する(S402)。
First, the
一方、カーブミラーが検出できなかった場合(S401でNO)、処理はS401に戻される。 On the other hand, if the curve mirror cannot be detected (NO in S401), the process returns to S401.
S403では、ミラー検出部241は、カーブミラーの方向に計測波を放射するように距離センサ22に指示する。次に、距離センサ22は、カーブミラーの方向に計測波を放射する(S404)。
In S403, the
次に、距離センサ22は、反射波のドップラー周波数を検出することでターゲットの相対速度を検出する(S405)。
Next, the
次に、自車判定部243は、ターゲットが車両11に接近している接近ターゲットであるか否かを判定する。例えば、相対速度がプラスであればターゲットが車両11に接近していることを示し、相対速度がマイナスであればターゲットが車両11から離れていることを示すのであれば、自車判定部243は、相対速度がプラスであれば、接近ターゲットがあると判定すればよい。
Next, the own
接近ターゲットを検出した場合(S406でYES)、自車判定部243は、相対速度が車速センサ23が検出した車両11の速度と等しいか否かを判定する(S407)。一方、接近ターゲットを検出しなかった場合(S406でNO)、自車判定部243は、ターゲットとの衝突の可能性はないので処理をS401に戻す。
When the approaching target is detected (YES in S406), the own
ターゲットの相対速度が車両11の速度と等しければ(S407でYES)、ターゲットが車両11である可能性が高いので、自車判定部243は、距離センサ22が受信した受信波の強度が基準強度より大きいか否かを判定する(S408)。一方、ターゲットの相対速度が車両11の速度と等しくなければ(S407でNO)、ターゲットが車両11である可能性が低いので、自車判定部243は、処理をS412に進める。
If the relative speed of the target is equal to the speed of the vehicle 11 (YES in S407), there is a high possibility that the target is the
ターゲットが車両11でない場合、計測波は、車両11−カーブミラー−ターゲット−カーブミラー−車両11の経路を通る。一方、ターゲットが車両11である場合、計測波は、車両11−カーブミラー−車両11の経路を通る。ここで、計測波は電波なので、距離の4乗に比例して減衰する。また、計測波は、反射したときに大きく減衰する。
When the target is not the
ターゲットが車両11でない場合の計測波の経路は、ターゲットが車両11である場合に比べて、カーブミラー及びターゲットの区間を往復する距離分長くなる。また、ターゲットが車両11でない場合の反射回数は、カーブミラーで2回、ターゲットで1回の合計3回であるが、ターゲットが車両11である場合の反射回数は、カーブミラーの1回である。したがって、ターゲットが車両11でない場合、ターゲットが車両11である場合に比べて、計測波は大きく減衰する。そこで、本実施の形態は、S408の処理を設けてターゲットが車両11であるか否かの判定精度を高めた。ここで、基準強度としては、例えば、ターゲットが車両11である場合に計測される計測波の標準的な強度の例えば50%、60%、80%、90%といった値が採用できる。
The path of the measurement wave when the target is not the
受信波の強度が基準強度よりも大きければ(S408でYES)、自車判定部243は、受信波に含まれるID(識別子)が車両11が搭載する距離センサ22から送信された計測波のIDであるか否かを判定する(S409)。一方、受信波の強度が基準強度よりも大きくなければ(S408でNO)、処理はS412に進む。
If the intensity of the received wave is greater than the reference intensity (YES in S408), the
ここで、IDは計測波の送信フォーマットに含まれるIDであり、例えば、距離センサ22や車両11の識別子が採用できる。例えば、車両11とは別の車両から送信された計測波を距離センサ22が受信することもある。この場合、距離センサ22は計測波を直接受信するので強い計測波を受信することになる。そこで、S409の処理を設け、受信した計測波が距離センサ22が送信したものであるか否かを判定し、別の車両から送信された計測波に基づいてターゲットが車両11であると判定されることが防止されている。
Here, the ID is an ID included in the transmission format of the measurement wave, and for example, an identifier of the
S409では、受信した計測波に含まれるIDが距離センサ22から送信された計測波のIDであれば(S409でYES)、処理はS410に進む。一方、受信した計測波に含まれるIDが距離センサ22から送信された計測波のIDでなければ(S409でNO)、処理はS412に進む。 In S409, if the ID included in the received measurement wave is the ID of the measurement wave transmitted from the distance sensor 22 (YES in S409), the process proceeds to S410. On the other hand, if the ID included in the received measurement wave is not the ID of the measurement wave transmitted from the distance sensor 22 (NO in S409), the process proceeds to S412.
S410では、自車判定部243が2つのターゲットを検出したか否かを判定する。ターゲットが車両11である場合、計測波の減衰が少ないので、カーブミラーで直接反射された計測波が更に車両11で反射され、この反射された計測波がカーブミラーを介してある程度強い強度で車両11に戻ってくる可能性が高い。この場合、距離センサ22は、第1ターゲットに加えて、第1ターゲットの倍の距離の位置に第2ターゲットを検出することができる。そこで、S410では、距離センサ22が第1ターゲットと第1ターゲットの倍の距離に位置する第2ターゲットを検出した場合、自車判定部243は、2つのターゲットを検出したと判定し(S410でYES)、処理をS401に戻す。すなわち、S410でYESの場合、自車判定部243は、ターゲットが自車であると判定したので、衝突可能性の判定処理、衝突回避制御、警報、及び注意喚起を禁止させるために、処理をS401に戻すのである。なお、図4では、S410でYESの場合、注意喚起が行われていないが、注意喚起部252により注意喚起が行われてもよい。
In S410, it is determined whether the own
一方、2つのターゲットが検出されなかった場合(S410でNO)、処理はS411に進む。 On the other hand, when two targets are not detected (NO in S410), the process proceeds to S411.
S412では、衝突判定部242は、衝突判定部242は、距離センサ22からターゲットの距離を取得することで、ターゲットの距離を検出する。次に、衝突判定部242は、ターゲットの予測走行パターンと車両11の予測走行パターンとを算出することで、ターゲットと車両11との衝突可能性を判定する(S413)。
In S <b> 412, the
衝突判定部242は、衝突可能性有りと判定した場合(S414でYES)、処理をS415に進め、衝突可能性なしと判定した場合(S414でNO)、処理をS411に進める。
If the
S415では、衝突判定部242は、衝突回避制御を実施したときのターゲットと車両11との衝突可能性を判定する。
In S415, the
この場合、衝突判定部242は、現時点でのターゲットの予測走行パターンと、現時点での車両11の速度及び加速度とを用いて車両11の衝突回避走行パターンを算出し、この衝突回避走行パターンで車両11を走行させたと仮定したときに、車両11とターゲットとが衝突するか否かを判定すればよい。
In this case, the
ここで、ターゲットの予測走行パターンとしては、S413で算出された予測走行パターンが採用できる。 Here, the predicted travel pattern calculated in S413 can be adopted as the target predicted travel pattern.
また、衝突回避走行パターンとしては、車両11の制動による衝突回避走行パターンと車両11の加速による衝突回避走行パターンとがある。衝突判定部242は、例えば、制動による衝突回避走行パターンを算出し、衝突が回避できないと判定した場合に、加速による衝突回避走行パターンを算出すればよい。そして、衝突判定部242は、加速による衝突回避走行パターンでも衝突を回避できないと判定した場合、S416でYESと判定すればよい。
Further, the collision avoidance travel pattern includes a collision avoidance travel pattern by braking of the
制動による衝突回避走行パターンは、例えば、現時点での車両11の速度から制動距離が最短となるようなパターンが採用できる。また、加速による衝突回避走行パターンは、例えば、現時点での速度或いは加速度でターゲット及び車両11が走行したと仮定したときに算出されるターゲット及び車両11の予測衝突位置に、ターゲットが到達する前に、車両11が予測衝突位置を通過することが可能な加速度で車両11を走行させるパターンが採用できる。この場合、予測衝突位置を通過することが可能な加速度としては、例えば、変速機のギアの段数をシフトダウンしたときに想定される加速度が採用されればよい。
As the collision avoidance travel pattern by braking, for example, a pattern in which the braking distance is the shortest from the current speed of the
ここで、車両11が走行している道路の道幅が基準幅よりも大きければ、衝突判定部242は、自動操舵を更に組み合わせて衝突回避走行パターンを算出してもよい。この場合、例えば、車両11がナビゲーション装置を備えるのであれば、衝突判定部242は、ナビゲーション装置から道幅の情報を取得すればよい。また、基準幅としては、例えば、車両11の車幅に対して一定の係数(例えば、車幅の1.2倍、1.5倍、2.0倍)を乗じた値が採用できる。
Here, if the road width of the road on which the
制動による衝突回避走行パターンと自動操舵とを組み合わせるパターンとしては、例えば、車両11を最短の制動距離で制動させた場合の車両11の予測停止位置において、車両11を示す領域とターゲットを示す領域とが重なるのであれば、両領域が重ならないように車両11の操舵角を自動調整して、車両11を制動させるパターンが採用できる。
As a pattern that combines the collision avoidance traveling pattern by braking and automatic steering, for example, in the predicted stop position of the
また、加速による衝突回避走行パターンと自動操舵とを組み合わせるパターンとしては、例えば、予測衝突位置において車両11の領域及びターゲットの領域が重なるのであれば、予測衝突位置を横滑りが起こらない程度の曲率で車両11が迂回するように操舵角を自動調整するパターンが採用できる。
Further, as a pattern that combines the collision avoidance traveling pattern by acceleration and the automatic steering, for example, if the area of the
S416では、衝突判定部242は、衝突回避制御を行っても車両11とターゲットとの衝突が回避できないと判定した場合(S416でYES)、車両制御部244による衝突回避制御及びパッシング制御と、警報部251による警報とが行われる。ここで、衝突回避制御は、例えば、衝突判定部242が算出した衝突回避走行パターンで車両11が走行するように、車両制御部244がブレーキユニット26及びPTユニット27を制御することで実施されればよい。また、パッシング制御は、例えば、法令の制限範囲内で、車両制御部244が、ヘッドライト28をハイビームにしてパッシングすると共にクラクション29を鳴らす制御が採用できる。ここで、警報部251による警報は、例えば、ターゲットの相対速度が速くなるにつれて、度合いが強くされてもよい。
In S416, when the
一方、S416で衝突が回避可能と判定された場合(S416でNO)、車両制御部244による衝突回避制御及び報知部25による警報が行われる(S418)。
On the other hand, when it is determined in S416 that a collision can be avoided (NO in S416), a collision avoidance control by the
S411では、ターゲットが対向車である可能性が高いので、警報部251による警報及び注意喚起部252による注意喚起が行われる。S411、S417、S418の処理が終了すると、処理はS401に戻る。
In S411, since there is a high possibility that the target is an oncoming vehicle, an alarm by the
このように、本実施の形態によれば、ターゲットが車両11と判定された場合(S410でYES)、衝突可能性の判定処理が禁止されるので、車両11との衝突可能性を判定するといった無駄な処理が発生することを防止できる。また、ターゲットの相対速度が車両11の速度と同じであり(S407でYES)、計測波の受信強度が基準強度よりも大きく(S408でYES)、且つ、2つのターゲットが検出できた場合に(S410でYES)ターゲットが車両11と判定されている。そのため、ターゲットが車両11であるか否かを正確に判断できる。
Thus, according to the present embodiment, when the target is determined to be the vehicle 11 (YES in S410), the collision possibility determination process is prohibited, so that the collision possibility with the
11 車両
13 カーブミラー
21 画像センサ
22 距離センサ
23 車速センサ
24 制御部
25 報知部
26 ブレーキユニット
27 PTユニット
28 ヘッドライト
29 クラクション
241 ミラー検出部
242 衝突判定部
243 自車判定部
244 車両制御部
251 警報部
252 注意喚起部
271 操舵ユニット
272 エンジンユニット
DESCRIPTION OF
Claims (7)
前記画像センサで撮像された画像からカーブミラーを示す画像を抽出し、抽出結果を用いて、実在するカーブミラーの方向を検出するミラー検出部と、
前記ミラー検出部により検出された方向に計測波を照射し、前記カーブミラーに映り込んでいる物体からの反射波を前記カーブミラーを介して受信することで、前記自車から物体までの距離及び前記物体の前記自車に対する相対速度を計測する距離センサと、
前記距離センサによる計測結果を用いて、前記自車と前記物体との衝突可能性を判定する衝突判定部と、
前記自車の速度を検出する車速センサと、
前記距離センサにより計測された相対速度が前記車速センサが検出した速度と同じ速度である場合、前記物体は自車であると判定する自車判定部とを備え、
前記衝突判定部は、前記自車判定部により前記物体が自車であると判定された場合、前記衝突可能性を判定する処理を禁止する物体検出装置。 An image sensor that captures an image in front of the vehicle;
A mirror detection unit that extracts an image showing a curve mirror from an image captured by the image sensor and detects the direction of the existing curve mirror using the extraction result;
By irradiating the measurement wave in the direction detected by the mirror detection unit and receiving the reflected wave from the object reflected on the curve mirror via the curve mirror, the distance from the own vehicle to the object and A distance sensor for measuring a relative speed of the object with respect to the vehicle;
A collision determination unit that determines the possibility of collision between the host vehicle and the object using the measurement result of the distance sensor;
A vehicle speed sensor for detecting a speed of said vehicle,
When the relative speed measured by the distance sensor is the same speed as the speed detected by the vehicle speed sensor, the vehicle includes a vehicle determination unit that determines that the object is the vehicle.
The said collision determination part is an object detection apparatus which prohibits the process which determines the said collision possibility, when the said vehicle determination part determines that the said object is a own vehicle.
前記物体との衝突を回避するための衝突回避制御を前記自車に実行させる車両制御部とを更に備え、
前記報知部は、前記自車判定部により前記物体が自車であると判定された場合、前記報知を禁止し、
前記車両制御部は、前記自車判定部により前記物体が自車であると判定された場合、前記衝突回避制御を禁止する請求項1に記載の物体検出装置。 A notification unit for reporting the possibility of collision with the object;
A vehicle control unit that causes the host vehicle to execute collision avoidance control for avoiding a collision with the object;
The notification unit prohibits the notification when the vehicle determination unit determines that the object is the vehicle.
The object detection device according to claim 1, wherein the vehicle control unit prohibits the collision avoidance control when the vehicle determination unit determines that the object is a vehicle.
前記カーブミラーへの注意喚起を促す画像を表示する注意喚起部と、
音声及び映像の少なくとも一方を用いて前記物体との衝突に関する警報を行う警報部とを備え、
前記注意喚起部は、前記自車判定部により前記物体が自車であると判定された場合、前記注意喚起を促す画像を表示し、
前記警報部は、前記自車判定部により前記物体が自車であると判定された場合、前記警報を禁止する請求項2に記載の物体検出装置。 The notification unit
An alerting part for displaying an image prompting attention to the curve mirror;
An alarm unit for performing an alarm on a collision with the object using at least one of audio and video,
When the vehicle determination unit determines that the object is the vehicle, the alerting unit displays an image for prompting the alert,
The object detection device according to claim 2, wherein the warning unit prohibits the warning when the vehicle determination unit determines that the object is a vehicle.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015228319A JP6414540B2 (en) | 2015-11-24 | 2015-11-24 | Object detection device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015228319A JP6414540B2 (en) | 2015-11-24 | 2015-11-24 | Object detection device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2017097581A JP2017097581A (en) | 2017-06-01 |
| JP6414540B2 true JP6414540B2 (en) | 2018-10-31 |
Family
ID=58816994
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2015228319A Expired - Fee Related JP6414540B2 (en) | 2015-11-24 | 2015-11-24 | Object detection device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6414540B2 (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP4644183A1 (en) * | 2024-04-30 | 2025-11-05 | Bayerische Motoren Werke Aktiengesellschaft | Method and control unit for preventing blindness of a driver of a vehicle |
Families Citing this family (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN118605029A (en) * | 2016-01-19 | 2024-09-06 | 奇跃公司 | Augmented reality system and method using images |
| WO2019008716A1 (en) * | 2017-07-06 | 2019-01-10 | マクセル株式会社 | Non-visible measurement device and non-visible measurement method |
| JP2019100787A (en) * | 2017-11-30 | 2019-06-24 | パイオニア株式会社 | Data structure of transmission data, determination device, determination method and determination program |
| CN108171129A (en) * | 2017-12-14 | 2018-06-15 | 深圳市易成自动驾驶技术有限公司 | Road information recognition methods, terminal device and readable storage medium storing program for executing |
| JP7135908B2 (en) * | 2019-02-04 | 2022-09-13 | トヨタ自動車株式会社 | Pre-collision control device |
| JP2021063398A (en) * | 2019-10-16 | 2021-04-22 | 株式会社東芝 | System and method |
| JP7595470B2 (en) * | 2021-01-22 | 2024-12-06 | 株式会社デンソーテン | Determination device and determination method |
| JP7561047B2 (en) * | 2021-01-22 | 2024-10-03 | 株式会社デンソーテン | Determination device and determination method |
| JP7632840B2 (en) | 2021-03-19 | 2025-02-19 | 株式会社明電舎 | Vehicle Inspection Equipment |
| JP7554699B2 (en) * | 2021-03-31 | 2024-09-20 | 本田技研工業株式会社 | IMAGE PROCESSING APPARATUS, IMAGE PROCESSING METHOD, VEHICLE CONTROL APPARATUS, AND PROGRAM |
| CN119261887B (en) * | 2024-10-28 | 2025-11-14 | 中国第一汽车股份有限公司 | Vehicle control methods, devices, media and vehicles |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5549272B2 (en) * | 2010-02-23 | 2014-07-16 | トヨタ自動車株式会社 | Vehicle control device |
| JP5713600B2 (en) * | 2010-08-09 | 2015-05-07 | 田淵電機株式会社 | Vehicle travel control system |
-
2015
- 2015-11-24 JP JP2015228319A patent/JP6414540B2/en not_active Expired - Fee Related
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP4644183A1 (en) * | 2024-04-30 | 2025-11-05 | Bayerische Motoren Werke Aktiengesellschaft | Method and control unit for preventing blindness of a driver of a vehicle |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2017097581A (en) | 2017-06-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6414540B2 (en) | Object detection device | |
| JP5910046B2 (en) | Obstacle detection device | |
| EP3141926B1 (en) | Automated detection of hazardous drifting vehicles by vehicle sensors | |
| KR101551667B1 (en) | LIDAR Sensor System | |
| US10325499B2 (en) | Approaching-body warning device for automobile | |
| JP6369390B2 (en) | Lane junction determination device | |
| CN103847735B (en) | The driving support control apparatus of vehicle | |
| CN103847667B (en) | The driving support control apparatus of vehicle | |
| JP4823781B2 (en) | Vehicle travel safety device | |
| CN109643495B (en) | Peripheral monitoring device and peripheral monitoring method | |
| KR20200102004A (en) | Apparatus, system and method for preventing collision | |
| JP6323064B2 (en) | Traveling lane identification device, lane change support device, traveling lane identification method | |
| US9908469B2 (en) | Driving support device | |
| KR20170114054A (en) | Collision preventing apparatus and collision preventing method | |
| JP5482670B2 (en) | Object detection device | |
| JP2019041334A (en) | Video output device and video generation program | |
| JP6414539B2 (en) | Object detection device | |
| WO2010089609A1 (en) | Collision warning apparatus | |
| JP2007333486A (en) | Obstacle detection device for vehicles | |
| KR20160039146A (en) | Collision avoidance system and collision avoidance method | |
| JP6432538B2 (en) | Collision prediction device | |
| JP2017111682A (en) | Object detection device, object detection method | |
| JP2019028841A (en) | Outside alarm system | |
| JP3822417B2 (en) | Vehicle periphery monitoring device | |
| WO2014076875A1 (en) | Object detecting system and object detecting device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170323 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180118 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180123 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180305 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180905 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180918 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6414540 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| LAPS | Cancellation because of no payment of annual fees |