JP6945776B2 - Obstacle detector - Google Patents
Obstacle detector Download PDFInfo
- Publication number
- JP6945776B2 JP6945776B2 JP2021531957A JP2021531957A JP6945776B2 JP 6945776 B2 JP6945776 B2 JP 6945776B2 JP 2021531957 A JP2021531957 A JP 2021531957A JP 2021531957 A JP2021531957 A JP 2021531957A JP 6945776 B2 JP6945776 B2 JP 6945776B2
- Authority
- JP
- Japan
- Prior art keywords
- obstacle
- distance measuring
- intersection
- unit
- vehicle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S15/00—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
- G01S15/87—Combinations of sonar systems
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S15/00—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
- G01S15/88—Sonar systems specially adapted for specific applications
- G01S15/93—Sonar systems specially adapted for specific applications for anti-collision purposes
Landscapes
- Engineering & Computer Science (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- General Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Measurement Of Velocity Or Position Using Acoustic Or Ultrasonic Waves (AREA)
- Traffic Control Systems (AREA)
Description
この発明は、障害物検出装置に関するものである。 The present invention relates to an obstacle detection device.
従来の障害物検出装置は、車両に設置された単独の超音波センサを用いて、車両の走行中に当該超音波センサから車両の側方に送信された超音波が駐車車両で反射して当該超音波センサに受信されるまでに要した時間から駐車車両までの距離を検出し、駐車車両の距離を検出したときの当該超音波センサの位置と検出した距離とを用いて三角測量の原理により反射点を推測する。そして、従来の障害物検出装置は、反射点の点列データを用いて駐車車両の形状とコーナー(角部)を求め、駐車区画を判別する(例えば、特許文献1参照)。 A conventional obstacle detection device uses a single ultrasonic sensor installed in a vehicle, and the ultrasonic waves transmitted from the ultrasonic sensor to the side of the vehicle are reflected by the parked vehicle while the vehicle is running. The distance from the time required to be received by an ultrasonic sensor to a parked vehicle is detected, and the position of the ultrasonic sensor when the distance of the parked vehicle is detected and the detected distance are used according to the principle of triangular surveying. Guess the reflection point. Then, the conventional obstacle detection device obtains the shape and corners (corners) of the parked vehicle by using the point sequence data of the reflection points, and discriminates the parking zone (see, for example, Patent Document 1).
従来の障害物検出装置は、障害物である駐車車両の側方を自車両が通過する際にのみ、自車両の側方に存在する障害物の角部を求めることができる構成であった。また、従来の障害物検出装置は、自車両に対して障害物がある角度以上に傾斜している場合、当該障害物の角部を精度よく求めることが困難であった。このように、従来の障害物検出装置には、自車両の前方又は後方に存在する、傾斜した障害物を検出することができないという課題があった。 The conventional obstacle detection device has a configuration in which the corners of obstacles existing on the side of the own vehicle can be obtained only when the own vehicle passes by the side of the parked vehicle which is an obstacle. Further, in the conventional obstacle detection device, when the obstacle is tilted more than a certain angle with respect to the own vehicle, it is difficult to accurately determine the corner portion of the obstacle. As described above, the conventional obstacle detection device has a problem that it cannot detect an inclined obstacle existing in front of or behind the own vehicle.
この発明は、上記のような課題を解決するためになされたもので、自車両の前方又は後方に存在する、傾斜した障害物を検出することを目的とする。 The present invention has been made to solve the above-mentioned problems, and an object of the present invention is to detect an inclined obstacle existing in front of or behind the own vehicle.
この発明に係る障害物検出装置は、車両の前面又は後面に設置された複数の測距センサに対して、直接波及び間接波の送受信を行わせる送受信部と、複数の測距センサにおける間接波の受信状況に基づいて、複数の測距センサの設置方向に対して傾斜した傾斜面を有する傾斜障害物が存在していることを検出する傾斜障害物検出部と、傾斜障害物検出部により傾斜障害物が存在していることが検出された場合、車両の走行中における異なる時刻に同一の測距センサが2回直接波を送受信した結果を用いて2つの円を描いて当該2つの円の交点を求める2円交点処理を行うことによって、複数の測距センサによる直接波の送受信結果から交点群の位置を算出する交点処理部と、交点処理部により算出された交点群の位置に基づいて、傾斜障害物の形状を推定する形状推定部と、形状推定部により推定された傾斜障害物の形状に基づいて、傾斜障害物のうちの車両に最も近い部位の位置を推定して接触位置情報として出力する接触位置推定部とを備えるものである。 The obstacle detection device according to the present invention includes a transmission / reception unit that transmits and receives a direct wave and an indirect wave to a plurality of distance measuring sensors installed on the front surface or the rear surface of the vehicle, and an indirect wave in the plurality of distance measuring sensors. An inclined obstacle detection unit that detects the existence of an inclined obstacle having an inclined surface inclined with respect to the installation direction of a plurality of distance measuring sensors based on the reception status of When it is detected that an obstacle is present, two circles are drawn using the result of the same distance measuring sensor transmitting and receiving direct waves twice at different times while the vehicle is running. Based on the intersection processing unit that calculates the position of the intersection group from the transmission / reception results of direct waves by multiple ranging sensors by performing the 2-circle intersection processing to find the intersection, and the position of the intersection group calculated by the intersection processing unit. Based on the shape estimation unit that estimates the shape of the tilt obstacle and the shape of the tilt obstacle estimated by the shape estimation unit, the position of the part of the tilt obstacle that is closest to the vehicle is estimated and the contact position information. It is provided with a contact position estimation unit that outputs as.
この発明によれば、自車両の前方又は後方に存在する、傾斜した障害物を検出することができる。 According to the present invention, it is possible to detect an inclined obstacle existing in front of or behind the own vehicle.
以下、この発明をより詳細に説明するために、この発明を実施するための形態について、添付の図面に従って説明する。
実施の形態1.
図1は、実施の形態1に係る障害物検出装置10の構成例を示すブロック図である。障害物検出装置10は、車両に搭載され、車両周辺の障害物を検出するものである。この障害物検出装置10は、送受信部11、傾斜障害物検出部12、交点処理部13、形状推定部14、及び接触位置推定部15を備える。また、障害物検出装置10は、当該車両に設置されている複数の測距センサ1〜4、及び衝突判定部20に接続されている。Hereinafter, in order to explain the present invention in more detail, a mode for carrying out the present invention will be described with reference to the accompanying drawings.
FIG. 1 is a block diagram showing a configuration example of the
図1では、障害物検出装置10に対して4個の測距センサ1〜4が接続されているが、測距センサの数は4個に限定されず、2個以上であればよい。
測距センサ1〜4は、探査波として超音波又は電波等を送信し、車両周辺の障害物で反射した探査波である反射波を受信する。以下では、測距センサ1〜4が超音波センサであるものとする。In FIG. 1, four
The ranging
送受信部11は、車両の走行中に、予め定められた駆動間隔(例えば、50ms)で、測距センサ1〜4に対して直接波及び間接波の送受信を行わせる。例えば、送受信部11は、測距センサ1から超音波を送信させ、その後、測距センサ1〜4に反射波を受信させる。この場合、超音波を送信した測距センサ1自身が受信した反射波は直接波であり、測距センサ2〜4が受信した反射波は間接波である。送受信部11は、測距センサ1から超音波を送信させた時点から50ms後に、今度は測距センサ2から超音波を送信させ、その後、測距センサ1〜4に反射波を受信させる。この場合、超音波を送信した測距センサ2自身が受信した反射波は直接波であり、測距センサ1,3,4が受信した反射波は間接波である。送受信部11は、上記同様に、測距センサ2から超音波を送信させた時点から50ms後に、測距センサ3から超音波を送信させ、測距センサ3から超音波を送信させた時点から50ms後に、測距センサ4から超音波を送信させ、測距センサ4から超音波を送信させた時点から50ms後に、再び測距センサ1から超音波を送信させる。このように、送受信部11は、200msの駆動周期で、測距センサ1〜4に直接波及び間接波の送受信を行わせる。送受信部11は、直接波を送受信した測距センサを示す情報と直接波が反射した反射点までの距離を示す情報とを、直接波の送受信結果として、傾斜障害物検出部12へ出力する。また、送受信部11は、直接波を送信した測距センサ及び間接波を受信した測距センサを示す情報と、間接波が反射した反射点までの距離を示す情報とを、間接波の送受信結果として、傾斜障害物検出部12へ出力する。
The transmission /
傾斜障害物検出部12は、直接波の送受信結果と間接波の送受信結果とを送受信部11から受け取る。傾斜障害物検出部12は、測距センサ1〜4における間接波の受信状況に基づいて、傾斜障害物が存在していることを検出する。「傾斜障害物」は、測距センサ1〜4の設置方向に対して傾斜した傾斜面を有する障害物である。一方、測距センサ1〜4の設置方向に対して傾斜した傾斜面を有さない障害物、つまり測距センサ1〜4の設置方向に対して略平行な面を有する障害物を「非傾斜障害物」と称する。傾斜障害物検出部12は、傾斜障害物が存在していることを検出した場合、直接波の送受信結果を交点処理部13へ出力する。測距センサ1〜4の設置方向とは、測距センサ1〜4が車両の前面に設置されている場合には当該前面に平行な方向であり、測距センサ1〜4が車両の後面に設置されている場合には当該後面に平行な方向である。
The tilt
図2A及び図2Bは、傾斜障害物61,62における超音波の反射経路を示す図である。図示例では、車両50の後面51に測距センサ1,2が一列に並べて設置されている。ここで、傾斜障害物61,62とは、測距センサ1,2の設置方向、つまり後面51に対して傾斜した傾斜面を有する障害物である。
2A and 2B are diagrams showing the reflection path of ultrasonic waves at the
図2Aに示されるような、角部61aを有する、角柱のような形状をした傾斜障害物61の場合、測距センサ1が送信した超音波は、傾斜障害物61の傾斜面で反射するときに拡散する。そのため、測距センサ1は直接波を受信できるが、測距センサ2は間接波を受信できない。同様に、測距センサ2が送信した超音波も、傾斜障害物61の傾斜面で反射するときに拡散するため、測距センサ2は直接波を受信できるが、測距センサ1は間接波を受信できない。なお、角部61aは、超音波が反射する面積が小さいため、直接波も間接波も測距センサ1,2へほとんど返らない。
In the case of an
図2Bに示されるような、角部を有さない、傾斜壁のような形状をした傾斜障害物62の場合も傾斜障害物61の場合と同様に、測距センサ1,2が送信した超音波は、傾斜障害物62の傾斜面で反射するときに拡散する。そのため、測距センサ1,2は、直接波を受信できるが、間接波を受信できない。
In the case of the
そこで、傾斜障害物検出部12は、例えば測距センサ1が超音波を送信した後、測距センサ1が直接波を受信し、測距センサ2が間接波を受信しなかった場合、車両50の後方に傾斜障害物61又は傾斜障害物62が存在していることを検出する。
一方、傾斜障害物検出部12は、測距センサ1が直接波を受信し、測距センサ2が間接波を受信した場合、車両50の後方に、非傾斜障害物が存在していることを検出する。また、傾斜障害物検出部12は、測距センサ1が直接波を受信せず、測距センサ2が間接波を受信しなかった場合、車両50の後方に、傾斜障害物及び非傾斜障害物が存在していないことを検出する。Therefore, in the tilt
On the other hand, the tilt
交点処理部13は、傾斜障害物検出部12により傾斜障害物が存在していることが検出された場合、直接波の送受信結果を傾斜障害物検出部12から受け取る。交点処理部13は、車両の走行中における異なる時刻に測距センサ1が2回直接波を送受信した結果を用いて2つの円を描いて当該2つの円の交点を求める2円交点処理を行うことによって、当該交点の位置を算出する。同様に、交点処理部13は、測距センサ2、測距センサ3、及び測距センサ4のそれぞれについても、2回分の直接波の送受信結果を用いて交点の位置を算出する。交点処理部13は、測距センサ1〜4による直接波の送受信結果から算出した交点群の位置を示す情報を、形状推定部14へ出力する。
When the inclination
図3は、交点処理部13による2円交点処理を説明する図である。図3の例では、車両50が後退中であり、測距センサ1は、車両50の後退に伴って測距センサ1の位置から測距センサ1aの位置へと移動する。車両50の後退中、交点処理部13は、測距センサ1の位置で送受信された直接波の送受信結果を用いて、測距センサ1が超音波を送信してから直接波を受信するまでに要した時間を元に、TOF(Time Of Flight)方式により当該超音波が反射した反射点70までの距離を算出し、測距センサ1の位置を中心とし、反射点70までの距離を半径とした円を描く。同様に、交点処理部13は、測距センサ1aの位置で送受信された直接波の送受信結果を用いて、測距センサ1aが超音波を送信してから直接波を受信するまでに要した時間を元に、TOF方式により当該超音波が反射した反射点71までの距離を算出し、測距センサ1aの位置を中心とし、反射点71までの距離を半径とした円を描く。そして、交点処理部13は、2つの円の交点72の位置を算出する。
FIG. 3 is a diagram for explaining the 2-circle intersection processing by the
なお、交点処理部13は、車速、ヨーレート、又はステアリング角度等の各種情報を車両50から取得し、取得した各種情報を用いて、車両50が走行しているときの時刻ごとの測距センサ1〜4の位置を算出すればよい。また、図3では車両50が直進している例が示されたが、車両50がカーブしていてもよい。
車両50の走行中、測距センサ1〜4が超音波を送信した位置と、当該超音波が傾斜障害物で反射した直接波を測距センサ1〜4が受信する位置とは異なる。交点処理部13は、2円交点処理時、測距センサ1〜4が超音波を送信した位置、測距センサ1〜4が直接波を受信した位置、又は上記送信した位置と受信した位置の中間位置のうちのいずれか1つを中心とした円を描けばよい。The
The position where the
図4は、車両50が傾斜障害物62に近づくにつれて交点76,77の位置が遠い側にシフトしていく様子を説明する図である。車両50の後退中、測距センサ1の位置で送信された超音波は反射点73の位置で反射し、測距センサ1aの位置で送信された反射波は反射点74の位置で反射し、測距センサ1bの位置で送信された反射波は反射点75の位置で反射する。このように、車両50が傾斜障害物62に近づくにつれて、反射点73,74,75の位置が車両50から遠い位置にシフトしていく。そのため、反射点73と反射点74とを用いた2円交点処理により算出された交点76の位置に比べ、反射点74と反射点75とを用いた2円交点処理により算出された交点77の位置は、車両50から遠い側にシフトしている。
FIG. 4 is a diagram illustrating how the positions of the
なお、交点処理部13は、測距センサ1が超音波を送信した後に測距センサ1が最初に受信した反射波を直接波として用いて、上記の2円交点処理を行うことが好ましい。測距センサ1が最初に受信した反射波は、測距センサ1から傾斜障害物62までの最短距離に相当するため、車両50が傾斜障害物62に近づくにつれて交点76,77の位置が傾斜障害物62の傾斜面に沿ってシフトしていくことになる。そのため、後述する形状推定部14において交点群に対する近似直線を求めることが可能となる。
It is preferable that the
形状推定部14は、車両50の後退中に交点処理部13により算出された交点群の位置を示す情報を、交点処理部13から受け取る。形状推定部14は、交点処理部13により算出された交点群の位置に基づいて、傾斜障害物の形状を推定する。形状推定部14は、傾斜障害物の形状を示す情報を、接触位置推定部15へ出力する。
The
接触位置推定部15は、傾斜障害物の形状を示す情報を、形状推定部14から受け取る。接触位置推定部15は、形状推定部14により推定された傾斜障害物の形状に基づいて、傾斜障害物のうちの車両50に最も近い部位の位置を推定し、推定した部位の位置を示す情報を、車両50に接触する可能性の高い位置を示す接触位置情報として、衝突判定部20へ出力する。
The contact
図5A、図5B、及び図5Cは、形状推定部14による傾斜障害物61,62の形状推定方法と、接触位置推定部15による接触位置82,84,87,90の推定方法を説明する図である。図示例において、交点処理部13により算出された交点は黒丸(●)で示されている。また、車両50の後面51に測距センサ1〜4が一列に並べて設置されている。
5A, 5B, and 5C are diagrams for explaining the shape estimation method of the
形状推定部14は、交点処理部13により算出された交点群の位置に基づいて、当該交点群の近似直線80,81,83,85,86,88,89を求める。形状推定部14は、交点群の近似直線が2本以上に分かれた場合(図5A及び図5C)、傾斜障害物61は角部61aを有する形状であると推定する。また、形状推定部14は、複数の近似直線の交点位置を、傾斜障害物61の有する角部61aの位置であると推定する。接触位置推定部15は、形状推定部14により推定された角部61aの位置を、接触位置82と推定する。なお、図5Cに示されるように、2つの傾斜障害物61が並んでいる場合、4本の近似直線85,86,88,89から3つの交点が求まるため、形状推定部14は、傾斜障害物が3つの角部61aを有する形状であると推定する。この場合、接触位置推定部15は、3つの角部61aの中からより車両50に近い側に存在する2つの角部61aの位置を、接触位置87,90とすればよい。
The
一方、形状推定部14は、交点群の近似直線が1本である場合(図5B)、傾斜障害物62は角部61aを有さない形状であると推定する。この場合、接触位置推定部15は、交点群の近似直線83と、車両50の側面を延長した仮想の車両側線53との交点の位置を、接触位置84と推定する。このとき、接触位置推定部15は、近似直線83と車両側線52との交点の位置、及び、近似直線83と車両側線53との交点の位置のうち、より車両50に近い側に存在する交点を、接触位置84とすればよい。
On the other hand, the
なお、形状推定部14は、あくまで、車両50の後方における測距センサ1〜4に対向する範囲に、車両50側に凸の角部61aが存在するか否かを推定する。そのため、後述する図8Fに示される傾斜障害物62は、角部61aを有する角柱のような形状であるが、この角部61aは測距センサ1〜4に対向する範囲外に存在するため、形状推定部14は、この傾斜障害物62を、角部を有さない傾斜壁のような形状と推定することになる。
The
衝突判定部20は、接触位置情報を接触位置推定部15から受け取る。例えば、衝突判定部20は、図5Aに示される車両50の後面51と傾斜障害物61の接触位置82との距離が、予め定められた距離以下である場合、衝突の可能性が高いと判定する。車両50は、衝突判定部20により衝突の可能性が高いと判定された場合、衝突回避のために、車両50のブレーキを作動させて衝突時の衝撃を軽減させる機能(いわゆる衝突被害軽減ブレーキ)、又は衝突を未然に防ぐために運転者に対して警報を発する機能(いわゆる衝突防止警報システム)等を実行する。
The
図6は、実施の形態1に係る障害物検出装置10の動作例を示すフローチャートである。障害物検出装置10は、車両50が走行している間、図6のフローチャートに示される動作を繰り返し実行する。
FIG. 6 is a flowchart showing an operation example of the
ステップST1において、送受信部11は、予め定められた駆動間隔で、測距センサ1〜4に対して直接波及び間接波の送受信を行わせ、送受信結果を傾斜障害物検出部12へ出力する。
In step ST1, the transmission /
ステップST2において、傾斜障害物検出部12は、測距センサ1〜4のいずれかにより直接波及び間接波が受信された場合、非傾斜障害物が存在していることを検知する(ステップST2“YES”)。この場合、傾斜障害物検出部12は、直接波の送受信結果と間接波の送受信結果とを、交点処理部13へ出力する。
一方、傾斜障害物検出部12は、測距センサ1〜4のすべてにより間接波が受信されておらず、かつ、測距センサ1〜4のいずれかにより直接波が受信された場合、傾斜障害物が存在していることを検知する(ステップST2“NO”)。この場合、傾斜障害物検出部12は、直接波の送受信結果を、交点処理部13へ出力する。In step ST2, the tilt
On the other hand, when the indirect wave is not received by all of the
ステップST3において、交点処理部13は、傾斜障害物検出部12から受け取った直接波の送受信結果と間接波の送受信結果とを用いて2円交点処理を行い、非傾斜障害物の形状に相当する交点群の位置を算出する。例えば、測距センサ1が超音波を送信し、測距センサ1が直接波を受信し、測距センサ2が間接波を受信した場合を想定する。
この場合、交点処理部13は、直接波の送受信結果を用いて、測距センサ1が超音波を送信してから直接波を受信するまでに要した時間を元に、TOF方式により当該超音波が反射した非傾斜障害物までの距離を算出する。そして、交点処理部13は、測距センサ1の位置を中心とし、上記直接波に基づいて算出した非傾斜障害物までの距離を半径とした円を描く。また、交点処理部13は、間接波の送受信結果を用いて、測距センサ1が超音波を送信してから測距センサ2が間接波を受信するまでに要した時間を元に、TOF方式により当該超音波が反射した非傾斜障害物までの距離を算出する。そして、交点処理部13は、測距センサ1の位置と測距センサ2の位置を焦点とし、上記間接波に基づいて算出した非傾斜障害物までの距離を用いた楕円を描く。そして、交点処理部13は、円と楕円との交点の位置を算出する。In step ST3, the
In this case, the
ステップST4において、接触位置推定部15は、交点処理部13により算出された交点群の位置を、形状推定部14を介して交点処理部13から受け取る。接触位置推定部15は、交点処理部13により算出された交点群の位置を非傾斜障害物の位置と推定し、当該位置を接触位置情報として衝突判定部20へ出力する。
In step ST4, the contact
ステップST5において、衝突判定部20は、接触位置推定部15から受け取った接触位置情報を用いて、傾斜障害物又は非傾斜障害物と車両50との衝突の可能性を判定する。衝突判定部20は、衝突の可能性が高いと判定した場合(ステップST5“YES”)、ステップST6において車両50に対して衝突回避を指示する。衝突の可能性が低い場合(ステップST5“NO”)、障害物検出装置10の動作はステップST1に戻る。
In step ST5, the
ステップST7において、交点処理部13は、傾斜障害物検出部12から受け取った直接波の送受信結果を用いて図3及び図4に示されるような2円交点処理を行い、傾斜障害物の形状に相当する交点群の位置を算出する。
In step ST7, the
ステップST8において、形状推定部14は、交点処理部13により算出された交点群に対する近似直線を求める。ステップST9において、形状推定部14は、求めた近似直線が複数であるか否かを判定する。
In step ST8, the
近似直線が複数である場合(ステップST9“YES”)、ステップST10において、形状推定部14は、傾斜障害物が角柱のような角部を有する形状であると推定する。ステップST11において、接触位置推定部15は、形状推定部14により推定された角部の位置を接触位置と推定し、当該位置を接触位置情報として衝突判定部20へ出力する。
When there are a plurality of approximate straight lines (step ST9 “YES”), in step ST10, the
近似直線が単数である場合(ステップST9“NO”)、ステップST12において、形状推定部14は、傾斜障害物が傾斜壁のような角部を有さない形状であると推定する。ステップST13において、接触位置推定部15は、形状推定部14により求められた近似直線と、車両側線52又は車両側線53との交点の位置を、接触位置と推定し、当該位置を接触位置情報として衝突判定部20へ出力する。
When the approximate straight line is singular (step ST9 “NO”), in step ST12, the
以上のように、実施の形態1に係る障害物検出装置10は、送受信部11、傾斜障害物検出部12、交点処理部13、形状推定部14、及び接触位置推定部15を備える。送受信部11は、車両50の後面51に設置された複数の測距センサ1〜4に対して、直接波及び間接波の送受信を行わせる。傾斜障害物検出部12は、複数の測距センサ1〜4における間接波の受信状況に基づいて、複数の測距センサ1〜4の設置方向に対して傾斜した傾斜面を有する傾斜障害物が存在していることを検出する。交点処理部13は、傾斜障害物検出部12により傾斜障害物が存在していることが検出された場合、車両50の走行中における異なる時刻に同一の測距センサが2回直接波を送受信した結果を用いて2つの円を描いて当該2つの円の交点を求める2円交点処理を行うことによって、複数の測距センサ1〜4による直接波の送受信結果から交点群の位置を算出する。形状推定部14は、交点処理部13により算出された交点群の位置に基づいて、傾斜障害物の形状を推定する。接触位置推定部15は、形状推定部14により推定された傾斜障害物の形状に基づいて、傾斜障害物のうちの車両50に最も近い部位の位置を推定して接触位置情報として出力する。これにより、障害物検出装置10は、車両50の後方に存在する傾斜障害物を検出することができる。
As described above, the
また、実施の形態1の交点処理部13は、測距センサが超音波を送信した後に当該測距センサが最初に受信した反射波を直接波として用いて2円交点処理を行う。これにより、車両50が傾斜障害物に近づくにつれて交点の位置が傾斜障害物の傾斜面に沿ってシフトしていくことになるため、形状推定部14において交点群に対する近似直線を求めることが可能となる。
Further, the
また、実施の形態1の形状推定部14は、交点群の近似直線を求め、当該近似直線が複数である場合に傾斜障害物が角部を有する形状であると推定し、当該近似直線が単数である場合に傾斜障害物が角部を有さない形状であると推定する。これにより、形状推定部14は、傾斜障害物が角柱のような形状であるか傾斜壁のような形状であるかを判別することができる。角柱と傾斜壁とでは車両50の後面51に接触する部位が異なるため、形状推定部14が角柱と傾斜壁とを判別することにより、衝突判定部20による衝突可能性の判定精度が向上する。
Further, the
また、実施の形態1の形状推定部14は、交点群の近似直線が複数である場合、当該近似直線の交点位置が傾斜障害物の有する角部の位置であると推定する。接触位置推定部15は、形状推定部14により推定された角部の位置を接触位置情報として出力する。これにより、接触位置推定部15は、角柱のような形状をした傾斜障害物について、車両50の後面51に最も近い部位の位置を精度よく推定することができる。
Further, when there are a plurality of approximate straight lines of the intersection group, the
また、実施の形態1の形状推定部14は、交点群の近似直線が単数である場合、当該近似直線と車両50の側面を延長した車両側線52,53との交点の位置を接触位置情報として出力する。これにより、接触位置推定部15は、傾斜壁のような形状をした傾斜障害物について、車両50の後面51に最も近い部位の位置を精度よく推定することができる。
Further, when the approximate straight line of the intersection group is a single number, the
実施の形態2.
図7は、実施の形態2に係る障害物検出装置10の構成例を示すブロック図である。実施の形態2に係る障害物検出装置10は、図1に示された実施の形態1の障害物検出装置10に対して、センサ選択部16が追加された構成である。図7において図1と同一又は相当する部分は、同一の符号を付し説明を省略する。
FIG. 7 is a block diagram showing a configuration example of the
センサ選択部16は、接触位置推定部15により推定された傾斜障害物のうちの車両に最も近い部位の位置、つまり接触位置に基づいて、測距センサ1〜4の中から直接波の送受信を行わせる1つ以上の測距センサを選択する。センサ選択部16は、選択した測距センサを示す情報を、送受信部11へ出力する。送受信部11は、センサ選択部16により測距センサが選択された場合、選択された2つ以上の測距センサに対して直接波の送受信を行わせる。
The
図8A〜図8Fは、センサ選択部16による測距センサの選択方法を説明する図である。図8A〜図8Fにおいて図1〜図5と同一又は相当する部分は、同一の符号を付し説明を省略する。この例では、センサ選択部16は、傾斜障害物の接触位置に近い2つの測距センサに直接波の送受信を行わせるようにし、残りの測距センサによる送受信を停止させる。
8A to 8F are diagrams illustrating a method of selecting a distance measuring sensor by the
以下では、直接波の送受信を行わせる測距センサを「駆動センサ」と称し、直接波の送受信を停止させる測距センサを「非駆動センサ」と称する。 Hereinafter, the distance measuring sensor that transmits and receives the direct wave is referred to as a "drive sensor", and the distance measuring sensor that stops the transmission and reception of the direct wave is referred to as a "non-drive sensor".
図8Aの場合、センサ選択部16は、傾斜障害物61の接触位置91に近い測距センサ2と測距センサ3を、駆動センサとして選択する。図8Bの場合、センサ選択部16は、傾斜障害物61の接触位置92に近い測距センサ1と測距センサ2を、駆動センサとして選択する。
In the case of FIG. 8A, the
例外として、測距センサの正面に傾斜障害物61の角部が存在する場合、角部の正面の測距センサは直接波を受信することが困難であるため、センサ選択部16は、正面の測距センサを除外した残りの測距センサの中から、接触位置に近い2つの測距センサを選択する。図8Cの場合、センサ選択部16は、傾斜障害物61の角部である接触位置93の正面に位置する測距センサ2を非駆動センサとし、測距センサ2に隣接する測距センサ1と測距センサ3を駆動センサとして選択する。図8Dの場合、センサ選択部16は、傾斜障害物61の角部である接触位置94の正面に位置する測距センサ1を非駆動センサとし、測距センサ1に隣接する測距センサ2と測距センサ3を駆動センサとして選択する。
As an exception, when the corner portion of the
また、センサ選択部16は、傾斜壁のような形状をした傾斜障害物62の場合、接触位置に近い2つの測距センサを選択する。図8Eの場合、センサ選択部16は、図示しない交点群の近似直線と車両側線52との交点である接触位置95に近い測距センサ1と測距センサ2を、駆動センサとして選択する。図8Fの場合、測距センサ1よりも外側に傾斜障害物62が存在する。この傾斜障害物62は、角部を有する角柱のような形状をしているが、近似直線(不図示)が1本であるので形状推定部14において角部を有さない傾斜壁のような形状をした傾斜障害物62と推定され、接触位置推定部15において上記近似直線と車両側線52との交点である接触位置96が推定される。よって、センサ選択部16は、図8Eの場合と同様、図8Fの場合も、接触位置96に近い測距センサ1と測距センサ2を駆動センサとして選択する。
Further, in the case of an
図9及び図10は、実施の形態2に係る障害物検出装置10の動作例を示すフローチャートである。障害物検出装置10は、車両50が走行している間、図9及び図10のフローチャートに示される動作を繰り返し実行する。
9 and 10 are flowcharts showing an operation example of the
ステップST21において、送受信部11は、センサ選択部16により測距センサ1〜4の中から駆動センサが選択されているか否かを確認する。駆動センサが選択されている場合(ステップST21“YES”)、送受信部11は、図10に示されるステップST31以降の動作を行う。一方、駆動センサが選択されていない場合(ステップST21“NO”)、送受信部11は、ステップST1以降の動作を行う。図9及び図10のフローチャートにおけるステップST1〜ST13の動作は、図6のフローチャートにおけるステップST1〜ST13の動作と同じであるため、説明を省略する。
In step ST21, the transmission /
ステップST22において、センサ選択部16は、接触位置推定部15がステップST11又はステップST13で推定した、傾斜障害物の接触位置を示す接触位置情報を、接触位置推定部15から受け取る。センサ選択部16は、接触位置情報に基づく接触位置と測距センサ1〜4の位置とを比較して、測距センサ1〜4の中から当該接触位置に近い少なくとも2つ測距センサを駆動センサとして選択し、選択した駆動センサを示す情報を送受信部11へ出力する。
In step ST22, the
ステップST31において、送受信部11は、予め定められた駆動間隔(例えば、50ms)で、センサ選択部16により選択された少なくとも2つの駆動センサのそれぞれに対して直接波の送受信を行わせ、送受信結果を傾斜障害物検出部12へ出力する。例えば、図8Aのように測距センサ2と測距センサ3が駆動センサとして選択された場合、送受信部11は、まず、測距センサ2から超音波を送信させ、その後、測距センサ2に反射波(つまり、直接波)を受信させる。送受信部11は、測距センサ2から超音波を送信させた時点から50ms後に、今度は測距センサ3から超音波を送信させ、その後、測距センサ3に反射波(つまり、直接波)を受信させる。駆動センサは測距センサ2と測距センサ3の2つだけなので、送受信部11は、測距センサ3から超音波を送信させた時点から50ms後に、再び測距センサ2から超音波を送信させる。このように、送受信部11は、100msの駆動周期で、駆動センサである測距センサ2と測距センサ3に直接波の送受信を行わせる。送受信部11は、ステップST1では、4つの測距センサ1〜4を200msの駆動周期で駆動させるが、ステップST31では、2つの測距センサ2,3を100msの駆動周期で駆動させることになる。そのため、障害物検出装置10は、短時間でより多くの接触位置の情報を得ることができるようになり、衝突判定部20は、より精度よく衝突の可能性を判定することができる。
In step ST31, the transmission /
ステップST32において、交点処理部13は、駆動センサによる直接波の送受信結果を、傾斜障害物検出部12を介して送受信部11から受け取る。交点処理部13は、直接波の送受信結果を用いて2円交点処理を行い、傾斜障害物の形状に相当する交点群の位置を算出する。
In step ST32, the
図10のフローチャートにおけるステップST33〜ステップST39の動作は、図6及び図9のフローチャートにおけるステップST8〜ST13,ST5の動作と同じであるため、説明を省略する。 Since the operations of steps ST33 to ST39 in the flowchart of FIG. 10 are the same as the operations of steps ST8 to ST13 and ST5 in the flowcharts of FIGS. 6 and 9, the description thereof will be omitted.
なお、図8A〜図8Fの例では、センサ選択部16は、傾斜障害物の接触位置と測距センサ1〜4の設置位置とに基づいて、測距センサ1〜4を駆動センサと非駆動センサとに分類し、非駆動センサの直接波の送受信を停止させたが、これに限定されない。
例えば、図8Aに示される位置に傾斜障害物61が存在する場合、図2Aに示されるように測距センサ1,2から送信された超音波は測距センサ3,4へ届かない。同様に、測距センサ3,4から送信された超音波は、測距センサ1,2へ届かない。したがって、図8Aの場合、角部61aである接触位置91を間に挟んで、測距センサ1,2と測距センサ3,4とは、干渉せずに直接波の送受信が可能である。In the example of FIGS. 8A to 8F, the
For example, when the
そこで、例えば、送受信部11は、図8Aにおいて駆動センサとして選択された測距センサ2と測距センサ3とを50ms間隔で交互に駆動するのではなく、同時に駆動してもよい。この場合、送受信部11は、2つの測距センサ2,3を50msの駆動周期で駆動させることができる。
あるいは、送受信部11は、図8Aにおいて駆動センサとして選択された測距センサ2と測距センサ3の駆動間隔を短くし、非駆動センサである測距センサ1と測距センサ4の駆動間隔を長くしてもよい。この場合、送受信部11は、例えば、駆動センサを駆動周期ごとに駆動し、非駆動センサを駆動周期の2回に1回駆動する。Therefore, for example, the transmission /
Alternatively, the transmission /
以上のように、実施の形態2に係る障害物検出装置10は、接触位置推定部15により推定された傾斜障害物のうちの車両50に最も近い部位の位置に基づいて、複数の測距センサ1〜4の中から直接波の送受信を行わせる測距センサを選択するセンサ選択部16を備える。送受信部11は、センサ選択部16により選択された当該測距センサに対して直接波の送受信を行わせる。これにより、障害物検出装置10は、短時間でより多くの直接波の送受信を行わせてより多くの接触位置の情報を得ることができるようになり、衝突判定部20は、より精度よく衝突の可能性を判定することができる。
As described above, the
なお、実施の形態1,2では、測距センサ1〜4が車両50の後面51に設置されたが、車両50の前面に設置されてもよい。この場合、障害物検出装置10は、車両50の前面に設置された測距センサ1〜4を用いて、車両50の前方に存在する傾斜障害物を検出する。
In the first and second embodiments, the
最後に、各実施の形態に係る障害物検出装置10のハードウェア構成を説明する。
図11及び図12は、各実施の形態に係る障害物検出装置10のハードウェア構成例を示す図である。障害物検出装置10における送受信部11、傾斜障害物検出部12、交点処理部13、形状推定部14、接触位置推定部15、及びセンサ選択部16の機能は、処理回路により実現される。即ち、障害物検出装置10は、上記機能を実現するための処理回路を備える。処理回路は、専用のハードウェアとしての処理回路100であってもよいし、メモリ102に格納されるプログラムを実行するプロセッサ101であってもよい。Finally, the hardware configuration of the
11 and 12 are diagrams showing a hardware configuration example of the
図11に示されるように、処理回路が専用のハードウェアである場合、処理回路100は、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ASIC(Application Specific Integrated Circuit)、FPGA(Field Programmable Gate Array)、又はこれらを組み合わせたものが該当する。送受信部11、傾斜障害物検出部12、交点処理部13、形状推定部14、接触位置推定部15、及びセンサ選択部16の機能を複数の処理回路100で実現してもよいし、各部の機能をまとめて1つの処理回路100で実現してもよい。
As shown in FIG. 11, when the processing circuit is dedicated hardware, the
図12に示されるように、処理回路がプロセッサ101である場合、送受信部11、傾斜障害物検出部12、交点処理部13、形状推定部14、接触位置推定部15、及びセンサ選択部16の機能は、ソフトウェア、ファームウェア、又はソフトウェアとファームウェアとの組み合わせにより実現される。ソフトウェア又はファームウェアはプログラムとして記述され、メモリ102に格納される。プロセッサ101は、メモリ102に格納されたプログラムを読みだして実行することにより、各部の機能を実現する。即ち、障害物検出装置10は、プロセッサ101により実行されるときに、図6等のフローチャートで示されるステップが結果的に実行されることになるプログラムを格納するためのメモリ102を備える。また、このプログラムは、送受信部11、傾斜障害物検出部12、交点処理部13、形状推定部14、接触位置推定部15、及びセンサ選択部16の手順又は方法をコンピュータに実行させるものであるとも言える。
As shown in FIG. 12, when the processing circuit is the
ここで、プロセッサ101とは、CPU(Central Processing Unit)、処理装置、演算装置、又はマイクロプロセッサ等のことである。
メモリ102は、RAM(Random Access Memory)、ROM(Read Only Memory)、EPROM(Erasable Programmable ROM)、又はフラッシュメモリ等の不揮発性もしくは揮発性の半導体メモリであってもよいし、ハードディスク又はフレキシブルディスク等の磁気ディスクであってもよいし、CD(Compact Disc)又はDVD(Digital Versatile Disc)等の光ディスクであってもよい。Here, the
The
なお、送受信部11、傾斜障害物検出部12、交点処理部13、形状推定部14、接触位置推定部15、及びセンサ選択部16の機能について、一部を専用のハードウェアで実現し、一部をソフトウェア又はファームウェアで実現するようにしてもよい。このように、障害物検出装置10における処理回路は、ハードウェア、ソフトウェア、ファームウェア、又はこれらの組み合わせによって、上述の機能を実現することができる。
Some of the functions of the transmission /
本発明はその発明の範囲内において、各実施の形態の自由な組み合わせ、各実施の形態の任意の構成要素の変形、又は各実施の形態の任意の構成要素の省略が可能である。 The present invention allows any combination of embodiments, modifications of any component of each embodiment, or omission of any component of each embodiment within the scope of the invention.
この発明に係る障害物検出装置は、車両前後に存在する傾斜した障害物を検出するようにしたので、衝突被害軽減ブレーキ又は衝突防止警報システム等で用いられる障害物検出装置に用いるのに適している。 Since the obstacle detection device according to the present invention detects inclined obstacles existing in front of and behind the vehicle, it is suitable for use in an obstacle detection device used in a collision damage mitigation brake, a collision prevention warning system, or the like. There is.
1,1a,1b,2,3,4 測距センサ、10 障害物検出装置、11 送受信部、12 傾斜障害物検出部、13 交点処理部、14 形状推定部、15 接触位置推定部、16 センサ選択部、20 衝突判定部、50 車両、51 後面、52,53 車両側線、61,62 傾斜障害物、61a 角部、70,71,73,74,75 反射点、72,76,77 交点、80,81,83,85,86,88,89 近似直線、82,84,87,90,91,92,93,94,95,96 接触位置、100 処理回路、101 プロセッサ、102 メモリ。 1,1a, 1b, 2,3,4 Distance measuring sensor, 10 Obstacle detection device, 11 Transmission / reception unit, 12 Tilt obstacle detection unit, 13 Intersection processing unit, 14 Shape estimation unit, 15 Contact position estimation unit, 16 Sensors Selection part, 20 collision detection part, 50 vehicle, 51 rear surface, 52,53 vehicle side line, 61,62 tilt obstacle, 61a corner part, 70,71,73,74,75 reflection point, 72,76,77 intersection, 80,81,83,85,86,88,89 Approximate straight line, 82,84,87,90,91,92,93,94,95,96 Contact position, 100 processing circuit, 101 processor, 102 memory.
Claims (6)
前記複数の測距センサにおける間接波の受信状況に基づいて、前記複数の測距センサの設置方向に対して傾斜した傾斜面を有する傾斜障害物が存在していることを検出する傾斜障害物検出部と、
前記傾斜障害物検出部により前記傾斜障害物が存在していることが検出された場合、前記車両の走行中における異なる時刻に同一の測距センサが2回直接波を送受信した結果を用いて2つの円を描いて当該2つの円の交点を求める2円交点処理を行うことによって、前記複数の測距センサによる直接波の送受信結果から交点群の位置を算出する交点処理部と、
前記交点処理部により算出された前記交点群の位置に基づいて、前記傾斜障害物の形状を推定する形状推定部と、
前記形状推定部により推定された前記傾斜障害物の形状に基づいて、前記傾斜障害物のうちの前記車両に最も近い部位の位置を推定して接触位置情報として出力する接触位置推定部とを備える障害物検出装置。A transmitter / receiver that transmits and receives direct and indirect waves to multiple ranging sensors installed on the front or rear of the vehicle.
Inclined obstacle detection that detects the existence of an inclined obstacle having an inclined surface inclined with respect to the installation direction of the plurality of distance measuring sensors based on the reception status of the indirect wave in the plurality of distance measuring sensors. Department and
When it is detected by the tilt obstacle detection unit that the tilt obstacle is present, the same ranging sensor transmits and receives a direct wave twice at different times while the vehicle is running. An intersection processing unit that calculates the position of the intersection group from the transmission / reception results of direct waves by the plurality of distance measuring sensors by performing a two-circle intersection processing that draws one circle and finds the intersection of the two circles.
A shape estimation unit that estimates the shape of the inclined obstacle based on the position of the intersection group calculated by the intersection processing unit, and a shape estimation unit.
A contact position estimation unit that estimates the position of the portion of the inclination obstacle closest to the vehicle based on the shape of the inclination obstacle estimated by the shape estimation unit and outputs it as contact position information is provided. Obstacle detector.
前記接触位置推定部は、前記形状推定部により推定された前記角部の位置を前記接触位置情報として出力することを特徴とする請求項3記載の障害物検出装置。When there are a plurality of approximate straight lines of the intersection group, the shape estimation unit estimates that the intersection position of the approximate straight line is the position of the corner portion of the inclination obstacle.
The obstacle detection device according to claim 3, wherein the contact position estimation unit outputs the position of the corner portion estimated by the shape estimation unit as the contact position information.
前記送受信部は、前記センサ選択部により選択された前記測距センサに対して直接波の送受信を行わせることを特徴とする請求項1記載の障害物検出装置。Based on the position of the portion of the tilt obstacle estimated by the contact position estimation unit that is closest to the vehicle, a distance measuring sensor that directly transmits and receives waves is selected from the plurality of distance measuring sensors. Equipped with a sensor selection unit
The obstacle detection device according to claim 1, wherein the transmission / reception unit directly transmits / receives waves to the distance measuring sensor selected by the sensor selection unit.
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/JP2019/031222 WO2021024433A1 (en) | 2019-08-07 | 2019-08-07 | Obstacle detection device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP6945776B2 true JP6945776B2 (en) | 2021-10-06 |
| JPWO2021024433A1 JPWO2021024433A1 (en) | 2021-10-28 |
Family
ID=74503158
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2021531957A Expired - Fee Related JP6945776B2 (en) | 2019-08-07 | 2019-08-07 | Obstacle detector |
Country Status (2)
| Country | Link |
|---|---|
| JP (1) | JP6945776B2 (en) |
| WO (1) | WO2021024433A1 (en) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE102021205477A1 (en) * | 2021-05-28 | 2022-12-01 | Continental Autonomous Mobility Germany GmbH | Procedure for determining the position of an object |
| JP7699414B2 (en) * | 2021-09-27 | 2025-06-27 | パナソニックオートモーティブシステムズ株式会社 | OBJECT IDENTIFICATION DEVICE, MOBILE BODY, AND OBJECT IDENTIFICATION METHOD |
Family Cites Families (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003194938A (en) * | 2001-12-25 | 2003-07-09 | Denso Corp | Obstacle detection device |
| JP2004354326A (en) * | 2003-05-30 | 2004-12-16 | Denso Corp | Vehicle periphery display device |
| JP5710000B2 (en) * | 2011-08-16 | 2015-04-30 | 三菱電機株式会社 | Object detection device |
| KR101977458B1 (en) * | 2017-03-06 | 2019-05-10 | 지엠 글로벌 테크놀러지 오퍼레이션스 엘엘씨 | Vehicle collision prediction algorithm using radar sensor and upa sensor |
| JP6790998B2 (en) * | 2017-04-28 | 2020-11-25 | 株式会社Soken | Obstacle detector and control device |
-
2019
- 2019-08-07 JP JP2021531957A patent/JP6945776B2/en not_active Expired - Fee Related
- 2019-08-07 WO PCT/JP2019/031222 patent/WO2021024433A1/en not_active Ceased
Also Published As
| Publication number | Publication date |
|---|---|
| WO2021024433A1 (en) | 2021-02-11 |
| JPWO2021024433A1 (en) | 2021-10-28 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6811913B2 (en) | Obstacle detector | |
| JP4123259B2 (en) | Object detection apparatus and object detection method | |
| JP5634400B2 (en) | Obstacle detection device and obstacle detection method | |
| JP6474228B2 (en) | Object detection device | |
| JP7681374B2 (en) | Vehicle control device, vehicle, vehicle control method, and vehicle control program | |
| JP5644516B2 (en) | Parking space detection device | |
| KR102855721B1 (en) | Obstacle detection system and method using distance sensor | |
| JP6577767B2 (en) | Object detection apparatus and object detection method | |
| JP6945776B2 (en) | Obstacle detector | |
| JP7385026B2 (en) | Method and apparatus for classifying objects, especially in the vicinity of automobiles | |
| CN110736998A (en) | Lidar system and method of operation | |
| JP3955314B2 (en) | Tracking system and self-propelled body | |
| JP5148353B2 (en) | Underwater vehicle and obstacle detection device | |
| JPWO2019058507A1 (en) | Obstacle detection device | |
| JP2015132511A (en) | Road surface monitoring device and electric cart | |
| JPWO2020008534A1 (en) | Obstacle detection device and driving support device | |
| KR20150022166A (en) | System and method for controlling mirror of vehicle using radar sensor | |
| JP7671200B2 (en) | OBJECT DETECTION SYSTEM AND OBJECT DETECTION METHOD | |
| JP6873353B2 (en) | Obstacle detector | |
| JPH1062532A (en) | Radar equipment for vehicles | |
| JPH05288847A (en) | Approach detection apparatus | |
| KR20200076967A (en) | Ultrasonic Sensor Apparatus, Apparatus and Method for Controlling Ultrasonic Sensor Apparatus | |
| JP7195447B2 (en) | Obstacle detector | |
| JP6820132B2 (en) | Driving support device | |
| CN116507938A (en) | Method, measuring device and vehicle for measuring the lateral surroundings of a vehicle |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210604 |
|
| A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20210604 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210817 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210914 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6945776 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| LAPS | Cancellation because of no payment of annual fees |