Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP6522384B2 - レーザレーダ装置及び走行体 - Google Patents
[go: Go Back, main page]

JP6522384B2 - レーザレーダ装置及び走行体 - Google Patents

レーザレーダ装置及び走行体 Download PDF

Info

Publication number
JP6522384B2
JP6522384B2 JP2015060071A JP2015060071A JP6522384B2 JP 6522384 B2 JP6522384 B2 JP 6522384B2 JP 2015060071 A JP2015060071 A JP 2015060071A JP 2015060071 A JP2015060071 A JP 2015060071A JP 6522384 B2 JP6522384 B2 JP 6522384B2
Authority
JP
Japan
Prior art keywords
light
light receiving
line sensor
target area
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2015060071A
Other languages
English (en)
Other versions
JP2016180624A (ja
JP2016180624A5 (ja
Inventor
川添 浩平
浩平 川添
窪田 隆博
隆博 窪田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Heavy Industries Ltd
Original Assignee
Mitsubishi Heavy Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Heavy Industries Ltd filed Critical Mitsubishi Heavy Industries Ltd
Priority to JP2015060071A priority Critical patent/JP6522384B2/ja
Priority to PCT/JP2015/082563 priority patent/WO2016151939A1/ja
Priority to US15/557,995 priority patent/US11009606B2/en
Priority to SG11201707741UA priority patent/SG11201707741UA/en
Publication of JP2016180624A publication Critical patent/JP2016180624A/ja
Publication of JP2016180624A5 publication Critical patent/JP2016180624A5/ja
Application granted granted Critical
Publication of JP6522384B2 publication Critical patent/JP6522384B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06Systems determining position data of a target
    • G01S17/42Simultaneous measurement of distance and other co-ordinates
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B61RAILWAYS
    • B61LGUIDING RAILWAY TRAFFIC; ENSURING THE SAFETY OF RAILWAY TRAFFIC
    • B61L23/00Control, warning or like safety means along the route or between vehicles or trains
    • B61L23/04Control, warning or like safety means along the route or between vehicles or trains for monitoring the mechanical state of the route
    • B61L23/041Obstacle detection
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B61RAILWAYS
    • B61LGUIDING RAILWAY TRAFFIC; ENSURING THE SAFETY OF RAILWAY TRAFFIC
    • B61L29/00Safety means for rail/road crossing traffic
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C3/00Measuring distances in line of sight; Optical rangefinders
    • G01C3/02Details
    • G01C3/06Use of electric means to obtain final indication
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/89Lidar systems specially adapted for specific applications for mapping or imaging
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/93Lidar systems specially adapted for specific applications for anti-collision purposes
    • G01S17/931Lidar systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/481Constructional features, e.g. arrangements of optical elements
    • G01S7/4816Constructional features, e.g. arrangements of optical elements of receivers alone
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/481Constructional features, e.g. arrangements of optical elements
    • G01S7/4817Constructional features, e.g. arrangements of optical elements relating to scanning
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/483Details of pulse systems
    • G01S7/486Receivers
    • G01S7/4865Time delay measurement, e.g. time-of-flight measurement, time of arrival measurement or determining the exact position of a peak
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B61RAILWAYS
    • B61LGUIDING RAILWAY TRAFFIC; ENSURING THE SAFETY OF RAILWAY TRAFFIC
    • B61L29/00Safety means for rail/road crossing traffic
    • B61L29/24Means for warning road traffic that a gate is closed or closing, or that rail traffic is approaching, e.g. for visible or audible warning
    • B61L29/28Means for warning road traffic that a gate is closed or closing, or that rail traffic is approaching, e.g. for visible or audible warning electrically operated
    • B61L29/30Supervision, e.g. monitoring arrangements
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/165Anti-collision systems for passive traffic, e.g. including static obstacles, trees
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/166Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Electromagnetism (AREA)
  • Mechanical Engineering (AREA)
  • Optical Radar Systems And Details Thereof (AREA)
  • Traffic Control Systems (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Description

本発明は、レーザ光を走査させることで計測対象エリアの3次元情報を生成するレーザレーダ装置、及び、走行体に関する。
一般に、レーザ光を計測対象エリアに走査させながら照射し、この計測対象エリアに存在する物体などからの反射光を受光素子で受光することによって得られる受光信号の分布から計測対象エリアの3次元情報を生成するレーザレーダ装置が知られている。この種のレーザレーダ装置では、レーザ光の送光側、及び、反射光の受光側の各々にスキャナを設け、走査時における送光側のスキャナのミラー角(レーザ光の送光角)に合せて受光側のスキャナのミラー角(反射光の受光角)を随時調整することで反射光を受光素子に入射させている。この構成では、送光側及び受光側の両方にスキャナを設けるため、レーザレーダ装置全体が大型化する問題があった。
上記した問題を解決するために、従来、受光側にスキャナを設けないレーザレーダ装置が提案されている(特許文献1参照)。このレーザレーダ装置は、長尺受光素子を受光素子の長尺方向と直交する方向にアレイ状に並べた長尺受光素子アレイと、受信信号を増幅するトランスインピーダンスアンプアレイと、トランスインピーダンスアンプアレイの各素子からの受信信号を加算する加算回路と、を備えることで、広い2次元視野の確保しつつ受光側のスキャンレスを実現している。
特許第5602225号公報
しかしながら、従来の構成では、長尺受光素子を受光素子の長尺方向と直交する方向にアレイ状に並べた長尺受光素子アレイを備え、アレイ状に並べられた各長尺受光素子が受信した受信信号を加算する加算回路が必要となり、装置構成及び信号処理が煩雑になる問題があった。
本発明は、上記に鑑みてなされたものであって、受光側のスキャンレスを簡単な構成で実現できるレーザレーダ装置、及び、走行体を提供することを目的とする。
上述した課題を解決し、目的を達成するために、本発明は、レーザ光源と、レーザ光源から発光されるレーザ光を所定の第1方向に延びるライン状に成形する送光側レンズと、ライン状に成形されたレーザ光を、計測対象エリアにおける第1方向に直交する第2方向に走査させながら照射するスキャナと、計測対象エリアから反射される反射光を受光する受光側レンズと、受光側レンズの下流側に配置され、第1方向に沿って並べられた複数の受光セルを有する受光ラインセンサと、受光側レンズと受光ラインセンサとの間に配置され、受光側レンズで受光された反射光を受光ラインセンサに向けて集光するとともに、第2方向に集光される倍率が第1方向に集光される倍率よりも大きく設定された受光側光学系と、受光ラインセンサが出力した受信信号に基づき、計測対象エリアの3次元情報を生成する情報生成部と、を備えることを特徴とする。
この構成によれば、第1方向に沿って並べられた複数の受光セルを有する受光ラインセンサと、受光側レンズと受光ラインセンサとの間に配置され、受光側レンズで受光された反射光を受光ラインセンサに向けて集光するとともに、第2方向に集光される倍率が第1方向に集光される倍率よりも大きく設定された受光側光学系とを備えるため、計測対象エリア全体を受光ラインセンサのセンサ視野に収めることができ、受光側のスキャンレスを簡単な構成で実現できる。
この構成において、受光側光学系は、受光側レンズの結像位置付近、または後方に配置されリレーレンズと、リレーレンズから伝送された略平行光束を受光ラインセンサに向けて集光させる集光レンズとを備えても良い。この構成によれば、2種類のレンズを組み合わせた簡単な構成で、受光側レンズの結像情報を受光ラインセンサに集光させることができる。
また、情報生成部は、反射光を受光した受光セルのピクセル情報に基づき取得された第1方向の位置情報と、レーザ光が照射されてから受光ラインセンサで受光されるまでの光往復時間から取得された計測対象エリアまでの距離情報と、レーザ光を照射した際のスキャナの送光制御角度に基づき取得された第2方向の位置情報とから計測対象エリアの3次元情報を生成しても良い。この構成によれば、受光側の視野スキャンにより受信信号の空間位置座標取得が不要となるため、3次元情報を生成するための信号処理の負荷を軽減できる。
また、上記したレーザレーダ装置を走行体に搭載しても良い。この構成によれば、走行体の走行経路の3次元情報を常に取得することができ、走行体の運転支援を行うことができる。
本発明によれば、第1方向に沿って並べられた複数の受光セルを有する受光ラインセンサと、受光側レンズと受光ラインセンサとの間に配置され、受光側レンズで受光された反射光を受光ラインセンサに向けて集光するとともに、第2方向に集光される倍率が第1方向に集光される倍率よりも大きく設定された受光側光学系とを備えるため、計測対象エリア全体を受光ラインセンサのセンサ視野に収めることができ、受光側のスキャンレスを簡単な構成で実現できる。
図1は、本実施形態に係るレーザレーダ装置の概略構成図である。 図2は、受光側光学系を含む周辺構成を示す模式図である。 図3は、集光レンズの構成を示す斜視図である。 図4は、受光ラインセンサの変形例を示す図である。 図5−1は、線路上を走行する列車にレーザレーダ装置を搭載した構成を示す斜視図である。 図5−2は、線路上を走行する列車にレーザレーダ装置を搭載した構成を示す側方視図である。 図6は、車両にレーザレーダ装置を搭載した構成を示す斜視図である。
以下に、本発明に係る実施形態を図面に基づいて詳細に説明する。なお、この実施形態によりこの発明が限定されるものではない。また、実施形態における構成要素には、当業者が置換可能かつ容易なもの、あるいは実質的に同一のものが含まれる。さらに、以下に記載した構成要素は適宜組み合わせることが可能である。
図1は、本実施形態に係るレーザレーダ装置の概略構成図である。レーザレーダ装置1は、図1に示すように、予め設定された所定の計測対象エリアAに対し、例えば、水平方向(第1方向)Xに延びるライン状のレーザ光Lを、この水平方向Xに直交する垂直方向(第2方向)Yに走査しながら照射し、このレーザ光Lの反射光Rを受光して計測対象エリアAの3次元情報を生成する。このレーザレーダ装置1は、例えば、線路上を走行する列車などの車両(走行体)の進行方向前方に搭載され、車両の進行方向に設定された計測対象エリアの3次元情報を生成する。これにより、生成された3次元情報を利用して、車両の進行方向に障害物が存在するか否かを判別できる。
レーザレーダ装置1は、図1に示すように、レーザ光源11と、送光側レンズ12と、スキャナ13と、受光側レンズ16と、受光側光学系17と、受光ラインセンサ18と、アンプ回路19と、距離演算部20と、情報生成部21と、光源制御部30と、スキャナ制御部31と、を有する。光源制御部30は、レーザ光源11の動作を制御する。スキャナ制御部31は、スキャナ13の動作を制御する。光源制御部30は、レーザレーダ装置1のマスタークロックを有し、レーザ光Lの発光と同時にパルス状の発光同期信号を距離演算部20に発信する。
レーザレーダ装置1は、水平方向Xに延びるライン状のレーザ光Lを、計測対象エリアAの垂直方向Yに走査しながら照射する。計測対象エリアAは、レーザレーダ装置1から所定距離離れた位置に設定されたエリアである。レーザレーダ装置1が、例えば、列車などの車両に搭載された場合には、計測対象エリアAは車両の走行に応じて随時更新される。
レーザ光源11は、レーザ光Lを発光する。レーザ光Lは、例えば、200〜2000nmの波長のレーザ光が用いられる。特に、レーザレーダ装置1を屋外の広い空間で使用する場合には、800〜2000nmの波長のレーザ光を用いることで、安定した計測を実現できる。レーザ光源11は、例えば、レーザダイオードなどから構成され、光源制御部30の発光指令に基づきレーザ光Lをパルス状に発光する。送光側レンズ12は、円筒型凸レンズで構成され、レーザ光源11から発光されるレーザ光Lをライン状に成形する。本実施形態では、送光側レンズ12の軸方向を水平方向Xに合わせることで、レーザ光Lは水平方向Xに延びるライン状に成形される。スキャナ13は、ライン状に成形されたレーザ光Lを、計測対象エリアAの垂直方向Yに走査する。
スキャナ13は、計測対象エリアAを走査する機能を有し、ライン状のレーザ光Lを反射させる反射ミラー14と、反射ミラー14で反射したライン状のレーザ光Lを垂直方向Yに走査させる垂直走査部15とを備える。反射ミラー14は、送光側レンズ12でライン状に成形されたレーザ光Lを垂直走査部15に反射する。垂直走査部15は、例えば、ガルバノスキャナにより構成され、平面鏡であるガルバノミラー15aと、ガルバノミラー15aの鏡面を揺動させる駆動モータ15bと、を備えている。垂直走査部15は、スキャナ制御部31の制御の下、駆動モータ15bを駆動させてガルバノミラー15aを揺動させる。これにより、反射ミラー14を反射したレーザ光Lの垂直方向の角度が変更され、計測対象エリアAの垂直方向Yに走査される。なお、本実施形態では、垂直走査部15の一例として、ガルバノスキャナを用いた構成を説明したが、この構成に限るものではなく、例えば、ポリゴンミラーを有するポリゴンスキャナを用いても良い。また、送光側レンズ12の光軸上に垂直走査部15を配置できる構成では、反射ミラー14を設けなくても良い。
スキャナ制御部31は、所定の走査パターンに基づき、駆動モータ15bの動作を制御する。これにより、ライン状のレーザ光Lは、走査パターンに則して計測対象エリアAに照射され、この照射された点(領域)が計測点Sとなる。この場合、スキャナ制御部31は、各計測点Sに対応するガルバノミラー15aのミラー角(送光制御角度)を取得し、このミラー角を情報生成部21に発信する。本実施形態では、スキャナ13は、ライン状のレーザ光Lをラインの延びる方向に垂直な方向に走査しながら計測対象エリアAに照射する。このため、計測対象エリアAに対する3次元計測レートが向上し、計測対象エリアAの計測を短時間に行うことができる。
また、受光側レンズ16は、計測対象エリアAの各計測点Sから反射される反射光Rを受光する。受光側光学系17は、受光側レンズ16で受光された反射光Rを垂直方向Yに集光する。
図2は、受光側光学系を含む周辺構成を示す模式図であり、図3は、集光レンズの構成を示す斜視図である。図2に示すように、計測対象エリアAの各計測点Sで反射される反射光Rは、それぞれ受光側レンズ16で受光される。この受光側レンズ16は、各計測点Sの像を受光側レンズ16の下流側の所定位置(結像位置)で結像する。
受光側光学系17は、受光側レンズ16の結像位置に配置されるリレーレンズ35と、このリレーレンズ35の下流側に配置される集光レンズ36とを備える。この図2では、リレーレンズ35と集光レンズ36とを1枚ずつ備えた構成としているが、各レンズを複数組み合わせたレンズユニットとしても良いことは勿論である。リレーレンズ35は、凸レンズで構成され、結像位置における受光側レンズ16の結像情報を保持したまま、それ以降の光束を略平行化するレンズであり、この結像情報をそのまま集光レンズ36に伝送する機能を有する。また、本実施形態では、リレーレンズ35は、受光側レンズ16の結像位置に配置する構成としたが、これに限るものではなく、受光側レンズ16の結像位置付近、または結像位置の後方に配置しても良い。
集光レンズ36は、図3に示すように、反射光Rの入射側が曲面36a、出射側が平面36bの円筒型凸レンズで構成される。この集光レンズ36は、垂直方向Yに集光される倍率が水平方向Xに集光される倍率よりも大きくなるように形成されている。すなわち、集光レンズ36は、リレーレンズ35から伝送された反射光Rの平行光束、すなわち結像情報のすべてを受光ラインセンサ18に向けて垂直方向Yに集光させる。このため、受光側光学系17は、2種類のレンズを組み合わせた簡単な構成で、受光側レンズ16の結像情報を受光ラインセンサ18に集光させることができ、受光側のスキャンレスを実現できる。
受光ラインセンサ18は、水平方向Xに沿って並べられた複数(本実施形態では5つ)の受光セル18aを備えて構成される。各受光セル18aは、反射光Rを受光して電流に変換する光電変換素子(例えば、フォトダイオード)で形成されており、単一のピクセルを有する単一素子で形成されている。このため、短いパルスのレーザ光Lに応答することができる。
この構成では、受光セル18aの数(5つ)に応じて、計測対象エリアAは、5つの分割エリアAaに区分けされる。そして、計測対象エリアAからの反射光Rは、分割エリアAaに対応して5つに空間分解され、分割エリアAaに対応する受光セル18aに受光される。この場合、分割エリアAaからの反射光Rは、集光レンズ36によって、垂直方向Yに集光されて、対応する受光セル18aに受光される。このため、受光ラインセンサ18には、計測対象エリアAからの反射光Rの平行光束、すなわち結像情報のすべてが集光される。
受光ラインセンサ18は、受光側光学系17で集光された反射光Rを受光し、受光した反射光Rに含まれるレーザ光Lに基づいた受信信号を出力する。アンプ回路19は、受光ラインセンサ18が出力した受信信号を電圧信号として増幅する。受光ラインセンサ18が出力する受信信号は、微弱な電流信号であるため、アンプ回路19は、電流信号を電圧信号に変換して距離演算部20に出力する。本実施形態では、受光ラインセンサ18とアンプ回路19とを備えて受光部を構成する。
距離演算部20は、アンプ回路19にて増幅された受信信号に基づき、計測対象エリアAの計測点Sの距離情報を演算する。距離演算部20は、光源制御部30から発信されたパルス状の発光同期信号とアンプ回路19から発信された受信信号とを受信し、レーザ光Lが照射された計測対象エリアAの計測点Sまでの距離を演算し、距離情報を情報生成部21に発信する。具体的には、距離演算部20は、発光同期信号と受信信号とに基づいてレーザ光Lを発光してから反射光Rを受光するまでの時間を計測するとともに、この計測時間に基づいてレーザ光Lを反射した計測点Sまでの距離を演算する。また、距離演算部20は、距離情報とともに、受信信号に含まれる受光強度を距離情報と関連づけて情報生成部21に発信しても良い。
また、距離演算部20は、アンプ回路19にて増幅された受信信号に基づき、計測対象エリアAの計測点Sの水平方向Xの位置情報を演算する。具体的には、距離演算部20は、反射光Rを受光した受光セル18aのピクセル情報(番号)を取得し、このピクセル情報から計測点Sの水平方向Xの位置情報を演算し、この位置情報を情報生成部21に発信する。
情報生成部21は、スキャナ制御部31から発信された計測点Sに関するガルバノミラー15aのミラー角(送光制御角度)を取得し、このミラー角に基づき、該計測点Sの垂直方向Yの位置情報を演算する。情報生成部21は、距離演算部20から受信した計測点Sの距離情報及び水平方向Xの位置情報と、計測点Sの垂直方向Yの位置情報に基づき、計測点Sにおける座標情報を取得し、計測対象エリアAに存在する複数の計測点Sの座標情報分布から計測対象エリアAの3次元情報を生成する。この構成では、受光側の視野スキャンによる受信信号の空間位置座標取得が不要となるため、3次元情報を生成するための信号処理の負荷を軽減できる。情報生成部21で生成された計測対象エリアAの3次元情報は、外部機器25(例えば、車両のコンピュータ等)に有線または無線にて送信され、この外部機器25で利用される。
本実施形態のレーザレーダ装置1は、集光レンズ36は、リレーレンズ35から伝送された受光側レンズ16の結像情報のすべてを、各受光セル18aを横並びに配置した受光ラインセンサ18に集光する。このため、受光ラインセンサ18には、計測対象エリアAのどの計測点Sからの反射光Rも集光されることにより、受光ラインセンサ18は、常時、計測対象エリアAにおける区分された領域Aa全体をセンサの各受光セル視野に収めることができる。
例えば、特許第5602225号公報に記載されている長尺受光素子を受光素子の長尺方向と直交する方向にアレイ状に並べた長尺受光素子アレイと、各長尺受光素子の受信信号を加算する加算回路とを備えることで、広い2次元視野の確保しつつ受光側のスキャンレスを実現している。しかし、従来技術では、長尺受光素子を受光素子の長尺方向と直交する方向にアレイ状に並べることで、長尺受光素子アレイが大型化してしまい、レーザレーダ装置の小型化という目的に反する恐れがある。また、アレイ状に並べられた各長尺受光素子が受信した受信信号を加算する加算回路が必要となり、装置構成が煩雑になる恐れがあった。これに対して、レーザレーダ装置1は、上述したように、受光側光学系17を設けたことにより、受光ラインセンサ18には、計測対象エリアAの反射光Rが垂直方向Yに集光されるため、計測対象エリアAのどの計測点Sからの反射光Rも受光ラインセンサ18に集光される。このため、受光ラインセンサ18は、常時、計測対象エリアA全体をセンサ視野に収めることができ、従って、計測対象エリアAからの反射光を単一の情報として取り扱うことができ、小型化を実現できる。
ここで、単一ピクセルからなる受光セル18aを有する受光ラインセンサ18を受光側レンズ16の結像位置に配置する構成が想定される。しかし、この構成では、受光ラインセンサ18の受光セル18aの面積が、受光側レンズ16の結像位置での結像情報の面積に比べて極めて小さいため、計測対象エリアAの垂直方向Yの一部分しかセンサ視野に収めることができない。また、計測対象エリアAの垂直方向Y全体のセンサ視野を確保するためには、各受光セル18aの垂直方向Yの大きさ(高さ)を受光側レンズ16の結像位置での結像情報と同等以上の大きさとする必要がある。しかし、受光セル18aのセンサ画素サイズが大きくなると、受光セル(フォトダイオード)としての応答性が低下する問題がある。
これに対して、本実施形態では、受光側光学系17は、受光側レンズ16の結像位置に配置されるリレーレンズ35と、このリレーレンズ35の下流側に配置される集光レンズ36とを備え、集光レンズ36は、リレーレンズ35から伝送された受光側レンズ16の結像情報のすべてを、受光セル18aを並べた受光ラインセンサ18に集光する。このため、応答性を低下することなく、受光側レンズ16の有する視野全体の情報を受光セル18aの画素形状に関係なくカバーすることを可能としている。このため、受光セル18aは、長方形、正方形や円形の画素が並んだラインセンサでも構成可能となり、センサの選択幅を広くすることができる。
次に、受光素子の変形例について説明する。図4は、受光ラインセンサの変形例を示す図である。上記した実施形態では、受光セル18aを水平方向Xに横並びに配置した受光ラインセンサ18を1つ設ける構成としたが、図4に示すように、複数(例えば3つ)の受光ラインセンサ18を垂直方向Yにアレイ状に並べたラインセンサアレイ180とすることもできる。この構成では、垂直方向Yに並んだ残りの2つの受光ラインセンサ18は、予備的に配置されるものであり、レーザレーダ装置1の運用中に受光側レンズ16−リレーレンズ35−集光レンズ36による受光ラインセンサ18への集光位置がずれたり、集光サイズが最適点からずれて拡大した場合でも、ラインセンサアレイ180のうち、反射光が集光される受光ラインセンサ18を使用することができる。これによれば、反射光を確実に受光素子で受光することができ、計測品質を確保することができる。
次に、本実施形態のレーザレーダ装置1の適用例について説明する。図5−1は、線路上を走行する列車にレーザレーダ装置を搭載した構成を示す斜視図であり、図5−2は、線路上を走行する列車にレーザレーダ装置を搭載した構成を示す側方視図である。この適用例では、レーザレーダ装置1を列車(走行体)100に搭載している。列車100は、線路101上を走行するものであり、運転士の操縦によって運転される構成や、コンピュータによって自動運転される構成であっても良い。
レーザレーダ装置1は、列車100の前側上部に設けられ、この列車100の進行方向前方に設定される計測対象エリアAを監視するようになっている。このレーザレーダ装置1は、上述のように、受信側のスキャナを設けない構成であるため、レーザレーダ装置1の小型化を実現している。このため、このレーザレーダ装置1を搭載した列車100は、該レーザレーダ装置1の配置レイアウトによる列車100内の自由空間の減少、もしくは列車100外への突出部などの影響を最小限に抑えることができる。
計測対象エリアAは、具体的には、列車100から所定距離D(例えば300〜500m)に亘って、線路101を含んだ進行方向前方の走行路面に設定されており、この計測対象エリアAは列車100の走行に応じて随時更新される。レーザレーダ装置1は、この計測対象エリアAに向けて、レーザ光Lを走査しながら照射し、各計測点Sの距離情報及び位置情報に基づき、計測対象エリアAの3次元情報を生成する。
列車100は、図示は省略するが、外部機器25(図1)として、レーザレーダ装置1から出力された計測対象エリアAの3次元情報を取得するコンピュータと、このコンピュータが3次元情報に基づいて描画した計測対象エリアAの形状を表示するディスプレイとを備える。これらコンピュータ及びディスプレイは、列車100の運転室に配置される。
この構成では、レーザレーダ装置1が生成した3次元情報は、随時、列車100のコンピュータに出力され、このコンピュータを介して、ディスプレイに表示される。このため、例えば、線路101上に障害物102が存在する場合であっても、この障害物102を含んだ計測対象エリアAの形状がディスプレイに表示されるため、運転士への運転支援を実現することができる。また、ディスプレイに形状を表示するだけでなく、計測対象エリアAにおける進行方向への形状変化が所定の閾値を超えた場合には、障害物102が存在する可能性が高いとして、注意警報を発報する構成としてもよい。
また、列車100がコンピュータによって自動運転される構成において、レーザレーダ装置1が生成した3次元情報に基づき、線路101上に障害物102が存在する場合には、列車100を停止することで安全な自動運転を実現できる。
図6は、車両にレーザレーダ装置を搭載した構成を示す斜視図である。この適用例では、レーザレーダ装置1を車両(走行体)150に搭載している。車両150は、路面上を自在に走行するものであり、運転手の操縦によって運転される構成や、コンピュータによって自動運転される構成であっても良い。
レーザレーダ装置1は、車両150の前側上部に設けられ、この車両150の進行方向前方の地形200上に設定される計測対象エリアAを監視するようになっている。このレーザレーダ装置1は、上述のように、受信側のスキャナを設けない構成であるため、レーザレーダ装置1の小型化を実現している。このため、このレーザレーダ装置1を搭載した車両150は、該レーザレーダ装置1の配置レイアウトによる車両150内の自由空間の減少、もしくは車両150外への突出部などの影響を最小限に抑えることができる。
計測対象エリアAは、具体的には、車両150から所定距離D(例えば100m)に亘って、進行方向前方の地形200の表面に設定されており、この計測対象エリアAは車両150の走行に応じて随時更新される。レーザレーダ装置1は、この計測対象エリアAに向けて、レーザ光Lを走査しながら照射し、各計測点Sの距離情報及び位置情報に基づき、計測対象エリアA(地形200)の3次元情報を生成する。この図6では、地形200は、起伏の大きな頂き部200Aと、起伏の小さな平坦部200Bとを備えるものとして説明する。
車両150は、図示は省略するが、外部機器25(図1)として、この車両150の経路案内を行うナビゲーション装置を備える。このナビゲーション装置は、ナビゲーション装置全体を制御する制御部と、経路(地図情報)を表示するディスプレイとを備え、計測対象エリアAの3次元情報は制御部に出力される。ナビゲーション装置は、計測対象エリアAの3次元情報に基づき、起伏の大きな頂き部200Aを避けて、起伏の小さな平坦部200Bを通る経路201を設定する。この構成によれば、起伏の激しい地形200を走行する場合であっても、なるべく平坦部200Bを含む経路201を走行することができ、運転手への運転支援を実現することができる。
また、車両150がコンピュータによって自動運転される構成において、レーザレーダ装置1が生成した3次元情報に基づき、なるべく平坦部200Bを含む経路201を走行することで安全な自動運転を実現できる。
上記した適用例では、レーザレーダ装置1を列車100や車両150の走行体に搭載する構成を説明したが、自走する走行体であればこれらに限るものではない。また、上記した適用例では、レーザレーダ装置1を走行体に搭載したが、例えば、計測対象エリアAが設定される交差点や踏切等の脇に立設された支柱上に計測対象エリアAを俯瞰するように配置され、ライン状のレーザ光Lを垂直方向Yにスキャンしながら照射し、計測対象エリアA内の物体(例えば、歩行者、自転車、二輪自動車、自動車等の移動物体や建物、ガードレール、樹木等の静止物体等)の反射光Rを受光することで、これら物体の3次元情報を生成する構成としても良い。
以上、説明したように、本実施形態に係るレーザレーダ装置1は、レーザ光源11と、レーザ光源11から発光されるレーザ光Lを水平方向Xに延びるライン状に成形する送光側レンズ12と、ライン状に成形されたレーザ光Lを、計測対象エリアAにおける水平方向Xに直交する垂直方向Yに走査させながら照射するスキャナ13と、計測対象エリアAから反射される反射光Rを受光する受光側レンズ16と、受光側レンズ16の下流側に配置され、水平方向Xに沿って並べられた複数の受光セル18aを有する受光ラインセンサ18と、受光側レンズ16と受光ラインセンサ18との間に配置され、受光側レンズ16で受光された反射光Rを受光ラインセンサ18に向けて集光するとともに、垂直方向Yに集光される倍率が水平方向Xに集光される倍率よりも大きく設定された受光側光学系17と、受光ラインセンサ18が出力した受信信号に基づき、計測対象エリアAの3次元情報を生成する情報生成部21と、を備えるため計測対象エリアA全体を受光ラインセンサ18のセンサ視野に収めることができ、受光側のスキャンレスを簡単な構成で実現できる。
また、本実施形態によれば、受光側光学系17は、受光側レンズ16の結像位置に配置され、該結像位置での結像情報を保持したまま伝送するリレーレンズ35と、リレーレンズ35から伝送された平行光束を受光ラインセンサ18に向けて集光させる集光レンズ36とを備えるため、2種類のレンズを組み合わせた簡単な構成で、受光側レンズ16の結像情報を受光ラインセンサ18に集光させることができる。
また、本実施形態によれば、情報生成部21は、反射光Rを受光した受光セル18aのピクセル情報に基づき取得された計測対象エリアAの計測点Sの水平方向Xの位置情報と、レーザ光Lが照射されてから受光ラインセンサ18で受光されるまでの光往復時間から取得された計測点Sまでの距離情報と、レーザ光Lを照射した際のスキャナ13のミラー角に基づき取得された計測点Sの垂直方向Yの位置情報とから計測対象エリアAの3次元情報を生成するため、受光側の視野スキャンにより受信信号の空間位置座標取得が不要となり、3次元情報を生成するための信号処理の負荷を軽減できる。
また、上記したレーザレーダ装置1は、列車100や車両150に搭載されるため、列車100または車両150の走行経路の3次元情報を常に取得することができ、列車100または車両150の運転支援を行うことができる。
1 レーザレーダ装置
11 レーザ光源
12 送光側レンズ
13 スキャナ
15 垂直走査部
16 受光側レンズ
17 受光側光学系
18 受光ラインセンサ
18a 受光セル
21 情報生成部
30 光源制御部
31 スキャナ制御部
35 リレーレンズ
36 集光レンズ
36a 曲面
36b 平面
100 列車(走行体)
150 車両(走行体)
A 計測対象エリア
Aa 分割エリア
L レーザ光
R 反射光
S 計測点
X 水平方向(第1方向)
Y 垂直方向(第2方向)

Claims (3)

  1. レーザ光源と、
    前記レーザ光源から発光されるレーザ光を所定の第1方向に延びるライン状に成形する送光側レンズと、
    前記ライン状に成形された前記レーザ光を、計測対象エリアにおける前記第1方向に直交する第2方向に走査させながら照射するスキャナと、
    前記計測対象エリアから反射される反射光を受光する受光側レンズと、
    前記受光側レンズの下流側に配置され、前記第1方向に沿って並べられた複数の受光セルを有する受光ラインセンサと、
    前記受光側レンズと前記受光ラインセンサとの間に配置され、前記受光側レンズで受光された前記反射光を前記受光ラインセンサに向けて集光するとともに、前記第2方向に集光される倍率が前記第1方向に集光される倍率よりも大きく設定された受光側光学系と、
    前記受光ラインセンサが出力した受信信号に基づき、前記計測対象エリアの3次元情報を生成する情報生成部と、を備え、
    前記受光側光学系は、前記スキャナの走査に応じて、前記計測対象エリア全体からの反射光を受光する前記受光側レンズの結像位置付近、または後方に配置され、前記受光側レンズが結像する前記計測対象エリア全体を含む結像情報のすべてを前記受光ラインセンサに向けて伝送するリレーレンズと、前記リレーレンズから伝送された光束を前記受光ラインセンサに向けて前記第2方向に集光させる集光レンズと、を備えたことを特徴とするレーザレーダ装置。
  2. 前記情報生成部は、前記反射光を受光した前記受光セルのピクセル情報に基づき取得された前記第1方向の位置情報と、前記レーザ光が照射されてから前記受光ラインセンサで受光されるまでの光往復時間から取得された計測対象エリアまでの距離情報と、前記レーザ光を照射した際の前記スキャナの送光制御角度に基づき取得された前記第2方向の位置情報とから前記計測対象エリアの3次元情報を生成することを特徴とする請求項1に記載のレーザレーダ装置。
  3. 請求項1または2に記載のレーザレーダ装置を備えることを特徴とする走行体。
JP2015060071A 2015-03-23 2015-03-23 レーザレーダ装置及び走行体 Expired - Fee Related JP6522384B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2015060071A JP6522384B2 (ja) 2015-03-23 2015-03-23 レーザレーダ装置及び走行体
PCT/JP2015/082563 WO2016151939A1 (ja) 2015-03-23 2015-11-19 レーザレーダ装置及び走行体
US15/557,995 US11009606B2 (en) 2015-03-23 2015-11-19 Laser radar device and traveling body
SG11201707741UA SG11201707741UA (en) 2015-03-23 2015-11-19 Laser radar device and traveling body

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015060071A JP6522384B2 (ja) 2015-03-23 2015-03-23 レーザレーダ装置及び走行体

Publications (3)

Publication Number Publication Date
JP2016180624A JP2016180624A (ja) 2016-10-13
JP2016180624A5 JP2016180624A5 (ja) 2018-04-26
JP6522384B2 true JP6522384B2 (ja) 2019-05-29

Family

ID=56977132

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015060071A Expired - Fee Related JP6522384B2 (ja) 2015-03-23 2015-03-23 レーザレーダ装置及び走行体

Country Status (4)

Country Link
US (1) US11009606B2 (ja)
JP (1) JP6522384B2 (ja)
SG (1) SG11201707741UA (ja)
WO (1) WO2016151939A1 (ja)

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3491419A4 (en) * 2016-08-26 2019-11-27 SZ DJI Technology Co., Ltd. OPTICAL STRUCTURE FOR EXTENDING THE UAV LASER RADAR SCANNING RANGE AND OTHER OBJECTS, AND ASSOCIATED SYSTEMS AND METHODS
JP6862751B2 (ja) * 2016-10-14 2021-04-21 富士通株式会社 距離測定装置、距離測定方法及びプログラム
DE102016122645A1 (de) * 2016-11-24 2018-05-24 Valeo Schalter Und Sensoren Gmbh Empfangseinrichtung für eine optische Detektionsvorrichtung, Detektionsvorrichtung und Fahrerassistenzsystem
JP6754706B2 (ja) 2017-02-14 2020-09-16 京セラ株式会社 電磁波検出装置、プログラム、および情報取得システム
JP6968568B2 (ja) * 2017-04-20 2021-11-17 株式会社日立製作所 形状計測システム、及び、形状計測方法
JP6743761B2 (ja) * 2017-05-29 2020-08-19 株式会社デンソー 測距センサ
JP2019015697A (ja) * 2017-07-11 2019-01-31 ソニーセミコンダクタソリューションズ株式会社 距離測定装置及び移動体装置
CN111819463B (zh) 2018-03-08 2024-03-08 松下知识产权经营株式会社 激光雷达
DE112018007245T5 (de) 2018-03-08 2020-11-26 Panasonic Intellectual Property Management Co., Ltd. Laser-radar
JP7264167B2 (ja) * 2018-07-30 2023-04-25 コニカミノルタ株式会社 レーザーレーダー装置及びフレームデータの補正システム
CN113961005A (zh) * 2018-10-22 2022-01-21 科沃斯机器人股份有限公司 行进控制的方法、表面清洁机器人及存储介质
JPWO2020116078A1 (ja) * 2018-12-03 2021-10-21 パナソニックIpマネジメント株式会社 レーザレーダ
IL263848A (en) * 2018-12-19 2020-06-30 Elta Systems Ltd System for obstacle detection
JP2020187079A (ja) 2019-05-17 2020-11-19 三菱重工業株式会社 レーザレーダ装置及び走行体
CN113193471B (zh) * 2019-07-31 2022-12-20 上海禾赛科技有限公司 激光器、激光器发射板组件、激光雷达和激光器封装方法
WO2021192601A1 (ja) * 2020-03-26 2021-09-30 パナソニックIpマネジメント株式会社 ラインビーム走査光学系およびレーザレーダ
JP7037609B2 (ja) * 2020-08-24 2022-03-16 京セラ株式会社 電磁波検出装置およびプログラム
EP3984818A1 (de) * 2020-10-19 2022-04-20 ZKW Group GmbH Beleuchtungsvorrichtung für einen kraftfahrzeugscheinwerfer
CN112945137B (zh) * 2021-02-01 2022-06-10 中国矿业大学(北京) 一种基于单线激光雷达与测距仪装备的仓储矿堆扫描方法
CN115113181A (zh) * 2021-03-22 2022-09-27 华为技术有限公司 一种激光雷达及回波光信号接收方法

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS562225B2 (ja) 1973-07-25 1981-01-19
JPH01121782A (ja) * 1987-11-05 1989-05-15 Mitsubishi Electric Corp 受光装置
JPH04198804A (ja) * 1990-11-29 1992-07-20 Nitsupo Denki Kk 長さ測定装置
GB9113556D0 (en) * 1991-06-21 1991-08-14 Memco Med Ltd Laser light transmitter and proximity detector
JPH05107043A (ja) * 1991-10-15 1993-04-27 Nec Corp 外観検査装置
JP2910452B2 (ja) * 1992-10-26 1999-06-23 三菱電機株式会社 レーザ測距装置
JPH06258040A (ja) * 1993-03-02 1994-09-16 S K S Kk レーザー変位計
JPH09113234A (ja) * 1995-10-19 1997-05-02 Matsushita Electric Ind Co Ltd 2次元形状計測センサー
JP2002243543A (ja) * 2001-02-19 2002-08-28 Keyence Corp 光電センサ
JP2003060213A (ja) * 2001-08-16 2003-02-28 Matsusada Precision Kk 大口径広角高速受光装置
US7453569B2 (en) * 2002-07-31 2008-11-18 Jan Arwood Northby Method and apparatus for measuring particle motion using scattered radiation
JP2005055196A (ja) * 2003-08-05 2005-03-03 Olympus Corp 基板検査方法及びその装置
JP4238891B2 (ja) 2006-07-25 2009-03-18 コニカミノルタセンシング株式会社 三次元形状測定システム、三次元形状測定方法
US7891821B2 (en) * 2007-12-17 2011-02-22 Coherent, Inc. Laser beam transformer and projector having stacked plates
US7710545B2 (en) * 2008-02-13 2010-05-04 The Boeing Company Scanned laser detection and ranging apparatus
JP2009267314A (ja) * 2008-04-30 2009-11-12 Toyota Central R&D Labs Inc 受光装置
US8184276B2 (en) * 2008-12-08 2012-05-22 Carl Embry Continuous index of refraction compensation method for measurements in a medium
JP5639169B2 (ja) * 2009-07-22 2014-12-10 ケーエルエー−テンカー・コーポレーションKla−Tencor Corporation 暗視野検査システムおよび暗視野検査システムを構成する方法
EP2568314B1 (en) 2010-05-07 2021-06-09 Mitsubishi Electric Corporation Laser radar device
JP5518267B2 (ja) * 2011-11-15 2014-06-11 三菱電機株式会社 レーザレーダ装置、惑星着陸用セーフランディングセンサ、宇宙機用ドッキングセンサ、宇宙ごみ回収センサおよび車載衝突防止センサ
US9651417B2 (en) * 2012-02-15 2017-05-16 Apple Inc. Scanning depth engine
JP2014006110A (ja) * 2012-06-22 2014-01-16 Konica Minolta Inc レーザレーダ
US9529087B2 (en) * 2014-07-24 2016-12-27 GM Global Technology Operations LLC Curb detection using lidar with sparse measurements

Also Published As

Publication number Publication date
JP2016180624A (ja) 2016-10-13
SG11201707741UA (en) 2017-10-30
US20180038958A1 (en) 2018-02-08
WO2016151939A1 (ja) 2016-09-29
US11009606B2 (en) 2021-05-18

Similar Documents

Publication Publication Date Title
JP6522384B2 (ja) レーザレーダ装置及び走行体
JP6522383B2 (ja) レーザレーダ装置及び走行体
JP6250080B2 (ja) レーザレーダ装置及び走行体
JP6387407B2 (ja) 周辺検知システム
US11789128B2 (en) Fiber-based transmitter and receiver channels of light detection and ranging systems
US20220413102A1 (en) Lidar systems and methods for vehicle corner mount
US11871130B2 (en) Compact perception device
US11768294B2 (en) Compact lidar systems for vehicle contour fitting
JP4960599B2 (ja) 衝突防止装置及び衝突防止装置搭載車両
KR102202195B1 (ko) 광학 검출 기구를 위한 수신 장치, 검출 기구 및 운전자 지원 시스템
US20240103138A1 (en) Stray light filter structures for lidar detector array
US20230366984A1 (en) Dual emitting co-axial lidar system with zero blind zone
US20230136272A1 (en) Compact lidar systems for detecting objects in blind-spot areas
US11624806B2 (en) Systems and apparatuses for mitigating LiDAR noise, vibration, and harshness
WO2023220316A1 (en) Dual emitting co-axial lidar system with zero blind zone
CN117178199A (zh) 具有高分辨率和超宽视场的紧凑型光检测和测距设计
CN120390889A (zh) 用于激光雷达生产的探测器对准方法
CN117813525A (zh) 用于车辆轮廓拟合的紧凑型LiDAR系统
WO2025116877A2 (en) Stray light filter structures for lidar detector array
WO2023181024A1 (en) Determining object dimension using offset pixel grids
WO2023283205A1 (en) Compact lidar systems for vehicle contour fitting
WO2025144775A1 (en) Elongation compensation in lidar system
CN118235061A (zh) 用于检测盲点区域中的物体的紧凑型LiDAR系统

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180313

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180313

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180925

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181122

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190402

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190424

R150 Certificate of patent or registration of utility model

Ref document number: 6522384

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees