Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
KR20200071405A - Brake light inoperative detection system - Google Patents
[go: Go Back, main page]

KR20200071405A - Brake light inoperative detection system - Google Patents

Brake light inoperative detection system Download PDF

Info

Publication number
KR20200071405A
KR20200071405A KR1020180159121A KR20180159121A KR20200071405A KR 20200071405 A KR20200071405 A KR 20200071405A KR 1020180159121 A KR1020180159121 A KR 1020180159121A KR 20180159121 A KR20180159121 A KR 20180159121A KR 20200071405 A KR20200071405 A KR 20200071405A
Authority
KR
South Korea
Prior art keywords
preceding vehicle
brake
vehicle
information
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
KR1020180159121A
Other languages
Korean (ko)
Inventor
박만복
Original Assignee
한국교통대학교산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국교통대학교산학협력단 filed Critical 한국교통대학교산학협력단
Priority to KR1020180159121A priority Critical patent/KR20200071405A/en
Publication of KR20200071405A publication Critical patent/KR20200071405A/en
Ceased legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q11/00Arrangement of monitoring devices for devices provided for in groups B60Q1/00 - B60Q9/00
    • B60Q11/005Arrangement of monitoring devices for devices provided for in groups B60Q1/00 - B60Q9/00 for lighting devices, e.g. indicating if lamps are burning or not
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/26Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic
    • B60Q1/44Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating braking action or preparation for braking, e.g. by detection of the foot approaching the brake pedal
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W10/00Conjoint control of vehicle sub-units of different type or different function
    • B60W10/18Conjoint control of vehicle sub-units of different type or different function including control of braking systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q2300/00Indexing codes for automatically adjustable headlamps or automatically dimmable headlamps
    • B60Q2300/40Indexing codes relating to other road users or special conditions
    • B60Q2300/41Indexing codes relating to other road users or special conditions preceding vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q2300/00Indexing codes for automatically adjustable headlamps or automatically dimmable headlamps
    • B60Q2300/40Indexing codes relating to other road users or special conditions
    • B60Q2300/43Indexing codes relating to other road users or special conditions following vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2556/00Input parameters relating to data
    • B60W2556/45External transmission of data to or from the vehicle

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Mathematical Physics (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Traffic Control Systems (AREA)
  • Lighting Device Outwards From Vehicle And Optical Signal (AREA)

Abstract

본 발명은 브레이크등 미작동 감지 시스템에 관한 것으로서, 선행 차량의 후방을 촬영할 수 있도록 상기 선행 차량의 후방에서 운행하는 후행 차량에 설치되거나 상기 선행 차량이 운행되는 도로에 설치되는 촬영유닛과, 상기 촬영유닛에서 촬영된 촬영영상을 분석하여 상기 선행 차량의 후방에 마련된 브레이크등의 작동여부를 판별하는 영상 분석부와, 차량을 감속하거나 정지시시키기 위해 마련된 상기 선행 차량의 브레이크 장치의 작동 여부를 감지하는 제동 감지부와, 상기 영상 분석부 및 제동 감지부에서 제공되는 정보를 토대로 상기 선행 차량의 브레이크 장치가 작동시 상기 선행 차량의 브레이크등이 미작동될 경우, 상기 브레이크등이 고장인 것으로 판단하여 상기 선행 차량 또는 기등록된 상기 선행 차량의 운전자의 단말기로 알림 메시지를 전송하는 알림모듈을 구비한다.
본 발명에 따른 브레이크등 미작동 감지 시스템은 선행 차량의 후방을 촬영하여 선행 차량의 브레이크등의 작동여부를 판별하고, 브레이크등의 미작동시 상기 선행 차량에 알림 메시지를 전송하므로 선행 차량이 브레이크등이 미작동된 상태로 운행되는 것을 줄일 수 있고, 선행 차량의 브레이크등의 작동여부를 후행 차량의 운전자가 인지할 수 있어 야간에도 안전 운행할 수 있다.
The present invention relates to a non-operation detection system, such as a brake, which is installed on a trailing vehicle running from the rear of the preceding vehicle or installed on a road on which the preceding vehicle is operated so as to photograph the rear of the preceding vehicle, and the photographing An image analysis unit for analyzing whether the brake light provided at the rear of the preceding vehicle is operated by analyzing the captured image taken by the unit, and detecting whether the brake device of the preceding vehicle provided for decelerating or stopping the vehicle is operating. When the brake light of the preceding vehicle is not operated when the brake device of the preceding vehicle is operated based on the information provided by the brake detection unit, the image analysis unit, and the brake detection unit, it is determined that the brake light is defective and the It has a notification module for transmitting a notification message to the terminal of the driver of the preceding vehicle or the preceding vehicle registered in advance.
The brake light non-operation detection system according to the present invention determines whether the brake light of the preceding vehicle is activated by photographing the rear of the preceding vehicle, and when the brake light is not activated, a notification message is transmitted to the preceding vehicle, so that the preceding vehicle is the brake light. It is possible to reduce the operation in the non-operational state, and the driver of the subsequent vehicle can recognize whether or not the brake light of the preceding vehicle is activated, so that it can safely operate even at night.

Description

브레이크등 미작동 감지 시스템{Brake light inoperative detection system}Brake light inoperative detection system

본 발명은 브레이크등 미작동 감지 시스템에 관한 것으로서, 더욱 상세하게는 선행 차량의 후방을 촬영한 촬영영상을 분석하여 선행 차량의 브레이크등 고장 여부를 판별하고, 브레이크등이 미작동시 선행 차량에게 알림 메시지를 전송하는 브레이크 미작동 감지 시스템에 관한 것이다. The present invention relates to a system for detecting a non-operation of a brake light, and more specifically, analyzing a captured image of a rear of a preceding vehicle to determine whether a brake light of the preceding vehicle has failed, and notifying the preceding vehicle when the brake light is not operating. It relates to a brake malfunction detection system that transmits a message.

일반적으로 자동차의 브레이크 등은 방향 지시등이나 비상등과 같이 주행 중인 차량의 주행 상태를 다른 차량의 운전자에게 알려주기 위한 신호용 등화 장치이다. 운전자가 제동 시 브레이크 페달을 밟거나 핸드 브레이크를 당기면 브레이크 스위치 또는 핸드 브레이크 스위치의 상태가 온 상태로 전환된다.In general, a brake light of a vehicle is a signal equalizing device for informing a driver of another vehicle of a driving state of a driving vehicle such as a turn signal or an emergency light. When the driver presses the brake pedal or pulls the hand brake when braking, the state of the brake switch or hand brake switch is switched to the on state.

브레이크 스위치 또는 핸드 브레이크 스위치의 상태가 온 상태로 전환되면, 차량의 후미부 좌측 및 우측에 장착되어 있는 브레이크 등이 점등되어 뒤따르는 차량의 운전자에게 차량이 제동 중임을 알리도록 되어 있다.When the state of the brake switch or the hand brake switch is switched to the on state, the brake lights mounted on the left and right rear portions of the vehicle are turned on to inform the driver of the following vehicle that the vehicle is braking.

하지만, 브레이크 등이 단선되어 차량이 제동 중임에도 불구하고 브레이크 등이 점등되지 않으면 뒤따라 오는 다른 차량의 운전자가 앞차량이 제동 중임을 미처 인식하지 못하게 될 경우 추돌 사고가 발생하는 문제점이 있다.However, if the brake light is disconnected and the vehicle is braking, but the brake light is not lit, there is a problem that a collision accident occurs when a driver of another vehicle that follows is unable to recognize that the vehicle in front is braking.

등록특허공보 제10-1006577호: 브레이크등 표시제어장치Patent No. 10-1006577: Brake light display control device

본 발명은 상기와 같은 문제점을 개선하기 위하여 창안된 것으로서, 선행 차량의 후방을 촬영하여 선행 차량의 브레이크등의 작동여부를 판별하고, 브레이크등의 미작동시 상기 선행 차량에 알림 메시지를 전송할 수 있는 브레이크등 미작동 감지 시스템을 제공하는데 그 목적이 있다. The present invention was devised to improve the above problems, by photographing the rear of the preceding vehicle to determine whether the brake lamp of the preceding vehicle is activated, and when the brake lamp is not activated, a notification message can be transmitted to the preceding vehicle. The purpose is to provide a non-operation detection system such as a brake.

상기 목적을 달성하기 위한 본 발명에 따른 브레이크등 미작동 감지 시스템은 선행 차량의 후방을 촬영할 수 있도록 상기 선행 차량의 후방에서 운행하는 후행 차량에 설치되거나 상기 선행 차량이 운행되는 도로에 설치되는 촬영유닛과, 상기 촬영유닛에서 촬영된 촬영영상을 분석하여 상기 선행 차량의 후방에 마련된 브레이크등의 작동여부를 판별하는 영상 분석부와, 차량을 감속하거나 정지시시키기 위해 마련된 상기 선행 차량의 브레이크 장치의 작동 여부를 감지하는 제동 감지부와, 상기 영상 분석부 및 제동 감지부에서 제공되는 정보를 토대로 상기 선행 차량의 브레이크 장치가 작동시 상기 선행 차량의 브레이크등이 미작동될 경우, 상기 브레이크등이 고장인 것으로 판단하여 상기 선행 차량 또는 기등록된 상기 선행 차량의 운전자의 단말기로 알림 메시지를 전송하는 알림모듈을 구비한다. The brake light non-operation detection system according to the present invention for achieving the above object is installed on a trailing vehicle running from the rear of the preceding vehicle or on a road where the preceding vehicle is running so as to photograph the rear of the preceding vehicle And, by analyzing the image captured by the shooting unit to determine whether the operation of the brake provided on the rear of the preceding vehicle, the image analysis unit, and the operation of the brake device of the preceding vehicle provided to decelerate or stop the vehicle When the brake light of the preceding vehicle is not operated when the brake device of the preceding vehicle is operated based on the information provided by the brake detection unit and the image analysis unit and the brake detection unit, the brake lamp is broken It is determined that it is provided with a notification module for transmitting a notification message to the terminal of the driver of the preceding vehicle or the pre-registered preceding vehicle.

상기 제동 감지부는 상기 선행 차량에 설치되어 상기 선행 차량의 운행 정보를 수집하는 정보수집모듈과, 상기 정보수집모듈에서 제공되는 상기 선행 차량의 운행 정보를 토대로 상기 선행 차량의 브레이크 장치의 작동 여부를 판별하고, 판별된 정보를 상기 알림모듈로 전송하는 제동 판별부를 구비한다. The braking detection unit is installed in the preceding vehicle and determines whether the brake device of the preceding vehicle is operating based on the information collecting module collecting the driving information of the preceding vehicle and the driving information of the preceding vehicle provided by the information collecting module. And a braking discrimination unit that transmits the determined information to the notification module.

상기 선행차량의 운행 정보는 운전자가 상기 브레이크 장치의 작동신호를 입력하기 위한 상기 선행차량의 브레이크 페달의 조작 정보를 포함하고, 상기 제동 판별부는 상기 운전자가 상기 브레이크 페달을 조작시 상기 선행차량의 브레이크 장치가 작동된 것으로 판별하는 것이 바람직하다. The driving information of the preceding vehicle includes operation information of the brake pedal of the preceding vehicle for a driver to input an operation signal of the brake device, and the braking discrimination unit brakes the preceding vehicle when the driver operates the brake pedal It is desirable to determine that the device has been activated.

상기 선행차량의 운행 정보는 상기 선행 차량의 감속도 변화 또는 감가속도 변화에 대한 정보를 포함하고, 상기 제동 판별부는 기설정된 단위시간 동안 상기 선행 차량의 감속도 변화값 또는 감가속도 변화값이 기설정된 기준값 이상일 경우, 상기 선행 차량의 브레이크 장치가 작동된 것으로 판별할 수도 있다. The driving information of the preceding vehicle includes information on a change in deceleration or deceleration of the preceding vehicle, and the braking discrimination unit has a predetermined deceleration change value or a deceleration change value for a predetermined unit time. If it is more than the reference value, it may be determined that the brake device of the preceding vehicle is activated.

상기 제동 감지부는 상기 후행 차량에 설치되어 상기 후행 차량의 속도에 대한 정보를 수집하는 차량 스캐너와, 상기 차량 스캐너로부터 제공되는 상기 후행 차량의 속도에 대한 정보 및 상기 촬영유닛에서 촬영된 촬영영상을 분석하여 상기 선행 차량의 감속도 또는 감가속도에 대한 정보를 산출하는 속도 분석부와, 상기 속도 분석부에서 산출된 정보를 토대로 상기 단위시간 동안 상기 선행 차량의 감속도 변화값 또는 감가속도 변화값이 기설정된 기준값 이상일 경우, 상기 선행 차량의 브레이크 장치가 작동된 것으로 판별하고, 판별된 정보를 상기 알림모듈로 전송하는 제동 판별부를 구비한다. The braking detection unit is installed in the trailing vehicle, analyzes a vehicle scanner that collects information about the speed of the trailing vehicle, information about the speed of the trailing vehicle provided from the vehicle scanner, and an image captured by the photographing unit The speed analysis unit calculates information on the deceleration or deceleration speed of the preceding vehicle, and the deceleration change value or the deceleration change value of the preceding vehicle during the unit time based on the information calculated by the speed analysis unit. When it is equal to or greater than the set reference value, it is determined that the brake device of the preceding vehicle is operated, and a braking discrimination unit that transmits the determined information to the notification module.

상기 선행 차량은 복수의 상기 브레이크등을 구비하고, 상기 알림모듈은 상기 선행 차량의 브레이크 장치가 작동시 상기 선행 차량의 브레이크등들 중 미작동되는 브레이크등에 대한 정보를 상기 알림 메시지에 포함한다. The preceding vehicle includes a plurality of the brake lights, and the notification module includes information on brake lights that are not activated among the brake lights of the preceding vehicle when the brake device of the preceding vehicle is operating in the notification message.

상기 영상 분석부는 상기 촬영유닛에서 제공되는 촬영영상에서, 기등록된 브레이크등의 색상 및 광도에 대응되는 광을 감지시 상기 선행 차량의 브레이크등의 작동으로 판별하는 것이 바람직하다. It is preferable that the image analysis unit determines the operation of the brake light of the preceding vehicle when detecting light corresponding to the color and light intensity of the previously registered brake light from the captured image provided by the recording unit.

상기 영상 분석부는 상기 촬영유닛에서 제공되는 촬영영상에서 상기 선행 차량의 후방 외형을 추출하는 외형 추출모듈과, 상기 외형 추출모듈에서 추출된 상기 선행 차량의 후방 외형에 대한 정보를 토대로 상기 선행 차량의 차종을 판별하는 차종 판별부와, 상기 차종 판별부에 의해 판별된 상기 선행 차량의 차종에 대한 정보를 토대로 해당 차종의 브레이크등의 위치에 대한 정보를 제공하는 정보 제공부와, 상기 정보 제공부에서 제공된 정보를 토대로 상기 촬영영상에서, 상기 선행 차량의 브레이크등의 위치에 대응되는 부분을 식별하는 램프 식별모듈과, 상기 촬영영상 중 상기 램프 식별모듈에서 식별된 부분에서 기등록된 브레이크등의 색상 및 광도에 대응되는 광을 감지시 상기 선행차량의 브레이크등의 작동으로 판별하는 램프 판별부를 구비한다. The image analysis unit is based on information on an external extraction module for extracting the rear contour of the preceding vehicle from the captured image provided by the imaging unit, and information on the rear contour of the preceding vehicle extracted from the external extraction module. A vehicle model discrimination unit for discriminating, and an information providing unit for providing information on the position of a brake, etc. of the corresponding vehicle type based on information on the vehicle model of the preceding vehicle determined by the vehicle model discrimination unit, and provided by the information providing unit Based on information, a lamp identification module that identifies a portion corresponding to the position of the brake light of the preceding vehicle in the captured image, and a color and light intensity of a brake light pre-registered in the portion identified by the lamp identification module in the captured image And a lamp discriminating unit for discriminating by operating the brake lamp of the preceding vehicle when sensing light corresponding to.

본 발명에 따른 브레이크등 미작동 감지 시스템은 선행 차량의 후방을 촬영하여 선행 차량의 브레이크등의 작동여부를 판별하고, 브레이크등의 미작동시 상기 선행 차량에 알림 메시지를 전송하므로 선행 차량이 브레이크등이 미작동된 상태로 운행되는 것을 줄일 수 있고, 선행 차량의 브레이크등의 작동여부를 후행 차량의 운전자가 인지할 수 있어 야간에도 안전 운행할 수 있다. The brake light non-operation detection system according to the present invention determines whether the brake light of the preceding vehicle is activated by photographing the rear of the preceding vehicle, and when the brake light is not activated, a notification message is transmitted to the preceding vehicle, so that the preceding vehicle is the brake light It is possible to reduce the operation in the non-operational state, and the driver of the subsequent vehicle can recognize whether or not the brake light of the preceding vehicle is activated, so that the vehicle can safely operate at night.

도 1은 본 발명에 따른 브레이크등 미작동 감지 시스템에 대한 개념도이고,
도 2는 도 1의 브레이크등 미작동 감지 시스템에 대한 블럭도이고,
도 3은 본 발명의 또 다른 실시 예에 따른 브레이크등 미작동 감지 시스템에 대한 블럭도이고,
도 4는 본 발명의 또 다른 실시 예에 따른 브레이크등 미작동 감지 시스템에 대한 블럭도이다.
1 is a conceptual diagram for a non-operation detection system such as a brake according to the present invention,
2 is a block diagram of the non-operation detection system of the brake light of FIG. 1,
3 is a block diagram of a non-operation detection system such as a brake according to another embodiment of the present invention,
Figure 4 is a block diagram of a brake light non-operation detection system according to another embodiment of the present invention.

이하, 첨부한 도면을 참조하여 본 발명의 실시예에 따른 브레이크등 미작동 감지 시스템에 대해 상세히 설명한다. 본 발명은 다양한 변경을 가할 수 있고 여러 가지 형태를 가질 수 있는 바, 특정 실시 예들을 도면에 예시하고 본문에 상세하게 설명하고자 한다. 그러나 이는 본 발명을 특정한 개시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다. 첨부된 도면에 있어서, 구조물들의 치수는 본 발명의 명확성을 기하기 위하여 실제보다 확대하여 도시한 것이다. Hereinafter, a non-operation detection system such as a brake according to an embodiment of the present invention will be described in detail with reference to the accompanying drawings. The present invention can be applied to various changes and may have various forms, and specific embodiments will be illustrated in the drawings and described in detail in the text. However, this is not intended to limit the present invention to a specific disclosure form, and it should be understood as including all modifications, equivalents, and substitutes included in the spirit and scope of the present invention. In describing each drawing, similar reference numerals are used for similar components. In the accompanying drawings, the dimensions of the structures are shown to be enlarged than the actual for clarity of the present invention.

제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. Terms such as first and second may be used to describe various components, but the components should not be limited by the terms. The terms are used only for the purpose of distinguishing one component from other components. For example, the first component may be referred to as a second component without departing from the scope of the present invention, and similarly, the second component may be referred to as a first component.

본 출원에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서 상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.Terms used in the present application are only used to describe specific embodiments, and are not intended to limit the present invention. Singular expressions include plural expressions unless the context clearly indicates otherwise. In this application, terms such as “include” or “have” are intended to indicate the presence of features, numbers, steps, actions, elements, parts or combinations thereof described in the specification, but one or more other features. It should be understood that the existence or addition possibilities of fields or numbers, steps, actions, components, parts or combinations thereof are not excluded in advance.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless otherwise defined, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by a person skilled in the art to which the present invention pertains. Terms, such as those defined in a commonly used dictionary, should be interpreted as having meanings consistent with meanings in the context of related technologies, and should not be interpreted as ideal or excessively formal meanings unless explicitly defined in the present application. Does not.

도 1 및 도 2에는 본 발명에 따른 브레이크등 미작동 감지 시스템(100)이 도시되어 있다. 1 and 2 illustrate a brake light non-operation detection system 100 according to the present invention.

도면을 참조하면, 상기 브레이크등 미작동 감지 시스템(100)은 후행 차량(12)에 설치되어 상기 후행 차량(12)의 전방에서 운행하는 선행 차량(11)의 후방을 촬영하는 촬영유닛(110)과, 상기 촬영유닛(110)에서 촬영된 촬영영상을 분석하여 상기 선행 차량(11)의 후방에 마련된 브레이크등의 작동여부를 판별하는 영상 분석부(120)와, 차량을 감속하거나 정지시시키기 위해 마련된 상기 선행 차량(11)의 브레이크 장치의 작동 여부를 감지하는 제동 감지부(130)와, 상기 영상 분석부(120) 및 제동 감지부(130)에서 제공되는 정보를 토대로 상기 선행 차량(11)의 브레이크 장치가 작동시 상기 선행 차량(11)의 브레이크등이 미작동될 경우, 상기 브레이크등이 고장인 것으로 판단하여 상기 선행 차량(11) 또는 기등록된 상기 선행 차량(11)의 운전자의 단말기로 알림 메시지를 전송하는 알림모듈(140)을 구비한다. Referring to the drawing, the brake light non-operation detection system 100 is installed on the trailing vehicle 12 and photographing unit 110 photographing the rear of the preceding vehicle 11 running in front of the trailing vehicle 12 And, to analyze the captured image taken by the photographing unit 110 to determine whether or not the operation of the brake provided on the rear of the preceding vehicle 11, and the image analysis unit 120, to slow down or stop the vehicle The preceding vehicle 11 based on the information provided by the brake detection unit 130 and the image analysis unit 120 and the brake detection unit 130 that detects whether the brake device of the preceding vehicle 11 is provided or not. When the brake light of the preceding vehicle 11 is not operated when the brake device of the vehicle is operated, it is determined that the brake light is defective, and thus the driver's terminal of the preceding vehicle 11 or the previously registered vehicle 11 is registered. It has a notification module 140 for transmitting a notification message.

이때, 선행 차량(11) 및 후행 차량(12)은 엔진, 운전자에 의해 진행방향을 제어할 수 있는 조향장치, 속도를 감속하기 위해 브레이크 페달이 마련된 브레이크 장치를 구비하는 것으로서, 종래에 일반적으로 사용되는 차량이므로 상세한 설명은 생략한다. 한편, 상기 선행 차량(11) 및 후행 차량(12)은 차량 간 상호 통신이 가능하도록 각각 통신모듈(미도시)과, 알림모듈(140)에서 전송된 알림 메시지를 표시하기 위한 디스플레이패널(미도시)이 설치되어 있다. 여기서, 상기 통신모듈은 V2X(Vehicle-to-Everything) 통신을 수행하기 위한 것으로서, WLAN 또는 셀룰러(Cellular) 기반으로 통신을 수행한다. At this time, the preceding vehicle 11 and the trailing vehicle 12 are provided with an engine, a steering device capable of controlling the direction of travel by the driver, and a brake device provided with a brake pedal to decelerate the speed. Because it is a vehicle, detailed description is omitted. Meanwhile, the preceding vehicle 11 and the following vehicle 12 are each a communication module (not shown) and a display panel (not shown) for displaying a notification message transmitted from the notification module 140 to enable mutual communication between vehicles. ) Is installed. Here, the communication module is for performing V2X (Vehicle-to-Everything) communication, and performs communication on a WLAN or cellular basis.

촬영유닛(110)은 후행 차량(12)의 전방부에 설치되어 선행 차량(11)의 후방을 촬영한다. 상기 촬영유닛(110)은 후행 차량(12)의 앞유리를 통해 선행 차량(11)을 촬영할 수 있도록 후행 차량(12)의 내부에 설치되며, 선행 차량(11)에 대한 컬러영상 및 깊이 영상을 획득할 수 있는 카메라 및 깊이 센서가 포함된 촬영기기가 적용되는 것이 바람직하다. The photographing unit 110 is installed in the front portion of the trailing vehicle 12 to photograph the rear of the preceding vehicle 11. The photographing unit 110 is installed inside the trailing vehicle 12 so as to be able to photograph the preceding vehicle 11 through the windshield of the trailing vehicle 12, and displays a color image and a depth image of the preceding vehicle 11. It is preferable that a photographing device including a camera and a depth sensor that can be obtained is applied.

한편, 촬영유닛(110)은 도시된 예에 한정하는 것이 아니라 상기 선행 차량(11)이 운행되는 도로 상에 설치될 수도 있다. 상기 촬영유닛(110)는 도로의 가로등이나 인프라 설비에 설치되어 도로에 운행하는 차량을 촬영하는 카메라가 적용될 수도 있다. Meanwhile, the photographing unit 110 is not limited to the illustrated example, but may be installed on a road on which the preceding vehicle 11 is operated. The photographing unit 110 may be installed on a street lamp or an infrastructure facility, and a camera photographing a vehicle running on the road may be applied.

영상 분석부(120)는 후행 차량(12)에 마련되며, 상기 촬영유닛(110)으로부터 촬영영상을 제공받아 상기 촬영영상을 분석한다. 이때, 상기 촬영유닛(110)이 도로 상에 설치된 경우, 상기 영상 분석부(120)는 차량간 통신 방식을 이용하여 촬영유닛(110)으로부터 촬영영산을 수신하여 분석한다. The image analysis unit 120 is provided on the trailing vehicle 12 and receives the captured image from the photographing unit 110 to analyze the captured image. At this time, when the photographing unit 110 is installed on the road, the image analysis unit 120 receives and analyzes the photographic production from the photographing unit 110 using an inter-vehicle communication method.

일반적으로 차량의 브레이크등은 등광색이 적색이며, 광도는 40칸델라 내지 420칸델라가 적용되는데, 상기 영상 분석부(120)는 상기 촬영유닛(110)에서 제공되는 촬영영상에서, 기등록된 브레이크등의 색상 및 광도에 대응되는 광을 감지시 상기 선행 차량(11)의 브레이크등의 작동으로 판별한다. 여기서, 기등록된 브레이크등의 색상 및 광도는 적색 및 40칸델라 내지 420칸델라가 적용되는 것이 바람직하다. In general, the brake light of the vehicle is red in the back light color, and the brightness is 40 candela to 420 candela, and the image analysis unit 120 is a pre-registered brake light in the captured image provided by the imaging unit 110 When detecting the light corresponding to the color and light intensity of the is determined by the operation of the brake light of the preceding vehicle (11). Here, it is preferable that red and 40 candelas to 420 candelas are applied to the color and brightness of the previously registered brake light.

또한, 일반적인 차량은 복수의 브레이크등이 차량의 후방에, 좌우방향으로 상호 이격되게 설치되는데, 상기 영상 분석부(120)는 촬영유닛(110)의 촬영영상에서, 선행 차량(11)에 대해 작동이 감지된 브레이크등의 설치 위치를 판별하고, 판별된 정보를 알림모듈(140)에 전송한다. 즉, 영상 분석부(120)는 촬영영상에서, 기등록된 브레이크등의 색상 및 광도에 대응되는 광이 감지될 경우, 해당 광이 선행 차량(11)의 좌측 또는 우측 중 어느 측에 설치된 브레이크등인지 판별하고, 해당 판별 정보를 알림모듈(140)에 전송한다. In addition, in a general vehicle, a plurality of brake lights are installed to be spaced apart from each other in the left and right directions of the vehicle, and the image analysis unit 120 operates on the preceding vehicle 11 in the captured image of the imaging unit 110 The installation position of the detected brake light is determined, and the determined information is transmitted to the notification module 140. That is, the image analysis unit 120, when the light corresponding to the color and light intensity of the pre-registered brake light in the captured image, the light is installed on either side of the left or right of the preceding vehicle 11 brake light Cognitive discrimination, and transmits the discrimination information to the notification module 140.

제동 감지부(130)는 상기 선행 차량(11)에 설치되어 상기 선행 차량(11)의 운행 정보를 수집하는 정보수집모듈(131)과, 상기 정보수집모듈(131)에서 제공되는 상기 선행 차량(11)의 운행 정보를 토대로 상기 선행 차량(11)의 브레이크 장치의 작동 여부를 판별하고, 판별된 정보를 상기 알림모듈(140)로 전송하는 제동 판별부(132)를 구비한다. The braking detection unit 130 is installed in the preceding vehicle 11, the information collecting module 131 for collecting driving information of the preceding vehicle 11, and the preceding vehicle provided in the information collecting module 131 ( It is provided with a braking discrimination unit 132 for determining whether the brake device of the preceding vehicle 11 is operated based on the driving information of 11) and transmitting the determined information to the notification module 140.

정보수집모듈(131)은 선행 차량(11)의 OBD(On Board Diagnostics)에 연결되어 선행 차량(11)의 운행정보를 획득한다. 상기 OBD(On Board Diagnostics)는 차량에 미리 구비되어 있는 차량 내부 센서로서, 예컨대, 속도 센서, 가속도 센서, 도어 개폐센서, 급정차 감지 센서, 브레이크 페달 조작 감지 센서 등을 통해서 차량의 감속도 및 감가속도를 포함한 차량 내 모든 주행정보를 감지할 뿐아니라, 운행시간, 운행거리, 사고감지, 일정 운전 기간 중의 시간 및 거리, 급가속 및 급제동의 여부 등의 정보나 냉각수, 브레이크 오일, 엔진 오일, 엔진의 RPM, 진동, 소리, 타이어 공기압, 차량의 가속도, 감가속도, 평균속도, ABS 및 에어백 등 안전 장비 이상 유무, 배터리 전압 등를 수집할 수 있는 장치일 수 있다. 한편, 정보수집모듈(131)은 선행 차량(11)의 OBD로부터 선행 차량(11)의 운행 정보로서, 운전자가 상기 브레이크 장치의 작동신호를 입력하기 위한 상기 선행 차량(11)의 브레이크 페달의 조작 정보를 수집할 수도 있다. The information collecting module 131 is connected to On Board Diagnostics (OBD) of the preceding vehicle 11 to obtain driving information of the preceding vehicle 11. The OBD (On Board Diagnostics) is a vehicle internal sensor provided in advance in a vehicle, for example, a vehicle's deceleration and deceleration through a speed sensor, an acceleration sensor, a door opening and closing sensor, a sudden stop detection sensor, a brake pedal operation detection sensor, and the like. It not only detects all the driving information in the vehicle, including speed, but also information such as running time, driving distance, accident detection, time and distance during a certain driving period, whether rapid acceleration and sudden braking, cooling water, brake oil, engine oil, engine RPM, vibration, sound, tire pressure, vehicle acceleration, deceleration, average speed, ABS and airbag safety devices such as abnormality, may be a device that can collect battery voltage. On the other hand, the information collecting module 131 is the driving information of the preceding vehicle 11 from the OBD of the preceding vehicle 11, and the driver operates the brake pedal of the preceding vehicle 11 for inputting an operation signal of the brake device. Information can also be collected.

정보수집모듈(131)은 선행 차량(11)의 OBD의 감지정보를 획득하고, 획득한 감지정보를 선행 차량(11)의 운행 정보로서 제동 판별부(132)로 전송한다. 이때, 정보수집모듈(131)은 선행 차량(11)에 마련된 통신모듈을 이용하여 상기 선행 차량(11)의 운행 정보를 제동 판별부(132)에 전송한다. The information collection module 131 acquires the OBD detection information of the preceding vehicle 11 and transmits the obtained detection information to the braking discrimination unit 132 as the driving information of the preceding vehicle 11. At this time, the information collecting module 131 transmits the driving information of the preceding vehicle 11 to the braking discrimination unit 132 using the communication module provided in the preceding vehicle 11.

제동 판별부(132)는 후행 차량(12)에 마련되며, 정보수집모듈(131)에서 전송된 선행 차량(11)의 운행 정보를 수신하여 분석한다. 상기 제동 판별부(132)는 선행 차량(11)의 운행 정보 중 선행 차량(11)의 브레이크 페달 조작 정보를 토대로 상기 운전자가 상기 브레이크 페달을 조작시 상기 선행 차량(11)의 브레이크 장치가 작동된 것으로 판별하고, 판별된 정보를 알림모듈(140)에 전송한다. The braking discrimination unit 132 is provided on the trailing vehicle 12 and receives and analyzes driving information of the preceding vehicle 11 transmitted from the information collection module 131. The braking discrimination unit 132 may operate the brake device of the preceding vehicle 11 when the driver operates the brake pedal based on the operation information of the brake pedal of the preceding vehicle 11 among the driving information of the preceding vehicle 11. And transmits the determined information to the notification module 140.

또한, 일반적으로 차량은 브레이크 장치가 작동할 경우, 급격히 속도가 감소하는데, 제동 판별부(132)는 선행 차량(11)의 속도가 급격히 감소될 경우, 선행 차량(11)의 브레이크 장치가 작동한 것으로 판별할 수도 있다. 즉, 제동 판별부(132)는 선행 차량(11)의 운행 정보 중 선행 차량(11)의 감속도 변화 또는 감가속도 변화에 대한 정보를 토대로 기설정된 단위시간 동안 상기 선행 차량(11)의 감속도 변화값 또는 감가속도 변화값이 기설정된 기준값 이상일 경우, 상기 선행 차량(11)의 브레이크 장치가 작동된 것으로 판별할 수 있다. In addition, in general, when the brake device is operated, the vehicle rapidly decreases in speed. When the speed of the preceding vehicle 11 is rapidly decreased, the braking discrimination unit 132 operates the brake device of the preceding vehicle 11. It can also be determined. That is, the braking discrimination unit 132, based on the information on the deceleration change or deceleration change of the preceding vehicle 11 among the driving information of the preceding vehicle 11, deceleration of the preceding vehicle 11 for a predetermined unit time. When the change value or the acceleration/deceleration change value is greater than a preset reference value, it may be determined that the brake device of the preceding vehicle 11 is operated.

알림모듈(140)은 후행 차량(12)에 마련되는 것으로서, 제동 판별부(132)를 통해 선행 차량(11)의 브레이크 장치가 작동된 것으로 판별되는 동안, 상기 영상 분석부(120)에서 제공되는 정보를 토대로 선행 차량(11)의 브레이크등의 작동 여부를 판별한다. 이때, 알림모듈(140)은 상기 선행 차량(11)의 브레이크 장치가 작동시 상기 선행 차량(11)의 브레이크등이 미작동될 경우, 상기 브레이크등이 고장인 것으로 판단하여 상기 선행 차량(11) 또는 기등록된 상기 선행 차량(11)의 운전자의 단말기로 알림 메시지를 전송한다. 여기서, 알림모듈(140)은 후행 차량(12)의 통신모듈을 이용하여 BMS(Basic Satety Message) 형식으로 알림 메시지를 전송한다. 이때, 알림모듈(140)은 선행 차량(11)의 브레이크등들 중 어느 하나만 미작동되더라도 선행 차량(11)의 브레이크등의 고장으로 판별하여 상기 알림 메시지를 선행 차량(11) 또는 선행 차량(11)의 운전자의 단말기로 전송하는 것이 바람직하다. The notification module 140 is provided on the trailing vehicle 12 and is provided by the image analysis unit 120 while it is determined that the brake device of the preceding vehicle 11 is operated through the braking determination unit 132. Based on the information, it is determined whether the brake light of the preceding vehicle 11 is activated. At this time, when the brake device of the preceding vehicle 11 is not operated when the brake device of the preceding vehicle 11 is operated, the notification module 140 determines that the brake lamp is malfunctioning and the preceding vehicle 11 Alternatively, a notification message is transmitted to the driver's terminal of the preceding vehicle 11 registered in advance. Here, the notification module 140 transmits a notification message in the form of a Basic Satety Message (BMS) using the communication module of the trailing vehicle 12. At this time, even if only one of the brake lights of the preceding vehicle 11 is not activated, the notification module 140 determines the failure of the brake lamp of the preceding vehicle 11 and determines the notification message as the preceding vehicle 11 or the preceding vehicle 11 ) Is preferably transmitted to the driver's terminal.

한편, 알림모듈(140)은 상기 선행 차량(11)의 브레이크 장치가 작동시 상기 선행 차량(11)의 브레이크등들 중 미작동되는 브레이크등에 대한 정보를 상기 알림 메시지에 포함시켜 전송할 수 있다. 즉, 알림모듈(140)은 영상 분석부(120)로부터 선행 차량(11)에 대해 작동이 감지된 브레이크등의 설치 위치에 대한 정보를 제공받고, 해당 정보를 토대로 미작동된 브레이크등의 설치 위치에 대한 정보를 알림 메시지에 포함시킨다. Meanwhile, when the brake device of the preceding vehicle 11 is operated, the notification module 140 may include information on the brake lamp that is not activated among the brake lights of the preceding vehicle 11 in the notification message and transmit the information. That is, the notification module 140 is provided with information on the installation position of the brake light for which the operation has been detected for the preceding vehicle 11 from the image analysis unit 120, and based on the information, the installation position of the unactivated brake light Information about is included in the notification message.

여기서, 선행 차량(11)의 통신모듈은 후행 차량(12)의 알림모듈(140)로부터 전송된 알림 메시지를 수신하여 선행 차량(11)에 마련된 디스플레이패널을 이용하여 해당 알림 메시지를 표시한다. Here, the communication module of the preceding vehicle 11 receives the notification message transmitted from the notification module 140 of the following vehicle 12 and displays the corresponding notification message using the display panel provided in the preceding vehicle 11.

상술된 바와 같이 구성된 본 발명에 따른 브레이크등 미작동 감지 시스템(100)은 선행 차량(11)의 후방을 촬영하여 선행 차량(11)의 브레이크등의 작동여부를 판별하고, 브레이크등의 미작동시 상기 선행 차량(11)에 알림 메시지를 전송하므로 선행 차량(11)이 브레이크등이 미작동된 상태로 운행되는 것을 줄일 수 있다는 장점이 있다. The brake light non-operation detection system 100 according to the present invention configured as described above photographs the rear of the preceding vehicle 11 to determine whether the brake light of the preceding vehicle 11 is activated, and when the brake light is not operating Since the notification message is transmitted to the preceding vehicle 11, there is an advantage in that the preceding vehicle 11 can be operated in a state where the brake light is not operated.

한편, 도 3에는 본 발명의 또 다른 실시 예에 따른 제동 감지부(210)가 도시되어 있다. Meanwhile, FIG. 3 shows a braking detection unit 210 according to another embodiment of the present invention.

앞서 도시된 도면에서와 동일한 기능을 하는 요소는 동일 참조부호로 표기한다Elements having the same function as in the previously shown drawings are denoted by the same reference numerals.

도면을 참조하면, 상기 제동 감지부(210)는 상기 후행 차량(12)에 설치되어 상기 후행 차량(12)의 속도에 대한 정보를 수집하는 차량 스캐너(211)와, 상기 차량 스캐너(211)로부터 제공되는 상기 후행 차량(12)의 속도에 대한 정보 및 상기 촬영유닛(110)에서 촬영된 촬영영상을 분석하여 상기 선행 차량(11)의 감속도 또는 감가속도에 대한 정보를 산출하는 속도 분석부(212)와, 상기 속도 분석부(212)에서 산출된 정보를 토대로 상기 단위시간 동안 상기 선행 차량(11)의 감속도 변화값 또는 감가속도 변화값이 기설정된 기준값 이상일 경우, 상기 선행 차량(11)의 브레이크 장치가 작동된 것으로 판별하고, 판별된 정보를 상기 알림모듈(140)로 전송하는 제동 판별부(213)를 구비한다. Referring to the drawings, the braking detection unit 210 is installed on the trailing vehicle 12 and collects information about the speed of the trailing vehicle 12 from the vehicle scanner 211 and the vehicle scanner 211 A speed analysis unit for calculating information on the deceleration or deceleration speed of the preceding vehicle 11 by analyzing information on the speed of the trailing vehicle 12 and the photographed image taken by the photographing unit 110 212), and the deceleration change value or the deceleration change value of the preceding vehicle 11 during the unit time based on the information calculated by the speed analysis unit 212, the preceding vehicle 11 It has a brake determination unit 213 for determining that the brake device of the operation, and transmits the determined information to the notification module 140.

상기 차량 스캐너(211)는 후행 차량(12)의 OBD(On Board Diagnostics)에 연결되어 선행 차량(11)의 운행정보를 획득한다. 상기 OBD(On Board Diagnostics)는 차량에 미리 구비되어 있는 차량 내부 센서로서, 예컨대, 속도 센서, 가속도 센서, 도어 개폐센서, 급정차 감지 센서, 브레이크 페달 조작 감지 센서 등을 통해서 차량의 감속도 및 감가속도를 포함한 차량 내 모든 주행정보를 감지할 뿐아니라, 운행시간, 운행거리, 사고감지, 일정 운전 기간 중의 시간 및 거리, 급가속 및 급제동의 여부 등의 정보나 냉각수, 브레이크 오일, 엔진 오일, 엔진의 RPM, 진동, 소리, 타이어 공기압, 차량의 가속도, 감가속도, 평균속도, ABS 및 에어백 등 안전 장비 이상 유무, 배터리 전압 등를 수집할 수 있는 장치일 수 있다. 상기 차량 스캐너(211)는 후행 차량(12)의 OBD로부터 후행챠량의 속도에 대한 정보를 수집하여 속도 분석부(212)에 전송한다. The vehicle scanner 211 is connected to On Board Diagnostics (OBD) of the trailing vehicle 12 to obtain driving information of the preceding vehicle 11. The OBD (On Board Diagnostics) is a vehicle internal sensor provided in advance in a vehicle, for example, a vehicle's deceleration and deceleration through a speed sensor, an acceleration sensor, a door opening and closing sensor, a sudden stop detection sensor, a brake pedal operation detection sensor, and the like. It not only detects all the driving information in the vehicle, including speed, but also information such as running time, driving distance, accident detection, time and distance during a certain driving period, whether rapid acceleration and sudden braking, cooling water, brake oil, engine oil, engine RPM, vibration, sound, tire pressure, vehicle acceleration, deceleration, average speed, ABS and airbag safety devices such as abnormality, may be a device that can collect battery voltage. The vehicle scanner 211 collects information on the speed of the trailing vehicle from the OBD of the trailing vehicle 12 and transmits the information to the speed analyzer 212.

속도 분석부(212)는 후행 차량(12)에 마련되는 것으로서, 후행 차량(12)의 속도에 대한 정보를 토대로 선행 차량(11)의 속도, 감속도 또는 감가속도를 산출한다. 즉, 속도 분석부(212)는 촬영유닛(110)으로부터 제공받은 촬영영상을 토대로 후행 차량(12)에 대한 선행 차량(11)의 이격거리 변화를 토대로 후행 차량(12)에 대한 선행 차량(11)의 상대속도를 산출하고, 산출된 선행 차량(11)의 상대속도와 후행 차량(12)의 속도에 대한 정보를 토대로 선행 차량(11)의 속도, 감속도 또는 감가속도를 산출한다. The speed analysis unit 212 is provided in the trailing vehicle 12 and calculates the speed, deceleration, or deceleration speed of the preceding vehicle 11 based on information about the speed of the trailing vehicle 12. That is, the speed analysis unit 212 is based on the captured image provided from the photographing unit 110, the preceding vehicle 11 for the trailing vehicle 12 based on the change in the separation distance of the preceding vehicle 11 with respect to the trailing vehicle 12 ) Is calculated, and the speed, deceleration or deceleration speed of the preceding vehicle 11 is calculated based on the calculated relative speed of the preceding vehicle 11 and the speed of the following vehicle 12.

제동 판별부(213)는 속도 분석부(212)에서 제공받은 선행 차량(11)의 감속도 변화 또는 감가속도 변화에 대한 정보를 토대로 기설정된 단위시간 동안 상기 선행 차량(11)의 감속도 변화값 또는 감가속도 변화값이 기설정된 기준값 이상일 경우, 상기 선행 차량(11)의 브레이크 장치가 작동된 것으로 판별할 수 있다. The braking discrimination unit 213 is a deceleration change value of the preceding vehicle 11 for a predetermined unit time based on information on a change in deceleration or deceleration of the preceding vehicle 11 provided by the speed analysis unit 212 Alternatively, when the deceleration acceleration change value is greater than or equal to a preset reference value, it may be determined that the brake device of the preceding vehicle 11 is activated.

상술된 제동 감지부(210)는 촬영유닛(110)에서 촬영된 영상을 분석하여 선행 차량(11)의 속도 정보를 산출하므로 선행 차량(11)으로부터 선행 차량(11)의 운행 정보를 수신하지 않더라도 선행 차량(11)의 브레이크 장치의 작동 여부를 판별할 수 있다. The above-described braking detection unit 210 analyzes the image captured by the imaging unit 110 to calculate the speed information of the preceding vehicle 11, so even if the driving information of the preceding vehicle 11 is not received from the preceding vehicle 11 It is possible to determine whether the brake device of the preceding vehicle 11 is activated.

한편, 도 4에는 본 발명의 또 다른 실시 예에 따른 영상 분석부(220)가 도시되어 있다. Meanwhile, FIG. 4 shows an image analysis unit 220 according to another embodiment of the present invention.

도면을 참조하면, 영상 분석부(220)는 상기 촬영유닛(110)에서 제공되는 촬영영상에서 상기 선행 차량(11)의 후방 외형을 추출하는 외형 추출모듈(221)과, 상기 외형 추출모듈(221)에서 추출된 상기 선행 차량(11)의 후방 외형에 대한 정보를 토대로 상기 선행 차량(11)의 차종을 판별하는 차종 판별부(222)와, 상기 차종 판별부(222)에 의해 판별된 상기 선행 차량(11)의 차종에 대한 정보를 토대로 해당 차종의 브레이크등의 위치에 대한 정보를 제공하는 정보 제공부(223)와, 상기 정보 제공부(223)에서 제공된 정보를 토대로 상기 촬영영상에서, 상기 선행 차량(11)의 브레이크등의 위치에 대응되는 부분을 식별하는 램프 식별모듈(224)과, 상기 촬영영상 중 상기 램프 식별모듈(224)에서 식별된 부분에서 기등록된 브레이크등의 색상 및 광도에 대응되는 광을 감지시 상기 선행 차량(11)의 브레이크등의 작동으로 판별하는 램프 판별부(225)를 구비한다. Referring to the drawings, the image analysis unit 220 includes an external shape extraction module 221 and an external shape extraction module 221 for extracting the rear external shape of the preceding vehicle 11 from the captured image provided by the photographing unit 110. Based on the information on the rear appearance of the preceding vehicle 11 extracted from ), the vehicle model determining unit 222 for determining the vehicle model of the preceding vehicle 11, and the preceding vehicle determined by the vehicle model determining unit 222 Based on the information on the vehicle type of the vehicle 11, based on the information provided by the information providing unit 223 that provides information on the position of the brake light of the vehicle type, and the information providing unit 223, in the photographed image, the The color and light intensity of the lamp identification module 224 for identifying the portion corresponding to the position of the brake light of the preceding vehicle 11 and the brake light pre-registered in the portion identified by the lamp identification module 224 of the captured image When detecting the light corresponding to the lamp is provided with a lamp determining unit 225 to determine the operation of the brake light of the preceding vehicle (11).

외형 추출모듈(221)은 후행 차량(12)에 마련되는 것으로서, 촬영유닛(110)의 촬영영상에서 배경과 선행 차량(11)을 분리하고, 선행 차량(11)의 후방 형상을 추출한다. 상기 외형 추출모듈(221)은 영상에서 관심대상 형상을 추출하기 위해 일반적으로 사용되는 영상 분석 수단이므로 상세한 설명은 생략한다. The external extraction module 221 is provided on the trailing vehicle 12, separates the background and the preceding vehicle 11 from the captured image of the imaging unit 110, and extracts the rear shape of the preceding vehicle 11. Since the external extraction module 221 is an image analysis means generally used to extract a shape of interest from an image, a detailed description is omitted.

차종 판별부(222)는 외형 추출모듈(221)로부터 추출된 선행 차량(11)의 후방 형상을 토대로 상기 선행 차량(11)의 차종 정보를 판별한다. 여기서, 차종 판별부(222)는 도면에 도시되진 않았지만, 다수의 차종의 후방 형상에 대한 정보가 저장된 제1데이터 베이스를 구비한다. 차종 판별부(222)는 외형 추출모듈(221)에서 추출된 선행 차량(11)의 후방 형상에서 특징점 즉, 후방 외형, 후미등 형상 등을 산출하고, 상기 특징점을 기준으로 선행 차량(11)의 후방 형상과 제1데이터 베이스에 저장된 정보를 비교하여 선행 차량(11)의 차종을 산출한다. The vehicle model determining unit 222 determines vehicle model information of the preceding vehicle 11 based on the rear shape of the preceding vehicle 11 extracted from the external extraction module 221. Here, the vehicle model discrimination unit 222 is not shown in the drawing, but includes a first database in which information on a rear shape of a plurality of vehicle models is stored. The vehicle model determining unit 222 calculates a feature point, that is, a rear shape, a rear light shape, and the like, from the rear shape of the preceding vehicle 11 extracted from the outline extraction module 221, and based on the feature point, the rear of the preceding vehicle 11 The vehicle model of the preceding vehicle 11 is calculated by comparing the shape and the information stored in the first database.

한편, 차종 판별부(222)는 선행 차량(11)의 후방 형상에 대응되는 차종 정보가 상기 제1데이터 베이스에 저장되어 있지 않을 경우, 후행 차량(12)의 통신모듈을 이용하여 해당 선행 차량(11)의 후방 형상에 대한 정보를, 다수의 차량에 대한 정보를 관리하는 관리기관의 서버에 전송하고, 상기 관리기관의 서버로부터 해당 선행 차량(11)의 후방 형상에 대응되는 차종의 정보를 수신한다. On the other hand, if the vehicle model information corresponding to the rear shape of the preceding vehicle 11 is not stored in the first database, the vehicle model determining unit 222 uses the communication module of the following vehicle 12 to determine the preceding vehicle ( 11) information on the rear shape of the vehicle is transmitted to a server of a management institution that manages information on a plurality of vehicles, and information of a vehicle model corresponding to the rear shape of the preceding vehicle 11 is received from the server of the management institution. do.

정보 제공부(223)는 차종 판별부(222)에서 제공된 차종을 토대로 해당 차종의 브레이크등의 위치에 대한 정보를 제공한다. 여기서, 상기 정보 제공부(223)는 도면에 도시되진 않았지만, 다수의 차종의 브레이크등의 갯수 및 설치위치에 대한 정보가 저장된 제2데이터 베이스를 구비한다. 정보 제공부(223)는 상기 제2데이터 베이스에 저장된 정보들 중 선행 차량(11)의 차종에 해당하는 정보 즉, 브레이크등의 갯수 및 설치위치를 수집하고, 해당 정보를 램프 식별모듈(224)로 전송한다. The information providing unit 223 provides information on the position of the brake light of the corresponding vehicle model based on the vehicle model provided by the vehicle model determination unit 222. Here, although the information providing unit 223 is not shown in the drawing, it has a second database in which information on the number of brake lights and installation positions of a plurality of vehicle types is stored. The information providing unit 223 collects information corresponding to the vehicle type of the preceding vehicle 11 among the information stored in the second database, that is, the number of brake lights and the installation location, and the information to the lamp identification module 224 Transfer to.

상기 램프 식별모듈(224)은 선행 차량(11)의 차종의 브레이크등의 갯수 및 설치위치에 대한 정보를 토대로 촬영영상에서 선행 차량(11)의 브레이크등에 대응되는 부분을 식별한다. 램프 식별모듈(224)은 식별된 정보를 램프 판별부(225)에 전송한다. The lamp identification module 224 identifies a portion corresponding to the brake light of the preceding vehicle 11 in the captured image based on the number of brake lights of the vehicle type of the preceding vehicle 11 and information on the installation location. The lamp identification module 224 transmits the identified information to the lamp determination unit 225.

상기 램프 판별부(225)는 촬영영상 중 상기 램프 식별모듈(224)에서 식별된 부분에서 기등록된 브레이크등의 색상 및 광도에 대응되는 광을 감지시 상기 선행 차량(11)의 브레이크등의 작동으로 판별한다. 여기서, 기등록된 브레이크등의 색상 및 광도는 적색 및 40칸델라 내지 420칸델라가 적용되는 것이 바람직하다. 램프 판별부(225)는 판별된 정보를 알림모듈(140)로 전송한다. The lamp discrimination unit 225 operates the brake lamp of the preceding vehicle 11 when detecting light corresponding to the color and luminous intensity of a previously registered brake lamp in a portion identified by the lamp identification module 224 among the captured images. It is determined by. Here, it is preferable that red and 40 candelas to 420 candelas are applied to the color and brightness of the previously registered brake light. The lamp determining unit 225 transmits the determined information to the notification module 140.

상술된 바와 같이 구성된 영상 분석부(220)는 촬영영상에서 선행 차량(11)의 차종을 판별하고, 판별된 차종의 브레이크등 갯수 및 설치위치에 대한 정보를 토대로 선행 차량(11)의 브레이크등의 작동 여부를 판별하므로 브레이크등의 작동 판별에 대한 정확성을 향상시킬 수 있는 장점이 있다. The image analysis unit 220 configured as described above determines the vehicle type of the preceding vehicle 11 from the captured image, and based on the information on the number of brake lights and the installation position of the identified vehicle type, the brake light of the preceding vehicle 11 Since the operation is determined, there is an advantage that can improve the accuracy of the operation of the brake light.

제시된 실시예들에 대한 설명은 임의의 본 발명의 기술분야에서 통상의 지식을 가진 자가 본 발명을 이용하거나 또는 실시할 수 있도록 제공된다. 이러한 실시예들에 대한 다양한 변형들은 본 발명의 기술 분야에서 통상의 지식을 가진자에게 명백할 것이며, 여기에 정의된 일반적인 원리들은 본 발명의 범위를 벗어남이 없이 다른 실시예들에 적용될 수 있다. 그리하여, 본 발명은 여기에 제시된 실시예들로 한정되는 것이 아니라, 여기에 제시된 원리들 및 신규한 특징들과 일관되는 최광의 범위에서 해석되어야 할 것이다.The description of the presented embodiments is provided to enable any person of ordinary skill in the art to use or practice the present invention. Various modifications to these embodiments will be apparent to those skilled in the art of the present invention, and the general principles defined herein can be applied to other embodiments without departing from the scope of the present invention. Thus, the present invention should not be limited to the embodiments presented herein, but should be interpreted in the broadest scope consistent with the principles and novel features presented herein.

100: 브레이크등 미작동 감지 시스템
110: 촬영유닛
120: 영상 분석부
130: 제동 감지부
131: 정보수집모듈
132: 제동 판별부
140: 알림모듈
100: brake light malfunction detection system
110: shooting unit
120: image analysis unit
130: brake detection unit
131: Information collection module
132: brake discrimination unit
140: notification module

Claims (8)

선행 차량의 후방을 촬영할 수 있도록 상기 선행 차량의 후방에서 운행하는 후행 차량에 설치되거나 상기 선행 차량이 운행되는 도로에 설치되는 촬영유닛;
상기 촬영유닛에서 촬영된 촬영영상을 분석하여 상기 선행 차량의 후방에 마련된 브레이크등의 작동여부를 판별하는 영상 분석부;
차량을 감속하거나 정지시시키기 위해 마련된 상기 선행 차량의 브레이크 장치의 작동 여부를 감지하는 제동 감지부; 및
상기 영상 분석부 및 제동 감지부에서 제공되는 정보를 토대로 상기 선행 차량의 브레이크 장치가 작동시 상기 선행 차량의 브레이크등이 미작동될 경우, 상기 브레이크등이 고장인 것으로 판단하여 상기 선행 차량 또는 기등록된 상기 선행 차량의 운전자의 단말기로 알림 메시지를 전송하는 알림모듈;을 구비하는,
브레이크등 미작동 감지 시스템.
A photographing unit installed on a trailing vehicle running from the rear of the preceding vehicle or installed on a road on which the preceding vehicle is operated so as to photograph the rear of the preceding vehicle;
An image analysis unit for analyzing whether the brake light provided at the rear of the preceding vehicle is operated by analyzing the captured image taken by the imaging unit;
A braking detection unit that detects whether the brake device of the preceding vehicle is provided to decelerate or stop the vehicle; And
When the brake light of the preceding vehicle is not operated when the brake device of the preceding vehicle is operated based on the information provided by the image analysis unit and the brake detection unit, it is determined that the brake light is faulty, and the preceding vehicle or pre-registered Equipped with a notification module for transmitting a notification message to the terminal of the driver of the preceding vehicle;
Brake light malfunction detection system.
제1항에 있어서,
상기 제동 감지부는
상기 선행 차량에 설치되어 상기 선행 차량의 운행 정보를 수집하는 정보수집모듈; 및
상기 정보수집모듈에서 제공되는 상기 선행 차량의 운행 정보를 토대로 상기 선행 차량의 브레이크 장치의 작동 여부를 판별하고, 판별된 정보를 상기 알림모듈로 전송하는 제동 판별부;를 구비하는,
브레이크등 미작동 감지 시스템.
According to claim 1,
The braking detection unit
An information collecting module installed on the preceding vehicle to collect driving information of the preceding vehicle; And
With a braking discrimination unit for determining whether the brake device of the preceding vehicle is operating based on the driving information of the preceding vehicle provided by the information collection module, and transmitting the determined information to the notification module.
Brake light malfunction detection system.
제2항에 있어서,
상기 선행차량의 운행 정보는 운전자가 상기 브레이크 장치의 작동신호를 입력하기 위한 상기 선행차량의 브레이크 페달의 조작 정보를 포함하고,
상기 제동 판별부는 상기 운전자가 상기 브레이크 페달을 조작시 상기 선행차량의 브레이크 장치가 작동된 것으로 판별하는,
브레이크등 미작동 감지 시스템.
According to claim 2,
The driving information of the preceding vehicle includes operation information of the brake pedal of the preceding vehicle for a driver to input an operation signal of the brake device,
The braking discrimination unit determines that the brake device of the preceding vehicle is operated when the driver operates the brake pedal,
Brake light malfunction detection system.
제2항에 있어서,
상기 선행차량의 운행 정보는 상기 선행 차량의 감속도 변화 또는 감가속도 변화에 대한 정보를 포함하고,
상기 제동 판별부는 기설정된 단위시간 동안 상기 선행 차량의 감속도 변화값 또는 감가속도 변화값이 기설정된 기준값 이상일 경우, 상기 선행 차량의 브레이크 장치가 작동된 것으로 판별하는,
브레이크등 미작동 감지 시스템.
According to claim 2,
The driving information of the preceding vehicle includes information on a change in deceleration or deceleration of the preceding vehicle,
The braking discrimination unit determines that the brake device of the preceding vehicle is activated when the deceleration change value or the deceleration change value of the preceding vehicle during a preset unit time is greater than or equal to a preset reference value,
Brake light malfunction detection system.
제1항에 있어서,
상기 제동 감지부는
상기 후행 차량에 설치되어 상기 후행 차량의 속도에 대한 정보를 수집하는 차량 스캐너;
상기 차량 스캐너로부터 제공되는 상기 후행 차량의 속도에 대한 정보 및 상기 촬영유닛에서 촬영된 촬영영상을 분석하여 상기 선행 차량의 감속도 또는 감가속도에 대한 정보를 산출하는 속도 분석부; 및
상기 속도 분석부에서 산출된 정보를 토대로 상기 단위시간 동안 상기 선행 차량의 감속도 변화값 또는 감가속도 변화값이 기설정된 기준값 이상일 경우, 상기 선행 차량의 브레이크 장치가 작동된 것으로 판별하고, 판별된 정보를 상기 알림모듈로 전송하는 제동 판별부;를 구비하는,
브레이크등 미작동 감지 시스템.
According to claim 1,
The braking detection unit
A vehicle scanner installed on the trailing vehicle to collect information on the speed of the trailing vehicle;
A speed analysis unit that analyzes information on the speed of the trailing vehicle provided from the vehicle scanner and a photographed image taken by the photographing unit to calculate information on the deceleration or deceleration speed of the preceding vehicle; And
When the deceleration change value or deceleration change value of the preceding vehicle during the unit time is greater than a preset reference value based on the information calculated by the speed analysis unit, it is determined that the brake device of the preceding vehicle is activated, and the determined information Equipped with a braking discrimination unit that transmits the information to the notification module.
Brake light malfunction detection system.
제1항에 있어서,
상기 선행 차량은 복수의 상기 브레이크등을 구비하고,
상기 알림모듈은 상기 선행 차량의 브레이크 장치가 작동시 상기 선행 차량의 브레이크등들 중 미작동되는 브레이크등에 대한 정보를 상기 알림 메시지에 포함하는,
브레이크등 미작동 감지 시스템.
According to claim 1,
The preceding vehicle is provided with a plurality of the brake lights,
The notification module includes, in the notification message, information about a brake lamp that is not activated among the brake lights of the preceding vehicle when the brake device of the preceding vehicle is operating,
Brake light malfunction detection system.
제1항에 있어서,
상기 영상 분석부는 상기 촬영유닛에서 제공되는 촬영영상에서, 기등록된 브레이크등의 색상 및 광도에 대응되는 광을 감지시 상기 선행 차량의 브레이크등의 작동으로 판별하는,
브레이크등 미작동 감지 시스템.
According to claim 1,
When the image analysis unit detects light corresponding to the color and luminous intensity of a previously registered brake lamp in the captured image provided by the shooting unit, it determines the operation of the brake lamp of the preceding vehicle,
Brake light malfunction detection system.
제7항에 있어서,
상기 영상 분석부는
상기 촬영유닛에서 제공되는 촬영영상에서 상기 선행 차량의 후방 외형을 추출하는 외형 추출모듈;
상기 외형 추출모듈에서 추출된 상기 선행 차량의 후방 외형에 대한 정보를 토대로 상기 선행 차량의 차종을 판별하는 차종 판별부;
상기 차종 판별부에 의해 판별된 상기 선행 차량의 차종에 대한 정보를 토대로 해당 차종의 브레이크등의 위치에 대한 정보를 제공하는 정보 제공부;
상기 정보 제공부에서 제공된 정보를 토대로 상기 촬영영상에서, 상기 선행 차량의 브레이크등의 위치에 대응되는 부분을 식별하는 램프 식별모듈; 및
상기 촬영영상 중 상기 램프 식별모듈에서 식별된 부분에서 기등록된 브레이크등의 색상 및 광도에 대응되는 광을 감지시 상기 선행차량의 브레이크등의 작동으로 판별하는 램프 판별부;를 구비하는,
브레이크등 미작동 감지 시스템.
The method of claim 7,
The image analysis unit
An appearance extraction module for extracting the rear appearance of the preceding vehicle from the captured image provided by the shooting unit;
A vehicle model discrimination unit that determines a vehicle model of the preceding vehicle based on information on a rear appearance of the preceding vehicle extracted from the appearance extraction module;
An information providing unit that provides information on the position of the brake light of the corresponding vehicle type based on the information on the vehicle type of the preceding vehicle determined by the vehicle type determining unit;
A lamp identification module that identifies a portion corresponding to the position of the brake light of the preceding vehicle in the photographed image based on the information provided by the information providing unit; And
In the portion identified by the lamp identification module among the photographed image, a lamp discrimination unit that detects light corresponding to the color and luminous intensity of a previously registered brake lamp by determining the operation of the brake lamp of the preceding vehicle;
Brake light malfunction detection system.
KR1020180159121A 2018-12-11 2018-12-11 Brake light inoperative detection system Ceased KR20200071405A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180159121A KR20200071405A (en) 2018-12-11 2018-12-11 Brake light inoperative detection system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180159121A KR20200071405A (en) 2018-12-11 2018-12-11 Brake light inoperative detection system

Publications (1)

Publication Number Publication Date
KR20200071405A true KR20200071405A (en) 2020-06-19

Family

ID=71137564

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180159121A Ceased KR20200071405A (en) 2018-12-11 2018-12-11 Brake light inoperative detection system

Country Status (1)

Country Link
KR (1) KR20200071405A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113561896A (en) * 2021-07-16 2021-10-29 浙江大华技术股份有限公司 Method and device for determining abnormality of brake lamp of vehicle
KR20230097276A (en) * 2021-12-23 2023-07-03 한국자동차연구원 System and method for providing warning to vehicle not operating lighting device

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101006577B1 (en) 2008-05-21 2011-01-07 조성래 Brake light display control device

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101006577B1 (en) 2008-05-21 2011-01-07 조성래 Brake light display control device

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113561896A (en) * 2021-07-16 2021-10-29 浙江大华技术股份有限公司 Method and device for determining abnormality of brake lamp of vehicle
KR20230097276A (en) * 2021-12-23 2023-07-03 한국자동차연구원 System and method for providing warning to vehicle not operating lighting device

Similar Documents

Publication Publication Date Title
US10515546B2 (en) Driving determination device and detection device
US9481295B2 (en) Emergency vehicle maneuver communications
US11180164B2 (en) Vehicle control apparatus, vehicle, and control method
EP3140777B1 (en) Method for performing diagnosis of a camera system of a motor vehicle, camera system and motor vehicle
WO2018092265A1 (en) Driving assistance device and driving assistance method
KR20160148978A (en) Vehicle control system for passenger protection and method thereof
CN115131749B (en) Image processing apparatus, image processing method, and computer-readable storage medium
TWI592883B (en) Image recognition system and its adaptive learning method
CN109643375B (en) Methods for learning vehicle behavior of monitored cars and corresponding cars
CN103295421A (en) Anti-collision warning system for vehicles on highway
CN109969195A (en) An alarm system and method for abnormal driver facial behavior and a vehicle based thereon
CN207579859U (en) A kind of vehicle collision prevention system based on cognition technology
KR20170035035A (en) Apparatus and method for preventing drowsy driving
CN114822058B (en) Driving specification driving prompting monitoring method and system based on signal lamp intersection, vehicle-mounted terminal and storage medium
JP6247869B2 (en) Driving evaluation device
KR20200071405A (en) Brake light inoperative detection system
KR20160063653A (en) System for preventing drowsy drive
CN113370973A (en) Forward collision early warning algorithm considering driving intention prediction of front vehicle
CN115703480A (en) System for displaying attention to nearby vehicles and method for providing alerts using the same
KR20170080869A (en) Apparatus and method for preventing car accident
CN115134491A (en) Image processing method and device
KR102910458B1 (en) Emergency stop system based on driver biometric information and method
KR20130107425A (en) Vehicle safety driving device and method
KR20190014884A (en) Vehicle video monitoring system for utilizing driving pattern and the method thereof
CN106427780A (en) Five channel video detection-integrated omnidirectional motor vehicle active safety system

Legal Events

Date Code Title Description
PA0109 Patent application

Patent event code: PA01091R01D

Comment text: Patent Application

Patent event date: 20181211

PA0201 Request for examination
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20191213

Patent event code: PE09021S01D

E601 Decision to refuse application
PE0601 Decision on rejection of patent

Patent event date: 20200521

Comment text: Decision to Refuse Application

Patent event code: PE06012S01D

Patent event date: 20191213

Comment text: Notification of reason for refusal

Patent event code: PE06011S01I

PG1501 Laying open of application