KR20220149432A - Method and system for selectively providig vibrating alert to passengers of motor vehicle to raise awareness for an imminent or ongoing communication - Google Patents
Method and system for selectively providig vibrating alert to passengers of motor vehicle to raise awareness for an imminent or ongoing communication Download PDFInfo
- Publication number
- KR20220149432A KR20220149432A KR1020220050426A KR20220050426A KR20220149432A KR 20220149432 A KR20220149432 A KR 20220149432A KR 1020220050426 A KR1020220050426 A KR 1020220050426A KR 20220050426 A KR20220050426 A KR 20220050426A KR 20220149432 A KR20220149432 A KR 20220149432A
- Authority
- KR
- South Korea
- Prior art keywords
- vehicle
- passenger
- seat
- communication
- receiving
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
- B60W50/16—Tactile feedback to the driver, e.g. vibration or force feedback to the driver on the steering wheel or the accelerator pedal
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
- B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
- B60K35/22—Display screens
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
- B60K35/25—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using haptic output
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
- B60K35/26—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using acoustic output
- B60K35/265—Voice
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
- B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/65—Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60N—SEATS SPECIALLY ADAPTED FOR VEHICLES; VEHICLE PASSENGER ACCOMMODATION NOT OTHERWISE PROVIDED FOR
- B60N2/00—Seats specially adapted for vehicles; Arrangement or mounting of seats in vehicles
- B60N2/002—Seats provided with an occupancy detection means mounted therein or thereon
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
- B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
- B60R16/023—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for transmission of signals between vehicle parts or subsystems
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING SYSTEMS, e.g. PERSONAL CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B6/00—Tactile signalling systems, e.g. tactile personal calling systems
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/20—Optical features of instruments
- B60K2360/21—Optical features of instruments using cameras
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/589—Wireless data transfers
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/592—Data transfer involving external databases
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/741—Instruments adapted for user detection
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/85—Arrangements for transferring vehicle- or driver-related data
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60N—SEATS SPECIALLY ADAPTED FOR VEHICLES; VEHICLE PASSENGER ACCOMMODATION NOT OTHERWISE PROVIDED FOR
- B60N2/00—Seats specially adapted for vehicles; Arrangement or mounting of seats in vehicles
- B60N2/90—Details or parts not otherwise provided for
- B60N2002/981—Warning systems, e.g. the seat or seat parts vibrates to warn the passenger when facing a danger
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60N—SEATS SPECIALLY ADAPTED FOR VEHICLES; VEHICLE PASSENGER ACCOMMODATION NOT OTHERWISE PROVIDED FOR
- B60N2210/00—Sensor types, e.g. for passenger detection systems or for controlling seats
- B60N2210/10—Field detection presence sensors
- B60N2210/16—Electromagnetic waves
- B60N2210/22—Optical; Photoelectric; Lidar [Light Detection and Ranging]
- B60N2210/24—Cameras
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60N—SEATS SPECIALLY ADAPTED FOR VEHICLES; VEHICLE PASSENGER ACCOMMODATION NOT OTHERWISE PROVIDED FOR
- B60N2230/00—Communication or electronic aspects
- B60N2230/20—Wireless data transmission
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
- B60W2040/0818—Inactivity or incapacity of driver
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
- B60W2040/0881—Seat occupation; Driver or passenger presence
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
- B60W2040/089—Driver voice
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
- B60W2050/143—Alarm means
Landscapes
- Engineering & Computer Science (AREA)
- Mechanical Engineering (AREA)
- Transportation (AREA)
- Combustion & Propulsion (AREA)
- Chemical & Material Sciences (AREA)
- Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Human Computer Interaction (AREA)
- Aviation & Aerospace Engineering (AREA)
- Health & Medical Sciences (AREA)
- Multimedia (AREA)
- General Physics & Mathematics (AREA)
- Mathematical Physics (AREA)
- Acoustics & Sound (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computational Linguistics (AREA)
- General Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Theoretical Computer Science (AREA)
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
- Seats For Vehicles (AREA)
Abstract
Description
본 발명은 임박한 또는 진행 중인 통신을 위한 인식을 높이기 위해 차량의 승객에게 선택적으로 진동 경고를 제공하는 방법 및 시스템에 관한 것이다. 본 발명은 또한 이러한 시스템을 구비한 차량에 관한 것이다.The present invention relates to a method and system for selectively providing a vibration alert to a passenger of a vehicle to raise awareness for an impending or ongoing communication. The invention also relates to a vehicle equipped with such a system.
카풀링(carpooling)(또한 라이드 풀링(ride pooling), 카 셰어링(car sharing), 라이드 셰어링(ride sharing) 및 리프트 셰어링(lift sharing))은 한 명 이상의 사람이 차량으로 여행하고 다른 사람이 위치까지 직접 운전해야 하는 필요성을 방지하는 차량 여행의 공유이다. 더 많은 사람들이 하나의 차량을 사용하게 함으로써 카풀링 및 이와 유사한 개념은 연료 비용, 통행료 및 운전 스트레스를 포함하는 각 사람의 여행 비용을 줄인다. 이러한 개념은 또한 여행을 공유하는 것이 대기 오염, 탄소 배출, 도로의 교통 혼잡, 및 주차 공간의 필요성을 줄여주기 때문에 보다 환경 친화적이고 지속 가능한 여행 방법이다. 카 셰어링은 차량을 사용하는 것이 단지 운전자라면 사용되지 않은 채로 남아 있을 차량의 전체 좌석 용량을 사용하는 좋은 방법이다.Carpooling (also ride pooling, car sharing, ride sharing and lift sharing) is a process in which one or more people travel in a vehicle and another It is the sharing of vehicle travel that avoids the need to drive directly to this location. By allowing more people to use one vehicle, carpooling and similar concepts reduce travel costs for each person, including fuel costs, tolls and driving stress. This concept is also a more environmentally friendly and sustainable way to travel because sharing travel reduces air pollution, carbon emissions, road congestion, and the need for parking spaces. Car sharing is a great way to use the entire seat capacity of a vehicle that would remain unused if using the vehicle was just the driver.
예를 들어 웹사이트 또는 모바일 애플리케이션을 통해 승객과 차량을 매칭함으로써 유사한 픽업 지점과 목적지를 가진 승객을 한 번에 함께 묶는 상업용 풀링 서비스가 최근 도입되었다. 이러한 경우, 개별 목적지에 도착할 때, 예를 들어 개개의 차량의 객실 내부에 설치된 스크린을 통해 각 승객에게 알려야 한다. 풀링 개념에 대한 과제는 이제 일반 데이터 보호 규정(GDPR) 또는 개인 데이터가 전송 및 공유되는 방법을 지시하는 데이터 보호 및 개인 정보 보호에 대한 유사한 규정을 준수해야 하는 필요성에 있다. 이러한 규정의 결과 중 하나는 특정 풀링 고객을 위한 메시지가 공유 화면이나 확성기를 통해 전달되어서는 안 된다는 것이다. 이러한 제한은 이름 이니셜을 사용하여 극복할 수 있다.Commercial pooling services have recently been introduced, tying passengers with similar pickup points and destinations together at once, for example by matching passengers and vehicles via a website or mobile application. In this case, each passenger must be informed when arriving at an individual destination, for example via a screen installed inside the cabin of the individual vehicle. The challenge for the pooling concept now lies in the need to comply with the General Data Protection Regulation (GDPR) or similar regulations on data protection and privacy that dictate how personal data is transmitted and shared. One of the consequences of these regulations is that messages intended for specific pooling customers must not be delivered via shared screens or loudspeakers. This limitation can be overcome by using name initials.
그러나, 예를 들어 인포테인먼트 시스템을 사용하여 작업 중이거나 휴식을 취하는 승객은 종종 차량 내부에서 제공되는 시각 및/또는 청각 정보를 알아차리지 못한다. 일반적으로, 차량 승객은 헤드폰을 착용하거나 잠을 잘 수 있으며, 이에 따라 임의의 외부 입력이 어느 정도 차단될 수 있다. 이는, 예를 들어 라이드 헤일링, 택시 운전, 및/또는 개인 운전과 같은 다른 운전 애플리케이션과도 관련이 있을 수 있다. 예를 들어, 운전자는 경로, 시간표 변경에 대한 정보를 제공하거나 뒷좌석 승객과 대화를 시작하기를 원할 수 있다. 이러한 모든 경우에, 시각적 및/또는 청각적으로 주의가 산만할 수 있는 승객의 주의를 끌 필요가 있다.However, passengers who are working or resting, for example using the infotainment system, are often unaware of the visual and/or auditory information provided inside the vehicle. In general, vehicle occupants may wear headphones or sleep, thus blocking any external input to some extent. This may also relate to other driving applications such as, for example, ride hailing, taxi driving, and/or personal driving. For example, a driver may want to provide information about a route, timetable change, or initiate a conversation with a back seat passenger. In all of these cases, there is a need to draw the attention of a passenger who may be visually and/or aurally distracted.
선행 기술 문서 EP 2 953 379 B1은 능동 소음 감소 헤드폰을 위한 사용자 인터페이스를 설명하며, 여기서 사용자가 수동으로, 사용자가 말하기 시작하면 자동으로, 또는 외부 원격 신호에 의하여 활성화할 수 있는 능동 히어쓰루(hear-through) 모드가 헤드폰을 착용한 사람들을 위해 제공된다. Prior art document EP 2 953 379 B1 describes a user interface for active noise reduction headphones, wherein an active hear-through can be activated manually by the user, automatically when the user starts speaking or by means of an external remote signal. -through) mode is provided for those who wear headphones.
따라서, 승객이 차량 내부에서 메시지 및/또는 알림을 인식하도록 하기 위한 신중하면서도 효과적인 해결책을 찾을 필요가 있다.Therefore, there is a need to find a prudent yet effective solution for making the passengers aware of messages and/or notifications inside the vehicle.
이를 위해, 본 발명은 청구항 1에 따른 방법, 청구항 11에 따른 시스템, 및 청구항 20에 따른 차량을 제공한다.To this end, the invention provides a method according to
본 발명의 하나의 양상에 따르면, 임박하거나 진행 중인 통신을 위한 인식을 높이기 위해 차량의 승객에게 진동 경고를 선택적으로 제공하는 방법은 차량의 좌석 할당 유닛에 의하여, 차량 내에서 수신 승객에 의해 점유되는 좌석을 결정하는 단계; 차량의 통신 제어 장치에 의하여, 통신이 수신 승객에게 전달되도록 의도되었는지를 평가하는 단계; 그리고 통신의 수신 승객에게 경고하도록 수신 승객에 의해 점유되는 각 좌석에서 진동 장치를 작동시켜 수신 승객에게 진동 경고를 제공하는 단계를 포함한다.According to one aspect of the present invention, a method of selectively providing a vibration alert to a passenger of a vehicle to raise awareness for an impending or ongoing communication comprises, by a seat assignment unit of the vehicle, a method occupied by a receiving passenger within the vehicle. determining a seat; evaluating, by the communication control device of the vehicle, whether the communication is intended to be delivered to the receiving passenger; and activating the vibrating device in each seat occupied by the receiving passenger to alert the receiving passenger of the communication to provide a vibrating alert to the receiving passenger.
본 발명의 다른 양상에 따르면, 임박하거나 진행 중인 통신을 위한 인식을 높이기 위해 차량의 승객에게 진동 경고를 선택적으로 제공하는 시스템은 차량 내에서 수신 승객이 차지하는 좌석을 결정하도록 구성된 좌석 할당 유닛; 통신이 수신 승객에게 전달되도록 의도되었는지 여부를 평가하도록 구성된 통신 제어 장치; 그리고 수신 승객이 차지하는 각각의 좌석에 배열되고, 통신의 수신 승객에게 경고하기 위해 수신 승객에게 진동 경고를 제공하도록 구성된 진동 장치를 포함한다.According to another aspect of the present invention, a system for selectively providing a vibration alert to a passenger of a vehicle to raise awareness for an impending or ongoing communication comprises: a seat assignment unit configured to determine a seat in the vehicle occupied by a receiving passenger; a communication control device configured to evaluate whether the communication is intended to be delivered to the receiving passenger; and a vibrating device, arranged at each seat occupied by the receiving passenger, configured to provide a vibration alert to the receiving passenger to warn the receiving passenger of the communication.
본 발명의 또 다른 양상에 따르면, 차량은 본 발명의 다른 양상에 따른 시스템을 포함한다. According to another aspect of the present invention, a vehicle comprises a system according to another aspect of the present invention.
본 발명의 하나의 아이디어는 수신 메시지 또는 기타 통신을 알리기 위해 청각 및/또는 시각 수용력이 제한된 차량 내부의 사람에게 진동 피드백을 제공하는 것이다. 본 발명은 라이드 풀링 및 유사한 개념을 포함하지만 이에 제한되지 않는 다양한 운전 애플리케이션에서 관련 정보에 대한 승객의 인식을 높이는데 도움이 될 수 있다. 그러나, 본 발명의 진동 경고는 승객이 메시지를 보거나 들을 수 없을 때 뿐만 아니라 보다 신중한 통지가 필요한 경우에도 사용될 수 있다. 예를 들어, 모든 탑승자가 들을 수 있는 청각 정보로 다른 승객을 방해하지 않고 진동 경고로 해당 승객에게만 알릴 수 있다. 본 발명은 특별한 상황(예를 들어, 라이드 풀링 차량으로 목적지에 도착)을 사용자에게 알리거나, 예를 들어 대화를 시작하도록(예를 들어 헤드폰을 끼고 있을 수 있는 차량 뒷좌석의 승객과 대화하기를 원하는 운전자의 경우) 누군가의 주의를 끌기 위해 사용될 수 있다. One idea of the present invention is to provide vibration feedback to a person inside a vehicle with limited auditory and/or visual capacity to inform an incoming message or other communication. The present invention may help to increase passenger awareness of relevant information in a variety of driving applications including, but not limited to, ride pooling and similar concepts. However, the vibration alert of the present invention can be used not only when a passenger cannot see or hear a message, but also when more careful notification is required. For example, an audible information audible to all occupants can alert only that passenger with a vibrating alert without disturbing other passengers. The present invention provides a way to inform the user of a particular situation (eg, arriving at a destination in a ride-pooling vehicle), or wishing to initiate a conversation (eg with a passenger in the backseat of the vehicle who may be wearing headphones). driver) can be used to get someone's attention.
진동은 응답자가 앉아 있는 곳 및/또는 응답자가 만지고 있는 차량 내부의 모든 종류의 표면, 예를 들어 좌석 표면, 바닥, 머리 받침 또는 이와 유사한 것에서 발생할 수 있다. 예를 들어, 차선 이탈 경고 시스템 등과 같은 보조 주행 기능으로부터 알려진 요소를 포함하는 최신 기술의 진동 요소가 이러한 목적을 위해 사용될 수 있다.Vibration may occur where the respondent is sitting and/or on any kind of surface inside the vehicle that the respondent is touching, such as a seat surface, floor, headrest or the like. State-of-the-art vibratory elements can be used for this purpose, including, for example, elements known from assistive driving functions such as lane departure warning systems and the like.
개별 승객에게 선택적으로 경고할 수 있으려면 차량 내부에서 그들의 해당 위치를 알아야 한다. 따라서, 현재 시스템은 각 승객에게 좌석을 할당한다. 이것은, 예를 들어 좌석 감지 매트, 카메라 및/또는 당업자에게 알려진 다른 센서에 의해 수행될 수 있다. 이는 좌석이 사전 할당 및/또는 고정 승객에게 할당되지 않은 경우, 즉 승객이 좌석을 다소간 자유롭게 선택할 수 있는 경우에 특히 관련이 있다.In order to be able to selectively warn individual passengers, it is necessary to know their respective locations inside the vehicle. Thus, the current system assigns a seat to each passenger. This may be done, for example, by a seat sensing mat, a camera and/or other sensors known to those skilled in the art. This is of particular relevance when seats are not pre-allocated and/or assigned to fixed passengers, ie where the passenger is more or less free to select a seat.
본 명세서에 사용된 "차량" 또는 "차량의" 또는 기타 유사한 용어는 스포츠 유틸리티 차량(SUV)을 포함하는 승용차, 버스, 트럭, 다양한 상업용 차량 등을 포함하는 일반적인 자동차를 포함하고, 하이브리드 차량, 전기 차량, 플러그인 하이브리드 전기 차량, 수소 동력 차량 및 기타 대체 연료(예를 들어, 석유 이외의 자원에서 파생된 연료) 차량을 포함하는 것으로 이해된다. 본 명세서에서 언급되는 바와 같이, 하이브리드 차량은 2개 이상의 동력원을 갖는 차량, 예를 들어 가솔린 동력 및 전기 동력 차량이다. 또한, 기차, 항공기, 선박 등도 본 발명의 의미 내에서 차량에 속한다.As used herein, the term "vehicle" or "vehicle" or other similar terms includes passenger cars including sport utility vehicles (SUVs), buses, trucks, and automobiles in general, including various commercial vehicles, hybrid vehicles, electric vehicles, and the like. It is understood to include vehicles, plug-in hybrid electric vehicles, hydrogen powered vehicles, and other alternative fuel (eg, fuels derived from resources other than petroleum) vehicles. As referred to herein, a hybrid vehicle is a vehicle having two or more power sources, for example, a gasoline powered vehicle and an electric powered vehicle. Further, trains, aircraft, ships, etc. also belong to vehicles within the meaning of the present invention.
본 발명의 유리한 실시예 및 개선점은 종속항에서 발견된다.Advantageous embodiments and improvements of the invention are found in the dependent claims.
본 발명의 일 실시예에 따르면, 통신 제어 장치는 통신으로서 자동 통지를 생성하도록 구성될 수 있다. 통신은 특히 텍스트, 시각적 및/또는 청각적 알림일 수 있다.According to an embodiment of the present invention, the communication control device may be configured to generate an automatic notification as a communication. The communication may in particular be a textual, visual and/or audible notification.
라이드 풀링 상황의 특정 예에서, 통지는 예를 들어 차량이 수신 승객의 목적지에 도착했거나 곧 도착할 것이라는 중앙 스크린 상의 시각적 표시일 수 있다. 이제 각 승객은, 예를 들어 차량이 목적지에 도착할 것이라는 정보와 함께 승객의 이니셜 또는 가주어가 표시될 수 있는 화면에 주의를 기울여야 한다는 진동으로 경고를 받을 수 있다.In a particular example of a ride pooling situation, the notification may be, for example, a visual indication on a central screen that the vehicle has arrived or is about to arrive at the destination of the recipient passenger. Each passenger can now be alerted with a vibration alerting them to pay attention to a screen where, for example, the passenger's initials or guardian can be displayed along with information that the vehicle will arrive at its destination.
본 발명의 일 실시 예에 따르면, 통신은 차량의 운전자 및/또는 다른 승객에 의한 음성 메시지일 수 있다.According to an embodiment of the present invention, the communication may be a voice message by the driver and/or other passenger of the vehicle.
따라서, 다른 특정 예에서, 운전자 또는 동승자는, 예를 들어 차량의 뒷줄에 앉아 있을 수 있는 수신 승객과 대화하기를 원할 수 있다. 수신 승객은 화자에게 주의를 기울이지 않거나, 예를 들어 헤드폰으로 인해, 잠들어 있기 때문에 등으로 주의가 산만하거나 청력이 제한될 수 있다. 진동 경고는 이제 수신 승객을 깨우거나 화자가 의사 소통을 원한다는 사실에 승객의 주의를 끌 수 있다.Thus, in another specific example, the driver or passenger may wish to talk to a receiving passenger, who may be seated, for example, in the back row of a vehicle. The receiving passenger may be distracted or have limited hearing by not paying attention to the speaker, for example because of headphones, because he is asleep, etc. A vibration alert can now wake a receiving passenger or draw the passenger's attention to the fact that the speaker wants to communicate.
본 발명의 일 실시 예에 따르면, 통신 제어 장치는 수신 승객과 관련된 음성 메시지 내의 개별 코드 단어를 검출하고, 복수의 수신 승객을 나타내는 음성 메시지의 일반 코드 단어를 검출하며, 운전자 및/또는 다른 승객의 현재 시야 방향을 평가하는 것 중 적어도 하나에 의해 차량을 점유하는 다수의 승객 중에서 통신의 의도된 수신자로서 수신 승객을 식별하도록 구성될 수 있다. According to an embodiment of the present invention, the communication control device detects individual code words in a voice message associated with a recipient passenger, detects a generic code word in a voice message representing a plurality of recipient passengers, and the driver and/or other passenger and identify the receiving passenger as the intended recipient of the communication among the plurality of passengers occupying the vehicle by at least one of evaluating the current viewing direction.
개별 코드 단어는 차량 내부의 특정 승객에게 직접적으로 고유하게 부여된 이름, 사용자 이름, 가명, 목적지 등을 포함할 수 있다. 원칙적으로, 차량의 특정 탑승자와 일대일 통신이 이루어지는 한 개인 호칭과 함께 사용되거나 사용되지 않을 수 있는 개인을 위한 호칭의 임의의 일반적인 형식도 포함할 있다.Individual code words may include names, user names, aliases, destinations, etc. that are directly and uniquely assigned to a particular passenger inside the vehicle. In principle, it may also include any general form of designation for an individual that may or may not be used in conjunction with a personal title as long as one-to-one communication with a particular occupant of the vehicle is established.
반면에, 일반 코드 단어는 특정 사람이 아니라 차량의 한 그룹의 사람 및/또는 모든 승객을 함께 지정됨을 나타내는 구 또는 구어 표현을 포함할 수 있다. 예시적인 구는 "모든 청중", "주목" 등, 복수의 대명사 등을 포함한다.On the other hand, generic code words may include phrases or colloquial expressions indicating that a group of people and/or all passengers of a vehicle are designated together rather than a specific person. Exemplary phrases include “every audience,” “attention,” and the like, plural pronouns, and the like.
통신 제어 장치는 음성 메시지를 분석하고 메시지의 수신자를 결정하기 위해 음성 인식 알고리즘을 사용할 수 있다. 시스템은 음성 메시지(예를 들어, 문장)를 기록하고 현재 코드 단어 또는 구를 추출할 수 있다. 이를 위해, 시스템은 코드 단어 및 점유자 동작의 데이터베이스를 구축 및/또는 접속할 수 있다. 시스템은 또한 구어를 해석하고 분석하기 위해 고급 기계 학습 기술을 사용할 수 있다. 초기 코드 단어는, 예를 들어 로컬 네트워크에 등록된 장치 또는 라이드 풀링 예약 정보(예를 들어, 이름, 목적지 등)에서 가져오거나 기본 단어 세트(예를 들어, "하차", "점유", " 들으세요" 등)를 포함할 수 있다. 이러한 방식으로, 시스템의 기본 기능은 첫 번째 탑승부터 보장될 수 있다.The communication control device may use a voice recognition algorithm to analyze the voice message and determine the recipient of the message. The system may record a voice message (eg, a sentence) and extract the current code word or phrase. To this end, the system may build and/or access a database of code words and occupant actions. The system may also use advanced machine learning techniques to interpret and analyze spoken language. Initial code words are, for example, taken from devices registered on the local network or ride pooling reservation information (eg name, destination, etc.) Please", etc.). In this way, the basic functionality of the system can be ensured from the first ride.
코드 단어 또는 구가 음성 메시지에서 발견 및/또는 식별되면 잠재적인 추가 승객 및/또는 운전자를 방해하지 않고 승객이 이제 메시지를 들을 수 있도록 하기 위해 해당 승객에게 경고를 보낼 수 있고 음성 메시지가 승객에게, 예를 들어 승객의 헤드폰 등에 재생될 수 있다. If a code word or phrase is found and/or identified in a voice message, an alert can be sent to that passenger so that the passenger can now hear the message without disturbing potential additional passengers and/or the driver, and the voice message is sent to the passenger; For example, it may be played on a passenger's headphones or the like.
코드 단어 외에도, 화자의 시야 방향도 메시지 수신자를 가리키는 표시기 역할을 할 수 있다. 화자의 현재 시야 방향을 재구성하기 위해, 운전자의 얼굴을 모니터링할 수 있고 운전자가 말하는 방향을 추적할 수 있는 하나 또는 여러 대의 카메라 및/또는 지향성 마이크 또는 기타 적절한 시스템이 사용될 수 있다. 그 후, 수신 승객은 (직접 또는 예를 들어 백미러 등을 통해) 운전자가 보고 있는 승객으로 식별될 수 있다.In addition to the code word, the speaker's direction of view can also serve as an indicator to indicate the recipient of the message. To reconstruct the speaker's current viewing direction, one or more cameras and/or directional microphones or other suitable system capable of monitoring the driver's face and tracking the direction the driver is speaking may be used. The receiving passenger can then be identified as the passenger the driver is looking at (either directly or through a rearview mirror for example).
본 발명의 일 실시 예에 따르면, 통신 제어 장치는 활성화된 헤드폰, 활성화된 개인용 전자 장치, 활성화된 독서등, 활성화된 차량 내 인포테인먼트, 펼쳐진 테이블, 펼쳐진 다리 받침대 또는 팔걸이, 및 뒤로 넘어간 등받이 또는 머리 받침대를 검출함으로써 수신 승객의 주의 산만을 결정하도록 구성될 수 있다. 방법은 대응하여 상기 조치들 중 적어도 하나에 의해 수신 승객의 주의 산만을 결정하는 단계를 더 포함할 수 있다. 이후, 진동 경고는 수신 승객의 결정된 주의 산만에 따라 조정될 수 있다.According to an embodiment of the present invention, the communication control device includes an activated headphone, an activated personal electronic device, an activated reading light, activated in-vehicle infotainment, an unfolded table, an unfolded leg rest or armrest, and a reclined backrest or headrest. can be configured to determine the distraction of the receiving passenger by detecting The method may correspondingly further comprise determining a distraction of the receiving passenger by at least one of the measures. Thereafter, the vibration alert may be adjusted according to the determined distraction of the receiving passenger.
시스템의 수용도를 높이기 위해, 진동 신호는 이에 따라 주의가 분산되는 특정 탑승자에게만 전송될 수 있다. 또한, 진동 신호는 특정 주의 산만에 기초하여 구성될 수 있다. 상이한 시나리오를 구별하는데 도움이 될 수 있는 주의 산만 유형 및/또는 수준이 정의될 수 있다. 각각의 결과에 따라, 다른 유형의 진동 신호가 전송되거나(다른 진폭 레벨, 특정 길이 및 주파수의 반복되는 진동 등) 진동 신호가 전혀 전송되지 않을 수 있다(예를 들어, 주의 산만이 사소하고/사소하거나 수신 승객이 이미 통신에 반응하고 있기 때문에).In order to increase the acceptance of the system, the vibration signal can only be transmitted to a specific occupant whose attention is thus distracted. Also, the vibration signal may be constructed based on a particular distraction. Types and/or levels of distraction may be defined that may help distinguish different scenarios. Depending on the outcome of each, a different type of vibration signal may be transmitted (different amplitude levels, repeated vibrations of a certain length and frequency, etc.) or no vibration signal transmitted at all (eg distraction is minor/minor). or because the receiving passenger is already responding to the communication).
수신 승객의 주의 산만은 예를 들어The distraction of the receiving passenger is, for example,
- 무선 헤드폰 사용(예를 들어, 무선 네트워크, 블루투스 등을 통해 감지)- Use of wireless headphones (e.g. detected via wireless network, Bluetooth, etc.)
- 차량의 와이파이 핫스팟 사용- Use your car's Wi-Fi hotspot
- 독서등 켜짐(예를 들어, CAN-Bus, 접촉 스위치 등을 통해 감지)- Reading light on (detected e.g. via CAN-Bus, contact switch, etc.)
- 조정된 좌석- Adjusted seat
- 활성화된 마사지 모드- Activated massage mode
- 펼쳐진 테이블 및/또는 팔걸이- unfolded table and/or armrests
- 햇볕 가리개 사용- use a sun shade
- 차량 내 인포테인먼트 사용- Use of in-vehicle infotainment
- 키보드 입력, 마우스 클릭 등(예를 들어, 마이크로폰, 카메라 등을 통해 감지)- Keyboard input, mouse click, etc. (detected via microphone, camera, etc.)
- 비디오, 비디오 게임의 사운드- Sound from video, video games
를 포함하는 여러 개의 상이한 인자 또는 표시기를 조합함으로써 측정되거나 정량화될 수 있다. can be measured or quantified by combining several different factors or indicators, including
주의 산만 수준이나 유형을 명확하게 설정할 수 없는 경우, 통신 요청이 반복적으로 무시된 후, 예를 들어 두 번의 실패한 시도 후에만 진동 경고가 전송될 수 있다.If the level or type of distraction cannot be clearly established, a vibration alert may only be sent after a communication request has been repeatedly ignored, for example after two failed attempts.
본 발명의 일 실시 예에 따르면, 통신 제어 장치는 통신이 음성 메시지인 경우 통신을 녹음하고 결정된 주의 분산에 따라 수신 승객에게 통신을 선택적으로 재생하도록 구성될 수 있다.According to an embodiment of the present invention, the communication control device may be configured to record the communication when the communication is a voice message and selectively play the communication to the receiving passenger according to the determined distraction.
최초에 메시지를 말했기 때문에, 수신 승객이 그 이후에만 주의를 기울이는 경우 운전자 및/또는 다른 승객이 메시지를 반복해야 할 것이다. 본 실시 예에서, 이러한 반복은 메시지가 기록되고 이후 승객에게 지향적으로 재생될 수 있기 때문에 회피될 수 있다. 수신 승객이 헤드폰, 인포테인먼트 시스템 등을 사용하는 경우, 음성 메시지는 승객에게 도달하기 위해 각각의 스피커, 헤드폰, 및/또는 사운드 시스템을 통해 재생될 수 있다.Since the message was first spoken, the driver and/or other passenger will have to repeat the message if the receiving passenger only pays attention thereafter. In the present embodiment, this repetition can be avoided since the message can be recorded and later directed to the passenger. If the receiving passenger is using headphones, an infotainment system, or the like, a voice message may be played through the respective speaker, headphone, and/or sound system to reach the passenger.
원칙적으로, 진동 경고를 발하는 대신 메시지를 즉시 재생하는 것도 가능하다. 이후, 진동 경고는 수신 승객과의 통신 시도가 두 번 또는 그 이상 실패한 후에만 전송될 수 있다.In principle, it is also possible to play the message immediately instead of issuing a vibration alert. Thereafter, the vibration alert can only be sent after two or more unsuccessful attempts to communicate with the receiving passenger.
본 발명의 일 실시 예에 따르면, 좌석 할당 유닛은 차량의 좌석 점유 센서 시스템을 사용하여 수신 승객이 현재 앉아 있는 차량의 좌석을 감지하기 위해 수신 승객이 점유하는 좌석을 결정하도록 구성될 수 있다. According to an embodiment of the present invention, the seat assignment unit may be configured to determine the seat occupied by the receiving passenger to detect a seat in the vehicle in which the receiving passenger is currently sitting by using the vehicle's seat occupancy sensor system.
감지는 좌석이 점유되어 있는지 여부를 설정해야 하는 다른 응용 분야에서 당업자에게 알려진 다양한 다른 센서 시스템을 사용하여 수행될 수 있다. 시스템은, 예를 들어 좌석 감지 매트, 안전 벨트 센서, 카메라, 무게 센서를 포함할 수 있다. 물론 이러한 감지 접근 방식이 결합될 수 있음을 이해해야 한다.Sensing may be performed using a variety of other sensor systems known to those skilled in the art in other applications where it is necessary to establish whether a seat is occupied. The system may include, for example, a seat sensing mat, a seat belt sensor, a camera, and a weight sensor. Of course, it should be understood that these sensing approaches can be combined.
라이드 풀링 애플리케이션에서, 시스템은 승객이 차량에 탑승할 때마다 이를 인지하고 이에 따라 이 승객에게 특정 좌석, 즉 승객이 차량에 탑승한 직후 센서 시스템에 의해 센서 신호가 포착되는 좌석을 할당할 수 있다. 승객의 신원은, 예를 들어 예약 정보 및 픽업 시간/장소로 인해, 안면 인식, 음성 인식 등으로 인해 알려질 수 있으며, 이에 따라 각각의 좌석에 배정될 수 있다.In a ride pooling application, the system can recognize each time a passenger enters the vehicle and can accordingly assign this passenger a specific seat, that is, a seat for which the sensor signal is captured by the sensor system immediately after the passenger enters the vehicle. The identity of the passenger may be known, for example, due to reservation information and pickup time/place, due to facial recognition, voice recognition, etc., and may be assigned to each seat accordingly.
일반적인 응용 프로그램에서, 예를 들어 개인 운전의 경우, 좌석 할당은 예를 들어 각각의 좌석에 있는 각 승객을 식별하는 카메라 시스템을 통해 수행될 수 있으며, 이에 따라 광학적 확인을 통해 승객에게 직접 할당될 수 있다.In a typical application, e.g. in the case of personal driving, seat assignment can be done e.g. via a camera system that identifies each passenger in each seat and can therefore be assigned directly to the passenger via optical identification. have.
본 발명의 일 실시 예에 따르면, 좌석 할당 유닛은 차량 내의 개인용 전자 장치를 추적하고, 안전 벨트 상태를 확인하고, 안면 인식을 사용하고, 음성 인식을 사용하고, 승객 예약 정보를 확인하고/확인하거나 차량의 점유 이력을 평가하여 점유 좌석을 감지하도록 구성될 수 있다. According to an embodiment of the present invention, the seat assignment unit tracks personal electronic devices in the vehicle, checks seat belt status, uses facial recognition, uses voice recognition, verifies passenger reservation information and/or It may be configured to evaluate the occupancy history of the vehicle to detect occupied seats.
특정 예에서, 시스템은 승객이 차량에 탑승하자마자(예를 들어, 도어 열림, 안전 벨트 체결, 좌석 무게 센서가 신호 수신 등) 초기화될 수 있다. 이후, 시스템은, 예를 들어 데이터베이스, 차량의 점유 및/또는 운전 이력에서 데이터를 검색함으로써 승객에 대한 정보 수집을 시작할 수 있다. 추가적으로 또는 대안적으로, 다양한 센서 시스템이 승객 및 점유 좌석에 대한 추가 정보(예를 들어, 개인용 전자 장치 이름, 사진, 음성, 시간/요일/승/하차 위치)를 수집하는데 사용될 수 있다.In certain instances, the system may be initialized as soon as a passenger enters the vehicle (eg, a door is opened, a seat belt is fastened, a seat weight sensor receives a signal, etc.). The system may then begin collecting information about the passenger by, for example, searching for data in a database, the vehicle's occupancy and/or driving history. Additionally or alternatively, various sensor systems may be used to collect additional information about passengers and occupied seats (eg, personal electronic device name, photo, voice, time/day/embarkation/drop-off location).
예를 들어, 승객은 탑승 중 라이드 풀링(ride pooling)/헤일링(hailing) 정보를 안전 벨트 상태 또는 다른 점유 센서(예를 들어, 좌석 감지 매트)의 상태와 매칭시켜 식별될 수 있다. 또한, (무선) 전자 네트워크는 탑승자가 차량에 탑승하는 즉시 전자 장치를 추적하고 매칭함으로써(장치 이름, 위치의 함수로서 신호 강도, 탑승 타임스탬프 등) 탑승자를 식별하는데 사용될 수 있다. 얼굴 인식은 데이터베이스 및/또는 운전 이력으로부터 사진/이미지와 매칭되는 카메라 데이터를 기반으로 탑승자를 식별하는데 사용될 수 있다. 유사한 맥락에서, 내부 마이크로폰은 고유한 주파수 패턴을 기반으로 개별 승객의 음성을 식별하는데 사용될 수 있다. 방향 정보를 기반으로, 해당 좌석을 승객에게 할당할 수 있다. 예측 내비게이션은, 예를 들어 GPS 데이터를 사용하여 시간 및/또는 위치(목적지, 픽업 위치)에 따라 승객을 기억하는데 사용될 수 있다. 당업자는 다른 응용 분야에서 알려진 바와 같이 센서 및 추적 기술을 기반으로 하는 추가 예를 쉽게 생각할 수 있을 것이다.For example, a passenger may be identified by matching ride pooling/hailing information during boarding with the state of a seat belt or other occupancy sensor (eg, a seat sensing mat). In addition, (wireless) electronic networks can be used to identify occupants by tracking and matching electronic devices as soon as the occupant enters the vehicle (device name, signal strength as a function of location, ride timestamp, etc.). Facial recognition can be used to identify occupants based on camera data that matches photos/images from a database and/or driving history. In a similar vein, internal microphones can be used to identify individual passengers' voices based on unique frequency patterns. Based on the direction information, the corresponding seat can be assigned to the passenger. Predictive navigation may be used to remember passengers by time and/or location (destination, pickup location), for example using GPS data. A person skilled in the art will readily be able to think of further examples based on sensor and tracking technology as known in other applications.
시스템이, 예를 들어 라이드 풀링 사용자 계정에서 얻어진 각 승객의 신원(실명, 얼굴, 목소리 등)을 알고 있는 경우 각 좌석을 할당하는 것이 유용할 수 있다. 그러나, 당업자는 올바른 좌석에 통신(예를 들어, 라이드 풀링 화면, 운전자의 담화)을 할당하는 다른 방법을 생각할 수도 있다. 학습 통신 제어 장치(일반 및 개별 코드 단어, 시야 방향 등)로 인해, 운전 중 시스템 자체에서 새로운 승객 신원이 생성될 수 있다. 또한, 결정된 특성(예를 들어, 음성 패턴, 얼굴, 개인용 모바일 장치 등)은 향후 더 빠른 식별을 위해 저장될 수 있다. 또한, 차량의 점유 이력이 저장되어 내부 승객을 예측하는데 사용될 수 있다. 따라서, 시스템은 올바른 좌석 할당을 보장하기 위해 외부 소스에 의존할 필요가 없다. 한편, 실시간으로 특정 승객에게 통신 요청을 할당할 수 있다. 반면, 시스템에 저장된 그들의 특성(예를 들어, 음성 패턴, 얼굴, 개인용 모바일 장치, 점유 이력 등)에 의하여 이미 알려진 승객을 인식할 수 있다.It may be useful to assign each seat if the system knows the identity (real name, face, voice, etc.) of each passenger obtained, for example, from a ride pooling user account. However, one of ordinary skill in the art may envision other ways of assigning communications (eg, ride pooling screens, driver's conversations) to the correct seats. Learning communication control devices (general and individual code words, direction of sight, etc.) allow the creation of new passenger identities in the system itself while driving. In addition, the determined characteristics (eg, voice patterns, faces, personal mobile devices, etc.) may be stored for faster identification in the future. In addition, the vehicle's occupancy history may be stored and used to predict interior passengers. Thus, the system does not need to rely on external sources to ensure correct seat assignment. Meanwhile, it is possible to assign a communication request to a specific passenger in real time. On the other hand, already known passengers may be recognized by their characteristics (eg, voice pattern, face, personal mobile device, occupancy history, etc.) stored in the system.
본 발명의 일 실시 예에 따르면, 좌석 할당 유닛은 승객이 차량에 타거나 내릴 때 개별 좌석 점유의 변화를 추적하도록 구성될 수 있다.According to an embodiment of the present invention, the seat allocation unit may be configured to track changes in individual seat occupancy when a passenger enters or exits the vehicle.
예를 들어, 카풀 차량이 픽업 위치에 도착하고 도어 중 하나가 열릴 때마다 시스템은 시트 매트 감지 및/또는 안전 벨트 센서를 기반으로 새 승객이 차지하는 시트를 결정할 수 있다. 그러면, 해당 좌석이 해당 승객에게 할당될 수 있다. 유사한 맥락에서, 승객이 목적지 위치에서 차량에서 내릴 때마다 각 좌석은 할당된 좌석 목록에서 제거될 수 있다.For example, whenever a carpool vehicle arrives at a pickup location and one of the doors is opened, the system may determine the seat occupied by a new passenger based on seat mat detection and/or seat belt sensors. Then, the corresponding seat can be assigned to the corresponding passenger. In a similar vein, each seat may be removed from the assigned seat list whenever a passenger exits the vehicle at the destination location.
본 발명의 일 실시 예에 따르면, 진동 장치는 수신 승객이 점유하는 좌석에서 시트 표면, 등받이, 머리 받침대, 팔걸이, 안전 벨트, 차량의 바닥 및/또는 측벽에 진동을 발생시키도록 구성될 수 있다. According to an embodiment of the present invention, the vibration device may be configured to generate vibrations on the seat surface, backrest, headrest, armrest, seat belt, floor and/or sidewall of the vehicle in a seat occupied by a receiving passenger.
본 발명은 첨부된 도면에 도시된 예시적인 실시 예를 참조하여 더욱 상세하게 설명될 것이다.BRIEF DESCRIPTION OF THE DRAWINGS The present invention will be described in more detail with reference to exemplary embodiments shown in the accompanying drawings.
본 발명에 따르면, 수신 메시지 또는 기타 통신을 알리기 위해 청각 및/또는 시각 수용력이 제한된 차량 내부의 사람에게 진동 피드백을 제공할 수 있다. 이에 따라, 관련 정보에 대한 승객의 인식을 높이는데 도움이 될 수 있다.In accordance with the present invention, it is possible to provide vibration feedback to a person inside a vehicle with limited auditory and/or visual capacity to inform an incoming message or other communication. Accordingly, it may help to increase the passenger's awareness of the relevant information.
그 외에 본 발명의 실시 예로 인해 얻을 수 있거나 예측되는 효과에 대해서는 본 발명의 실시 예에 대한 상세한 설명에서 직접적 또는 암시적으로 개시하도록 한다. 즉 본 발명의 실시 예에 따라 예측되는 다양한 효과에 대해서는 후술될 상세한 설명 내에서 개시될 것이다.In addition, the effects obtainable or predicted by the embodiments of the present invention are to be disclosed directly or implicitly in the detailed description of the embodiments of the present invention. That is, various effects predicted according to an embodiment of the present invention will be disclosed in the detailed description to be described later.
첨부된 도면은 본 발명의 완전한 이해를 제공하기 위해 포함되며 본 명세서에 통합되고 그 일부를 구성한다. 도면은 본 발명의 실시 예를 예시하고 설명과 함께 본 발명의 원리를 설명하는 역할을 한다. 본 발명의 다른 실시 예 및 본 발명의 많은 의도된 이점은 이어지는 상세한 설명을 참조하여 더 잘 이해될 수 있음을 쉽게 인식할 수 있다. 도면의 요소는 반드시 서로에 대해 축적에 맞을 필요가 없다. 도면에서, 유사한 참조 번호는, 달리 표시되지 않는 한, 유사하거나 기능적으로 유사한 구성요소를 나타낸다.
도 1은 본 발명의 일 실시 예에 따른 차량의 승객에게 선택적으로 진동 경고를 제공하기 위한 시스템을 개략적으로 도시한다.
도 2는 도 1의 시스템을 사용하는 차량을 개략적으로 도시한다.
도 3은 도 1의 시스템을 사용하는 다른 차량을 도시한다.
도 4는 도 1 내지 도 3에 사용된 차량의 승객에게 선택적으로 진동 경고를 제공하기 위한 방법의 흐름도를 도시한다.
특정 실시 예가 본 명세서에 예시되고 설명되지만, 다양한 대안적 및/또는 등가적 구현이, 본 발명의 범위를 벗어남이 없이, 도시되고 설명된 특정 실시 예를 대체할 수 있음을 당업자는 이해할 것이다. 일반적으로, 본 출원은 여기에 논의된 특정 실시예의 임의의 수정 또는 변형을 포함하도록 의도된다.The accompanying drawings are included to provide a thorough understanding of the present invention and are incorporated in and constitute a part of this specification. The drawings illustrate embodiments of the invention and together with the description serve to explain the principles of the invention. It will be readily appreciated that other embodiments of the invention and many of its intended advantages may be better understood by reference to the detailed description that follows. The elements of the drawings are not necessarily to scale with respect to each other. In the drawings, like reference numbers indicate similar or functionally similar elements, unless otherwise indicated.
1 schematically illustrates a system for selectively providing a vibration warning to a passenger of a vehicle according to an embodiment of the present invention.
Fig. 2 schematically shows a vehicle using the system of Fig. 1;
Fig. 3 shows another vehicle using the system of Fig. 1;
Figure 4 shows a flow chart of a method for selectively providing a vibration alert to a passenger of a vehicle used in Figures 1-3;
While specific embodiments have been illustrated and described herein, it will be understood by those skilled in the art that various alternative and/or equivalent implementations may be substituted for the specific embodiments shown and described without departing from the scope of the invention. In general, this application is intended to cover any modifications or variations of the specific embodiments discussed herein.
도 1은 본 발명의 실시 예에 따른 차량(100)의 승객(P)에게 진동 경고를 선택적으로 제공하기 위한 시스템(10)을 개략적으로 도시한다. 예시적인 차량(100)이 2개의 다른 애플리케이션을 위해 도 2 및 도 3에 도시되어 있는 반면, 대응하는 방법(M)을 위한 흐름도는 도 4에 도시되어 있다.1 schematically shows a
도 1을 참조하면, 시스템(10)의 목적은 다음에서 설명될 바와 같이 임박한 또는 진행 중인 통신(C)을 위한 인식을 높이기 위해 차량(100)의 승객(P) 중에서 아래에서 수신 승객(RP)으로 불리는 한 명 또는 여러 명의 수신인에게 선택적으로 진동 경고를 제공하는 것이다. Referring to Figure 1, the purpose of the
도 2 및 도 3을 참조하여, 개시된 시스템(10)의 애플리케이션을 위한 두 가지 기본 예가 설명된다.2 and 3, two basic examples for application of the disclosed
도 2의 예에서, 차량(100)은 라이드 풀링 애플리케이션에 사용되며, 여기서 다양한 승객(P)은 개별 위치에서 픽업되고 각각의 목적지에서 하차된다. 이 경우, 통신(C)은 자동 메시지, 예를 들어 차량(100)의 디스플레이(11)를 통해 제공되고 수신 승객(RP)을 위해 의도된 문자, 예를 들어 차량(100)이 승객(RP)의 목적지에 접근하고 있다는 통지일 수 있다. 통신(C)은 목적지에 도착하기까지 남은 시간에 대한 정보 및 승객(RP)의 이니셜, 예를 들어(도 2에서 "RP")에 대한 정보를 포함할 수 있다.In the example of FIG. 2 ,
한편, 도 3은 시스템(10)의 사적 응용을 위한 예를 제공하는데, 여기서 차량(100)이 승객(예를 들어, 어린이)을 목적지까지 수송하기 위해 운전자(예를 들어, 부모)에 의해 사용된다. 이 경우, 통신(C)은 수신 승객(RP)을 향한 운전자(D)의 음성 메시지일 수 있다. 예를 들어, 운전자(D)는 이름(도 3에서 "RP"로 예시됨)으로 수신 승객(RP)을 직접 호칭할 수 있다.On the other hand, Figure 3 provides an example for a private application of the
다시 도 1을 참조하면, 시스템(10)은 차량(100) 내에서 수신 승객(RP)에 의해 점유된 좌석(4)을 결정하도록 구성된 좌석 할당 유닛(1)을 포함한다. 비록 시스템(10)이 아래에서 정확히 한 명의 수신 승객(RP)에 대해 기술되지만, 기술된 실시 예가 한 그룹의 승객(P)이 목적지가 같거나 운전자에 의해 함께 호칭되므로 수신 승객(RP)으로 함께 취급되는 경우로 쉽게 일반화될 수 있다는 것이 당업자에게 명백할 것이다. Referring again to FIG. 1 , the
보다 구체적으로, 좌석 할당 유닛(1)은 차량(100)의 좌석(4)에 수신 승객(RP)이 현재 앉아 있는 것을 검출하기 위해 차량(100)의 좌석 점유 센서 시스템(5)을 사용함으로써 수신 승객(RP)에 의해 점유된 좌석(4)을 결정하도록 구성된다. More specifically, the
도 2의 라이드 풀링 예에서, 시스템(10)은 승객(P)이 차량(100)에 들어와서 좌석(4) 중 하나에 앉자마자 각각의 좌석(4)을 각각의 새로운 승객(P)에게 할당할 수 있다. 이런 맥락에서, 좌석 할당 유닛(1)은 승객(P)이 차량(100)에 탑승하거나 떠날 때 개별 좌석(4) 점유의 변화를 추적하도록 구성될 수 있다. 예를 들어, 도 2에서 수신 승객(RP)이 차량(100)에 막 탑승하려고 하고 뒷줄 중간 좌석(4)에 앉을 것이다. 각각의 좌석(4)이 결정되어 수신 승객(RP)에게 할당된다.In the ride pooling example of FIG. 2 , the
간단한 예에서, 좌석 점유 센서 시스템(5)은 감지 표면(예를 들어, 좌석 표면 상에, 좌석(4) 앞의 바닥 상에 등)에 걸쳐 분포된 여러 센서 요소를 포함하는 좌석 점유 매트(5a)를 포함할 수 있다. 차량(100)에 탑승할 때, 각 승객(P)이 식별될 수 있다(예를 들어, 픽업 위치 및 시간, 식별 문서, 개인 전자 장치 등에 기초하여). 그러면, 좌석 점유 센서 시스템(5)이 신호를 제공하는 좌석(4)이 각 승객(P)에게 할당될 것이다. 승객(P)이 차량(100)에서 내리자마자 좌석(4)은 할당된 좌석(4)의 해당 목록에서 제외될 것이다. In a simple example, the seat
각각의 좌석(4)을 결정하기 위해, 좌석 할당 유닛(1)은 또한 차량(100) 내의 개인용 전자 장치(7) 추적, 안전 벨트 상태 확인, 얼굴 인식 사용, 음성 인식 사용, 승객 예약 정보 확인 및 차량(100)의 점유 이력 평가를 제한 없이 포함하는 다양한 기술을 사용할 수 있다. In order to determine each
예를 들어, 개인용 전자 장치(7)로서 차량(100)의 무선 네트워크(8)에 연결된 휴대 전화의 위치 및 움직임은 특정 승객(P)에게 좌석(4)을 할당하기 위해 승객(P)이 승차하는 동안 사용될 수 있다. 다른 예에서, 카메라(5b) 및/또는 지향성 마이크로폰(5c)을 사용하여 승객(P)이 어느 좌석(4)에 앉았는지 알아낼 수 있다. 예를 들어 이미지 및 말하기 패턴과 같은 승객(P)에 대한 요구된 데이터는 각 데이터베이스, 예약 정보, 및/또는 과거에 차량(100)을 사용한 적이 있는 승객(P)에 관한 임의의 관련 정보(승차 및 하차 위치/시간 등을 포함)를 포함할 수 있는 차량(100)의 점유 이력에서 가져올 수 있다.For example, the position and movement of a mobile phone connected to the
다시 도 1을 참조하면, 시스템(10)은 통신(C)이 수신 승객(RP)에게 전달되도록 의도되었는지를 평가하도록 구성된 통신 제어 장치(2)를 더 포함한다. 도 2의 라이드 풀링 애플리케이션의 경우, 예를 들어 통신 제어 장치는 디스플레이(11) 상에 디스플레이되는 통신(C)으로서 자동화된, 특히 문자, 시각, 및/또는 청각 통지를 생성하도록 구성될 수 있다. Referring again to FIG. 1 , the
그러나, 도 3의 개인 운전의 예의 경우, 통신(C)은 운전자(D)에 의한 음성 메시지일 것이다. 이러한 종류의 애플리케이션의 경우, 통신 제어 장치(2)는 차량(100)을 점유하는 여러 승객(P) 중 통신(C)의 의도된 수신자로 수신 승객(RP)을 식별하도록 구성될 수 있다. 이것은 예를 들어, 도 3의 구체적인 예에서 아이의 이름과 같이 수신 승객(RP)과 관련된 음성 메시지에서 개별 코드 단어를 감지함으로써 수행될 수 있다.However, in the case of the private driving example of FIG. 3 , the communication C would be a voice message by the driver D. For this kind of application, the
그러나, 다른 실시 예에서, 예를 들어 운전자(D)의 가족 또는 그룹으로 함께 호칭되는 여러 자녀와 같이 여러 수신 승객을 나타내는 음성 메시지에서 일반 코드 단어도 검출될 수 있다. 예를 들어, 운전자(D)는 한 그룹의 어린이에게 목적지에 막 도착할 예정임을 알릴 수 있다.However, in other embodiments, generic code words may also be detected in voice messages representing multiple incoming passengers, for example multiple children called together as a family or group of driver D. For example, the driver D may inform a group of children that they are about to arrive at their destination.
음성 메시지의 수신자를 식별하기 위해, 시스템(10)은 운전자(D)가 어떤 승객(P)을 호칭하고 있는지 알아내기 위해 운전자(D)의 현재 시야 방향을 추적하도록, 예를 들어 카메라와 같은 얼굴 추적 시스템(6)을 더 포함할 수 있다. To identify the recipient of the voice message, the
음성 메시지를 기록하고 분석하기 위해, 시스템(10)은 또한 하나 또는 여러 개의 마이크로폰을 포함하는 음성 인식 시스템(12)을 포함할 수 있다. 시스템(10)의 통신 제어 장치(2) 및 다른 장치는 일반적으로 각각의 하드웨어 및 소프트웨어를 포함할 수 있고, 보조 및/또는 자율 주행 시스템을 포함할 수 있는 차량(100)의 제어 시스템(10)에 통합 및/또는 통신 가능하게 결합될 수 있다. 통신 제어 장치(2)는, 예를 들어 승객 예약 정보, 운전 이력 등을 포함하는 관련 데이터베이스를 포함하거나/포함하고 (예를 들어, 무선 네트워크(8)를 통해) 관련 데이터베이스에 접속할 수 있다. To record and analyze voice messages,
다시 도 1을 참조하면, 시스템(10)은 수신 승객(RP)이 점유하는 각각의 좌석(4)에 배열되고 통신의 수신 승객(RP)을 경고하기 위해 수신 승객(RP)에게 진동 경고를 제공하도록 구성된 진동 장치(3)를 더 포함한다. 물론, 모든 좌석(4)에는 일반적으로 각각의 진동 장치(3)가 장착되지만, 수신 승객(RP)이 차지하는 특정 좌석(4)만이 진동한다는 것을 이해해야 한다.Referring again to FIG. 1 , the
진동 장치(3)는, 예를 들어 차량(100)의 시트면, 등받이, 머리 받침대, 팔걸이, 안전벨트, 바닥 및/또는 측벽과 같이 수용 승객에 의해 접촉될 수 있는 임의의 적절한 표면에 진동을 발생시키도록 구성될 수 있다. 도 1 내지 도 3의 실시 예에서, 진동 장치(3)는 각 좌석(4)의 등받이에 통합된다.The vibrating
통신 제어 장치(2)는 활성화된 헤드폰(9), 활성화된 개인용 전자 장치(7), 활성화된 독서 램프, 활성화된 차량 내 인포테인먼트, 펼쳐진 테이블, 펼쳐진 다리 받침대 또는 팔걸이, 및 뒤로 넘어간 등받이 또는 머리 받침대 중 적어도 하나를 검출함으로써 수신 승객(RP)의 주의 산만을 결정하도록 더 구성될 수 있다. 진동 경고는 수신 승객(RP)의 결정된 주의 산만에 따라 적응될 수 있다.The
도 3의 예에서, 수신 승객(RP)은 헤드폰(9)을 사용하여 음악을 듣는 동안 운전자(D)가 수신 승객(RP)을 부르기 위해 시도할 수 있다. 헤드폰(9)은 통신 제어 장치(2)가 접속한 무선 네트워크(8)에 등록되어 있기 때문에 이것은 예를 들어 시스템(10)에 의해 인지될 수 있다. 통신 제어 장치(2)는 이제 통신(C)을 기록하고 결정된 주의 산만에 따라 수신 승객(RP)에게 통신(C)을 선택적으로 재생하도록 구성될 수 있다.In the example of FIG. 3 , the receiving passenger RP may attempt to call the receiving passenger RP by the driver D while the receiving passenger RP is listening to music using the
따라서, 도 3의 예에서, 시스템(10)은 운전자(D)가 수신 승객(RP)에게 얘기하려고 시도한다는 것을 알아차릴 수 있다. 시스템(10)은 운전자(D)의 통신(C)을 기록하고 수신 승객(RP)에게 진동 경고를 전송하며, 이에 의하여 수신 승객(RP)에게 운전자(D)의 의도를 알려준다. 다음으로, 시스템(10)은 운전자(D)의 통신(C)을 수신 승객(RP)에게, 예를 들어 승객(RP)의 헤드폰(9)에 직접 재생한다. Thus, in the example of FIG. 3 , the
다른 예에서, 통신(C)을 재생하는 것은, 예를 들어 운전자(D)가 계속하지 않고 수신 승객(RP)의 이름만 말하는 경우 필요하지 않을 수 있다. 그러나, 승객(RP)의 이름을 말하는 것은 승객(RP)에게 진동 경고를 보내도록 시스템(10)을 시작한다. 운전자(D)가 승객(RP)의 주의를 받자마자 이제 승객(RP)과 대화를 시작할 수 있다.In another example, replaying the communication C may not be necessary, for example if the driver D does not continue and only speaks the name of the receiving passenger RP. However, speaking the passenger RP's name starts the
도 4에 개략적으로 도시된 도 1의 시스템을 사용하기 위한 방법(M)은 상응하게 단계(M1) 하에서 차량(100) 내에서 수신 승객(RP)에 의해 점유된 좌석(4)을 좌석 할당 유닛(1)으로 결정하는 단계를 포함한다. 상기 방법(M)은 단계(M2) 하에서 차량(100)의 통신 제어 장치(2)로 통신(C)이 수신 승객(RP)에게 전달되도록 의도되었는지를 평가하는 단계를 더 포함한다. 방법은 단계(M3) 하에서 통신의 수신 승객(RP)에게 경고하기 위해 수신 승객(RP)에 의해 점유된 각각의 좌석(4)에서 진동 장치(3)를 작동시킴으로써 수신 승객(RP)에게 진동 경고를 제공하는 단계를 더 포함한다.The method M for using the system of FIG. 1 , schematically illustrated in FIG. 4 , correspondingly assigns a
도 2의 예에서, 이는 다음과 같은 일련의 이벤트로 이어질 수 있다. 수신 승객(RP)은 차량(100)에 승차한 후 시스템(10)에 의해 식별된다(예를 들어, 라이드 풀링 예약 정보에 기반한 승차 위치 및 시간에 기초하여 및/또는 차량(100) 내에 설치된 카메라(5b) 또는 지향성 마이크로폰(5c)에 기초하여). 수신 승객(RP)이 차량(100)의 뒷줄에 있는 중간 좌석(4)에 앉자마자 좌석(4)의 좌석 점유 매트(5a)는 이를 인지하고 그에 따라 시스템(10)에 이를 알리며, 그러면 좌석(4)을 수신 승객(RP)에게 할당한다(예를 들어 승객(RP)의 얼굴 및/또는 음성을 추적하기 위해 이 목적을 위해 카메라(5b) 및 지향성 마이크로폰(5c)도 사용될 수 있다.). 차량(100)이 수신 승객(RP)의 목적지에 도착하기 직전(예를 들어, 도 2에 도시된 바와 같이 도착 5분 전), 승객(RP)은 진동 경고를 수신한다. 동시에, 디스플레이(11)는 예상 도착 시간 및 승객(RP)의 이니셜을 포함하는 대응하는 통신(C)을 보여준다. 차량(100)이 목적지에 도착하자마자, 수신 승객(RP)은 차량(100)에서 내린다(결국 차량(100)이 목적지에 도달했다는 다른 진동 경고를 수신한 후에).In the example of Figure 2, this may lead to the following series of events. The receiving passenger RP is identified by the
도 3의 예에서, 운전자(D)는 단일 수신 승객(RP)과 대화하기를 원할 수 있다. 따라서, 각각의 통신(C)은 음성 인식 시스템(12)에 의해 인식되는 승객(RP)의 이름을 포함할 수 있다. 승객(RP)은, 예를 들어 좌석 점유 매트(5a), 휴대형 전자 모바일 장치(7) 등의 센서 정보를 기반으로 차량(100)에 승차한 직후 차량(100)의 좌석(4)에 이미 할당되었을 수 있다. 특히 개인 운전의 경우, 이용 가능한 예약 정보가 없기 때문에 추가적인 승객 식별 전략이 유용할 수 있다(예를 들어, 도 2에서와 같이 카메라(5b) 및/또는 마이크로폰(5c)).In the example of FIG. 3 , the driver D may wish to talk to a single receiving passenger RP. Thus, each communication C may include the name of the passenger RP recognized by the
음성 인식 시스템(12)은 이제 승객(RP)의 이름을 통신(C)에서 개별 코드 단어로서 재구성할 수 있고, 이에 따라 운전자(D)가 승객(RP)에게 말을 걸려고 시도하고 있다고 추론할 수 있다. 시스템(10)은 승객(RP)이 헤드폰(9)을 통한 음악 청취로 인해 주의가 분산된다는 것을 더 인식할 수 있다. 따라서, 시스템(10)은 이제 좌석(4)의 등받이에 있는 진동 장치(3)를 통해 도입된 대응하는 진동 경고를 통해 승객(RP)에게 경고하기로 결정할 수 있다. The
결과적으로, 차량 내부의 메시지 및/또는 알림을 승객에게 알리기 위한 신중하면서도 효과적인 해결책이 제공되며, 이는 라이드 풀링과 같은 상업적 애플리케이션에서 사용될 수 있지만 사적 목적으로도 사용될 수 있다.As a result, a discreet yet effective solution for informing passengers of messages and/or notifications inside the vehicle is provided, which can be used in commercial applications such as ride pooling, but also for private purposes.
전술한 상세한 설명에서, 다양한 특징들은 본 개시를 간소화할 목적으로 하나 이상의 예들로 함께 그룹화된다. 위의 설명은 예시를 위한 것이며 제한적인 것이 아님을 이해해야 한다. 이는 상이한 특징 및 실시 예의 모든 대안, 수정 및 등가물을 포함하도록 의도된다. 많은 다른 예들이 상기 명세서를 검토할 때 당업자에게 명백할 것이다. 실시 예는 본 발명의 원리 및 그 실제 적용을 설명하기 위해 선택되고 설명되며, 이에 의해 당업자가 고려되는 특정 용도에 적합한 다양한 수정을 갖는 본 발명 및 다양한 실시 예를 활용할 수 있게 한다.In the foregoing Detailed Description, various features are grouped together in one or more examples for the purpose of streamlining the present disclosure. It is to be understood that the above description is for illustrative purposes only and is not limiting. It is intended to cover all alternatives, modifications and equivalents of different features and embodiments. Many other examples will be apparent to those skilled in the art upon review of the above specification. The embodiments were chosen and described in order to explain the principles of the invention and its practical application, thereby enabling those skilled in the art to utilize the invention and various embodiments with various modifications as are suited to the particular use contemplated.
1: 좌석 할당 유닛
2: 통신 제어 장치
3: 진동 장치
4: 좌석
5: 좌석 점유 센서 시스템
5a: 좌석 점유 매트
5b: 카메라
5c: 지향성 마이크로폰
6: 얼굴 추적 시스템
7: 개인용 전자 장치
8: 무선 네트워크
9: 헤드폰
10: 진동 경고를 제공하기 위한 시스템
11: 디스플레이
12: 음성 인식 시스템
100: 차량
P: 승객
RP: 수신 승객
D: 운전자
M: 방법
M1-M3: 방법 단계들1: Seat assignment unit 2: Communication control unit
3: Vibration device 4: Seat
5: Seat
5b:
6: Face tracking system 7: Personal electronics
8: wireless network 9: headphones
10: A system for providing vibration alerts
11: Display 12: Voice Recognition System
100: vehicle P: passenger
RP: Receiving Passenger D: Driver
M: Method M1-M3: Method Steps
Claims (20)
차량(100)의 좌석 할당 유닛(1)에 의하여, 차량(100) 내에서 수신 승객(RP)에 의해 점유되는 좌석(4)을 결정하는 단계(M1);
차량(100)의 통신 제어 장치(2)에 의하여, 통신(C)이 수신 승객(RP)에게 전달되도록 의도되었는지를 평가하는 단계(M2); 그리고
통신(C)의 수신 승객(RP)에게 경고하도록 수신 승객(RP)에 의해 점유되는 각 좌석(4)에서 진동 장치(3)를 작동시켜 수신 승객(RP)에게 진동 경고를 제공하는 단계(M3)를 포함하는 방법(M).A method (M) for selectively providing a vibration warning to a passenger (P) of a vehicle (100) to raise awareness for an impending or ongoing communication (C), the method (M) comprising:
determining, by the seat assignment unit 1 of the vehicle 100 , the seat 4 occupied by the receiving passenger RP in the vehicle 100 ( M1 );
evaluating, by the communication control device 2 of the vehicle 100 , whether the communication C is intended to be delivered to the receiving passenger RP (M2); and
providing a vibration warning to the receiving passenger RP by operating the vibrating device 3 in each seat 4 occupied by the receiving passenger RP to warn the receiving passenger RP of the communication C (M3) ), comprising a method (M).
통신(C)은 차량(100)의 통신 제어 장치(2)에 의해 생성된 통지인 방법(M).According to claim 1,
Method M, wherein the communication C is a notification generated by the communication control device 2 of the vehicle 100 .
통신(C)은 차량(100)의 운전자(D) 및/또는 다른 승객(P)에 의한 음성 메시지인 방법(M).According to claim 1,
Method M where the communication C is a voice message by the driver D and/or other passengers P of the vehicle 100 .
통신 제어 장치(2)에 의해, 수신 승객(RP)과 관련된 음성 메시지 내의 개별 코드 단어를 검출하고, 복수의 수신 승객(RP)을 나타내는 음성 메시지의 일반 코드 단어를 검출하며, 운전자(D) 및/또는 다른 승객(P)의 현재 시야 방향을 평가하는 것 중 적어도 하나에 의해 차량(100)을 점유하는 다수의 승객(P) 중에서 통신(C)의 의도된 수신자로서 수신 승객(RP)을 식별하는 단계를 더 포함하는 방법(M).4. The method of claim 3,
By means of the communication control device 2, individual code words in the voice message associated with the receiving passenger RP are detected, and generic code words of the voice message representing a plurality of receiving passengers RP are detected, the driver D and Identify the receiving passenger RP as the intended recipient of the communication C among the plurality of passengers P occupying the vehicle 100 by at least one of evaluating the current viewing direction of the other passenger P A method (M) further comprising the step of:
통신 제어 장치(2)에 의해, 활성화된 헤드폰(9), 활성화된 개인용 전자 장치, 활성화된 독서 램프, 활성화된 차량 내 인포테인먼트, 펼쳐진 테이블, 펼쳐진 다리 받침대 또는 팔걸이, 및 뒤로 넘어간 등받이 또는 머리 받침대 중 적어도 하나를 감지함으로써 수신 승객(RP)의 주의 산만을 결정하는 단계를 더 포함하고,
진동 경고는 수신 승객(RP)의 결정된 주의 산만에 따라 조정되는 방법(M).The method of claim 1,
By means of the communication control device (2), activated headphones (9), activated personal electronics, activated reading lamp, activated in-vehicle infotainment, unfolded table, unfolded leg rests or armrests, and one of the reclined backrests or headrests determining the distraction of the receiving passenger (RP) by sensing at least one;
How (M) the vibration alert is adjusted according to the determined distraction of the receiving passenger (RP).
상기 통신(C)이 음성 메시지인 경우 상기 통신(C)은 기록되고 결정된 주의 산만에 따라 수신 승객(RP)에게 선택적으로 재생되는 방법(M).6. The method of claim 5,
Method (M) wherein said communication (C) is recorded and selectively played back to a receiving passenger (RP) according to a determined distraction if said communication (C) is a voice message.
상기 좌석 할당 유닛(1)은 수신 승객(RP)이 현재 앉아 있는 차량(100)의 좌석(4)을 감지하기 위해 차량(100)의 좌석 점유 센서 시스템(5)을 사용하여 수신 승객(RP)이 점유한 좌석(4)을 결정하는 방법(M). According to claim 1,
The seat assignment unit 1 uses the seat occupancy sensor system 5 of the vehicle 100 to detect the seat 4 of the vehicle 100 in which the receiving passenger RP is currently sitting, and the receiving passenger RP Method (M) to determine this occupied seat (4).
좌석 할당 유닛(1)은 차량(100) 내의 개인용 전자 장치(7)를 추적하고, 안전벨트 상태를 확인하며, 안면 인식을 사용하고, 음성 인식을 사용하며, 승객 예약 정보를 확인하고, 차량(100)의 점유 이력을 평가하는 것 중 적어도 하나에 의하여 점유된 좌석(4)을 검출하는 방법(M). According to claim 1,
The seat assignment unit 1 tracks the personal electronic device 7 in the vehicle 100, checks the seat belt status, uses facial recognition, uses voice recognition, checks passenger reservation information, and the vehicle ( 100) a method M for detecting a seat 4 occupied by at least one of evaluating an occupancy history.
좌석 할당 유닛(1)은 승객(P)이 차량(100)에 타거나 내릴 때 개별 좌석(4) 점유의 변화를 추적하는 방법(M).According to claim 1,
The seat assignment unit 1 tracks the change in the occupancy of individual seats 4 when the passenger P gets on or off the vehicle 100 .
진동 장치(3)가 수신 승객(RP)이 차지하는 좌석(4)에서 시트 표면, 등받이, 머리 받침대, 팔걸이, 안전 벨트, 차량(100)의 바닥 및 측벽 중 적어도 하나에서 진동을 발생시키는 방법(M).The method of claim 1,
A method in which the vibration device 3 generates vibration in at least one of a seat surface, a backrest, a headrest, an armrest, a seat belt, and a floor and a sidewall of the vehicle 100 in the seat 4 occupied by the receiving passenger RP (M) ).
차량(100) 내에서 수신 승객(RP)이 차지하는 좌석(4)을 결정하도록 구성된 좌석 할당 유닛(1);
통신(C)이 수신 승객(RP)에게 전달되도록 의도되었는지 여부를 평가하도록 구성된 통신 제어 장치(2); 그리고
수신 승객(RP)이 차지하는 각각의 좌석(4)에 배열되고, 통신(C)의 수신 승객(RP)에게 경고하기 위해 수신 승객(RP)에게 진동 경고를 제공하도록 구성된 진동 장치(3);
를 포함하는 시스템(10).A system (10) for selectively providing a vibration alert to a passenger (P) of a vehicle (100) to raise awareness for an impending or ongoing communication (C), comprising:
a seat assignment unit 1 configured to determine a seat 4 occupied by the receiving passenger RP in the vehicle 100;
a communication control device 2 configured to evaluate whether the communication C is intended to be delivered to the receiving passenger RP; and
a vibrating device 3 arranged in each seat 4 occupied by the receiving passenger RP and configured to provide a vibration warning to the receiving passenger RP to warn the receiving passenger RP of the communication C;
A system (10) comprising:
상기 통신 제어 장치(2)는 통신(C)으로서 통지를 생성하도록 구성되는 시스템(10).12. The method of claim 11,
A system (10) wherein the communication control device (2) is configured to generate a notification as a communication (C).
상기 통신(C)은 상기 차량(100)의 운전자(D) 및/또는 다른 승객(P)에 의한 음성 메시지이고, 상기 통신 제어 장치(2)는 수신 승객(RP)에 관련된 음성 메시지에서 개별 코드 단어를 검출하고, 복수의 수신 승객(RP)을 나타내는 음성 메시지에서 일반 코드 단어를 검출하며, 운전자(D) 및/또는 다른 승객(P)의 현재 시야 방향을 평가하는 것 중 적어도 하나에 의하여 차량(100)을 점유하는 복수의 승객(P) 중에서 통신(C)의 의도된 수신자로 수신 승객(RP)을 식별하도록 구성된 시스템(10).12. The method of claim 11,
The communication (C) is a voice message by the driver (D) and/or other passengers (P) of the vehicle ( 100 ), and the communication control device ( 2 ) is a separate code in the voice message related to the receiving passenger (RP) the vehicle by at least one of detecting a word, detecting a generic code word in a voice message representing a plurality of receiving passengers (RP), and evaluating the current viewing direction of the driver (D) and/or other passengers (P). A system (10) configured to identify a receiving passenger (RP) as an intended recipient of a communication (C) among a plurality of passengers (P) occupying (100).
상기 통신 제어 장치(2)는 활성화된 헤드폰(9), 활성화된 개인용 전자 장치, 활성화된 독서등, 활성화된 차량 내 인포테인먼트, 펼쳐진 테이블, 펼쳐진 다리 받침대 또는 팔걸이, 및 뒤로 넘어간 등받이 또는 머리 받침대 중 적어도 하나를 검출함으로써 수신 승객(RP)의 주의 산만을 결정하도록 구성되고,
진동 경고는 수신 승객(RP)의 결정된 주의 산만에 따라 조정되는 시스템(10). 12. The method of claim 11,
The communication control device 2 includes at least one of an activated headphone 9, an activated personal electronic device, an activated reading light, activated in-vehicle infotainment, an unfolded table, an unfolded leg rest or armrest, and a reclined backrest or headrest. and determine the distraction of the receiving passenger RP by detecting one,
A system (10) where the vibration alert is adjusted according to the determined distraction of the receiving passenger (RP).
상기 통신 제어 장치(2)는 통신(C)이 음성 메시지인 경우 통신(C)을 기록하고 결정된 주의 산만에 따라 수신 승객(RP)에게 통신(C)을 선택적으로 재생하도록 구성된 시스템(10). 15. The method of claim 14,
system (10) configured to record the communication (C) if the communication (C) is a voice message and to selectively reproduce the communication (C) to the receiving passenger (RP) according to the determined distraction.
좌석 할당 유닛(1)은 수신 승객(RP)이 현재 앉아 있는 차량(100)의 좌석(4)을 감지하기 위해 차량(100)의 좌석 점유 센서 시스템(5)을 사용하여 수신 승객(RP)이 점유한 좌석(4)을 결정하도록 구성된 시스템(10).12. The method of claim 11,
The seat assignment unit 1 uses the seat occupancy sensor system 5 of the vehicle 100 to detect the seat 4 of the vehicle 100 in which the receiving passenger RP is currently seated by the receiving passenger RP. A system (10) configured to determine an occupied seat (4).
좌석 할당 유닛(1)은 차량(100) 내의 개인용 전자 장치(7)를 추적하고, 안전벨트 상태를 확인하며, 안면 인식을 사용하고, 음성 인식을 사용하며, 승객 예약 정보를 확인하고, 차량(100)의 점유 이력을 평가하는 것 중 적어도 하나에 의하여 점유된 좌석(4)을 검출하도록 구성된 시스템(10). 12. The method of claim 11,
The seat assignment unit 1 tracks the personal electronic device 7 in the vehicle 100, checks the seat belt status, uses facial recognition, uses voice recognition, checks passenger reservation information, and the vehicle ( A system (10) configured to detect a seat (4) occupied by at least one of evaluating an occupancy history of 100).
좌석 할당 유닛(1)은 승객(P)이 차량(100)에 타거나 내릴 때 개별 좌석(4) 점유의 변화를 추적하도록 구성되는 시스템(10). 12. The method of claim 11,
The seat assignment unit 1 is configured to track changes in occupancy of individual seats 4 as passengers P get on or off the vehicle 100 .
진동 장치(3)는 수신 승객(RP)이 차지하는 좌석(4)에서 시트 표면, 등받이, 머리 받침대, 팔걸이, 안전 벨트, 차량(100)의 바닥 및 측벽 중 적어도 하나에서 진동을 발생시키도록 구성된 시스템(10).12. The method of claim 11,
The vibration device 3 is a system configured to generate vibrations in at least one of a seat surface, a backrest, a headrest, an armrest, a seat belt, a floor and a sidewall of the vehicle 100 in the seat 4 occupied by the receiving passenger RP. (10).
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| DE102021204301.1A DE102021204301A1 (en) | 2021-04-29 | 2021-04-29 | A method and system for selectively providing a vibrating alert to occupants of a motor vehicle to alert them to an upcoming or ongoing communication |
| DE102021204301.1 | 2021-04-29 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR20220149432A true KR20220149432A (en) | 2022-11-08 |
Family
ID=83601174
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020220050426A Pending KR20220149432A (en) | 2021-04-29 | 2022-04-22 | Method and system for selectively providig vibrating alert to passengers of motor vehicle to raise awareness for an imminent or ongoing communication |
Country Status (2)
| Country | Link |
|---|---|
| KR (1) | KR20220149432A (en) |
| DE (1) | DE102021204301A1 (en) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20230111946A (en) * | 2022-01-19 | 2023-07-26 | 현대자동차주식회사 | A system for wirelessly sensing the position of a seat and a method for controlling the system |
| DE102023105510A1 (en) * | 2023-03-07 | 2024-09-12 | Bayerische Motoren Werke Aktiengesellschaft | Device and method for operating a vehicle |
| DE102023117967A1 (en) | 2023-07-07 | 2025-01-09 | Audi Aktiengesellschaft | Method for operating a motor vehicle with multimodal addressing of occupants and motor vehicle |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20140126733A1 (en) | 2012-11-02 | 2014-05-08 | Daniel M. Gauger, Jr. | User Interface for ANR Headphones with Active Hear-Through |
-
2021
- 2021-04-29 DE DE102021204301.1A patent/DE102021204301A1/en active Pending
-
2022
- 2022-04-22 KR KR1020220050426A patent/KR20220149432A/en active Pending
Also Published As
| Publication number | Publication date |
|---|---|
| DE102021204301A1 (en) | 2022-11-03 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107396249B (en) | System for providing occupant-specific acoustic functions in a transportation vehicle | |
| KR20220149432A (en) | Method and system for selectively providig vibrating alert to passengers of motor vehicle to raise awareness for an imminent or ongoing communication | |
| JP6814364B2 (en) | Information providing device and vehicle | |
| CN103057486B (en) | For the method and apparatus of sight comformability multimedia administration | |
| CN106166984A (en) | Driver privacy protection system | |
| CN111717083A (en) | A vehicle interaction method and a vehicle | |
| CN110293909A (en) | Display methods, device, vehicle and the storage medium of onboard system message | |
| CN111902864A (en) | Method for operating a sound output device of a motor vehicle, speech analysis and control device, motor vehicle and server device outside the motor vehicle | |
| KR20180052077A (en) | Interaction method between user and autonomous driving system in fully autonomous driving | |
| CN111422150B (en) | Vehicle voice broadcasting method and vehicle-mounted terminal | |
| US8600011B2 (en) | Navigation system support of in-vehicle TTY system | |
| JP2025125383A (en) | Content output device and content output method | |
| US7738509B2 (en) | Method and system for inband emergency notification for voice calls | |
| US12126963B2 (en) | Vehicle assistive hearing | |
| KR102687232B1 (en) | In-car headphone sound augmented reality system | |
| JP2019161446A (en) | Incoming call notification method and incoming call notification device | |
| CN115489464A (en) | Method and device for improving riding experience of back-row passengers | |
| JP7013729B2 (en) | Relationship estimation method, relationship estimation device, and information provision method | |
| JP2019109188A (en) | On-vehicle voice output apparatus, voice output apparatus, voice output method, and voice output program | |
| US12015911B2 (en) | Method and system for providing privacy protection in preparation for a phone call between a vehicle occupant and a remote conversation partner | |
| JP6980960B2 (en) | In-vehicle communication device, communication method and program that can be loaded on the vehicle and communicate with the user in the vehicle. | |
| JP7800381B2 (en) | Traffic management device, system, program, and traffic management method | |
| JPH11122162A (en) | In-vehicle information distribution system | |
| US20240367668A1 (en) | Method for interaction with occupants of a motor vehicle | |
| CN109941210B (en) | In-vehicle control device, control device, method, medium and speaking response method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PA0109 | Patent application |
Patent event code: PA01091R01D Comment text: Patent Application Patent event date: 20220422 |
|
| PG1501 | Laying open of application | ||
| A201 | Request for examination | ||
| PA0201 | Request for examination |
Patent event code: PA02012R01D Patent event date: 20250219 Comment text: Request for Examination of Application |