JP6687006B2 - 運転者判定装置とそれを備える運転者状態判定装置並びにそれらの方法およびプログラム - Google Patents
運転者判定装置とそれを備える運転者状態判定装置並びにそれらの方法およびプログラム Download PDFInfo
- Publication number
- JP6687006B2 JP6687006B2 JP2017219796A JP2017219796A JP6687006B2 JP 6687006 B2 JP6687006 B2 JP 6687006B2 JP 2017219796 A JP2017219796 A JP 2017219796A JP 2017219796 A JP2017219796 A JP 2017219796A JP 6687006 B2 JP6687006 B2 JP 6687006B2
- Authority
- JP
- Japan
- Prior art keywords
- driver
- statistical information
- statistical
- unit
- calculation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
- B60W40/09—Driving style or behaviour
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
- G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
- B60W2040/0809—Driver authorisation; Driver identity check
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
- B60W2040/0818—Inactivity or incapacity of driver
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
- B60W2050/143—Alarm means
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
- B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
- B60W2420/403—Image sensing, e.g. optical camera
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2540/00—Input parameters relating to occupants
- B60W2540/043—Identity of occupants
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2540/00—Input parameters relating to occupants
- B60W2540/225—Direction of gaze
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2556/00—Input parameters relating to data
- B60W2556/10—Historical data
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Transportation (AREA)
- Mathematical Physics (AREA)
- Mechanical Engineering (AREA)
- Automation & Control Theory (AREA)
- Traffic Control Systems (AREA)
- Closed-Circuit Television Systems (AREA)
- Emergency Alarm Devices (AREA)
- Image Analysis (AREA)
- Auxiliary Drives, Propulsion Controls, And Safety Devices (AREA)
Description
先ず、この発明の一実施形態に係る運転者判定装置および運転者状態判定装置の一つの適用例について説明する。
次に、この発明の一実施形態を説明する。
(1)システム
図2は、この発明の一実施形態に係る運転者判定装置およびそれを有する運転者状態判定装置を備えた運転者状態判定システムの全体構成の一例を示す図である。
本一実施形態では、センサとして、例えば、運転者監視センサであるドライバカメラ51と、車両状態センサである、車速センサ52、ステアリングセンサ53、ウィンカセンサ54、ギアセレクタセンサ55およびパーキングブレーキセンサ56とを含む。勿論これは一例であり、その他のセンサを含んでいてもよい。
運転者状態判定装置40は、制御ユニット42と、入出力インタフェースユニット41と、記憶ユニット43と、を備えている。
判定結果出力装置60は、例えば、スピーカと警告灯表示器を有し、運転者状態判定装置40から出力された運転者状態判定結果情報を警告音や警告灯の点灯によって、運転者に出力する。判定結果出力装置60は、スピーカと警告灯表示器の一方で構成されてもよい。判定結果出力装置60は、車両が備えるナビゲーションシステムの音声出力機能や画像表示機能を利用して構成されてもよい。また、この判定結果出力装置60は、運転者状態判定装置40に含まれ、信号出力部4215によって制御されるように構成されていてもよい。
次に、以上のように構成された運転者状態判定システムの動作を説明する。
図4は、図2に示した運転者状態判定システムにおける処理手順と処理内容の一例を示すフローチャートであり、図5は、図2に示した運転者状態判定システムにおける処理手順に従った統計値学習内容の一例を示すタイムチャートである。
車両の駆動源がオンされると、運転者状態判定装置40と、運転者監視センサであるドライバカメラ51および車両状態センサである各センサ52〜56は、動作を開始する。運転者状態判定装置40は、ドライバカメラ51からのセンシングデータを監視データ取得部4211により取得し、監視データとして監視データ記憶部431に記憶していく。また、運転者状態判定装置40は、車速センサ52、ステアリングセンサ53、ウィンカセンサ54、ギアセレクタセンサ55およびパーキングブレーキセンサ56それぞれからのセンシングデータを車両情報取得部4212により取得し、車両情報として車両情報記憶部432に記憶してく。これらセンシングデータの取得並びに記憶は、車両の駆動源がオフされるまで、繰り返し実施される。
(2−1)運転者交代無し
上記センシングデータの取り込み動作と並行して、運転者状態判定装置40は、個人差学習装置4213に、第1統計値と第2統計値の学習を開始させる。
一方、例えば図3Bに示すように、第2統計値(平均値+4.8°、偏差量1.4°)に近似する第1統計値(運転者番号2の平均値+5.0°、偏差量1.0°)が存在すると、図5の時刻t1において、上記ステップS15で近似統計値有りと判定される。この場合には、個人差学習装置4213は、その近似する第1統計値の運転者が、現在車両を運転している運転者であると判定する。すなわち、個人差学習装置4213は、ステップS21において、その近似する第1統計値を、運転者状態判定部4214での運転者状態判定処理に使用するべき、つまり、学習するべき第1統計値であると決定する。これにより、個人差学習装置4213は、不揮発性統計値テーブル4331の運転者フラグを、その決定した第1統計値の運転者を示すようにセットし直す。そして、個人差学習装置4213は、ステップS19において、第2統計値の学習を終了して、上記ステップS11の処理から繰り返す。
一方、近似する第1統計値が見つからずに、上記ステップS16において、第2統計値を所定量(N回)学習したと判定される場合もある。
なお、第2統計値学習中に、つまり、上記ステップS16において、所定量(N回)の第2統計値の学習が終了するよりも前に、新たな運転者交代トリガ信号が入力されると、そのことがステップS17で判定される。この場合には、個人差学習装置4213は、ステップS22において、それまで学習して揮発性統計値テーブル4332に一時記憶している第2統計値をクリアする。そして、上記ステップS12に進んで、揮発性統計値テーブル4332に記憶されている運転者交代トリガ信号入力直前に求めた新たな第1統計値を、不揮発性統計値テーブル4331の現在の運転者の第1統計値に、学習結果として上書き記憶した後、ステップS13に進み、新たな第1統計値の学習と、新規の第2統計値の学習とを開始する。
通常、車両の動力源がオフされる前には、車両が完全に停止したパーキング状態とされる。従って、上記ステップS11または上記ステップS18において、運転者交代トリガ信号の入力が有ったと判定され、ステップS12にて、揮発性統計値テーブル4332に記憶されている運転者交代トリガ信号入力直前に求めた新たな第1統計値が、不揮発性統計値テーブル4331の現在の運転者の第1統計値に、学習結果として上書き記憶される。これにより、次の車両動力源のオン時に、この不揮発性統計値テーブル4331に不揮発性に記憶されている現在の運転者の第1統計値が読み出されて、利用されることとなる。
上記ステップS20において新たな第1統計値の学習が行われた後、運転者状態判定部4214は、ステップS23において、学習データ記憶部433の揮発性統計値テーブル4332に一時記憶されている新たな第1統計値に基づく補正値による状態判定を行う。すなわち、監視データ記憶部431に記憶されている監視データに基づいて判定した運転者の顔または視線の方向を、学習している現在の運転者の新たな第1統計値に含まれる補正値である運転者の顔または視線の保持方向の平均値によって補正する。そして、この補正した運転者の顔または視線の方向を所定の判定基準値と比較することで、運転者の状態、例えば脇見状態であるか否かを判定する。
以上詳述したように一実施形態では、運転者状態判定装置40においては、各運転者の第1の統計情報である第1統計値を個人差学習装置4213によって演算して、運転者を表す識別子とともに学習データ記憶部433の不揮発性統計値テーブル4331に記憶しておき、個人差学習装置4213によって現在の運転者について同様に第2の統計情報である第2統計値を演算し、個人差学習装置4213により、その演算された第2統計値を不揮発性統計値テーブル4331に記憶された第1の統計情報と比較し、第2統計値に近似する第1の統計情報が不揮発性統計値テーブル4331から発見されたとき、車両の現在の運転者を、その近似する第1の統計情報に対応する運転者であると判定する。
以上、本発明の実施形態を詳細に説明してきたが、前述までの説明はあらゆる点において本発明の例示に過ぎない。本発明の範囲を逸脱することなく種々の改良や変形を行うことができることは言うまでもない。つまり、本発明の実施にあたって、実施形態に応じた具体的構成が適宜採用されてもよい。
前記実施形態の一部または全部は、以下の付記に示すように記載することが可能であるが、これに限られない。
(付記1)
第1のセンサ(21)から出力された車両の運転者の画像を含む第1のセンシングデータから、車両の正面方向に対して当該運転者が正面として顔または視線を保持する方向である保持方向についての統計情報である第1の統計情報を演算する第1の演算部(15)と、
演算された前記第1の統計情報を、運転者を表す識別子とともに記憶する記憶部(16)と、
前記第1のセンサから出力される現在の車両の運転者の画像を含む第1のセンシングデータに基づいて、車両の現在の運転者の前記保持方向についての統計情報である第2の統計情報を前記第1の演算部で演算し、演算された前記第2の統計情報を、前記記憶部に記憶された前記第1の統計情報と比較し、前記第2の統計情報に近似する前記第1の統計情報が前記記憶部から発見されたとき、車両の前記現在の運転者を、前記近似する前記第1の統計情報に対応する運転者であると判定する第1の判定部(17)と、
を具備する運転者判定装置(10)。
前記付記1に記載の運転者判定装置と、
前記記憶部に記憶された前記第1の統計情報と前記第1のセンシングデータとに基づいて、新たな第1の統計情報を演算する第2の演算部(31)と、
前記第1のセンシングデータと前記第2の演算部によって演算された前記新たな第1の統計情報とに基づいて、前記運転者の状態を判定する第3の判定部(32)と、
前記第3の判定部の判定結果を、前記運転者に対して出力する出力部(33)と、
を具備し、
前記第2の演算部は、前記第1の判定部によって判定した運転者が、
当該第2の演算部による前記第1の統計情報の演算についての運転者と同じであれば、そのまま前記新たな第1の統計情報の演算を継続し、
当該第2の演算部による前記第1の統計情報の演算についての運転者と異なっていれば、前記新たな第1の統計情報の演算を、前記判定した運転者についての前記記憶部に記憶された前記第1の統計情報を対象とした演算へと切り替える、
運転者状態判定装置(30)。
運転者を判定する運転者判定装置(10)が実行する運転者判定方法であって、
前記運転者判定装置が、第1のセンサ(21)から出力された車両の運転者の画像を含む第1のセンシングデータから、車両の正面方向に対して当該運転者が正面として顔または視線を保持する方向である保持方向についての統計情報である第1の統計情報を演算する過程と、
前記運転者判定装置が、演算された前記第1の統計情報を、運転者を表す識別子とともに記憶する過程と、
前記運転者判定装置が、前記第1のセンサから出力される現在の車両の運転者の画像を含む第1のセンシングデータに基づいて、車両の現在の運転者の前記保持方向についての統計情報である第2の統計情報を演算する過程と、
前記運転者判定装置が、演算された前記第2の統計情報を、前記記憶された前記第1の統計情報と比較し、前記第2の統計情報に近似する前記第1の統計情報が記憶されていたとき、車両の前記現在の運転者を、前記近似する前記第1の統計情報に対応する運転者であると判定する過程と、
を具備する運転者判定方法。
前記付記3に記載の運転者判定方法を適用した運転者状態判定装置(30)が実行する運転者状態判定方法であって、
前記運転者状態判定装置が、前記記憶された前記第1の統計情報と前記第1のセンシングデータとに基づいて、新たな第1の統計情報を演算する過程と、
前記運転者状態判定装置が、前記演算された前記新たな第1の統計情報に基づいて、前記運転者の状態を判定する過程と、
前記運転者状態判定装置が、前記運転者の状態の判定結果を、運転者に対して出力する過程と、
を具備し、
前記新たな第1の統計情報を演算する過程は、前記車両の前記現在の運転者を前記近似する前記第1の統計情報に対応する運転者であると判定する過程において判定した運転者が、
前記新たな第1の統計情報の演算についての運転者と同じであれば、そのまま前記新たな第1の統計情報の演算を継続し、
前記新たな第1の統計情報の演算についての運転者と異なっていれば、前記新たな第1の統計情報の演算を、前記判定した運転者についての前記記憶された前記第1の統計情報を対象とした演算へと切り替える、
運転者状態判定方法。
ハードウェアプロセッサ(421)とメモリ(43)とを有する運転者判定装置であって、
前記ハードウェアプロセッサが、
第1のセンサ(51)から出力された車両の運転者の画像を含む第1のセンシングデータから、車両の正面方向に対して当該運転者が正面として顔または視線を保持する方向である保持方向についての統計情報である第1の統計情報を演算し、
前記メモリに、演算された前記第1の統計情報を、運転者を表す識別子とともに記憶し、
前記第1のセンサから出力される現在の車両の運転者の画像を含む第1のセンシングデータに基づいて、車両の現在の運転者の前記保持方向についての統計情報である第2の統計情報を演算し、
演算された前記第2の統計情報を、前記メモリに記憶された前記第1の統計情報と比較し、前記第2の統計情報に近似する前記第1の統計情報が記憶されていたとき、車両の前記現在の運転者を、前記近似する前記第1の統計情報に対応する運転者であると判定する、
運転者判定装置。
ハードウェアプロセッサ(421)とメモリ(43)とを有する運転者状態判定装置であって、
前記ハードウェアプロセッサが、
前記付記5の運転者判定装置の動作に加えて、
前記記憶された前記第1の統計情報と前記第1のセンシングデータとに基づいて、新たな第1の統計情報を演算し、
前記第1のセンシングデータと前記演算された前記新たな第1の統計情報とに基づいて、前記運転者の状態を判定し、
前記運転者の状態の判定結果を、運転者に対して出力し、
前記新たな第1の統計情報の演算において、前記車両の前記現在の運転者を前記近似する前記第1の統計情報に対応する運転者であると判定する過程において判定した運転者が、
前記新たな第1の統計情報の演算についての運転者と同じであれば、そのまま前記新たな第1の統計情報の演算を継続し、
前記新たな第1の統計情報の演算についての運転者と異なっていれば、前記新たな第1の統計情報の演算を、前記判定した運転者についての前記メモリに記憶された前記第1の統計情報を対象とした演算へと切り替える、
運転者状態判定装置。
ハードウェアプロセッサ(421)とメモリ(43)とを有する装置が実行する運転者判定方法であって、
前記ハードウェアプロセッサが、第1のセンサ(51)から出力された車両の運転者の画像を含む第1のセンシングデータから、車両の正面方向に対して当該運転者が正面として顔または視線を保持する方向である保持方向についての統計情報である第1の統計情報を演算する過程と、
前記ハードウェアプロセッサが、演算された前記第1の統計情報を、運転者を表す識別子とともに前記メモリに記憶する過程と、
前記ハードウェアプロセッサが、前記第1のセンサから出力される現在の車両の運転者の画像を含む第1のセンシングデータに基づいて、車両の現在の運転者の前記保持方向についての統計情報である第2の統計情報を演算する過程と、
前記ハードウェアプロセッサが、演算された前記第2の統計情報を、前記メモリに記憶された前記第1の統計情報と比較し、前記第2の統計情報に近似する前記第1の統計情報が記憶されていたとき、車両の前記現在の運転者を、前記近似する前記第1の統計情報に対応する運転者であると判定する過程と、
を具備する運転者判定方法。
ハードウェアプロセッサ(421)とメモリ(43)とを有する装置が実行する運転者状態判定方法であって、
前記付記7の運転者判定方法の過程に加えて、
前記ハードウェアプロセッサが、前記メモリに記憶された前記第1の統計情報と前記第1のセンシングデータとに基づいて、新たな第1の統計情報を演算する過程と、
前記ハードウェアプロセッサが、前記第1のセンシングデータと前記演算された前記新たな第1の統計情報とに基づいて、前記運転者の状態を判定する過程と、
前記ハードウェアプロセッサが、前記運転者の状態の判定結果を、運転者に対して出力する過程と、
を具備し、
前記新たな第1の統計情報を演算する過程は、前記車両の前記現在の運転者を前記近似する前記第1の統計情報に対応する運転者であると判定する過程において判定した運転者が、
前記新たな第1の統計情報の演算についての運転者と同じであれば、そのまま前記新たな第1の統計情報の演算を継続し、
前記新たな第1の統計情報の演算についての運転者と異なっていれば、前記新たな第1の統計情報の演算を、前記判定した運転者についての前記メモリに記憶された前記第1の統計情報を対象とした演算へと切り替える、
運転者状態判定方法。
Claims (12)
- 第1のセンサから出力された車両の運転者の画像を含む第1のセンシングデータから、車両の正面方向に対して当該運転者が正面として顔または視線を保持する方向である保持方向についての統計情報である第1の統計情報を演算する第1の演算部と、
演算された前記第1の統計情報を、運転者を表す識別子とともに記憶する記憶部と、
前記第1のセンサから出力される現在の車両の運転者の画像を含む第1のセンシングデータに基づいて、車両の現在の運転者の前記保持方向についての統計情報である第2の統計情報を前記第1の演算部で演算し、演算された前記第2の統計情報を、前記記憶部に記憶された前記第1の統計情報と比較し、前記第2の統計情報に近似する前記第1の統計情報が前記記憶部から発見されたとき、車両の前記現在の運転者を、前記近似する前記第1の統計情報に対応する運転者であると判定する第1の判定部と、
を具備する運転者判定装置。 - 第2のセンサから出力された車両の状態を表す第2のセンシングデータまたは前記第1のセンシングデータに基づいて、車両の前記現在の運転者の交代の可能性の有無を判定する第2の判定部をさらに具備し、
前記第1の演算部は、前記第2の判定部により運転者交代の可能性有りと判定したときに、前記第2の統計情報の演算を開始する、請求項1に記載の運転者判定装置。 - 前記第1の判定部は、前記第1の演算部が前記第2の統計情報の演算を所定回数行っても、前記第2の統計情報に近似する前記第1の統計情報が発見されないとき、前記第2の統計情報を、新たな運転者に対応する第1の統計情報として前記記憶部に記憶させる、
請求項1または2に記載の運転者判定装置。 - 前記第1の演算部は、前記第1のセンシングデータに基づいて、前記運転者の前記保持方向を判定し、
前記第1の統計情報および前記第2の統計情報は、所定時間内における前記判定した前記保持方向の平均値および偏差量である、
請求項1乃至3のいずれかに記載の運転者判定装置。 - 請求項1、3または4に記載の運転者判定装置と、
前記記憶部に記憶された前記第1の統計情報と前記第1のセンシングデータとに基づいて、新たな第1の統計情報を演算する第2の演算部と、
前記第1のセンシングデータと前記第2の演算部によって演算された前記新たな第1の統計情報とに基づいて、前記運転者の状態を判定する第3の判定部と、
前記第3の判定部の判定結果を、前記運転者に対して出力する出力部と、
を具備し、
前記第2の演算部は、前記第1の判定部によって判定した運転者が、
当該第2の演算部による前記第1の統計情報の演算についての運転者と同じであれば、そのまま前記新たな第1の統計情報の演算を継続し、
当該第2の演算部による前記第1の統計情報の演算についての運転者と異なっていれば、前記新たな第1の統計情報の演算を、前記判定した運転者についての前記記憶部に記憶された前記第1の統計情報を対象とした演算へと切り替える、
運転者状態判定装置。 - 前記運転者判定装置は、第2のセンサから出力された車両の状態を表す第2のセンシングデータまたは前記第1のセンシングデータに基づいて、車両の前記現在の運転者の交代の可能性の有無を判定する第2の判定部をさらに具備し、
前記第1の演算部は、前記第2の判定部により運転者交代の可能性有りと判定したときに、前記第2の統計情報の演算を開始し、
前記第2の演算部は、前記第2の判定部により運転者交代の可能性有りと判定したときに、前記新たな第1の統計情報を前記記憶部に記憶させる、
請求項5に記載の運転者状態判定装置。 - 前記第1の演算部が前記第2の統計情報の演算を所定回数行っても、前記第1の判定部が前記第2の統計情報に近似する前記第1の統計情報を発見しないとき、
前記第1の演算部は、前記第2の統計情報を、新たな運転者に対応する第1の統計情報として前記記憶部に記憶させた上で、前記第2の統計情報の演算を終了し、
前記第2の演算部は、前記新たな第1の統計情報の演算を、前記第1の演算部が前記記憶部に記憶させた前記新たな運転者の前記第1の統計情報を対象とした演算へと切り替える、
請求項5または6に記載の運転者状態判定装置。 - 前記第1の演算部は、
前記第2の演算部による前記新たな第1の統計情報の演算と並行して、前記第2の統計情報を演算し、
前記第1の判定部が、車両の前記現在の運転者を、前記近似する前記第1の統計情報に対応する運転者であると判定したとき、前記第2の統計情報の演算を終了する、
請求項5乃至7のいずれかに記載の運転者状態判定装置。 - 運転者を判定する運転者判定装置が実行する運転者判定方法であって、
前記運転者判定装置が、第1のセンサから出力された車両の運転者の画像を含む第1のセンシングデータから、車両の正面方向に対して当該運転者が正面として顔または視線を保持する方向である保持方向についての統計情報である第1の統計情報を演算する過程と、
前記運転者判定装置が、演算された前記第1の統計情報を、運転者を表す識別子とともに記憶する過程と、
前記運転者判定装置が、前記第1のセンサから出力される現在の車両の運転者の画像を含む第1のセンシングデータに基づいて、車両の現在の運転者の前記保持方向についての統計情報である第2の統計情報を演算する過程と、
前記運転者判定装置が、演算された前記第2の統計情報を、前記記憶された前記第1の統計情報と比較し、前記第2の統計情報に近似する前記第1の統計情報が記憶されていたとき、車両の前記現在の運転者を、前記近似する前記第1の統計情報に対応する運転者であると判定する過程と、
を具備する運転者判定方法。 - 請求項9に記載の運転者判定方法を適用した運転者状態判定装置が実行する運転者状態判定方法であって、
前記運転者状態判定装置が、前記記憶された前記第1の統計情報と前記第1のセンシングデータとに基づいて、新たな第1の統計情報を演算する過程と、
前記運転者状態判定装置が、前記演算された前記新たな第1の統計情報に基づいて、前記運転者の状態を判定する過程と、
前記運転者状態判定装置が、前記運転者の状態の判定結果を、運転者に対して出力する過程と、
を具備し、
前記新たな第1の統計情報を演算する過程は、前記車両の前記現在の運転者を前記近似する前記第1の統計情報に対応する運転者であると判定する過程において判定した運転者が、
前記新たな第1の統計情報の演算についての運転者と同じであれば、そのまま前記新たな第1の統計情報の演算を継続し、
前記新たな第1の統計情報の演算についての運転者と異なっていれば、前記新たな第1の統計情報の演算を、前記判定した運転者についての前記記憶された前記第1の統計情報を対象とした演算へと切り替える、
運転者状態判定方法。 - 請求項1乃至4のいずれかに記載の運転者判定装置が具備する各部としてコンピュータを機能させる運転者判定プログラム。
- 請求項5乃至8のいずれかに記載の運転者状態判定装置が具備する各部としてコンピュータを機能させる運転者状態判定プログラム。
Priority Applications (4)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2017219796A JP6687006B2 (ja) | 2017-11-15 | 2017-11-15 | 運転者判定装置とそれを備える運転者状態判定装置並びにそれらの方法およびプログラム |
| DE102018127161.1A DE102018127161A1 (de) | 2017-11-15 | 2018-10-31 | Fahrerbestimmungsvorrichtung und fahrerzustandsbestimmungsvorrichtung, die die fahrerbestimmungsvorrichtung enthält, und verfahren und programm zur fahrerbestimmung und fahrerzustandsbestimmung |
| CN201811305900.1A CN109784136A (zh) | 2017-11-15 | 2018-11-02 | 驾驶员判定装置、驾驶员状态判定装置、驾驶员判定方法 |
| US16/179,974 US20190147271A1 (en) | 2017-11-15 | 2018-11-04 | Driver determination apparatus and driver state determination apparatus including driver determination apparatus, method for driver determination and driver state determination, and recording medium |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2017219796A JP6687006B2 (ja) | 2017-11-15 | 2017-11-15 | 運転者判定装置とそれを備える運転者状態判定装置並びにそれらの方法およびプログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2019091259A JP2019091259A (ja) | 2019-06-13 |
| JP6687006B2 true JP6687006B2 (ja) | 2020-04-22 |
Family
ID=66335451
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2017219796A Expired - Fee Related JP6687006B2 (ja) | 2017-11-15 | 2017-11-15 | 運転者判定装置とそれを備える運転者状態判定装置並びにそれらの方法およびプログラム |
Country Status (4)
| Country | Link |
|---|---|
| US (1) | US20190147271A1 (ja) |
| JP (1) | JP6687006B2 (ja) |
| CN (1) | CN109784136A (ja) |
| DE (1) | DE102018127161A1 (ja) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102703732B1 (ko) * | 2018-11-16 | 2024-09-09 | 현대자동차주식회사 | 차량 주행 보조 제어 장치, 그를 포함한 시스템 및 그 방법 |
| CN110428620B (zh) * | 2019-07-30 | 2022-05-31 | 江苏驭道数据科技有限公司 | 一种驾驶风险行为数据采集和分析系统 |
| US12240466B2 (en) | 2022-06-16 | 2025-03-04 | Rm Acquisition, Llc | System and method for identifying a change in the operator of a vehicle |
Family Cites Families (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6496117B2 (en) * | 2001-03-30 | 2002-12-17 | Koninklijke Philips Electronics N.V. | System for monitoring a driver's attention to driving |
| JP4894572B2 (ja) * | 2006-03-14 | 2012-03-14 | オムロン株式会社 | 検出装置および方法、記録媒体、並びに、プログラム |
| JP2012022579A (ja) * | 2010-07-15 | 2012-02-02 | Fujitsu Ltd | 顔方向検出装置、顔方向検出プログラムおよび顔方向検出方法 |
| US8744642B2 (en) * | 2011-09-16 | 2014-06-03 | Lytx, Inc. | Driver identification based on face data |
| KR101859761B1 (ko) * | 2012-05-24 | 2018-05-21 | 현대모비스 주식회사 | 차량용 얼굴인증 장치 및 방법 |
| JP2014234016A (ja) * | 2013-05-31 | 2014-12-15 | 株式会社デンソー | 情報表示制御装置 |
| EP2891589B1 (en) * | 2014-01-06 | 2024-09-25 | Harman International Industries, Incorporated | Automatic driver identification |
| CN204821476U (zh) * | 2015-08-20 | 2015-12-02 | 绍兴市敏智传感网技术研究院有限公司 | 一种机动车驾驶信息识别系统 |
| JP2017052470A (ja) * | 2015-09-11 | 2017-03-16 | クラリオン株式会社 | 駐車支援装置 |
| JP2017126151A (ja) * | 2016-01-13 | 2017-07-20 | アルプス電気株式会社 | 視線検出装置および視線検出方法 |
| CN106428015B (zh) * | 2016-09-12 | 2019-07-19 | 惠州Tcl移动通信有限公司 | 一种智能行车辅助方法及装置 |
| CN106184223A (zh) * | 2016-09-28 | 2016-12-07 | 北京新能源汽车股份有限公司 | 一种自动驾驶控制方法、装置及汽车 |
| CN107004128A (zh) * | 2017-02-16 | 2017-08-01 | 深圳市锐明技术股份有限公司 | 一种驾驶员身份识别方法及装置 |
| CN107215307A (zh) * | 2017-05-24 | 2017-09-29 | 清华大学深圳研究生院 | 基于车辆传感器校正数据的驾驶员身份识别方法及系统 |
| CN107194381A (zh) * | 2017-07-06 | 2017-09-22 | 重庆邮电大学 | 基于Kinect的驾驶员状态监测系统 |
-
2017
- 2017-11-15 JP JP2017219796A patent/JP6687006B2/ja not_active Expired - Fee Related
-
2018
- 2018-10-31 DE DE102018127161.1A patent/DE102018127161A1/de not_active Withdrawn
- 2018-11-02 CN CN201811305900.1A patent/CN109784136A/zh active Pending
- 2018-11-04 US US16/179,974 patent/US20190147271A1/en not_active Abandoned
Also Published As
| Publication number | Publication date |
|---|---|
| CN109784136A (zh) | 2019-05-21 |
| US20190147271A1 (en) | 2019-05-16 |
| DE102018127161A1 (de) | 2019-05-16 |
| JP2019091259A (ja) | 2019-06-13 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6720951B2 (ja) | 運転者状態判定装置とその方法およびプログラム | |
| JP6497915B2 (ja) | 運転支援システム | |
| US9390337B2 (en) | Alertness level detection apparatus and alertness level detection method | |
| JP6340969B2 (ja) | 周辺監視装置、及びプログラム | |
| JP6380002B2 (ja) | 周辺監視装置 | |
| US10618528B2 (en) | Driving assistance apparatus | |
| JP6488989B2 (ja) | 車両用表示装置 | |
| JP7058800B2 (ja) | 表示制御装置、表示制御方法、及び表示制御プログラム | |
| US11527013B2 (en) | Camera parameter estimating device, camera parameter estimating method, and camera parameter estimating program | |
| US10068143B2 (en) | Method for calibrating a camera for a gaze direction detection in a vehicle, device for a motor vehicle having a camera and at least one further element, and computer program product | |
| JP6509940B2 (ja) | 運転支援装置および運転支援方法 | |
| JP7140154B2 (ja) | 車両制御装置 | |
| JP6375873B2 (ja) | ドライバ状態診断装置 | |
| JP6687006B2 (ja) | 運転者判定装置とそれを備える運転者状態判定装置並びにそれらの方法およびプログラム | |
| JP5161685B2 (ja) | 視線計測装置及びプログラム | |
| WO2017020166A1 (en) | Method, apparatus and system for presenting information in a vehicle | |
| JP2016224717A (ja) | 運転支援装置及び運転支援方法 | |
| JP6672972B2 (ja) | 安全運転支援装置及び安全運転支援プログラム | |
| JP6485405B2 (ja) | 安全運転支援装置及び安全運転支援プログラム | |
| JP4815960B2 (ja) | 視認状態判断装置、自動車、及び視認状態判断方法 | |
| JP2019095892A (ja) | 車両用運転支援装置、および車両用運転支援プログラム | |
| JP7195849B2 (ja) | 車両制御システム | |
| JP6405930B2 (ja) | 車載用表示装置 | |
| JP6015754B2 (ja) | 運転状態推定装置 | |
| JP2017062565A (ja) | サポート装置及びサポート方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20190311 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190318 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200225 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200303 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200316 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6687006 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| LAPS | Cancellation because of no payment of annual fees |