Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP6906574B2 - In-vehicle device and vehicle management system - Google Patents
[go: Go Back, main page]

JP6906574B2 - In-vehicle device and vehicle management system - Google Patents

In-vehicle device and vehicle management system Download PDF

Info

Publication number
JP6906574B2
JP6906574B2 JP2019158445A JP2019158445A JP6906574B2 JP 6906574 B2 JP6906574 B2 JP 6906574B2 JP 2019158445 A JP2019158445 A JP 2019158445A JP 2019158445 A JP2019158445 A JP 2019158445A JP 6906574 B2 JP6906574 B2 JP 6906574B2
Authority
JP
Japan
Prior art keywords
vehicle
driver
unit
captured image
traveling state
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019158445A
Other languages
Japanese (ja)
Other versions
JP2021039399A (en
Inventor
尭海 木村
尭海 木村
裕幸 川上
裕幸 川上
祐介 内田
祐介 内田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mobility Technologies Co Ltd
Original Assignee
Mobility Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mobility Technologies Co Ltd filed Critical Mobility Technologies Co Ltd
Priority to JP2019158445A priority Critical patent/JP6906574B2/en
Publication of JP2021039399A publication Critical patent/JP2021039399A/en
Application granted granted Critical
Publication of JP6906574B2 publication Critical patent/JP6906574B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Emergency Alarm Devices (AREA)
  • Traffic Control Systems (AREA)

Description

本発明は、車両の運転に関する情報を管理するための車載装置及び車両管理システムに関する。 The present invention relates to an in-vehicle device and a vehicle management system for managing information related to vehicle driving.

従来、車両の運転手の撮像画像に基づいて運転手を特定することによって、第三者による車両の盗難を防いだり、運転手ごとに運転の評価を行ったりするシステムの開発が行われている。特許文献1には、車両のシフトレバーがパーキングポジションに位置している際に、車両内に設置された撮像装置が撮像した撮像画像に基づいて、運転手が登録された運転手か否かを判別するシステムが開示されている。 Conventionally, a system has been developed in which a driver is identified based on an image captured by the driver of the vehicle to prevent the vehicle from being stolen by a third party or to evaluate the driving for each driver. .. Patent Document 1 describes whether or not the driver is a registered driver based on an image captured by an image pickup device installed in the vehicle when the shift lever of the vehicle is located in the parking position. The discriminating system is disclosed.

特開2006−99395号公報Japanese Unexamined Patent Publication No. 2006-99395

特許文献1に記載のシステムは、車両が停止している際に撮像した撮像画像を用いて、運転手の判別を行う。しかしながら、車両が停止している際に運転手は車両に乗降可能であるため、システムが運転手の判別を行った後に運転手が交替すると、判別された運転手と車両を運転している運転手とが一致しなくなるおそれがある。 The system described in Patent Document 1 discriminates a driver by using an image captured when the vehicle is stopped. However, since the driver can get on and off the vehicle when the vehicle is stopped, if the driver changes after the system determines the driver, the determined driver and the driver driving the vehicle There is a risk that the hands will not match.

そこで、本発明はこれらの点に鑑みてなされたものであり、一例として、車両を実際に運転している運転手を高い精度で特定できるようにすることを目的とする。 Therefore, the present invention has been made in view of these points, and as an example, it is an object of the present invention to enable highly accurate identification of a driver who is actually driving a vehicle.

本発明の第1の態様の車載装置は、車両が走行状態であるか否かを判定する走行状態判定部と、前記車両が走行状態であると前記走行状態判定部が判定した際に前記車両に搭載された撮像装置が撮像した前記車両の運転手の撮像画像を取得する取得部と、車両管理装置へ前記撮像画像を送信する第1送信部と、前記車両管理装置が前記撮像画像に基づいて特定した前記運転手に関する運転手情報を受信する受信部と、前記受信部が前記運転手情報を受信した場合に、前記運転手による前記車両の運転に関する運転情報を、前記車両管理装置へ送信する第2送信部と、を有する。 The in-vehicle device according to the first aspect of the present invention includes a traveling state determination unit that determines whether or not the vehicle is in a traveling state, and the vehicle when the traveling state determination unit determines that the vehicle is in a traveling state. The acquisition unit that acquires the captured image of the driver of the vehicle captured by the image pickup device mounted on the vehicle, the first transmission unit that transmits the captured image to the vehicle management device, and the vehicle management device based on the captured image. The receiving unit that receives the driver information regarding the driver identified above, and when the receiving unit receives the driver information, transmits the driving information regarding the driving of the vehicle by the driver to the vehicle management device. It has a second transmission unit and a second transmission unit.

前記受信部は、前記運転手の基準姿勢を示す前記運転手情報を受信し、前記車載装置は、前記撮像画像が示す前記運転手の姿勢と、前記運転手情報が示す前記基準姿勢との間の差が、前記運転手に通知するための通知条件を満たすか否かを判定する姿勢判定部をさらに有する。 The receiving unit receives the driver information indicating the driver's reference posture, and the in-vehicle device is between the driver's posture indicated by the captured image and the reference posture indicated by the driver information. Further has a posture determination unit for determining whether or not the difference between the two conditions satisfies the notification condition for notifying the driver.

前記受信部が前記運転手情報を受信した後、前記走行状態判定部は、前記車両が一時停止状態になった後に走行状態になったか否かを判定し、前記走行状態判定部が、前記車両が一時停止状態になった後に走行状態になったと判定した際に、前記取得部は前記撮像画像を再度取得し、前記第1送信部は、前記取得部が再度取得した前記撮像画像を再度送信し、前記受信部は、前記第1送信部が再度送信した前記撮像画像に基づいて前記車両管理装置が特定した前記運転手情報を受信してもよい。 After the receiving unit receives the driver information, the traveling state determination unit determines whether or not the vehicle has entered the traveling state after being temporarily stopped, and the traveling state determination unit determines whether or not the vehicle has entered the traveling state. When it is determined that the vehicle is in the traveling state after being in the paused state, the acquisition unit acquires the captured image again, and the first transmission unit again transmits the captured image acquired by the acquisition unit. Then, the receiving unit may receive the driver information specified by the vehicle management device based on the captured image transmitted again by the first transmitting unit.

前記第1送信部は、前記車両が一時停止状態であると前記走行状態判定部が判定した際に前記運転手が所定動作をしたことを条件として、前記取得部が再度取得した前記撮像画像を再度送信してもよい。 The first transmission unit captures the captured image re-acquired by the acquisition unit, provided that the driver has performed a predetermined operation when the traveling state determination unit determines that the vehicle is in a paused state. You may send it again.

本発明の第2の態様の車両管理システムは、車両に搭載された車載装置と、前記車載装置と通信可能な車両管理装置とを含み、前記車載装置は、前記車両が走行状態であるか否かを判定する走行状態判定部と、前記車両が走行状態であると前記走行状態判定部が判定した際に前記車両に搭載された撮像装置が撮像した前記車両の運転手の撮像画像を取得する取得部と、前記車両管理装置へ前記撮像画像を送信する第1送信部と、前記運転手に関する運転手情報を受信する受信部と、前記受信部が前記運転手情報を受信した場合に、前記運転手による前記車両の運転に関する運転情報を、前記車両管理装置へ送信する第2送信部と、を有し、前記車両管理装置は、前記車載装置から受信した前記撮像画像に基づいて前記運転手を特定する特定部と、前記特定部が特定した前記運転手に関する前記運転手情報を前記車載装置へ送信する送信部と、前記車載装置から受信した前記運転情報を、前記特定部が特定した前記運転手と関連付けて記憶する記憶部と、を有する。 The vehicle management system of the second aspect of the present invention includes an in-vehicle device mounted on the vehicle and a vehicle management device capable of communicating with the in-vehicle device, and the in-vehicle device determines whether or not the vehicle is in a traveling state. The driving state determination unit for determining whether or not the vehicle is in a traveling state, and the driver of the vehicle captured by the imaging device mounted on the vehicle when the traveling state determination unit determines that the vehicle is in a traveling state are acquired. When the acquisition unit, the first transmission unit that transmits the captured image to the vehicle management device, the reception unit that receives the driver information regarding the driver, and the reception unit receives the driver information, the said It has a second transmission unit that transmits driving information regarding the driving of the vehicle by the driver to the vehicle management device, and the vehicle management device has the driver based on the captured image received from the in-vehicle device. The specific unit that identifies the driver, the transmission unit that transmits the driver information about the driver specified by the specific unit to the in-vehicle device, and the driving information that is received from the in-vehicle device. It has a storage unit that stores it in association with the driver.

前記車両管理装置の前記送信部は、前記運転手の基準姿勢を示す前記運転手情報を前記車載装置へ送信し、前記車載装置は、前記撮像画像が示す前記運転手の姿勢と、前記運転手情報が示す前記基準姿勢との間の差が、前記運転手に通知するための通知条件を満たすか否かを判定する姿勢判定部をさらに有してもよい。 The transmission unit of the vehicle management device transmits the driver information indicating the reference posture of the driver to the vehicle-mounted device, and the vehicle-mounted device uses the posture of the driver shown by the captured image and the driver. A posture determination unit for determining whether or not the difference from the reference posture indicated by the information satisfies the notification condition for notifying the driver may be further provided.

前記車両管理装置は、前記運転手の過去の前記撮像画像に基づいて、前記基準姿勢を示す前記運転手情報を生成する生成部をさらに有してもよい。 The vehicle management device may further include a generation unit that generates the driver information indicating the reference posture based on the past captured image of the driver.

前記車両管理装置は、前記車載装置から受信した前記運転情報に基づいて、前記運転手を評価する評価部をさらに有してもよい。 The vehicle management device may further include an evaluation unit that evaluates the driver based on the driving information received from the vehicle-mounted device.

前記車両管理装置の前記評価部は、前記運転手情報において所定属性が設定されている前記運転手を評価し、前記運転手情報において前記所定属性が設定されていない前記運転手を評価しなくてもよい。 The evaluation unit of the vehicle management device does not evaluate the driver whose predetermined attribute is set in the driver information, and does not evaluate the driver whose predetermined attribute is not set in the driver information. May be good.

本発明によれば、一例として、車両を実際に運転している運転手を高い精度で特定できるという効果を奏する。 According to the present invention, as an example, there is an effect that the driver who is actually driving the vehicle can be identified with high accuracy.

実施形態に係る車両管理システムの概要を説明するための図である。It is a figure for demonstrating the outline of the vehicle management system which concerns on embodiment. 実施形態に係る車両管理システムのブロック図である。It is a block diagram of the vehicle management system which concerns on embodiment. 取得部が取得する例示的な撮像画像を示す図である。It is a figure which shows the exemplary captured image acquired by the acquisition part. 姿勢判定部が運転手の姿勢を判定する方法を説明するための模式図である。It is a schematic diagram for demonstrating the method which the posture determination part determines the posture of a driver. 通知を表示している車載装置の正面図である。It is a front view of the in-vehicle device displaying a notification. 評価部が運転手を評価する方法を説明するための模式図である。It is a schematic diagram for demonstrating the method in which an evaluation part evaluates a driver. 車両管理システムが運転手を再度特定する方法を説明するための模式図である。It is a schematic diagram for explaining how the vehicle management system identifies a driver again. 実施形態に係る車両管理システムが実行する車両管理方法のシーケンス図である。It is a sequence diagram of the vehicle management method executed by the vehicle management system which concerns on embodiment.

[車両管理システムの概要]
図1は、本実施形態に係る車両管理システムSの概要を説明するための図である。車両管理システムSは、車両の運転に関する情報を管理するシステムであり、車両管理装置1と、車載装置2と、撮像装置3とを備える。本実施形態に係る車両管理システムSは、旅客を輸送するためのタクシー、顧客に貸与されるレンタカー、貨物を輸送するためのトラック等の車両の管理に適用される。車両管理システムSは、その他のサーバ、端末等の機器を含んでもよい。
[Overview of vehicle management system]
FIG. 1 is a diagram for explaining an outline of the vehicle management system S according to the present embodiment. The vehicle management system S is a system that manages information related to the driving of a vehicle, and includes a vehicle management device 1, an in-vehicle device 2, and an image pickup device 3. The vehicle management system S according to the present embodiment is applied to the management of vehicles such as taxis for transporting passengers, rental cars rented to customers, and trucks for transporting cargo. The vehicle management system S may include other devices such as servers and terminals.

車両管理装置1は、車両の運転に関する情報を管理するサーバ等のコンピュータである。車両管理装置1は、車両に設けられた撮像装置3が撮像した撮像画像に基づいて運転手を特定し、運転手による車両の運転に関する運転情報を記録する。車両管理装置1は、インターネット等の通信ネットワークを介して複数の車載装置2と接続されている。 The vehicle management device 1 is a computer such as a server that manages information related to vehicle driving. The vehicle management device 1 identifies the driver based on the captured image captured by the image pickup device 3 provided in the vehicle, and records the driving information regarding the driving of the vehicle by the driver. The vehicle management device 1 is connected to a plurality of vehicle-mounted devices 2 via a communication network such as the Internet.

車載装置2は、車両に関連付けられた情報端末である。車載装置2は、車両に内蔵されるカーナビゲーションシステムや車載コンピュータであってもよく、車両を運転する運転手が保有するスマートフォンやタブレット端末であってもよい。車載装置2は、運転手に対して情報を表示し、また運転手による操作を受け付ける運転手用アプリケーション(車両管理プログラム)がインストールされている。 The in-vehicle device 2 is an information terminal associated with the vehicle. The in-vehicle device 2 may be a car navigation system or an in-vehicle computer built in the vehicle, or may be a smartphone or tablet terminal owned by the driver who drives the vehicle. The in-vehicle device 2 is installed with a driver application (vehicle management program) that displays information to the driver and accepts operations by the driver.

撮像装置3は、車両内を撮像する1つ以上の撮像部を含む装置である。撮像装置3は、車両に固定されてもよく、車載装置2と一体化されていてもよい。撮像装置3は、撮像部を用いて撮像した撮像画像を、車載装置2へ送信する。 The image pickup device 3 is a device including one or more image pickup units that take an image of the inside of the vehicle. The image pickup device 3 may be fixed to the vehicle or may be integrated with the in-vehicle device 2. The image pickup device 3 transmits the captured image captured by the image pickup unit to the vehicle-mounted device 2.

本実施形態に係る車両管理システムSが実行する処理の概要を以下に説明する。車載装置2は、運転手用アプリケーションが起動されると、車両が走行状態であるか否かを判定する。車載装置2は、車両が走行状態であると判定した際に、撮像装置3が撮像した運転手の撮像画像を取得し、車両管理装置1へ送信する。 The outline of the processing executed by the vehicle management system S according to the present embodiment will be described below. When the driver application is activated, the in-vehicle device 2 determines whether or not the vehicle is in a traveling state. When the in-vehicle device 2 determines that the vehicle is in a traveling state, the in-vehicle device 2 acquires an image of the driver captured by the image pickup device 3 and transmits it to the vehicle management device 1.

車両管理装置1は、車載装置2から受信した車載装置から受信した撮像画像に基づいて、運転手を特定する。車両管理装置1は、特定した運転手に関する運転手情報を車載装置2へ送信する。例えば運転手情報は、運転手を識別可能な識別情報と、運転手の基準姿勢を示す基準姿勢情報とを含む。 The vehicle management device 1 identifies the driver based on the captured image received from the vehicle-mounted device received from the vehicle-mounted device 2. The vehicle management device 1 transmits the driver information regarding the specified driver to the in-vehicle device 2. For example, the driver information includes identification information that can identify the driver and reference posture information that indicates the driver's reference posture.

車載装置2は、車両管理装置1から運転手情報を受信した場合に、運転手による車両の運転に関する運転情報を、車両管理装置1へ送信する。例えば運転情報は、速度、加速度、急加速回数、急ブレーキ回数を含む。また、車載装置2は、運転手情報が示す基準姿勢に基づいて運転手の姿勢を監視し、所定の条件が満たされた場合に運転手に対して通知する。車両管理装置1は、車載装置2から受信した運転情報を、運転手と関連付けて記憶部に記憶させる。 When the in-vehicle device 2 receives the driver information from the vehicle management device 1, the in-vehicle device 2 transmits the driving information regarding the driving of the vehicle by the driver to the vehicle management device 1. For example, driving information includes speed, acceleration, number of sudden accelerations, and number of sudden brakings. Further, the in-vehicle device 2 monitors the posture of the driver based on the reference posture indicated by the driver information, and notifies the driver when a predetermined condition is satisfied. The vehicle management device 1 stores the driving information received from the vehicle-mounted device 2 in the storage unit in association with the driver.

このように車両管理システムSは、車両が走行状態である場合に撮像された撮像画像に基づいて運転手を特定し、特定した運転手による車両の運転に関する情報を記録する。これにより、車両管理システムSは、運転手を特定した後に運転手が交替することがないため、車両を実際に運転している運転手を高い精度で特定できる。 As described above, the vehicle management system S identifies the driver based on the captured image captured when the vehicle is in a traveling state, and records information on the driving of the vehicle by the specified driver. As a result, the vehicle management system S can identify the driver who is actually driving the vehicle with high accuracy because the driver does not change after identifying the driver.

[車両管理システムの構成]
図2は、本実施形態に係る車両管理システムSのブロック図である。図2において、矢印は主なデータの流れを示しており、図2に示したもの以外のデータの流れがあってよい。図2において、各ブロックはハードウェア(装置)単位の構成ではなく、機能単位の構成を示している。そのため、図2に示すブロックは単一の装置内に実装されてよく、あるいは複数の装置内に分かれて実装されてよい。ブロック間のデータの授受は、データバス、ネットワーク、可搬記憶媒体等、任意の手段を介して行われてよい。
[Vehicle management system configuration]
FIG. 2 is a block diagram of the vehicle management system S according to the present embodiment. In FIG. 2, the arrows indicate the main data flows, and there may be data flows other than those shown in FIG. In FIG. 2, each block shows not a hardware (device) unit configuration but a functional unit configuration. Therefore, the block shown in FIG. 2 may be mounted in a single device, or may be mounted separately in a plurality of devices. Data can be exchanged between blocks via any means such as a data bus, a network, or a portable storage medium.

車両管理装置1は、通信部11と、記憶部12と、制御部13とを有する。制御部13は、受信部131と、特定部132と、生成部133と、送信部134と、評価部135とを有する。 The vehicle management device 1 has a communication unit 11, a storage unit 12, and a control unit 13. The control unit 13 includes a reception unit 131, a specific unit 132, a generation unit 133, a transmission unit 134, and an evaluation unit 135.

通信部11は、インターネット等の通信ネットワークを介して車載装置2と通信を行うための通信インターフェースである。記憶部12は、ROM(Read Only Memory)、RAM(Random Access Memory)、ハードディスクドライブ等を含む記憶媒体である。記憶部12は、制御部13が実行するプログラムを予め記憶している。記憶部12は、車両管理装置1の外部に設けられてもよく、その場合にネットワークを介して制御部13との間でデータの授受を行ってもよい。 The communication unit 11 is a communication interface for communicating with the in-vehicle device 2 via a communication network such as the Internet. The storage unit 12 is a storage medium including a ROM (Read Only Memory), a RAM (Random Access Memory), a hard disk drive, and the like. The storage unit 12 stores in advance the program executed by the control unit 13. The storage unit 12 may be provided outside the vehicle management device 1, and in that case, data may be exchanged with the control unit 13 via a network.

制御部13は、例えばCPU(Central Processing Unit)等のプロセッサであり、記憶部12に記憶されたプログラムを実行することにより、受信部131、特定部132、生成部133、送信部134及び評価部135として機能する。制御部13の機能の少なくとも一部は電気回路によって実行されてもよい。また、制御部13の機能の少なくとも一部は、制御部13がネットワーク経由で実行されるプログラムを実行することによって実現されてもよい。 The control unit 13 is, for example, a processor such as a CPU (Central Processing Unit), and by executing a program stored in the storage unit 12, the reception unit 131, the specific unit 132, the generation unit 133, the transmission unit 134, and the evaluation unit Functions as 135. At least a part of the function of the control unit 13 may be executed by an electric circuit. Further, at least a part of the functions of the control unit 13 may be realized by the control unit 13 executing a program executed via the network.

車載装置2は、通信部21と、記憶部22と、制御部23と、表示部24と、操作部25とを有する。制御部23は、走行状態判定部231と、取得部232と、第1送信部233と、受信部234と、姿勢判定部235と、第2送信部236とを有する。 The in-vehicle device 2 includes a communication unit 21, a storage unit 22, a control unit 23, a display unit 24, and an operation unit 25. The control unit 23 includes a traveling state determination unit 231, an acquisition unit 232, a first transmission unit 233, a reception unit 234, a posture determination unit 235, and a second transmission unit 236.

通信部21は、インターネット等の通信ネットワークを介して車両管理装置1と通信を行うための通信インターフェースである。記憶部22は、ROM、RAM、ハードディスクドライブ等を含む記憶媒体である。記憶部22は、制御部23が実行するプログラムを予め記憶している。記憶部22は、車載装置2の外部に設けられてもよく、その場合にネットワークを介して制御部23との間でデータの授受を行ってもよい。 The communication unit 21 is a communication interface for communicating with the vehicle management device 1 via a communication network such as the Internet. The storage unit 22 is a storage medium including a ROM, a RAM, a hard disk drive, and the like. The storage unit 22 stores in advance the program executed by the control unit 23. The storage unit 22 may be provided outside the in-vehicle device 2, and in that case, data may be exchanged with the control unit 23 via the network.

制御部23は、例えばCPU等のプロセッサであり、記憶部22に記憶されたプログラムを実行することにより、走行状態判定部231、取得部232、第1送信部233、受信部234、姿勢判定部235及び第2送信部236として機能する。制御部23の機能の少なくとも一部は電気回路によって実行されてもよい。また、制御部23の機能の少なくとも一部は、制御部23がネットワーク経由で実行されるプログラムを実行することによって実現されてもよい。 The control unit 23 is, for example, a processor such as a CPU, and by executing a program stored in the storage unit 22, the running state determination unit 231 and the acquisition unit 232, the first transmission unit 233, the reception unit 234, and the posture determination unit It functions as 235 and the second transmitter 236. At least a part of the function of the control unit 23 may be performed by an electric circuit. Further, at least a part of the functions of the control unit 23 may be realized by the control unit 23 executing a program executed via the network.

表示部24は、情報を表示可能な液晶ディスプレイ、有機EL(Electro-Luminescence)ディスプレイ等を含む。操作部25は、人間による操作を受け付け可能なタッチパネル等を含む。 The display unit 24 includes a liquid crystal display capable of displaying information, an organic EL (Electro-Luminescence) display, and the like. The operation unit 25 includes a touch panel and the like capable of accepting operations by humans.

本実施形態に係る車両管理システムSは、図2に示す具体的な構成に限定されない。車両管理装置1及び車載装置2は、それぞれ2つ以上の物理的に分離した装置が有線又は無線で接続されることにより構成されてもよい。例えば車両管理装置1は、単一のコンピュータによって構成されてもよく、互いに連携する複数のコンピュータによって構成されてもよく、コンピュータ資源の集合であるクラウドによって構成されてもよい。 The vehicle management system S according to the present embodiment is not limited to the specific configuration shown in FIG. The vehicle management device 1 and the vehicle-mounted device 2 may be configured by connecting two or more physically separated devices, respectively, by wire or wirelessly. For example, the vehicle management device 1 may be composed of a single computer, a plurality of computers that cooperate with each other, or a cloud that is a collection of computer resources.

[車両管理方法の説明]
以下、本実施形態に係る車両管理システムSが実行する車両管理方法を詳細に説明する。まず運転手は、車載装置2において、運転手用アプリケーション(車両管理プログラム)を起動する。運転手用アプリケーションが起動されると、走行状態判定部231は、車両が走行状態であるか否かを繰り返し判定する。例えば走行状態判定部231は、車両に設けられたセンサから取得した速度、加速度、ギアの状態又はパーキングブレーキの状態に基づいて、車両が走行状態であるか否かを判定する。また、走行状態判定部231は、車両に設けられたGPS(Global Positioning System)受信機から取得した信号に基づいて算出された位置の変化に基づいて、車両が走行状態であるか否かを判定してもよい。
[Explanation of vehicle management method]
Hereinafter, the vehicle management method executed by the vehicle management system S according to the present embodiment will be described in detail. First, the driver activates the driver application (vehicle management program) in the in-vehicle device 2. When the driver application is activated, the traveling state determination unit 231 repeatedly determines whether or not the vehicle is in the traveling state. For example, the traveling state determination unit 231 determines whether or not the vehicle is in a traveling state based on the speed, acceleration, gear state, or parking brake state acquired from a sensor provided in the vehicle. Further, the traveling state determination unit 231 determines whether or not the vehicle is in the traveling state based on the change in the position calculated based on the signal acquired from the GPS (Global Positioning System) receiver provided in the vehicle. You may.

車両が走行状態であると走行状態判定部231が判定した際に、取得部232は、撮像装置3が撮像した運転手の撮像画像を取得する。例えば取得部232は、車両が走行状態であると走行状態判定部231が判定したタイミングで撮像装置3に撮像指示を送信することによって、撮像画像を取得する。また、取得部232は、撮像装置3が定期的に撮像している撮像画像の中から、車両が走行状態であると走行状態判定部231が判定したタイミングに最も近い時刻に撮像された撮像画像を取得してもよい。第1送信部233は、取得部232が取得した撮像画像を、車両管理装置1へ送信する。 When the traveling state determination unit 231 determines that the vehicle is in the traveling state, the acquisition unit 232 acquires the captured image of the driver captured by the imaging device 3. For example, the acquisition unit 232 acquires an captured image by transmitting an imaging instruction to the imaging device 3 at a timing when the traveling state determination unit 231 determines that the vehicle is in a traveling state. Further, the acquisition unit 232 captures the captured image taken at the time closest to the timing determined by the running state determination unit 231 that the vehicle is in the running state from the captured images periodically captured by the image pickup device 3. May be obtained. The first transmission unit 233 transmits the captured image acquired by the acquisition unit 232 to the vehicle management device 1.

図3は、取得部232が取得する例示的な撮像画像IM1を示す図である。撮像画像IM1は、運転手を特定可能であり、かつ運転手の姿勢を判定可能であるように、運転手の少なくとも一部の領域(例えば運転手の上半身)を含む画像である。 FIG. 3 is a diagram showing an exemplary captured image IM1 acquired by the acquisition unit 232. The captured image IM1 is an image including at least a part of the driver (for example, the upper body of the driver) so that the driver can be identified and the posture of the driver can be determined.

車両管理装置1において、受信部131は、車載装置2が送信した撮像画像を受信する。特定部132は、受信部131が受信した撮像画像に基づいて、車両の運転手を特定する。例えば記憶部12は、複数の運転手それぞれの画像(又は画像から抽出された特徴情報)と、運転手を識別可能な識別情報(ユーザID等)とを関連付けて、予め記憶している。特定部132は、受信部131が受信した撮像画像に対して、既知の画像認識技術(人物認識技術)を適用することによって、記憶部12に予め記憶された複数の画像に対応する複数の運転手の中から、撮像画像に含まれている運転手を特定する。 In the vehicle management device 1, the receiving unit 131 receives the captured image transmitted by the vehicle-mounted device 2. The identification unit 132 identifies the driver of the vehicle based on the captured image received by the reception unit 131. For example, the storage unit 12 stores in advance an image of each of the plurality of drivers (or feature information extracted from the image) in association with identification information (user ID or the like) that can identify the driver. The specific unit 132 applies a known image recognition technology (person recognition technology) to the captured image received by the reception unit 131, so that a plurality of operations corresponding to the plurality of images stored in advance in the storage unit 12 can be performed. From the hands, identify the driver included in the captured image.

生成部133は、特定部132が特定した運転手の基準姿勢を示す基準姿勢情報を生成する。基準姿勢は、後述のように車載装置2が運転手の姿勢が乱れているか否かを判定する基準となる姿勢である。基準姿勢は、運転手の体における複数の関節の位置によって表される。例えば生成部133は、特定部132が特定した運転手について、受信部131が車載装置2から過去(例えば現在から遡った数日間)に受信した複数の撮像画像それぞれに対して、既知の姿勢検知技術を適用することによって、運転手の姿勢を検知する。そして生成部133は、検知した複数の姿勢の統計値(平均値、中央値、最頻値等)を、基準姿勢として特定する。また、基準姿勢は、複数の運転手の間で共通であってもよい。基準姿勢情報は、予め生成されて記憶部12に記憶されてもよい。 The generation unit 133 generates reference posture information indicating the reference posture of the driver specified by the specific unit 132. The reference posture is a posture that serves as a reference for determining whether or not the driver's posture is disturbed by the in-vehicle device 2 as described later. The reference posture is represented by the positions of multiple joints in the driver's body. For example, the generation unit 133 detects a known posture for each of a plurality of captured images received by the reception unit 131 from the in-vehicle device 2 in the past (for example, several days back from the present) for the driver specified by the specific unit 132. By applying the technology, the posture of the driver is detected. Then, the generation unit 133 specifies the detected statistical values (average value, median value, mode value, etc.) of the plurality of postures as the reference posture. Further, the reference posture may be common among a plurality of drivers. The reference posture information may be generated in advance and stored in the storage unit 12.

送信部134は、特定部132が特定した運転手を識別可能な識別情報と、特定部132が特定した運転手の基準姿勢を示す基準姿勢情報とを含む運転手情報を、車載装置2へ送信する。 The transmission unit 134 transmits the driver information including the identification information that can identify the driver specified by the specific unit 132 and the reference posture information indicating the reference posture of the driver specified by the specific unit 132 to the in-vehicle device 2. do.

車載装置2において、受信部234は、車両管理装置1が送信した運転手情報を受信する。受信部234が運転手情報を受信した後、取得部232は、撮像装置3が撮像した運転手の撮像画像を繰り返し取得する。姿勢判定部235は、取得部232が取得した撮像画像が示す運転手の姿勢と、受信部234が受信した運転手情報が示す基準姿勢との間の差が、運転手に通知するための通知条件を満たすか否かを判定する。 In the in-vehicle device 2, the receiving unit 234 receives the driver information transmitted by the vehicle management device 1. After the receiving unit 234 receives the driver information, the acquiring unit 232 repeatedly acquires the captured image of the driver captured by the imaging device 3. The posture determination unit 235 notifies the driver of the difference between the driver's posture indicated by the captured image acquired by the acquisition unit 232 and the reference posture indicated by the driver information received by the reception unit 234. Determine if the condition is met.

図4は、姿勢判定部235が運転手の姿勢を判定する方法を説明するための模式図である。姿勢判定部235は、取得部232が取得した撮像画像IM1に対して、既知の姿勢検知技術を適用することによって、撮像画像IM1が示す姿勢を検知する。撮像画像IM1が示す姿勢は、運転手の体における複数の関節の位置によって表される。姿勢判定部235は、撮像画像IM1が示す姿勢と、受信部234が受信した運転手情報が示す基準姿勢Pとの間の差(例えば各関節の位置の差の平均値)を算出する。そして姿勢判定部235は、算出した差が所定値以上である場合に通知条件が満たされていると判定し、そうでない場合に通知条件が満たされていないと判定する。姿勢判定部235は、通知条件が満たされていると判定した場合に、所定の通知を表示部24に表示させる。姿勢判定部235は、所定の音声を出力することによって、運転手に通知してもよい。 FIG. 4 is a schematic diagram for explaining a method in which the posture determination unit 235 determines the posture of the driver. The posture determination unit 235 detects the posture indicated by the captured image IM1 by applying a known posture detection technique to the captured image IM1 acquired by the acquisition unit 232. The posture indicated by the captured image IM1 is represented by the positions of a plurality of joints in the driver's body. The posture determination unit 235 calculates the difference between the posture indicated by the captured image IM1 and the reference posture P indicated by the driver information received by the reception unit 234 (for example, the average value of the differences in the positions of the joints). Then, the posture determination unit 235 determines that the notification condition is satisfied when the calculated difference is equal to or greater than a predetermined value, and determines that the notification condition is not satisfied otherwise. When the posture determination unit 235 determines that the notification condition is satisfied, the posture determination unit 235 causes the display unit 24 to display a predetermined notification. The posture determination unit 235 may notify the driver by outputting a predetermined voice.

図5は、通知241を表示している車載装置2の正面図である。通知241は、運転手の姿勢が乱れていることを示すメッセージを含む。これにより、運転手は、自分の姿勢が基準姿勢と比較して乱れているか否かを知ることができ、運転中の姿勢を改めることができる。 FIG. 5 is a front view of the in-vehicle device 2 displaying the notification 241. Notification 241 includes a message indicating that the driver's posture is disturbed. As a result, the driver can know whether or not his / her posture is disturbed as compared with the reference posture, and can change the posture during driving.

第2送信部236は、運転手による車両の運転に関する運転情報を取得する。例えば運転情報は、速度、加速度、急加速回数及び急ブレーキ回数を含む。例えば第2送信部236は、車両に設けられたセンサから速度及び加速度を取得し、さらに取得した加速度から急加速回数及び急ブレーキ回数を算出する。第2送信部236は、ハンドル操作に関する情報、方向指示器の操作に関する情報等、運転手による車両の運転に関するその他の情報を、運転情報として取得してもよい。また、運転情報は、姿勢判定部235が判定した姿勢の判定結果を含んでもよい。 The second transmission unit 236 acquires driving information regarding the driving of the vehicle by the driver. For example, driving information includes speed, acceleration, number of sudden accelerations and number of sudden brakings. For example, the second transmission unit 236 acquires the speed and acceleration from a sensor provided in the vehicle, and further calculates the number of sudden accelerations and the number of sudden brakings from the acquired acceleration. The second transmission unit 236 may acquire other information regarding the driving of the vehicle by the driver, such as information regarding the operation of the steering wheel and information regarding the operation of the direction indicator, as driving information. Further, the driving information may include a posture determination result determined by the posture determination unit 235.

第2送信部236は、取得した運転情報を、取得部232が取得した撮像画像とともに車両管理装置1へ送信する。第2送信部236は、取得した運転情報を、逐次送信してもよく、所定の時間間隔で定期的に送信してもよく、運転の終了時に一括で送信してもよい。また、第2送信部236は、取得した運転情報が、同一の運転手が所定時間以上運転を行っていたことを示す場合に、連続運転時間が長いことを示す通知を表示部24に表示させてもよい。第2送信部236は、所定の音声を出力することによって、運転手に通知してもよい。 The second transmission unit 236 transmits the acquired driving information to the vehicle management device 1 together with the captured image acquired by the acquisition unit 232. The second transmission unit 236 may sequentially transmit the acquired operation information, may periodically transmit the acquired operation information at predetermined time intervals, or may collectively transmit the acquired operation information at the end of the operation. Further, the second transmission unit 236 causes the display unit 24 to display a notification indicating that the continuous operation time is long when the acquired operation information indicates that the same driver has been operating for a predetermined time or longer. You may. The second transmission unit 236 may notify the driver by outputting a predetermined voice.

車両管理装置1において、受信部131は、車載装置2が送信した運転情報及び撮像画像を受信する。受信部131は、車載装置2から受信した運転情報及び撮像画像を、運転手(すなわち運転手の識別情報)と関連付けて記憶部12に記憶させる。評価部135は、受信部131が受信した運転情報に基づいて、特定部132が特定した運転手を評価し、評価結果を示す評価情報を生成する。 In the vehicle management device 1, the receiving unit 131 receives the driving information and the captured image transmitted by the vehicle-mounted device 2. The receiving unit 131 stores the driving information and the captured image received from the vehicle-mounted device 2 in the storage unit 12 in association with the driver (that is, the driver's identification information). The evaluation unit 135 evaluates the driver specified by the specific unit 132 based on the operation information received by the reception unit 131, and generates evaluation information indicating the evaluation result.

図6は、評価部135が運転手を評価する方法を説明するための模式図である。例えば評価部135は、運転情報が含む速度、加速度、急加速回数及び急ブレーキ回数に基づいて、運転手による車両の運転の安全性、乗り心地、ムラ等を評価する。評価部135が行う運転手の評価は、ここに示した具体的な項目に限定されない。評価部135は、評価結果を示す評価情報を、運転手(すなわち運転手の識別情報)と関連付けて記憶部12に記憶させる。 FIG. 6 is a schematic diagram for explaining a method in which the evaluation unit 135 evaluates the driver. For example, the evaluation unit 135 evaluates the safety, riding comfort, unevenness, etc. of the driver's driving of the vehicle based on the speed, acceleration, the number of sudden accelerations, and the number of sudden brakings included in the driving information. The driver's evaluation performed by the evaluation unit 135 is not limited to the specific items shown here. The evaluation unit 135 stores the evaluation information indicating the evaluation result in the storage unit 12 in association with the driver (that is, the driver's identification information).

このとき、評価部135は、運転手情報において所定属性が設定されている運転手を評価し、運転手情報において所定属性が設定されていない運転手を評価しない。所定属性は、例えば運転手が評価対象であることを示すフラグである。これにより、車両管理システムSは、特定の運転手のみを評価の対象とし、それ以外の運転手を評価しないことによって、処理の負荷を軽減できる。 At this time, the evaluation unit 135 evaluates the driver whose predetermined attribute is set in the driver information, and does not evaluate the driver whose predetermined attribute is not set in the driver information. The predetermined attribute is, for example, a flag indicating that the driver is the evaluation target. As a result, the vehicle management system S can reduce the processing load by evaluating only a specific driver and not evaluating other drivers.

このように車両管理システムSは、車両が走行状態である場合に撮像された撮像画像に基づいて運転手を特定するため、特定した運転手と車両を運転している運転手とが高い確率で一致する。そのため、車両管理システムSは、高い精度で特定した運転手による車両の運転に関する情報を、運転手と関連付けて記録することができる。 In this way, since the vehicle management system S identifies the driver based on the captured image captured when the vehicle is in a running state, there is a high probability that the specified driver and the driver who is driving the vehicle will identify the driver. Match. Therefore, the vehicle management system S can record information on the driving of the vehicle by the driver identified with high accuracy in association with the driver.

さらに車両管理システムSは、車両が走行状態の際に運転手を特定した後、運転手が交替し得る状況になった場合に、運転手を再度特定する。図7は、車両管理システムSが運転手を再度特定する方法を説明するための模式図である。 Further, the vehicle management system S identifies the driver when the vehicle is in a traveling state, and then identifies the driver again when the driver can be replaced. FIG. 7 is a schematic diagram for explaining how the vehicle management system S identifies the driver again.

上述のように、車載装置2において、受信部234は、車両が走行状態であると走行状態判定部231が判定した際に取得部232が取得した撮像画像IM1に基づいて特定された運転手の運転手情報を受信する。その後、走行状態判定部231は、車両が一時停止状態であるか否かを繰り返し判定する。例えば走行状態判定部231は、車両に設けられたセンサから取得した速度、加速度、ギアの状態又はパーキングブレーキの状態に基づいて、車両が一時停止状態であるか否かを判定する。また、走行状態判定部231は、車両に設けられたGPS受信機から取得した信号に基づいて算出された位置の変化に基づいて、車両が一時停止状態であるか否かを判定してもよい。 As described above, in the in-vehicle device 2, the receiving unit 234 is the driver specified based on the captured image IM1 acquired by the acquisition unit 232 when the traveling state determination unit 231 determines that the vehicle is in the traveling state. Receive driver information. After that, the traveling state determination unit 231 repeatedly determines whether or not the vehicle is in the paused state. For example, the traveling state determination unit 231 determines whether or not the vehicle is in the paused state based on the speed, acceleration, gear state, or parking brake state acquired from a sensor provided in the vehicle. Further, the traveling state determination unit 231 may determine whether or not the vehicle is in the paused state based on the change in the position calculated based on the signal acquired from the GPS receiver provided in the vehicle. ..

車両が一時停止状態であると走行状態判定部231が判定した際に、取得部232は、撮像装置3が撮像した運転手の撮像画像IM2を取得する。取得部232は、一時停止状態における撮像画像IM2に基づいて、運転手が所定動作をしたか否かを判定する。所定動作は、運転手が撮像装置3の撮像範囲の外に出る動作である。例えば取得部232は、撮像画像IM2に基づいて運転手の顔の位置を検出し、運転手の顔が撮像画像IM2の範囲内にない場合に、所定動作をしたと判定する。取得部232は、撮像画像IM2を用いず、車両に設けられた赤外線センサ等を用いて、運転手が撮像装置3の撮像範囲の外に出る所定動作をしたか否かを判定してもよい。 When the traveling state determination unit 231 determines that the vehicle is in the paused state, the acquisition unit 232 acquires the driver's image IM2 imaged by the image pickup device 3. The acquisition unit 232 determines whether or not the driver has performed a predetermined operation based on the captured image IM2 in the paused state. The predetermined operation is an operation in which the driver goes out of the imaging range of the imaging device 3. For example, the acquisition unit 232 detects the position of the driver's face based on the captured image IM2, and determines that the predetermined operation is performed when the driver's face is not within the range of the captured image IM2. The acquisition unit 232 may determine whether or not the driver has performed a predetermined operation outside the imaging range of the imaging device 3 by using an infrared sensor or the like provided in the vehicle without using the captured image IM2. ..

運転手が所定動作をしたと取得部232が判定した場合に、走行状態判定部231は、車両が一時停止状態になった後に走行状態になったか否かを繰り返し判定する。車両が一時停止状態になった後に走行状態になったと走行状態判定部231が判定した際に、取得部232は、撮像装置3が撮像した運転手の撮像画像を再度取得する。第1送信部233は、取得部232が再度取得した撮像画像(すなわち、走行状態における撮像画像)を、車両管理装置1へ再度送信する。 When the acquisition unit 232 determines that the driver has performed a predetermined operation, the traveling state determination unit 231 repeatedly determines whether or not the vehicle has entered the traveling state after being temporarily stopped. When the traveling state determination unit 231 determines that the vehicle has entered the traveling state after being temporarily stopped, the acquisition unit 232 acquires the captured image of the driver captured by the imaging device 3 again. The first transmission unit 233 retransmits the captured image (that is, the captured image in the traveling state) acquired again by the acquisition unit 232 to the vehicle management device 1.

車両管理装置1において、受信部131は、車載装置2が再度送信した撮像画像を受信する。特定部132は、受信部131が受信した撮像画像に基づいて、車両の運転手を特定する。送信部134は、特定部132が特定した運転手の運転手情報を、車載装置2へ送信する。 In the vehicle management device 1, the receiving unit 131 receives the captured image transmitted again by the vehicle-mounted device 2. The identification unit 132 identifies the driver of the vehicle based on the captured image received by the reception unit 131. The transmission unit 134 transmits the driver information of the driver specified by the specific unit 132 to the in-vehicle device 2.

車載装置2において、受信部234は、第1送信部233が再度送信した撮像画像に基づいて車両管理装置1が特定した運転手情報を受信する。このように、車両管理システムSは、車両が一時停止して運転手が交替し得る所定動作を行った場合に、走行状態における撮像画像を再度取得して運転手を改めて特定する。これにより、車両管理システムSは、高い精度で運転手を特定し続けることができる。車載装置2は、運転手が一時停止中に所定動作を行ったことを条件として撮像画像を車両管理装置1へ送信するため、通信負荷を軽減できる。また、車載装置2側で運転手が交替し得たかどうかを判定するため、車両管理装置1の処理負荷を軽減できる。 In the in-vehicle device 2, the receiving unit 234 receives the driver information specified by the vehicle management device 1 based on the captured image transmitted again by the first transmitting unit 233. As described above, when the vehicle is temporarily stopped and the driver performs a predetermined operation that can be replaced, the vehicle management system S reacquires the captured image in the traveling state and identifies the driver again. As a result, the vehicle management system S can continue to identify the driver with high accuracy. Since the in-vehicle device 2 transmits the captured image to the vehicle management device 1 on condition that the driver performs a predetermined operation during the temporary stop, the communication load can be reduced. Further, since it is determined whether or not the driver can be replaced on the vehicle-mounted device 2 side, the processing load of the vehicle management device 1 can be reduced.

上述の処理では、運転手が所定動作をしたことを条件として、第1送信部233は、取得部232が再度取得した撮像画像を送信しているが、運転手の所定動作の検出を省略してもよい。この場合には、運転手が所定動作をしたか否かに関わらず、走行状態判定部231は、車両が一時停止状態になった後に走行状態になったか否かを繰り返し判定する。車両が一時停止状態になった後に走行状態になったと走行状態判定部231が判定した際に、第1送信部233は、取得部232が再度取得した撮像画像を、車両管理装置1へ再度送信する。このような構成においても、車両管理システムSは、高い精度で運転手を特定し続けることができる。 In the above process, the first transmission unit 233 transmits the captured image acquired again by the acquisition unit 232 on the condition that the driver has performed the predetermined operation, but the detection of the driver's predetermined operation is omitted. You may. In this case, regardless of whether or not the driver has performed a predetermined operation, the traveling state determination unit 231 repeatedly determines whether or not the vehicle has entered the traveling state after being temporarily stopped. When the traveling state determination unit 231 determines that the vehicle has entered the traveling state after being temporarily stopped, the first transmitting unit 233 again transmits the captured image acquired by the acquiring unit 232 to the vehicle management device 1. do. Even in such a configuration, the vehicle management system S can continue to identify the driver with high accuracy.

[車両管理方法のシーケンス]
図8は、本実施形態に係る車両管理システムSが実行する車両管理方法のシーケンス図である。まず運転手は、車載装置2において、運転手用アプリケーション(車両管理プログラム)を起動する。運転手用アプリケーションが起動されると、走行状態判定部231は、車両が走行状態であるか否かを繰り返し判定する(S11)。車両が走行状態であると走行状態判定部231が判定した際に、取得部232は、撮像装置3が撮像した運転手の撮像画像を取得する(S12)。第1送信部233は、取得部232が取得した撮像画像を、車両管理装置1へ送信する。
[Sequence of vehicle management methods]
FIG. 8 is a sequence diagram of a vehicle management method executed by the vehicle management system S according to the present embodiment. First, the driver activates the driver application (vehicle management program) in the in-vehicle device 2. When the driver application is activated, the traveling state determination unit 231 repeatedly determines whether or not the vehicle is in the traveling state (S11). When the traveling state determination unit 231 determines that the vehicle is in the traveling state, the acquisition unit 232 acquires the captured image of the driver captured by the imaging device 3 (S12). The first transmission unit 233 transmits the captured image acquired by the acquisition unit 232 to the vehicle management device 1.

車両管理装置1において、受信部131は、車載装置2が送信した撮像画像を受信する。特定部132は、受信部131が受信した撮像画像に基づいて、車両の運転手を特定する(S13)。生成部133は、特定部132が特定した運転手の基準姿勢を示す基準姿勢情報を生成する。基準姿勢情報は、予め生成されて記憶部12に記憶されてもよい。送信部134は、特定部132が特定した運転手を識別可能な識別情報と、特定部132が特定した運転手の基準姿勢を示す基準姿勢情報とを含む運転手情報を、車載装置2へ送信する(S14)。 In the vehicle management device 1, the receiving unit 131 receives the captured image transmitted by the vehicle-mounted device 2. The identification unit 132 identifies the driver of the vehicle based on the captured image received by the reception unit 131 (S13). The generation unit 133 generates reference posture information indicating the reference posture of the driver specified by the specific unit 132. The reference posture information may be generated in advance and stored in the storage unit 12. The transmission unit 134 transmits the driver information including the identification information that can identify the driver specified by the specific unit 132 and the reference posture information indicating the reference posture of the driver specified by the specific unit 132 to the in-vehicle device 2. (S14).

車載装置2において、受信部234は、車両管理装置1が送信した運転手情報を受信する。受信部234が運転手情報を受信した後、取得部232は、撮像装置3が撮像した運転手の撮像画像を繰り返し取得する。姿勢判定部235は、取得部232が取得した撮像画像が示す運転手の姿勢と、受信部234が受信した運転手情報が示す基準姿勢との間の差が、運転手に通知するための通知条件を満たすか否かを判定する(S15)。姿勢判定部235は、通知条件が満たされていると判定した場合に、所定の通知を表示部24に表示させる。姿勢判定部235は、所定の音声を出力することによって、運転手に通知してもよい。 In the in-vehicle device 2, the receiving unit 234 receives the driver information transmitted by the vehicle management device 1. After the receiving unit 234 receives the driver information, the acquiring unit 232 repeatedly acquires the captured image of the driver captured by the imaging device 3. The posture determination unit 235 notifies the driver of the difference between the driver's posture indicated by the captured image acquired by the acquisition unit 232 and the reference posture indicated by the driver information received by the reception unit 234. It is determined whether or not the condition is satisfied (S15). When the posture determination unit 235 determines that the notification condition is satisfied, the posture determination unit 235 causes the display unit 24 to display a predetermined notification. The posture determination unit 235 may notify the driver by outputting a predetermined voice.

第2送信部236は、運転手による車両の運転に関する運転情報を取得する。第2送信部236は、取得した運転情報を、取得部232が取得した撮像画像とともに車両管理装置1へ送信する(S16)。 The second transmission unit 236 acquires driving information regarding the driving of the vehicle by the driver. The second transmission unit 236 transmits the acquired driving information to the vehicle management device 1 together with the captured image acquired by the acquisition unit 232 (S16).

車両管理装置1において、受信部131は、車載装置2が送信した運転情報及び撮像画像を受信する。受信部131は、車載装置2から受信した運転情報及び撮像画像を、運転手(すなわち運転手の識別情報)と関連付けて記憶部12に記憶させる(S17)。 In the vehicle management device 1, the receiving unit 131 receives the driving information and the captured image transmitted by the vehicle-mounted device 2. The receiving unit 131 stores the driving information and the captured image received from the vehicle-mounted device 2 in the storage unit 12 in association with the driver (that is, the driver's identification information) (S17).

評価部135は、受信部131が受信した運転情報に基づいて、特定部132が特定した運転手を評価し、評価結果を示す評価情報を生成する(S18)。評価部135は、評価結果を示す評価情報を、運転手(すなわち運転手の識別情報)と関連付けて記憶部12に記憶させる。 The evaluation unit 135 evaluates the driver specified by the specific unit 132 based on the operation information received by the reception unit 131, and generates evaluation information indicating the evaluation result (S18). The evaluation unit 135 stores the evaluation information indicating the evaluation result in the storage unit 12 in association with the driver (that is, the driver's identification information).

[実施形態の効果]
本実施形態に係る車両管理システムSは、車両が走行状態である場合に撮像された撮像画像に基づいて運転手を特定し、特定した運転手による車両の運転に関する情報を記録する。これにより、車両管理システムSは、運転手を特定した後に運転手が交替することがないため、車両を実際に運転している運転手を高い精度で特定できる。
[Effect of Embodiment]
The vehicle management system S according to the present embodiment identifies a driver based on an captured image captured when the vehicle is in a traveling state, and records information on the driving of the vehicle by the specified driver. As a result, the vehicle management system S can identify the driver who is actually driving the vehicle with high accuracy because the driver does not change after identifying the driver.

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されず、その要旨の範囲内で種々の変形及び変更が可能である。例えば、装置の全部又は一部は、任意の単位で機能的又は物理的に分散・統合して構成することができる。また、複数の実施の形態の任意の組み合わせによって生じる新たな実施の形態も、本発明の実施の形態に含まれる。組み合わせによって生じる新たな実施の形態の効果は、もとの実施の形態の効果を併せ持つ。 Although the present invention has been described above using the embodiments, the technical scope of the present invention is not limited to the scope described in the above embodiments, and various modifications and changes can be made within the scope of the gist thereof. be. For example, all or a part of the device can be functionally or physically distributed / integrated in any unit. Also included in the embodiments of the present invention are new embodiments resulting from any combination of the plurality of embodiments. The effect of the new embodiment produced by the combination also has the effect of the original embodiment.

車両管理装置1及び車載装置2のプロセッサは、図8に示す車両管理方法に含まれる各ステップ(工程)の主体となる。すなわち、車両管理装置1及び車載装置2のプロセッサは、図8に示す車両管理方法を実行するためのプログラムを記憶部から読み出し、該プログラムを実行して車両管理システムSの各部を制御することによって、図8に示す車両管理方法を実行する。図8に示す車両管理方法に含まれるステップは一部省略されてもよく、ステップ間の順番が変更されてもよく、複数のステップが並行して行われてもよい。 The processors of the vehicle management device 1 and the vehicle-mounted device 2 are the main constituents of each step included in the vehicle management method shown in FIG. That is, the processors of the vehicle management device 1 and the vehicle-mounted device 2 read a program for executing the vehicle management method shown in FIG. 8 from the storage unit, and execute the program to control each part of the vehicle management system S. , The vehicle management method shown in FIG. 8 is executed. Some of the steps included in the vehicle management method shown in FIG. 8 may be omitted, the order between the steps may be changed, and a plurality of steps may be performed in parallel.

S 車両管理システム
1 車両管理装置
12 記憶部
13 制御部
131 受信部
132 特定部
133 生成部
134 送信部
135 評価部
2 車載装置
22 記憶部
23 制御部
231 走行状態判定部
232 取得部
233 第1送信部
234 受信部
235 姿勢判定部
236 第2送信部

S Vehicle management system 1 Vehicle management device 12 Storage unit 13 Control unit 131 Reception unit 132 Specific unit 133 Generation unit 134 Transmission unit 135 Evaluation unit 2 In-vehicle device 22 Storage unit 23 Control unit 231 Traveling state determination unit 232 Acquisition unit 233 First transmission Unit 234 Reception unit 235 Posture determination unit 236 Second transmission unit

Claims (8)

車両が走行状態であるか否かを判定する走行状態判定部と、
前記車両が走行状態であると前記走行状態判定部が判定した際に前記車両に搭載された撮像装置が撮像した前記車両の運転手の撮像画像を取得する取得部と、
車両管理装置へ前記撮像画像を送信する第1送信部と、
前記車両管理装置が前記撮像画像に基づいて特定した前記運転手に関する運転手情報であって、前記運転手の基準姿勢を示す運転手情報を受信する受信部と、
前記撮像画像が示す前記運転手の姿勢と、前記運転手情報が示す前記基準姿勢との間の差が、前記運転手に通知するための通知条件を満たすか否かを判定する姿勢判定部と、
前記受信部が前記運転手情報を受信した場合に、前記運転手による前記車両の運転に関する運転情報を、前記車両管理装置へ送信する第2送信部と、
を有する、車載装置。
A running state determination unit that determines whether the vehicle is in a running state,
An acquisition unit that acquires an image captured by the driver of the vehicle, which is captured by an imaging device mounted on the vehicle when the traveling state determination unit determines that the vehicle is in a traveling state.
The first transmission unit that transmits the captured image to the vehicle management device,
A receiving unit that receives driver information about the driver specified by the vehicle management device based on the captured image and indicates the driver's reference posture.
A posture determination unit that determines whether or not the difference between the driver's posture indicated by the captured image and the reference posture indicated by the driver information satisfies the notification condition for notifying the driver. ,
When the receiving unit receives the driver information, the second transmitting unit that transmits the driving information regarding the driving of the vehicle by the driver to the vehicle management device.
In-vehicle device having.
前記受信部が前記運転手情報を受信した後、前記走行状態判定部は、前記車両が一時停止状態になった後に走行状態になったか否かを判定し、
前記走行状態判定部が、前記車両が一時停止状態になった後に走行状態になったと判定した際に、前記取得部は前記撮像画像を再度取得し、
前記第1送信部は、前記取得部が再度取得した前記撮像画像を再度送信し、
前記受信部は、前記第1送信部が再度送信した前記撮像画像に基づいて前記車両管理装置が特定した前記運転手情報を受信する、請求項に記載の車載装置。
After the receiving unit receives the driver information, the traveling state determination unit determines whether or not the vehicle has entered the traveling state after being temporarily stopped.
When the traveling state determination unit determines that the vehicle is in the traveling state after being temporarily stopped, the acquisition unit acquires the captured image again.
The first transmission unit retransmits the captured image acquired by the acquisition unit again.
The receiving unit, the vehicle management device receives the driver information specified on the basis of said captured image first transmission unit transmits again vehicle apparatus according to claim 1.
前記第1送信部は、前記車両が一時停止状態であると前記走行状態判定部が判定した際に前記運転手が所定動作をしたことを条件として、前記取得部が再度取得した前記撮像画像を再度送信する、請求項に記載の車載装置。 The first transmission unit captures the captured image re-acquired by the acquisition unit, provided that the driver has performed a predetermined operation when the traveling state determination unit determines that the vehicle is in a paused state. The vehicle-mounted device according to claim 2, which is transmitted again. 車両が走行状態であるか否かを判定する走行状態判定部と、 A running state determination unit that determines whether the vehicle is in a running state,
前記車両が走行状態であると前記走行状態判定部が判定した際に前記車両に搭載された撮像装置が撮像した前記車両の運転手の撮像画像を取得する取得部と、 An acquisition unit that acquires an image captured by the driver of the vehicle, which is captured by an imaging device mounted on the vehicle when the traveling state determination unit determines that the vehicle is in a traveling state.
車両管理装置へ前記撮像画像を送信する第1送信部と、 The first transmission unit that transmits the captured image to the vehicle management device,
前記車両管理装置が前記撮像画像に基づいて特定した前記運転手に関する運転手情報を受信する受信部と、 A receiving unit that receives driver information about the driver specified by the vehicle management device based on the captured image.
前記受信部が前記運転手情報を受信した場合に、前記運転手による前記車両の運転に関する運転情報を、前記車両管理装置へ送信する第2送信部と、 When the receiving unit receives the driver information, the second transmitting unit that transmits the driving information regarding the driving of the vehicle by the driver to the vehicle management device.
を有し、 Have,
前記受信部が前記運転手情報を受信した後、前記走行状態判定部は、前記車両が一時停止状態になった後に走行状態になったか否かを判定し、 After the receiving unit receives the driver information, the traveling state determination unit determines whether or not the vehicle has entered the traveling state after being temporarily stopped.
前記走行状態判定部が、前記車両が一時停止状態になった後に走行状態になったと判定した際に、前記取得部は前記撮像画像を再度取得し、 When the traveling state determination unit determines that the vehicle is in the traveling state after being temporarily stopped, the acquisition unit acquires the captured image again.
前記第1送信部は、前記車両が一時停止状態であると前記走行状態判定部が判定した際に前記運転手が所定動作をしたことを条件として、前記取得部が再度取得した前記撮像画像を再度送信し、 The first transmission unit captures the captured image re-acquired by the acquisition unit, provided that the driver has performed a predetermined operation when the traveling state determination unit determines that the vehicle is in a paused state. Send again and
前記受信部は、前記第1送信部が再度送信した前記撮像画像に基づいて前記車両管理装置が特定した前記運転手情報を受信する、 The receiving unit receives the driver information specified by the vehicle management device based on the captured image transmitted again by the first transmitting unit.
車載装置。 In-vehicle device.
車両に搭載された車載装置と、前記車載装置と通信可能な車両管理装置とを含み、
前記車載装置は、
前記車両が走行状態であるか否かを判定する走行状態判定部と、
前記車両が走行状態であると前記走行状態判定部が判定した際に前記車両に搭載された撮像装置が撮像した前記車両の運転手の撮像画像を取得する取得部と、
前記車両管理装置へ前記撮像画像を送信する第1送信部と、
前記運転手に関する運転手情報であって、前記運転手の基準姿勢を示す運転手情報を受信する受信部と、
前記撮像画像が示す前記運転手の姿勢と、前記運転手情報が示す前記基準姿勢との間の差が、前記運転手に通知するための通知条件を満たすか否かを判定する姿勢判定部と、
前記受信部が前記運転手情報を受信した場合に、前記運転手による前記車両の運転に関する運転情報を、前記車両管理装置へ送信する第2送信部と、
を有し、
前記車両管理装置は、
前記車載装置から受信した前記撮像画像に基づいて前記運転手を特定する特定部と、
前記特定部が特定した前記運転手に関する前記運転手情報を前記車載装置へ送信する送信部と、
前記車載装置から受信した前記運転情報を、前記特定部が特定した前記運転手と関連付けて記憶する記憶部と、
を有する、車両管理システム。
Including an in-vehicle device mounted on a vehicle and a vehicle management device capable of communicating with the in-vehicle device.
The in-vehicle device is
A traveling state determination unit that determines whether or not the vehicle is in a traveling state,
An acquisition unit that acquires an image captured by the driver of the vehicle, which is captured by an imaging device mounted on the vehicle when the traveling state determination unit determines that the vehicle is in a traveling state.
A first transmission unit that transmits the captured image to the vehicle management device, and
A receiving unit that receives driver information relating to the driver and indicates the driver's reference posture.
A posture determination unit that determines whether or not the difference between the driver's posture indicated by the captured image and the reference posture indicated by the driver information satisfies the notification condition for notifying the driver. ,
When the receiving unit receives the driver information, the second transmitting unit that transmits the driving information regarding the driving of the vehicle by the driver to the vehicle management device.
Have,
The vehicle management device is
A specific unit that identifies the driver based on the captured image received from the in-vehicle device, and
A transmission unit that transmits the driver information about the driver specified by the specific unit to the in-vehicle device, and a transmission unit.
A storage unit that stores the driving information received from the in-vehicle device in association with the driver specified by the specific unit.
Has a vehicle management system.
前記車両管理装置は、前記運転手の過去の前記撮像画像に基づいて、前記基準姿勢を示す前記運転手情報を生成する生成部をさらに有する、請求項に記載の車両管理システム。 The vehicle management system according to claim 5 , wherein the vehicle management device further includes a generation unit that generates the driver information indicating the reference posture based on the past captured image of the driver. 前記車両管理装置は、前記車載装置から受信した前記運転情報に基づいて、前記運転手を評価する評価部をさらに有する、請求項5又は6に記載の車両管理システム。 The vehicle management system according to claim 5 or 6 , wherein the vehicle management device further includes an evaluation unit that evaluates the driver based on the driving information received from the vehicle-mounted device. 前記車両管理装置の前記評価部は、前記運転手情報において所定属性が設定されている前記運転手を評価し、前記運転手情報において前記所定属性が設定されていない前記運転手を評価しない、請求項に記載の車両管理システム。
The evaluation unit of the vehicle management device evaluates the driver whose predetermined attribute is set in the driver information, and does not evaluate the driver whose predetermined attribute is not set in the driver information. Item 7. The vehicle management system according to item 7.
JP2019158445A 2019-08-30 2019-08-30 In-vehicle device and vehicle management system Active JP6906574B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019158445A JP6906574B2 (en) 2019-08-30 2019-08-30 In-vehicle device and vehicle management system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019158445A JP6906574B2 (en) 2019-08-30 2019-08-30 In-vehicle device and vehicle management system

Publications (2)

Publication Number Publication Date
JP2021039399A JP2021039399A (en) 2021-03-11
JP6906574B2 true JP6906574B2 (en) 2021-07-21

Family

ID=74849161

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019158445A Active JP6906574B2 (en) 2019-08-30 2019-08-30 In-vehicle device and vehicle management system

Country Status (1)

Country Link
JP (1) JP6906574B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115512536B (en) * 2022-08-09 2024-05-21 浙江大有实业有限公司杭州科技发展分公司 Intelligent vehicle management system based on portrait of person and vehicle
CN117690282A (en) * 2022-08-31 2024-03-12 丰图科技(深圳)有限公司 Identification methods, devices, storage media and electronic equipment

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4946005B2 (en) * 2005-11-02 2012-06-06 トヨタ自動車株式会社 Driver psychological state determination device and driver psychological state determination system
JP5232629B2 (en) * 2008-12-25 2013-07-10 アイシン・エィ・ダブリュ株式会社 Vehicle operation log processing system and vehicle operation log processing program
US20100209889A1 (en) * 2009-02-18 2010-08-19 Gm Global Technology Operations, Inc. Vehicle stability enhancement control adaptation to driving skill based on multiple types of maneuvers
JP2013242763A (en) * 2012-05-22 2013-12-05 Clarion Co Ltd Dialogue apparatus, dialogue system and dialogue control method
DE102015207774A1 (en) * 2015-04-28 2016-11-03 Volkswagen Aktiengesellschaft Device for identifying a driver and vehicle

Also Published As

Publication number Publication date
JP2021039399A (en) 2021-03-11

Similar Documents

Publication Publication Date Title
US12033446B2 (en) Safety for vehicle users
CN110197590B (en) Information processing device, image distribution system, information processing method, and program
US12128906B2 (en) Technologies for driver behavior assessment
JP7188389B2 (en) Information processing device, information processing system, information processing method, and program
US20150006023A1 (en) System and method for determination of vheicle accident information
US20150307048A1 (en) Automobile alert information system, methods, and apparatus
JP6613623B2 (en) On-vehicle device, operation mode control system, and operation mode control method
US12346973B2 (en) Driver identity detection and alerts
US20190286131A1 (en) On-board device, control right management method, and computer readable medium
US20140134992A1 (en) Intra-vehicular mobile device management
JP2021047606A (en) Information notification device and car sharing system
EP2930697A1 (en) Method and device for processing vehicle condition data
JP6603506B2 (en) Parking position guidance system
JP6930274B2 (en) Digital signage control device, digital signage control method, program, recording medium
US9620029B2 (en) Method and device for identifying behaviour of a vehicle driver
JP2014075035A (en) Operation support system and in-vehicle unit to be used for the same system
JP6906574B2 (en) In-vehicle device and vehicle management system
US11682218B2 (en) Methods for vehicle data collection by image analysis
CN117445943A (en) Driver assistance systems for vehicles
WO2019088033A1 (en) Evaluation device, evaluation system, vehicle, and program
WO2018187967A1 (en) Apparatus, server and method for vehicle sharing
CN115482603A (en) Vehicle safety information management method, automobile data recorder, vehicle-mounted terminal and system
JP6940337B2 (en) On-board unit and sudden deceleration event detection method
US20230419751A1 (en) Vehicle display device, vehicle display system, and vehicle display method
US12337841B2 (en) Systems and methods for vehicle reversing detection using edge machine learning

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200123

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20200703

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20200805

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210330

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210524

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210615

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210629

R150 Certificate of patent or registration of utility model

Ref document number: 6906574

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350