JP6728654B2 - Abnormality determination system and determination method - Google Patents
Abnormality determination system and determination method Download PDFInfo
- Publication number
- JP6728654B2 JP6728654B2 JP2015233775A JP2015233775A JP6728654B2 JP 6728654 B2 JP6728654 B2 JP 6728654B2 JP 2015233775 A JP2015233775 A JP 2015233775A JP 2015233775 A JP2015233775 A JP 2015233775A JP 6728654 B2 JP6728654 B2 JP 6728654B2
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- unit
- abnormality determination
- abnormality
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Lighting Device Outwards From Vehicle And Optical Signal (AREA)
- Emergency Alarm Devices (AREA)
- Traffic Control Systems (AREA)
Description
本発明は、異常判定システム及び判定方法に関する。 The present invention relates to an abnormality determination system and a determination method .
自動車、オートバイなどの車両の走行中、飛行機などの飛行体の飛行中に、操作者による操作に連動して動作する車両、飛行体のランプの点滅・点灯・消灯、飛行体の車輪の上下運動などに異常が発生する場合がある。操作者は、車両の走行中、飛行体の飛行中にランプの点滅・点灯・消灯、車輪の上下運動などの異常の発生を目視で確認するは困難であり、ランプの点滅・点灯・消灯、車輪の上下運動などの異常の発生に気づかない場合がある。
特許文献１には、関連する技術として、前方に車両を検出すると、カメラを用いて前方の車両の後方ランプ（動作部の一例）の状態を判定し、前方の車両の後方ランプに異常が発生したと判定した場合に前方の車両の操作者または公共機関に連絡するコントロールユニットが開示されている。
While driving a vehicle such as a car or motorcycle, or while flying a flying object such as an airplane, the vehicle that operates in conjunction with the operation of the operator, blinking/turning on/off the lamp of the flying object, vertical movement of the wheel of the flying object Anomalies may occur. It is difficult for the operator to visually check the occurrence of abnormalities such as blinking/lighting/extinguishing of the lamp and vertical movement of the wheels while the vehicle is traveling or the flight of the flying object. You may not notice the occurrence of abnormalities such as the vertical movement of the wheels.
In
特許文献１に記載されている技術は、カメラが撮影した画像についての画像処理のみによって操作者による操作に連動して動作する後方ランプに異常が発生しているか否かを判定する。特許文献１に記載されている技術は、例えば、カメラが撮影した画像における前方の車両の大きさをチェックし、その大きさの変化に応じてブレーキを掛けたか否かを判定する。しかしながら、コントロールユニットを備える車両の変化が前方の車両の速度の変化と同様である場合、カメラが撮影した画像における前方の車両の大きさは変化しない。このように、カメラが撮影した画像には、操作者による操作が表れない場合がある。したがって、特許文献１に記載されている技術は、操作者による操作が示す動作内容と、その操作に連動して動作する動作部の状態とが一致しているか否かを正確に判定できない場合があり、操作者による操作に連動して動作する動作部の異常の発生を正確に判定できない場合がある。
そのため、操作者による操作に連動して動作する動作部に異常が発生したことをより正確に判定する技術が求められていた。
The technique described in
Therefore, there has been a demand for a technique for more accurately determining that an abnormality has occurred in the operation unit that operates in conjunction with the operation by the operator.
本発明は、上記の課題を解決することのできる異常判定システム及び判定方法を提供することを目的としている。 An object of the present invention is to provide an abnormality determination system and a determination method that can solve the above problems.
上記目的を達成するために、本発明は、対象装置と異常判定装置とを備える異常判定システムであって、前記対象装置は、前記対象装置に対する操作に基づいて前記操作に連動した動作を行う動作部と、前記操作に基づく操作情報及び前記対象装置を特定することができる前記対象装置のナンバー及び位置を示す情報を含む車両パケット信号を前記対象装置の外部に送信する操作情報送信部と、前記異常判定装置から前記動作部の動作の異常の通知を示す動作異常報知信号を受信する動作異常情報受信部と、を備え、前記異常判定装置は、前記車両パケット信号を受信すると、前記対象装置のナンバーを示す情報と同一の情報を示す画像が受信直前に撮影された画像に映っているか否かを判定する異常判定部であって、前記対象装置の位置を示す情報が示す対象装置と、自異常判定部を備える前記異常判定装置との相対位置を算出し、算出した相対位置が特定のしきい値の範囲内である場合に、前記対象装置のナンバーを示す情報と同一の情報を示す画像が受信直前に撮影された画像に映っていると判定し、前記対象装置のナンバーを示す情報と同一の情報を示す画像が受信直前に撮影された画像に映っていると判定した場合に、前記操作情報と、前記対象装置のナンバーを示す情報と同一の情報を示す画像の位置を基準とした相対的な位置によって示される前記動作部の撮影画像とに基づいて、前記動作部の動作が異常であるか否かを判定する異常判定部、を備える、異常判定システムである。 In order to achieve the above object, the present invention is an abnormality determination system comprising a target device and an abnormality determination device, wherein the target device performs an operation linked to the operation based on an operation on the target device. A unit, an operation information transmission unit that transmits a vehicle packet signal including operation information based on the operation and information indicating the number and position of the target device that can identify the target device to the outside of the target device, An operation abnormality information receiving unit that receives an operation abnormality notification signal indicating a notification of an abnormality in the operation of the operation unit from the abnormality determination device, and the abnormality determination device, when receiving the vehicle packet signal, of the target device An abnormality determination unit that determines whether or not an image showing the same information as the information indicating the number appears in the image captured immediately before reception, and the target device indicated by the information indicating the position of the target device and An image showing the same information as the information indicating the number of the target device when the relative position with the abnormality determining device including the abnormality determining unit is calculated and the calculated relative position is within a range of a specific threshold value. Is determined to be reflected in the image captured immediately before reception, and when it is determined that the image indicating the same information as the information indicating the number of the target device is reflected in the image captured immediately before reception, The operation of the operation unit is abnormal based on the operation information and the captured image of the operation unit indicated by the relative position based on the position of the image indicating the same information as the information indicating the target device number. The abnormality determination system includes an abnormality determination unit that determines whether or not
また、本発明は、対象装置と異常判定装置とを備える異常判定システムの判定方法であって、前記対象装置の動作部が、前記対象装置に対する操作に基づいて前記操作に連動した動作部の動作を行うこと、前記対象装置の操作情報送信部が、前記操作に基づく操作情報及び前記対象装置を特定することができる前記対象装置のナンバー及び位置を示す情報を含む車両パケット信号を前記対象装置の外部に送信すること、前記異常判定装置の異常判定部は、前記車両パケット信号を受信すると、前記対象装置のナンバーを示す情報と同一の情報を示す画像が受信直前に撮影された画像に映っているか否かを判定する異常判定部であって、前記異常判定部が、前記対象装置の位置を示す情報が示す対象装置と、前記異常判定部を備える前記異常判定装置との相対位置を算出し、算出した相対位置が特定のしきい値の範囲内である場合に、前記対象装置のナンバーを示す情報と同一の情報を示す画像が受信直前に撮影された画像に映っていると判定し、前記対象装置のナンバーを示す情報と同一の情報を示す画像が受信直前に撮影された画像に映っていると判定した場合に、前記操作情報と、前記対象装置のナンバーを示す情報と同一の情報を示す画像の位置を基準とした相対的な位置によって示される前記動作部の撮影画像とに基づいて、前記動作部の動作が異常であるか否かを判定すること、前記対象装置の動作異常情報受信部が、前記異常判定装置から前記動作部の動作の異常の通知を示す動作異常報知信号を受信すること、を含む判定方法である。
Further, the present invention is a determination method of an abnormality determination system including a target device and an abnormality determination device, wherein the operation unit of the target device operates based on an operation performed on the target device, the operation of the operation unit interlocking with the operation. The operation information transmission unit of the target device transmits a vehicle packet signal including operation information based on the operation and information indicating the number and position of the target device capable of specifying the target device to the target device. When receiving the vehicle packet signal, the abnormality determining unit of the abnormality determining device transmits an image showing the same information as the information indicating the number of the target device to the image captured immediately before reception. An abnormality determination unit that determines whether or not the abnormality determination unit calculates a relative position between the target device indicated by the information indicating the position of the target device and the abnormality determination device including the abnormality determination unit. In the case where the calculated relative position is within the range of a specific threshold value, it is determined that an image showing the same information as the information showing the number of the target device appears in the image taken immediately before reception, When it is determined that an image showing the same information as the information indicating the number of the target device appears in the image captured immediately before reception, the operation information and the same information as the information indicating the number of the target device Determining whether or not the operation of the operation unit is abnormal based on the captured image of the operation unit indicated by the relative position with respect to the position of the image indicating the operation abnormality of the target device. The information receiving unit receives an operation abnormality notification signal indicating a notification of an operation abnormality of the operation unit from the abnormality determination device .
本発明によれば、操作者による操作に連動して動作する動作部に異常が発生したことをより正確に判定することができる。 According to the present invention, it is possible to more accurately determine that an abnormality has occurred in the operation unit that operates in conjunction with the operation by the operator.
＜第一の実施形態＞
本発明の第一の実施形態による異常判定システムについて説明する。
本発明の第一の実施形態による異常判定システムは、本発明の最小構成の異常判定システムである。
本発明の第一の実施形態による異常判定システム１は、図１に示すように、少なくとも、対象装置１０と、異常判定装置４０と、を備える。
<First embodiment>
An abnormality determination system according to the first embodiment of the present invention will be described.
The abnormality determination system according to the first embodiment of the present invention is the minimum configuration abnormality determination system of the present invention.
The
対象装置１０は、動作部１０２と、操作情報送信部１０４ａと、動作異常情報受信部１０４ｂと、を備える。
動作部１０２は、対象装置１０に対する操作に基づいて操作に連動した動作を行う。
操作情報送信部１０４ａは、対象装置１０に対する操作に基づく操作情報を異常判定装置４０に送信する。
動作異常情報受信部１０４ｂは、異常判定装置４０から動作異常報知信号を受信する。動作異常報知信号は、動作部１０２の動作の異常の通知を示す信号である。
The
The
The operation
The operation abnormality
異常判定装置４０は、異常判定部４０４を備える。
異常判定部４０４は、操作情報と動作部１０２の撮影画像とに基づいて動作部１０２の動作が異常であるか否かを判定する。
The
The
なお、対象装置１０は、例えば、自動車、オートバイなどの車両である。また、対象装置１０は、例えば、飛行機などの飛行体である。また、対象装置１０は、ロボット、クレーンなどである。対象装置１０は、操作者による操作と連動する動作部１０２を備え、操作者が動作部１０２を目視で確認できないものであれば、どのようなものであってもよい。
また、異常判定装置４０は、対象装置１０が自動車、オートバイなどの車両である場合には、車両（周辺車両）、道路の脇に設置された路側機などである。また、異常判定装置４０は、対象装置１０が飛行機などの飛行体である場合には、飛行体、滑走路の脇に設置された路側機、管制塔に設置された装置などである。
また、動作部１０２は、対象装置１０が自動車、オートバイなどの車両である場合には、ブレーキランプ（ランプの１つ）、テールランプ（ランプの１つ）、ウインカー（ランプの１つ）などである。また、動作部１０２は、対象装置１０が飛行機などの飛行体である場合には、飛行体のランプ（ランプの１つ）、尾翼、車輪などである。
なお、ブレーキランプ及びテールランプの動作は、点灯、消灯を示す動作である。ウインカーの動作は、点滅、消灯を示す動作である。尾翼の動作は、水平方向および垂直方向への向きの変更を示す動作である。飛行体のランプは、点滅、点灯、消灯を示す動作である。車輪の動作は、離着陸のときに機体内部と機体外部との間で行われる上下運動を示す動作である。
The
Further, when the
When the
The operation of the brake lamp and the tail lamp is an operation indicating turning on and off. The operation of the turn signal is an operation indicating blinking and turning off. The motion of the tail fin is a motion indicating a change in the orientation in the horizontal direction and the vertical direction. The lamp of the flying object is an operation indicating blinking, lighting, and turning off. The operation of the wheels is an operation that indicates a vertical movement performed between the inside and outside of the airframe during takeoff and landing.
図２に示す本発明の第一の実施形態による異常判定システム１の処理フローについて説明する。
本発明の第一の実施形態による異常判定システム１において、動作部１０２は、対象装置１０に対する操作に基づいて操作に連動した動作を行う（ステップＳ１）。
操作情報送信部１０４ａは、対象装置１０に対する操作に基づく操作情報を対象装置１０の外部に送信する（ステップＳ２）。
異常判定部４０４は、操作情報と動作部１０２の撮影画像とに基づいて動作部１０２の動作が異常であるか否かを判定する（ステップＳ３）。
A processing flow of the
In the
The operation
The
異常判定部４０４は、動作部１０２の動作が異常であると判定した場合（ステップＳ３においてＹＥＳ）、動作異常報知信号を対象装置１０に送信する。
動作異常情報受信部１０４ｂは、異常判定装置４０から動作異常報知信号を受信する（ステップＳ４）。
When determining that the operation of the
The operation abnormality
また、異常判定部４０４は、動作部１０２の動作が異常ではないと判定した場合（ステップＳ３においてＮＯ）、異常判定装置４０の処理を終了させる。
If the
以上、本発明の第一の実施形態による異常判定システム１について説明した。本発明の第一の実施形態による異常判定システム１は、対象装置１０と異常判定装置４０とを備える。対象装置１０は、動作部１０２と、操作情報送信部１０４ａと、動作異常情報受信部１０４ｂと、を備える。動作部１０２は、対象装置１０に対する操作に基づいてその操作に連動した動作を行う。操作情報送信部１０４ａは、その操作に基づく操作情報を対象装置１０の外部に送信する。動作異常情報受信部１０４ｂは、異常判定装置４０から動作部１０２の動作の異常の通知を示す動作異常報知信号を受信する。異常判定装置４０は、異常判定部４０４を備える。異常判定部４０４は、その操作情報と動作部１０２の撮影画像とに基づいて動作部１０２の動作が異常であるか否かを判定する。
このようにすれば、異常判定システム１は、操作者による操作に連動して動作する動作部に異常が発生したことをより正確に判定することができる。
The
By doing so, the
＜第二の実施形態＞
本発明の第二の実施形態による異常判定システムについて説明する。
本発明の第二の実施形態による異常判定システム１は、図３に示すように、車両１０と、周辺車両２０ａ、２０ｂ、２０ｃ、２０ｄと、路側機３０ａ、３０ｂと、を備える。周辺車両２０ａ、２０ｂ、２０ｃ、２０ｄのそれぞれは、車両１０の周辺の道路を走行中の車両である。路側機３０ａ、３０ｂのそれぞれは、車両１０の周辺の道路の路側帯に設置された装置である。
以下では、周辺車両２０ａ、２０ｂ、２０ｃ、２０ｄを総称して周辺車両２０という。また、路側機３０ａ、３０ｂを総称して路側機３０という。
なお、本発明の第二の実施形態は、本発明の第一の実施形態における対象装置１０が自動車、オートバイなどの車両である場合の例である。また、本発明の第二の実施形態は、本発明の第一の実施形態における異常判定装置４０が複数存在する場合の例である。本発明の第二の実施形態による周辺車両２０、路側機３０のそれぞれは、本発明の第一の実施形態による異常判定システム１における異常判定装置４０である。周辺車両２０と路側機３０のそれぞれは、車両１０から車両パケット信号を受信できる位置に存在している。
<Second embodiment>
An abnormality determination system according to the second embodiment of the present invention will be described.
As shown in FIG. 3, the
Below, the
The second embodiment of the present invention is an example in which the
本発明の第二の実施形態による異常判定システム１の動作の概要について説明する。
異常判定システム１において、車両１０は、操作者による車両１０に対する操作を検出すると、車両パケット信号をブロードキャストで車両１０の外部に送信する。車両パケット信号は、車両１０を特定することができる情報を含んでいる。車両１０を特定することができる情報は、例えば、車両１０のナンバーの情報、車両１０の通信アドレスなどである。
An outline of the operation of the
In the
周辺車両２０と路側機３０のそれぞれは、自身が備えるカメラを用いて外部の画像を常時撮影している。
周辺車両２０と路側機３０のそれぞれは、車両１０から車両パケット信号を受信する。
周辺車両２０と路側機３０のそれぞれは、車両パケット信号を受信すると、直前にカメラが撮影した画像において車両１０が映っている（画像において車両１０を抽出できる）か否かを判定する。ここで、直前にカメラが撮影した画像は、車両１０に対して実際に操作が行われたタイミングにカメラが撮影した画像である。
Each of the
Each of the
Upon receiving the vehicle packet signal, each of the
直前にカメラが撮影した画像に車両１０が映っていると判定した周辺車両２０と路側機３０のそれぞれは、直前にカメラが撮影した画像を解析する。直前にカメラが撮影した画像に車両１０が映っていると判定した周辺車両２０と路側機３０のそれぞれは、操作情報が示す動作部への動作内容と、直前にカメラが撮影した画像の解析結果が示す車両１０の動作部の状態とが一致するか否かを判定する。
具体的には、例えば、操作者がブレーキペダルを踏んだ場合、直前にカメラが撮影した画像に車両１０が映っていると判定した周辺車両２０と路側機３０のそれぞれは、操作情報であるブレーキペダルを踏む情報が示すブレーキランプが赤色に点灯する動作内容と、直前にカメラが撮影した画像の解析結果が示す車両１０のブレーキランプの状態とを比較する。
直前にカメラが撮影した画像に車両１０が映っていると判定した周辺車両２０と路側機３０のそれぞれは、直前にカメラが撮影した画像の解析結果が車両１０のテールランプの点灯を示す場合に、操作情報が示す動作部への動作内容と、直前にカメラが撮影した画像の解析結果が示す車両１０の動作部の状態とが一致すると判定する。この場合、直前に撮影した画像に車両１０が映っていると判定した周辺車両２０と路側機３０のそれぞれは、動作部が正常であると判定する。
また、直前にカメラが撮影した画像に車両１０が映っていると判定した周辺車両２０と路側機３０のそれぞれは、直前にカメラが撮影した画像の解析結果が車両１０のテールランプの点灯を示さない場合に、操作情報が示す動作部への動作内容と、直前にカメラが撮影した画像の解析結果が示す車両１０の動作部の状態とが一致しないと判定する。この場合、直前にカメラが撮影した画像に車両１０が映っていると判定した周辺車両２０と路側機３０のそれぞれは、動作部が異常であると判定する。動作部が異常であると判定した周辺車両２０と路側機３０のそれぞれは、異常であると判定した動作部を備える車両１０に動作異常報知信号を送信する。動作異常報知信号は、動作部の異常を報知する信号である。
Each of the
Specifically, for example, when the operator depresses the brake pedal, each of the
Each of the surrounding
In addition, for each of the
車両１０は、動作異常報知信号を送信した周辺車両２０と路側機３０の何れかから動作異常報知信号を受信する。車両１０は、動作異常報知信号を受信すると、動作部に異常が発生したことを操作者などに報知する。
The
上述のように、本発明の第二の実施形態による異常判定システム１において、車両１０は、車両１０に対する操作に基づいて操作に連動した動作を行う。車両１０は、車両１０に対する操作に基づく操作情報を周辺車両２０と路側機３０に送信する。周辺車両２０と路側機３０のそれぞれは、操作情報と車両１０が備える動作部の撮影画像とに基づいて動作部の動作が異常であるか否かを判定する。動作部の動作が異常であると判定した周辺車両２０と路側機３０のそれぞれは、動作部の動作の異常の通知を示す動作異常報知信号を車両１０に送信する。車両１０は、動作部の動作が異常であると判定した周辺車両２０と路側機３０のそれぞれから動作異常報知信号を受信する。
As described above, in the
本発明の第二の実施形態による車両１０の構成について説明する。
車両１０は、図４に示すように、操作部１０１と、動作部１０２と、操作情報取得部１０３と、無線通信部１０４と、報知部１０５と、記憶部１０６と、を備える。
The configuration of the
As shown in FIG. 4, the
操作部１０１は、操作者による車両１０（対象装置）に対する操作に応じて、動作部１０２を動作させる。
The
動作部１０２は、操作者による車両１０に対する操作に基づいて操作に連動した動作を行う。
The
操作情報取得部１０３は、動作部１０２を動作させる内容を示す操作情報を操作部１０１から取得する。
The operation
無線通信部１０４は、操作情報送信部１０４ａと、動作異常情報受信部１０４ｂと、を備える。
操作情報送信部１０４ａは、車両パケット信号をブロードキャストで車両１０の外部に送信する。車両パケット信号は、車両１０に対する操作者の操作が示す操作情報を含んでいる。また、車両パケット信号は、車両１０を特定することができる情報を含んでいる。車両１０を特定する情報は、例えば、車両１０のナンバーの情報、車両１０の通信アドレスなどである。
動作異常情報受信部１０４ｂは、周辺車両２０及び路側機３０のそれぞれ（異常判定装置）から動作異常報知信号を受信する。動作異常報知信号は、動作部１０２の異常を報知する信号である。
The
The operation
The operation abnormality
報知部１０５は、動作異常情報受信部１０４ｂを介して動作異常報知信号を受信した場合、動作部１０２に異常が発生したことを操作者などに報知する。例えば、報知部１０５は、表示部を備えている場合、動作部１０２に異常が発生したことを示す表示を表示部に表示する。また、報知部１０５は、スピーカを備えている場合、動作部１０２に異常が発生したことを示す音声をスピーカから出力する。また、報知部１０５は、振動部を備えている場合、動作部１０２に異常が発生したことを示す振動を振動部から出力する。
When the
記憶部１０６は、車両１０が行う処理に必要な種々の情報を記憶する。例えば、記憶部１０６は、報知部１０５が動作部１０２に異常が発生したことを操作者などに報知する報知内容を示す情報を記憶する。例えば、動作部１０２に異常が発生したことを操作者などに報知する報知内容を示す情報は、報知部１０５が表示部を備えている場合、報知部１０５が図５に示す「動作部に異常が発生しました」などを表示するための表示情報である。また、動作部１０２に異常が発生したことを操作者などに報知する報知内容を示す情報は、報知部１０５がスピーカを備えている場合、スピーカが「動作部に異常が発生しました」などを出力するための音声情報である。また、動作部１０２に異常が発生したことを操作者などに報知する報知内容を示す情報は、報知部１０５が振動部を備えている場合、振動部が頻繁に振動を繰り返すなどの振動を示す振動情報である。
The
本発明の第二の実施形態による周辺車両２０ａの構成について説明する。
周辺車両２０ａは、図６に示すように、無線通信部２０１ａと、カメラ２０２ａと、記憶部２０３ａと、異常判定部２０４ａと、を備える。
A configuration of the
As shown in FIG. 6, the
無線通信部２０１ａは、車両１０と通信を行う。
カメラ２０２ａは、周辺車両２０ａの外部をカメラ２０２ａの画角（視野角）の範囲内で撮影する。
The
The
記憶部２０３ａは、周辺車両２０ａが行う処理に必要な種々の情報を記憶する。例えば、記憶部２０３ａは、車両１０のナンバープレートＰＴの位置を基準とした、動作部１０２の相対的な位置を示す情報を記憶している。例えば、車両１０のナンバープレートＰＴの位置を基準とした、動作部１０２の相対的な位置は、図７に示すように、ナンバープレートＰＴの位置を中心として、上方向に１メートル、下方向に１メートル、左方向に１．５メートル、右方向に１．５メールの範囲内における左右対称な２つの位置Ｌ１と位置Ｌ２である。
The
異常判定部２０４ａは、直前にカメラ２０２ａが撮影した画像において車両１０が映っているか否かを判定する。例えば、異常判定部２０４ａは、文字パターンを認識する技術を用いて、車両パケット信号に含まれるナンバーと同一の情報を示すナンバープレートＰＴが直前の１０秒間にカメラ２０２ａが撮影した画像に含まれていると判定した場合に、直前にカメラ２０２ａが撮影した画像に車両１０が映っていると判定する。文字パターンを認識する技術は、例えば、テンプレートマッチングなどの技術である。また、異常判定部２０４ａは、車両パケット信号に含まれるナンバーと同一の情報を示すナンバープレートＰＴが直前の１０秒間にカメラ２０２ａが撮影した画像に含まれていないと判定した場合に、直前にカメラ２０２ａが撮影した画像に車両１０が映っていないと判定する。
The
異常判定部２０４ａは、直前にカメラ２０２ａが撮影した画像に車両１０が映っていると判定した場合、直前にカメラ２０２ａが撮影した画像を解析する。異常判定部２０４ａは、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前にカメラ２０２ａが撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致するか否かを判定する。
具体的には、例えば、操作者がブレーキペダルを踏んだ場合、異常判定部２０４ａは、直前の１０秒間にカメラ２０２ａが撮影した画像に車両１０が映っていると判定した場合、操作情報であるブレーキペダルを踏む情報が示すブレーキランプが赤色に点灯する動作内容と、直前の１０秒間にカメラ２０２ａが撮影した画像の解析結果が示す車両１０のブレーキランプの状態とを比較する。詳細な具体例として、動作部１０２がブレーキランプである場合について異常判定部２０４ａが行う画像の解析について説明する。異常判定部２０４ａは、車両１０のナンバープレートＰＴの位置を基準としたブレーキランプの相対的な位置を示す情報を記憶部２０３ａから読み出す。異常判定部２０４ａは、直前の１０秒間にカメラ２０２ａが撮影した画像のうち車両１０が映っていると判定した画像と、記憶部２０３ａから読み出した車両１０のナンバープレートＰＴの位置を基準としたブレーキランプの相対的な位置を示す情報とを比較する。異常判定部２０４ａは、車両１０が映っていると判定した画像において車両１０のナンバープレートＰＴの位置を特定する。異常判定部２０４ａは、車両１０が映っていると判定した画像のそれぞれにおける車両１０のナンバープレートＰＴの位置を基準として、それぞれの前後の画像どうしを比較し、画像の色成分であるＲＧＢ（赤色（Ｒｅｄ）、緑色（Ｇｒｅｅｎ）、青色（Ｂｌｕｅ））の差分を抽出する。異常判定部２０４ａは、抽出したＲＧＢの差分の主な色成分が赤色であるか否かを判定する。
異常判定部２０４ａは、抽出したＲＧＢの差分の主な色成分が赤色であると判定した場合、車両１０が映っていると判定した画像のそれぞれにおけるナンバープレートＰＴの位置を基準としたＲＧＢの差分の示す位置と、記憶部２０３ａから読み出した車両１０のナンバープレートＰＴの位置を基準としたブレーキランプの相対的な位置とが一致するか否かを判定する。
異常判定部２０４ａは、車両１０が映っていると判定した画像のそれぞれにおけるナンバープレートＰＴの位置を基準としたＲＧＢの差分の示す位置と、記憶部２０３ａから読み出した車両１０のナンバープレートＰＴの位置を基準としたブレーキランプの相対的な位置とが一致すると判定した場合、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前にカメラ２０２ａが撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致すると判定する。この場合、異常判定部２０４ａは、ブレーキランプが正常に動作していると判定する。
また、異常判定部２０４ａは、車両１０が映っていると判定した画像のそれぞれにおけるナンバープレートＰＴの位置を基準としたＲＧＢの差分の示す位置と、記憶部２０３ａから読み出した車両１０のナンバープレートＰＴの位置を基準としたブレーキランプの相対的な位置とが一致しないと判定した場合、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前にカメラ２０２ａが撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致しないと判定する。この場合、異常判定部２０４ａは、ブレーキランプに異常が発生したと判定する。
また、異常判定部２０４ａは、抽出したＲＧＢの差分の主な色成分が赤色ではないと判定した場合、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前にカメラ２０２ａが撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致しないと判定する。この場合、異常判定部２０４ａは、ブレーキランプに異常が発生したと判定する。
なお、異常判定部２０４ａは、画像解析から得た動作部の点灯、点滅の時間と、操作情報が示す動作の時間とが一致するか否かを判定することにより、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前にカメラ２０２ａが撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致するか否かを判定してもよい。こうすることで、異常判定部２０４ａは、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前にカメラ２０２ａが撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致するか否かをより正確に判定することができる。
If the
Specifically, for example, when the operator depresses the brake pedal, the
When the
The
Further, the
Further, when the
The
周辺車両２０ｂは、無線通信部２０１ｂと、カメラ２０２ｂと、記憶部２０３ｂと、異常判定部２０４ｂと、を備える。
周辺車両２０ｃは、無線通信部２０１ｃと、カメラ２０２ｃと、記憶部２０３ｃと、異常判定部２０４ｃと、を備える。
周辺車両２０ｄは、無線通信部２０１ｄと、カメラ２０２ｄと、記憶部２０３ｄと、異常判定部２０４ｄと、を備える。
The
The
The
なお、無線通信部２０１ｂ、２０１ｃ、２０１ｄのそれぞれは、無線通信部２０１ａと同様の機能を有し、同様に動作する。
また、カメラ２０２ｂ、２０２ｃ、２０２ｄのそれぞれは、カメラ２０２ａと同様の機能を有し、同様に動作する。
また、異常判定部２０４ｂ、２０４ｃ、２０４ｄのそれぞれは、異常判定部２０４ａと同様の機能を有し、同様に動作する。
Each of the wireless communication units 201b, 201c, and 201d has the same function as the
Further, each of the cameras 202b, 202c, 202d has the same function as the
Further, each of the abnormality determination units 204b, 204c, and 204d has the same function as the
本発明の第二の実施形態による路側機３０ａの構成について説明する。
路側機３０ａは、図８に示すように、無線通信部３０１ａと、カメラ３０２ａと、記憶部３０３ａと、異常判定部３０４ａと、を備える。
The configuration of the
As shown in FIG. 8, the
無線通信部３０１ａは、車両１０と通信を行う。
カメラ３０２ａは、路側機３０ａの外部をカメラ３０２ａの画角の範囲内で撮影する。
記憶部３０３ａは、路側機３０ａが行う処理に必要な種々の情報を記憶する。例えば、記憶部３０３ａは、車両１０のナンバープレートＰＴの位置を基準とした、動作部１０２の相対的な位置を示す情報を記憶している。
The
The
The
異常判定部３０４ａは、直前にカメラ３０２ａが撮影した画像において車両１０が映っているか否かを判定する。例えば、異常判定部３０４ａは、テンプレートマッチングなどの文字パターンを認識する技術を用いて、車両パケット信号に含まれるナンバーと同一の情報を示すナンバープレートＰＴが直前の１０秒間にカメラ３０２ａが撮影した画像に含まれていると判定した場合に、直前にカメラ３０２ａが撮影した画像に車両１０が映っていると判定する。また、異常判定部３０４ａは、車両パケット信号に含まれるナンバーと同一の情報を示すナンバープレートＰＴが直前の１０秒間にカメラ３０２ａが撮影した画像に含まれていないと判定した場合に、直前にカメラ３０２ａが撮影した画像に車両１０が映っていないと判定する。
The
異常判定部３０４ａは、直前にカメラ３０２ａが撮影した画像に車両１０が映っていると判定した場合、直前にカメラ３０２ａが撮影した画像を解析する。異常判定部３０４ａは、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前にカメラ３０２ａが撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致するか否かを判定する。
具体的には、例えば、操作者がブレーキペダルを踏んだ場合、異常判定部３０４ａは、直前の１０秒間にカメラ３０２ａが撮影した画像に車両１０が映っていると判定した場合、操作情報であるブレーキペダルを踏む情報が示すブレーキランプが赤色に点灯する動作内容と、直前の１０秒間にカメラ３０２ａが撮影した画像の解析結果が示す車両１０のブレーキランプの状態とを比較する。詳細な具体例として、動作部１０２がブレーキランプである場合について異常判定部３０４ａが行う画像の解析について説明する。異常判定部３０４ａは、車両１０のナンバープレートＰＴの位置を基準としたブレーキランプの相対的な位置を示す情報を記憶部３０３ａから読み出す。異常判定部３０４ａは、直前の１０秒間にカメラ３０２ａが撮影した画像のうち車両１０が映っていると判定した画像と、記憶部３０３ａから読み出した車両１０のナンバープレートＰＴの位置を基準としたブレーキランプの相対的な位置を示す情報とを比較する。異常判定部３０４ａは、車両１０が映っていると判定した画像において車両１０のナンバープレートＰＴの位置を示す位置を特定する。異常判定部３０４ａは、車両１０が映っていると判定した画像のそれぞれにおける車両１０のナンバープレートＰＴの位置を基準として、それぞれの前後の画像どうしを比較し、ＲＧＢの差分を抽出する。異常判定部３０４ａは、抽出したＲＧＢの差分の主な色成分が赤色であるか否かを判定する。異常判定部３０４ａは、抽出したＲＧＢの差分の主な色成分が赤色であると判定した場合、車両１０が映っていると判定した画像のそれぞれにおけるナンバープレートＰＴの位置を基準としたＲＧＢの差分の示す位置と、記憶部３０３ａから読み出した車両１０のナンバープレートＰＴの位置を基準としたブレーキランプの相対的な位置とが一致するか否かを判定する。
異常判定部３０４ａは、車両１０が映っていると判定した画像のそれぞれにおけるナンバープレートＰＴの位置を基準としたＲＧＢの差分の示す位置と、記憶部３０３ａから読み出した車両１０のナンバープレートＰＴの位置を基準としたブレーキランプの相対的な位置とが一致すると判定した場合、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前にカメラ３０２ａが撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致すると判定する。この場合、異常判定部３０４ａは、ブレーキランプが正常に動作していると判定する。
また、異常判定部３０４ａは、車両１０が映っていると判定した画像のそれぞれにおけるナンバープレートＰＴの位置を基準としたＲＧＢの差分の示す位置と、記憶部３０３ａから読み出した車両１０のナンバープレートＰＴの位置を基準としたブレーキランプの相対的な位置とが一致しないと判定した場合、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前にカメラ３０２ａが撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致しないと判定する。この場合、異常判定部３０４ａは、ブレーキランプに異常が発生したと判定する。
また、異常判定部３０４ａは、抽出したＲＧＢの差分の主な色成分が赤色ではないと判定した場合、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前にカメラ３０２ａが撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致しないと判定する。この場合、異常判定部３０４ａは、ブレーキランプに異常が発生したと判定する。
なお、異常判定部３０４ａは、画像解析から得た動作部の点灯、点滅の時間と、操作情報が示す動作の時間とが一致するか否かを判定することにより、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前にカメラ３０２ａが撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致するか否かを判定してもよい。こうすることで、異常判定部３０４ａは、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前にカメラ３０２ａが撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致するか否かをより正確に判定することができる。
When the
Specifically, for example, when the operator depresses the brake pedal, the
The
Further, the
Further, when the
The
路側機３０ｂは、無線通信部３０１ｂと、カメラ３０２ｂと、記憶部３０３ｂと、異常判定部３０４ｂと、を備える。
なお、無線通信部３０１ｂは、無線通信部３０１ａと同様の機能を有し、動作する。
また、カメラ３０２ｂは、カメラ３０２ａと同様の機能を有し、動作する。
また、異常判定部３０４ｂは、異常判定部３０４ａと同様の機能を有し、動作する。
The
The wireless communication unit 301b has the same function as the
The camera 302b has the same function as the
The abnormality determination unit 304b has the same function as the
図９に示す本発明の第二の実施形態による異常判定システム１の処理フローについて説明する。ここでは、動作部１０２がブレーキランプであるものとして異常判定システム１の処理フローについて説明する。
A processing flow of the
以下では、無線通信部２０１ａ、２０１ｂ、２０１ｃ、２０１ｄを総称して無線通信部２０１という。カメラ２０２ａ、２０２ｂ、２０２ｃ、２０２ｄを総称してカメラ２０２という。記憶部２０３ａ、２０３ｂ、２０３ｃ、２０３ｄを総称して記憶部２０３という。異常判定部２０４ａ、２０４ｂ、２０４ｃ、２０４ｄを総称して異常判定部２０４という。
また、無線通信部３０１ａ、３０１ｂを総称して無線通信部３０１という。カメラ３０２ａ、３０２ｂを総称してカメラ３０２という。記憶部３０３ａ、３０３ｂを総称して記憶部３０３という。異常判定部３０４ａ、３０４ｂを総称して異常判定部３０４という。
本発明の第二の実施形態による異常判定部２０４、３０４は、本発明の第一の実施形態による異常判定部４０４に対応している。
Hereinafter, the
The
The abnormality determination units 204 and 304 according to the second embodiment of the present invention correspond to the
車両１０が道路を走行する。車両１０の操作者は、道路を走行中に車両１０に対する操作を行う。例えば、車両１０の操作者は、道路を走行中に車両１０のブレーキペダルを踏む。
The
異常判定システム１において、操作部１０１は、操作者による車両１０に対する操作に応じて、動作部１０２を動作させる（ステップＳ１１）。
具体的には、操作部１０１は、車両１０のブレーキペダルを踏み込む操作による踏み込み量が所定の踏み込み量を超えた場合に動作部１０２を点灯させる制御を行う。
In the
Specifically, the
動作部１０２は、操作者による車両１０に対する操作に基づいて操作に連動した動作を行う（ステップＳ１２）。
具体的には、動作部１０２は、車両１０のブレーキペダルを踏み込む操作に応じた操作部１０１による制御に基づいて、車両１０のブレーキペダルを踏み込む操作に連動したランプを点灯させる動作を行う。
The
Specifically, the
操作情報取得部１０３は、動作部１０２を動作させる内容を示す操作情報を操作部１０１から取得する（ステップＳ１３）。
具体的には、操作情報取得部１０３は、動作部１０２を点灯させる内容を示す操作情報を操作部１０１から取得する。
The operation
Specifically, the operation
操作情報取得部１０３は、操作情報送信部１０４ａを介して車両パケット信号をブロードキャストで車両１０の外部に送信する（ステップＳ１４）。車両パケット信号は、車両１０に対する操作者の操作が示す操作情報を含んでいる。車両１０に対する操作者の操作が示す操作情報は、車両１０のブレーキペダルを踏み込む操作者の操作が示す操作情報である。また、車両パケット信号は、車両１０のナンバーの情報、車両１０の通信アドレスを含んでいる。
The operation
カメラ２０２のそれぞれは、自身を備える周辺車両２０の外部をカメラ２０２のそれぞれの画角の範囲内で常時撮影している。
また、カメラ３０２のそれぞれは、自身を備える路側機３０の外部をカメラ３０２のそれぞれの画角の範囲内で常時撮影している。
Each of the cameras 202 constantly photographs the outside of the
In addition, each of the cameras 302 constantly photographs the outside of the
異常判定部２０４のそれぞれは、操作情報取得部１０３から対応する無線通信部２０１を介して車両パケット信号を受信する（ステップＳ１５）。異常判定部２０４のそれぞれは、車両パケット信号を受信すると、直前にカメラ２０２が撮影した画像において車両１０が映っているか否かを判定する（ステップＳ１６）。
具体的には、異常判定部２０４ａは、操作情報取得部１０３から無線通信部２０１ａを介して車両パケット信号を受信する。異常判定部２０４ａは、車両パケット信号を受信すると、直前にカメラ２０２ａが撮影した画像において車両１０が映っているか否かを判定する。
例えば、異常判定部２０４ａは、テンプレートマッチングなどの文字パターンを認識する技術を用いて、車両パケット信号に含まれるナンバーと同一の情報を示すナンバープレートＰＴが直前の１０秒間にカメラ２０２ａが撮影した画像に含まれていると判定した場合に、直前にカメラ２０２ａが撮影した画像に車両１０が映っていると判定する。また、異常判定部２０４ａは、車両パケット信号に含まれるナンバーと同一の情報を示すナンバープレートＰＴが直前の１０秒間にカメラ２０２ａが撮影した画像に含まれていないと判定した場合に、直前にカメラ２０２ａが撮影した画像に車両１０が映っていないと判定する。
Each of the abnormality determination units 204 receives the vehicle packet signal from the operation
Specifically, the
For example, the
同様に、異常判定部２０４ｂは、操作情報取得部１０３から無線通信部２０１ｂを介して車両パケット信号を受信する。異常判定部２０４ｂは、車両パケット信号を受信すると、直前にカメラ２０２ｂが撮影した画像において車両１０が映っているか否かを判定する。
Similarly, the abnormality determination unit 204b receives the vehicle packet signal from the operation
同様に、異常判定部２０４ｃは、操作情報取得部１０３から無線通信部２０１ｃを介して車両パケット信号を受信する。異常判定部２０４ｃは、車両パケット信号を受信すると、直前にカメラ２０２ｃが撮影した画像において車両１０が映っているか否かを判定する。
Similarly, the abnormality determination unit 204c receives the vehicle packet signal from the operation
同様に、異常判定部２０４ｄは、操作情報取得部１０３から無線通信部２０１ｄを介して車両パケット信号を受信する。異常判定部２０４ｄは、車両パケット信号を受信すると、直前にカメラ２０２ｄが撮影した画像において車両１０が映っているか否かを判定する。
Similarly, the abnormality determination unit 204d receives the vehicle packet signal from the operation
異常判定部２０４のそれぞれは、直前に対応するカメラ２０２が撮影した画像に車両１０が映っていないと判定した場合（ステップＳ１６においてＮＯ）、自身の異常判定部２０４を備える周辺車両２０の処理を終了させる。
When each of the abnormality determination units 204 determines that the
また、異常判定部２０４のそれぞれは、直前に対応するカメラ２０２が撮影した画像に車両１０が映っていると判定した場合（ステップＳ１６においてＹＥＳ）、直前に対応するカメラ２０２が撮影した画像を解析する。異常判定部２０４のそれぞれは、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前に対応するカメラ２０２が撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致するか否かを判定する（ステップＳ１７）。
具体的には、異常判定部２０４ａは、直前にカメラ２０２ａが撮影した画像に車両１０が映っていると判定した場合、直前にカメラ２０２ａが撮影した画像を解析する。異常判定部２０４ａは、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前にカメラ２０２ａが撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致するか否かを判定する。
例えば、操作者がブレーキペダルを踏んだ場合、異常判定部２０４ａは、車両１０のナンバープレートＰＴの位置を基準としたブレーキランプの相対的な位置を示す情報を記憶部２０３ａから読み出す。異常判定部２０４ａは、直前の１０秒間にカメラ２０２ａが撮影した画像のうち車両１０が映っていると判定した画像と、記憶部２０３ａから読み出した車両１０のナンバープレートＰＴの位置を基準としたブレーキランプの相対的な位置を示す情報とを比較する。異常判定部２０４ａは、車両１０が映っていると判定した画像において車両１０のナンバープレートＰＴの位置を特定する。異常判定部２０４ａは、車両１０が映っていると判定した画像のそれぞれにおける車両１０のナンバープレートＰＴの位置を基準として、それぞれの前後の画像どうしを比較し、ＲＧＢの差分を抽出する。異常判定部２０４ａは、抽出したＲＧＢの差分の主な色成分が赤色であるか否かを判定する。
異常判定部２０４ａは、抽出したＲＧＢの差分の主な色成分が赤色であると判定した場合、車両１０が映っていると判定した画像のそれぞれにおけるナンバープレートＰＴの位置を基準としたＲＧＢの差分の示す位置と、記憶部２０３ａから読み出した車両１０のナンバープレートＰＴの位置を基準としたブレーキランプの相対的な位置とが一致するか否かを判定する。
When each of the abnormality determination units 204 determines that the
Specifically, when the
For example, when the operator depresses the brake pedal, the
When the
異常判定部２０４ａは、車両１０が映っていると判定した画像のそれぞれにおけるナンバープレートＰＴの位置を基準としたＲＧＢの差分の示す位置と、記憶部２０３ａから読み出した車両１０のナンバープレートＰＴの位置を基準としたブレーキランプの相対的な位置とが一致すると判定した場合、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前にカメラ２０２ａが撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致すると判定する。この場合、異常判定部２０４ａは、ブレーキランプが正常に動作していると判定する。
The
また、異常判定部２０４ａは、車両１０が映っていると判定した画像のそれぞれにおけるナンバープレートＰＴの位置を基準としたＲＧＢの差分の示す位置と、記憶部２０３ａから読み出した車両１０のナンバープレートＰＴの位置を基準としたブレーキランプの相対的な位置とが一致しないと判定した場合、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前にカメラ２０２ａが撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致しないと判定する。この場合、異常判定部２０４ａは、ブレーキランプに異常が発生したと判定する。
Further, the
また、異常判定部２０４ａは、抽出したＲＧＢの差分の主な色成分が赤色ではないと判定した場合、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前にカメラ２０２ａが撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致しないと判定する。この場合、異常判定部２０４ａは、ブレーキランプに異常が発生したと判定する。
なお、異常判定部２０４ａは、画像解析から得た動作部の点灯、点滅の時間と、操作情報が示す動作の時間とが一致するか否かを判定することにより、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前にカメラ２０２ａが撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致するか否かを判定してもよい。こうすることで、異常判定部２０４ａは、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前にカメラ２０２ａが撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致するか否かをより正確に判定することができる。
Further, when the
The
同様に、異常判定部２０４ｂは、直前にカメラ２０２ｂが撮影した画像に車両１０が映っていると判定した場合、直前にカメラ２０２ｂが撮影した画像を解析する。異常判定部２０４ｂは、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前にカメラ２０２ｂが撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致するか否かを判定する。
Similarly, when the abnormality determination unit 204b determines that the
同様に、異常判定部２０４ｃは、直前にカメラ２０２ｃが撮影した画像に車両１０が映っていると判定した場合、直前にカメラ２０２ｃが撮影した画像を解析する。異常判定部２０４ｃは、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前にカメラ２０２ｃが撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致するか否かを判定する。
Similarly, when the abnormality determination unit 204c determines that the
同様に、異常判定部２０４ｄは、直前にカメラ２０２ｄが撮影した画像に車両１０が映っていると判定した場合、直前にカメラ２０２ｄが撮影した画像を解析する。異常判定部２０４ｄは、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前にカメラ２０２ｄが撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致するか否かを判定する。
Similarly, when the abnormality determination unit 204d determines that the
異常判定部２０４のそれぞれは、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前に対応するカメラ２０２が撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致すると判定した場合（ステップＳ１７においてＹＥＳ）、動作部１０２が正常に動作していると判定する。車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前に対応するカメラ２０２が撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致すると判定した異常判定部２０４のそれぞれは、自身の異常判定部２０４を備える周辺車両２０の処理を終了させる。
Each of the abnormality determination units 204 has a state of the
異常判定部２０４のそれぞれは、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前に対応するカメラ２０２が撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致しないと判定した場合（ステップＳ１７においてＮＯ）、動作部１０２に異常が発生したと判定する。
Each of the abnormality determination units 204 has a state of the
異常判定部２０４のそれぞれのうち動作部１０２に異常が発生したと判定した異常判定部２０４は、車両１０のアドレスを指定して対応する無線通信部２０１を介して動作異常報知信号をユニキャストで車両１０に送信する（ステップＳ１８）。動作異常報知信号は、動作部１０２の動作の異常の通知を示す信号である。
The abnormality determination unit 204 that determines that the abnormality has occurred in the
また、異常判定部３０４のそれぞれは、操作情報取得部１０３から無線通信部３０１を介して車両パケット信号を受信する（ステップＳ１９）。異常判定部３０４のそれぞれは、車両パケット信号を受信すると、直前に対応するカメラ３０２が撮影した画像において車両１０が映っているか否かを判定する（ステップＳ２０）。
具体的には、異常判定部３０４ａは、操作情報取得部１０３から無線通信部３０１ａを介して車両パケット信号を受信する。異常判定部３０４ａは、車両パケット信号を受信すると、直前に対応するカメラ３０２ａが撮影した画像において車両１０が映っているか否かを判定する。
例えば、異常判定部３０４ａは、文字パターンを認識する技術を用いて、車両パケット信号に含まれるナンバーと同一の情報を示すナンバープレートＰＴが直前の１０秒間にカメラ３０２ａが撮影した画像に含まれていると判定した場合に、直前にカメラ３０２ａが撮影した画像に車両１０が映っていると判定する。また、異常判定部３０４ａは、車両パケット信号に含まれるナンバーと同一の情報を示すナンバープレートＰＴが直前の１０秒間にカメラ３０２ａが撮影した画像に含まれていないと判定した場合に、直前にカメラ３０２ａが撮影した画像に車両１０が映っていないと判定する。
Further, each of the abnormality determination units 304 receives the vehicle packet signal from the operation
Specifically, the
For example, the
同様に、異常判定部３０４ｂは、操作情報取得部１０３から無線通信部３０１ｂを介して車両パケット信号を受信する。異常判定部３０４ｂは、車両パケット信号を受信すると、直前にカメラ３０２ｂが撮影した画像において車両１０が映っているか否かを判定する。
Similarly, the abnormality determination unit 304b receives the vehicle packet signal from the operation
異常判定部３０４のそれぞれは、直前に対応するカメラ３０２が撮影した画像に車両１０が映っていないと判定した場合（ステップＳ２０においてＮＯ）、自身の異常判定部３０４を備える路側機３０の処理を終了させる。
When each of the abnormality determination units 304 determines that the
また、異常判定部３０４のそれぞれは、直前に対応するカメラ３０２が撮影した画像に車両１０が映っていると判定した場合（ステップＳ２０においてＹＥＳ）、直前に対応するカメラ３０２が撮影した画像を解析する。異常判定部３０４のそれぞれは、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前に対応するカメラ３０２が撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致するか否かを判定する（ステップＳ２１）。
具体的には、異常判定部３０４ａは、直前にカメラ３０２ａが撮影した画像に車両１０が映っていると判定した場合、直前にカメラ３０２ａが撮影した画像を解析する。異常判定部３０４ａは、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前にカメラ３０２ａが撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致するか否かを判定する。
例えば、操作者がブレーキペダルを踏んだ場合、異常判定部３０４ａは、車両１０のナンバープレートＰＴの位置を基準としたブレーキランプの相対的な位置を示す情報を記憶部３０３ａから読み出す。異常判定部３０４ａは、直前の１０秒間にカメラ３０２ａが撮影した画像のうち車両１０が映っていると判定した画像と、記憶部３０３ａから読み出した車両１０のナンバープレートＰＴの位置を基準としたブレーキランプの相対的な位置を示す情報とを比較する。異常判定部３０４ａは、車両１０が映っていると判定した画像において車両１０のナンバープレートＰＴの位置を特定する。異常判定部３０４ａは、車両１０が映っていると判定した画像のそれぞれにおける車両１０のナンバープレートＰＴの位置を基準として、それぞれの前後の画像どうしを比較し、ＲＧＢの差分を抽出する。異常判定部３０４ａは、抽出したＲＧＢの差分の主な色成分が赤色であるか否かを判定する。
異常判定部３０４ａは、抽出したＲＧＢの差分の主な色成分が赤色であると判定した場合、車両１０が映っていると判定した画像のそれぞれにおけるナンバープレートＰＴの位置を基準としたＲＧＢの差分の示す位置と、記憶部３０３ａから読み出した車両１０のナンバープレートＰＴの位置を基準としたブレーキランプの相対的な位置とが一致するか否かを判定する。
When each of the abnormality determination units 304 determines that the
Specifically, when the
For example, when the operator depresses the brake pedal, the
When the
異常判定部３０４ａは、車両１０が映っていると判定した画像のそれぞれにおけるナンバープレートＰＴの位置を基準としたＲＧＢの差分の示す位置と、記憶部３０３ａから読み出した車両１０のナンバープレートＰＴの位置を基準としたブレーキランプの相対的な位置とが一致すると判定した場合、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前にカメラ３０２ａが撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致すると判定する。この場合、異常判定部３０４ａは、ブレーキランプが正常に動作していると判定する。
The
また、異常判定部３０４ａは、車両１０が映っていると判定した画像のそれぞれにおけるナンバープレートＰＴの位置を基準としたＲＧＢの差分の示す位置と、記憶部３０３ａから読み出した車両１０のナンバープレートＰＴの位置を基準としたブレーキランプの相対的な位置とが一致しないと判定した場合、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前にカメラ３０２ａが撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致しないと判定する。この場合、異常判定部３０４ａは、ブレーキランプに異常が発生したと判定する。
Further, the
また、異常判定部３０４ａは、抽出したＲＧＢの差分の主な色成分が赤色ではないと判定した場合、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前にカメラ３０２ａが撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致しないと判定する。この場合、異常判定部３０４ａは、ブレーキランプに異常が発生したと判定する。
なお、異常判定部３０４ａは、画像解析から得た動作部の点灯、点滅の時間と、操作情報が示す動作の時間とが一致するか否かを判定することにより、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前にカメラ３０２ａが撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致するか否かを判定してもよい。こうすることで、異常判定部３０４ａは、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前にカメラ３０２ａが撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致するか否かをより正確に判定することができる。
Further, when the
The
同様に、異常判定部３０４ｂは、直前にカメラ３０２ｂが撮影した画像に車両１０が映っていると判定した場合、直前にカメラ３０２ｂが撮影した画像を解析する。異常判定部３０４ｂは、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前にカメラ３０２ｂが撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致するか否かを判定する。
Similarly, when the abnormality determination unit 304b determines that the
異常判定部３０４のそれぞれは、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前に対応するカメラ３０２が撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致すると判定した場合（ステップＳ２１においてＹＥＳ）、動作部１０２が正常に動作していると判定する。車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前に対応するカメラ３０２が撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致すると判定した異常判定部３０４のそれぞれは、自身の異常判定部３０４を備える路側機３０の処理を終了させる。
Each of the abnormality determination units 304 has a state of the
異常判定部３０４のそれぞれは、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前に対応するカメラ３０２が撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致しないと判定した場合（ステップＳ２１においてＮＯ）、動作部１０２に異常が発生したと判定する。
Each of the abnormality determination units 304 has a state of the
異常判定部３０４のそれぞれのうち動作部１０２に異常が発生したと判定した異常判定部３０４は、車両１０のアドレスを指定して対応する無線通信部３０１を介して動作異常報知信号をユニキャストで車両１０に送信する（ステップＳ２２）。動作異常報知信号は、動作部１０２の動作の異常の通知を示す信号である。
なお、上述のステップＳ１９〜Ｓ２２の処理は、ステップＳ１５〜Ｓ１８の処理とほぼ並行に行われる。
The abnormality determination unit 304 that determines that an abnormality has occurred in the
Note that the processing of steps S19 to S22 described above is performed almost in parallel with the processing of steps S15 to S18.
報知部１０５は、ステップＳ１４の処理が行われてから所定の時間内に、動作異常情報受信部１０４ｂを介して、動作部１０２に異常が発生したと判定した異常判定部２０４、３０４のそれぞれから動作異常報知信号を受信するか否かを検出している（ステップＳ２３）。
The
報知部１０５は、ステップＳ１４の処理が行われてから所定の時間内に、動作異常報知信号を受信しない場合（ステップＳ２３においてＮＯ）、対象装置１０の処理を終了させる。
When the
また、報知部１０５は、ステップＳ１４の処理が行われてから所定の時間内に、動作異常報知信号を受信した場合（ステップＳ２３においてＹＥＳ）、動作部１０２に異常が発生したことを操作者などに報知する（ステップＳ２４）。
In addition, when the
例えば、報知部１０５は、表示部を備えている場合、記憶部１０６から報知内容を示す情報を読み出す。報知部１０５は、報知内容を示す情報に含まれる「動作部１０２に異常が発生しました」などの表示を表示する。また、報知部１０５は、スピーカを備えている場合、記憶部１０６から報知内容を示す情報を読み出す。報知部１０５は、報知内容を示す情報に含まれる「動作部１０２に異常が発生しました」などの音声をスピーカから出力する。また、報知部１０５は、振動部を備えている場合、記憶部１０６から報知内容を示す情報を読み出す。報知部１０５は、報知内容を示す情報に含まれる頻繁に振動を繰り返すなどの動作部１０２に異常が発生したことを示す振動を行う。報知部１０５は、対象装置１０の処理を終了させる。
For example, when the
なお、報知部１０５は、ステップＳ２３の処理において、最初の動作異常報知信号を受信したときに、動作異常報知信号を受信したことを示す受信完了信号をブロードキャストで車両１０の外部に送信してもよい。この場合、受信完了信号を受信した周辺車両２０、路側機３０のそれぞれは、動作異常報知信号を送信する必要がないと判定することができ、自身の処理を終了することができる。また、報知部１０５が、ステップＳ２３の処理において、複数の動作異常報知信号を受信した場合、車両１０は、受信した動作異常報知信号の数が増加するにつれて動作部１０２に異常が発生したことをより正確に判定することができる。
In addition, in the process of step S23, the
以上、本発明の第二の実施形態による異常判定システム１について説明した。本発明の第二の実施形態による異常判定システム１は、車両１０（対象装置）と、周辺車両２０（異常判定装置）と、路側機３０（異常判定装置）と、を備える。
車両１０は、操作部１０１と、動作部１０２と、操作情報取得部１０３と、無線通信部１０４と、報知部１０５と、記憶部１０６と、を備える。操作部１０１は、操作者による車両１０（対象装置）に対する操作に応じて、動作部１０２を動作させる。動作部１０２は、操作者による車両１０に対する操作に基づいて操作に連動した動作を行う。操作情報取得部１０３は、動作部１０２を動作させる内容を示す操作情報を操作部１０１から取得する。無線通信部１０４は、操作情報送信部１０４ａと、動作異常情報受信部１０４ｂと、を備える。操作情報送信部１０４ａは、車両パケット信号をブロードキャストで車両１０の外部に送信する。動作異常情報受信部１０４ｂは、周辺車両２０及び路側機３０のそれぞれ（異常判定装置）から動作部１０２の動作の異常の通知を示す動作異常報知信号を受信する。報知部１０５は、動作異常情報受信部１０４ｂを介して動作異常報知信号を受信した場合、動作部１０２に異常が発生したことを操作者などに報知する。記憶部１０６は、車両１０が行う処理に必要な種々の情報を記憶する。
The
The
周辺車両２０ａは、無線通信部２０１ａと、カメラ２０２ａと、記憶部２０３ａと、異常判定部２０４ａと、を備える。
無線通信部２０１ａは、車両１０と通信を行う。カメラ２０２ａは、周辺車両２０ａの外部をカメラ２０２ａの画角の範囲内で撮影する。記憶部２０３ａは、周辺車両２０ａが行う処理に必要な種々の情報を記憶する。異常判定部２０４ａは、直前にカメラ２０２ａが撮影した画像において車両１０が映っているか否かを判定する。異常判定部２０４ａは、直前にカメラ２０２ａが撮影した画像に車両１０が映っていると判定した場合、直前にカメラ２０２ａが撮影した画像を解析する。異常判定部２０４ａは、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前にカメラ２０２ａが撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致するか否かを判定する。
The
The
周辺車両２０ｂは、無線通信部２０１ｂと、カメラ２０２ｂと、記憶部２０３ｂと、異常判定部２０４ｂと、を備える。
周辺車両２０ｃは、無線通信部２０１ｃと、カメラ２０２ｃと、記憶部２０３ｃと、異常判定部２０４ｃと、を備える。
周辺車両２０ｄは、無線通信部２０１ｄと、カメラ２０２ｄと、記憶部２０３ｄと、異常判定部２０４ｄと、を備える。
無線通信部２０１ｂ、２０１ｃ、２０１ｄのそれぞれは、無線通信部２０１ａと同様の機能を有し、同様に動作する。
カメラ２０２ｂ、２０２ｃ、２０２ｄのそれぞれは、カメラ２０２ａと同様の機能を有し、同様に動作する。
異常判定部２０４ｂ、２０４ｃ、２０４ｄのそれぞれは、異常判定部２０４ａと同様の機能を有し、同様に動作する。
The
The
The
Each of the wireless communication units 201b, 201c, and 201d has the same function as the
Each of the cameras 202b, 202c, and 202d has the same function as the
Each of the abnormality determination units 204b, 204c, and 204d has the same function as the
路側機３０ａは、無線通信部３０１ａと、カメラ３０２ａと、記憶部３０３ａと、異常判定部３０４ａと、を備える。
無線通信部３０１ａは、車両１０と通信を行う。カメラ３０２ａは、路側機３０ａの外部をカメラ３０２ａの画角の範囲内で撮影する。記憶部３０３ａは、路側機３０ａが行う処理に必要な種々の情報を記憶する。異常判定部３０４ａは、直前にカメラ３０２ａが撮影した画像において車両１０が映っているか否かを判定する。異常判定部３０４ａは、直前にカメラ３０２ａが撮影した画像に車両１０が映っていると判定した場合、直前にカメラ３０２ａが撮影した画像を解析する。異常判定部３０４ａは、車両パケット信号に含まれる操作情報が示す動作部１０２への動作内容と、直前にカメラ３０２ａが撮影した画像の解析結果が示す車両１０の動作部１０２の状態とが一致するか否かを判定する。
The
The
路側機３０ｂは、無線通信部３０１ｂと、カメラ３０２ｂと、記憶部３０３ｂと、異常判定部３０４ｂと、を備える。
無線通信部３０１ｂは、無線通信部３０１ａと同様の機能を有し、動作する。
カメラ３０２ｂは、カメラ３０２ａと同様の機能を有し、動作する。
異常判定部３０４ｂは、異常判定部３０４ａと同様の機能を有し、動作する。
The
The wireless communication unit 301b has the same function as the
The camera 302b has the same function as the
The abnormality determination unit 304b has the same function as the
このようにすれば、異常判定システム１は、操作者による操作に連動して動作する動作部に異常が発生したことをより正確に判定することができる。
By doing so, the
なお、本発明の第二の実施形態による異常判定システム１において、カメラ２０２、３０２のそれぞれは、常時撮影を行っているものとして説明した。しかしながら、本発明の第二の実施形態による異常判定システム１におけるカメラ２０２、３０２のそれぞれは、それに限定しない。
例えば、異常判定システム１において、カメラ２０２のそれぞれは、自身のカメラ２０２を備える周辺車両２０が車両１０から車両パケット信号を受信した場合に撮影を開始してもよい。この場合、周辺車両２０のそれぞれは、自身が備えるカメラ２０２による撮影開始後に、再度車両パケット信号を受信したときの操作情報と撮影した画像の解析結果とに基づいて、動作部１０２に異常が発生したか否かを判定すればよい。
また、例えば、異常判定システム１において、カメラ３０２のそれぞれは、自身のカメラ３０２を備える路側機３０が車両１０から車両パケット信号を受信した場合に撮影を開始してもよい。この場合、路側機３０のそれぞれは、自身が備えるカメラ３０２による撮影開始後に、再度車両パケット信号を受信したときの操作情報と撮影した画像の解析結果とに基づいて、動作部１０２に異常が発生したか否かを判定すればよい。
In the
For example, in the
Further, for example, in the
なお、本発明の第二の実施形態による異常判定システム１において、車両パケット信号は、車両１０の車種を示す情報、車両１０のボディカラーを示す情報などを含んでいてもよい。この場合、異常判定部２０４、３０４のそれぞれは、車両パケット信号を受信すると、直前に対応するカメラ２０２または対応するカメラ３０２が撮影した画像において車両１０が映っているか否かを車両１０の車種、車両１０のボディカラーのそれぞれの情報を用いて判定してもよい。
具体的には、異常判定部２０４、３０４のそれぞれは、予め記憶部に記憶した車両１０の車種に対応する車両１０の外形と、直前に対応するカメラ２０２または対応するカメラ３０２が撮影した画像におけるエッジとを比較して、直前に対応するカメラ２０２または対応するカメラ３０２が撮影した画像におけて車両１０を特定した場合に車両１０が映っていると判定する。また、異常判定部２０４、３０４のそれぞれは、予め記憶部に記憶した車両１０の車種に対応する車両１０の外形と、直前に対応するカメラ２０２または対応するカメラ３０２が撮影した画像におけるエッジとを比較して、直前に対応するカメラ２０２または対応するカメラ３０２が撮影した画像におけて車両１０を特定できない場合に車両１０が映っていないと判定する。
また、具体的には、異常判定部２０４、３０４のそれぞれは、予め記憶部に記憶した車両１０の車種に対応する車両１０のボディカラーと、直前に対応するカメラ２０２または対応するカメラ３０２が撮影した画像におけるエッジの内部の色とを比較し、エッジ内部の色の主な成分が車両１０のボディカラーの色の成分と一致した場合に車両１０が映っていないと判定する。
このようにすれば、異常判定部２０４、３０４のそれぞれは、車両パケット信号を受信すると、直前にカメラ２０２、３０２が撮影した画像において車両１０が映っているか否かを車両１０のナンバーのみの情報を用いる場合よりも正確に判定することができる。
In the
Specifically, each of the abnormality determination units 204 and 304 includes the outer shape of the
Further, specifically, each of the abnormality determination units 204 and 304 takes the body color of the
In this way, each of the abnormality determination units 204 and 304, when receiving the vehicle packet signal, determines whether or not the
また、本発明の第二の実施形態による異常判定システム１において、車両パケット信号は、車両１０の位置を示す情報などを含んでもよい。車両１０の位置を示す情報は、例えば、緯度と経度の組み合わせが示す情報である。この場合、異常判定部２０４、３０４のそれぞれは、車両パケット信号を受信すると、直前に対応するカメラ２０２または対応するカメラ３０２が撮影した画像において車両１０が映っているか否かを車両１０の位置と自身を備える周辺車両２０との相対位置、または、車両１０の位置と自身を備える周辺車両２０との相対位置を用いて判定してもよい。
例えば、異常判定部２０４ａは、車両１０の位置と周辺車両２０ａとの相対位置を算出し、算出した相対位置が特定の（例えば、距離、方位角が）しきい値の範囲内である場合に車両１０を撮影できると判定すればよい。
また、例えば、異常判定部３０４ａは、車両１０の位置と路側機３０ａとの相対位置を算出し、算出した相対位置が特定の（例えば、距離、方位角が）しきい値の範囲内である場合に車両１０を撮影できると判定すればよい。
このようにすれば、異常判定部２０４、３０４のそれぞれは、車両パケット信号を受信すると、直前にカメラ２０２が撮影した画像において車両１０が映っているか否かを車両１０のナンバーのみの情報を用いる場合よりも正確に判定することができる。
Further, in the
For example, the
Further, for example, the
In this way, each of the abnormality determination units 204 and 304, when receiving the vehicle packet signal, uses only the information of the number of the
また、本発明の第二の実施形態による異常判定システム１において、車両パケット信号は、車両１０のナンバー、車両１０の車種、車両１０のボディカラー、車両１０の位置のそれぞれの任意の組み合わせの情報を含んでもよい。この場合、異常判定部２０４、３０４のそれぞれは、車両パケット信号を受信すると、直前に対応するカメラ２０２または対応するカメラ３０２が撮影した画像において車両１０が映っているか否かを車両１０のナンバー、車両１０の車種、車両１０のボディカラー、車両１０の位置のそれぞれの任意の組み合わせの情報を用いて判定してもよい。
このようにすれば、異常判定部２０４、３０４のそれぞれは、車両パケット信号を受信すると、直前にカメラ２０２または対応するカメラ３０２が撮影した画像において車両１０が映っているか否かを車両パケット信号が含む情報に応じて判定することができる。
Further, in the
By doing so, when each of the abnormality determination units 204 and 304 receives the vehicle packet signal, the vehicle packet signal indicates whether or not the
また、本発明の第二の実施形態による異常判定システム１において、車両パケット信号は、車両１０が周辺車両２０及び路側機３０から既に受信した動作異常報知信号についての情報を含んでもよい。
このようにすれば、周辺車両２０、路側機３０のそれぞれは、車両パケット信号を受信すると動作異常報知信号を送信する必要がないと判定することができ、自身の処理を終了することができる。
Further, in the
In this way, each of the
また、本発明の第二の実施形態による異常判定システム１において、異常判定部２０４、３０４のそれぞれは、車両パケット信号を受信した場合に、自身の異常判定部２０４を備える周辺車両２０または自身の異常判定部３０４を備える路側機３０の位置情報を車両１０に送信してもよい。そして、車両１０は、周辺車両２０または路側機３０の位置情報を受信した場合に、周辺車両２０または路側機３０と、車両１０との相対位置を算出して、通信を行う周辺車両２０、路側機３０を特定してもよい。
このようにすれば、車両１０は、周辺車両２０、路側機３０のそれぞれのうち通信すべき少数の周辺車両２０、路側機３０と通信すればよく、通信する情報量を低減することができる。
In addition, in the
With this configuration, the
また、本発明の第二の実施形態による異常判定システム１において、異常判定部２０４、３０４のそれぞれは、車両１０のアドレスを指定して動作異常報知信号をユニキャストで車両１０に送信するものとして説明した。しかしながら、本発明の第二の実施形態による異常判定システム１における異常判定部２０４、３０４のそれぞれは、それに限定しない。
例えば、異常判定システム１において、異常判定部２０４、３０４のそれぞれは、ＤＴＮ（Ｄｅｌａｙ／Ｄｉｓｒｕｐｔｉｏｎ−Ｔｏｌｅｒａｎｔ Ｎｅｔｗｏｒｋｉｎｇ）の通信プロトコルに基づいて、動作異常報知信号を周辺車両２０、路側機３０のそれぞれの間で共有してもよい。
このようにすれば、異常判定部２０４、３０４のそれぞれは、動作異常報知信号をユニキャストで車両１０に送信できなかった場合にも、動作異常報知信号を車両１０に送信することができる。
Further, in the
For example, in the
By doing so, each of abnormality determination units 204 and 304 can transmit the operation abnormality notification signal to
なお、本発明の実施形態において、対象装置１０は、異常判定装置４０（周辺車両２０、路側機３０）を備えてもよい。
このようにすれば、対象装置１０は、自身で動作部１０２が異常であるか否かを判定することができる。
In the embodiment of the present invention, the
In this way, the
なお、本発明の実施形態における処理フローは、適切な処理が行われる範囲において、処理の順番が入れ替わってもよい。 In the processing flow according to the embodiment of the present invention, the order of processing may be changed within a range in which appropriate processing is performed.
なお、本発明の実施形態において対象装置１０が飛行体であり、動作部１０２が車輪である場合、異常判定部４０４は、予め記憶部が記憶した飛行体の外形を示す画像と、カメラが撮影した画像におけるエッジとを比較して、飛行体を特定する。そして、異常判定部４０４は、特定した飛行体に対して、予め記憶部が記憶した車輪の外形を示す画像と、カメラが撮影した画像におけるエッジとを比較する。
異常判定部４０４は、特定した飛行体から車輪を機体の内部に収納する操作情報を含む車両パケット信号を受信した場合、カメラが撮影した画像において、車輪の外形を示す画像と一致するエッジを検出しない場合に、車輪の上方向への動作は正常であると判定する。また、異常判定部４０４は、特定した飛行体から車輪を機体の内部に収納する操作情報を含む車両パケット信号を受信した場合、カメラが撮影した画像において、車輪の外形を示す画像と一致するエッジを検出した場合に、車輪の上方向への動作に異常が発生したと判定する。
また、異常判定部４０４は、特定した飛行体から車輪を機体の外部に出す操作情報を含む車両パケット信号を受信した場合、カメラが撮影した画像において、車輪の外形を示す画像と一致するエッジを検出した場合に、車輪の下方向への動作は正常であると判定する。また、異常判定部４０４は、特定した飛行体から車輪を機体の外部に出す操作情報を含む車両パケット信号を受信した場合、カメラが撮影した画像において、車輪の外形を示す画像と一致するエッジを検出しない場合に、車輪の下方向への動作に異常が発生したと判定する。
In the embodiment of the present invention, when the
When the
In addition, when the
本発明の実施形態における記憶部１０６、２０３、２０３ａ、２０３ｂ、２０３ｃ、２０３ｄ、３０３、３０３ａ、３０３ｂ、その他の記憶部のそれぞれは、適切な情報の送受信が行われる範囲においてどこに備えられていてもよい。また、記憶部１０６、２０３、２０３ａ、２０３ｂ、２０３ｃ、２０３ｄ、３０３、３０３ａ、３０３ｂ、その他の記憶部のそれぞれは、適切な情報の送受信が行われる範囲において複数存在しデータを分散して記憶していてもよい。
Each of the
本発明の実施形態について説明したが、上述の対象装置１０（車両１０）、異常判定装置４０（周辺車両２０、路側機３０）のそれぞれは内部に、コンピュータシステムを有していてもよい。そして、上述した処理の過程は、プログラムの形式でコンピュータ読み取り可能な記録媒体に記憶されており、このプログラムをコンピュータが読み出して実行することによって、上記処理が行われる。ここでコンピュータ読み取り可能な記録媒体とは、磁気ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ、半導体メモリ等をいう。また、このコンピュータプログラムを通信回線によってコンピュータに配信し、この配信を受けたコンピュータがそのプログラムを実行するようにしてもよい。
Although the embodiment of the present invention has been described, each of the target device 10 (vehicle 10) and the abnormality determination device 40 (
また、上記プログラムは、前述した機能の一部を実現してもよい。さらに、上記プログラムは、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるファイル、いわゆる差分ファイル（差分プログラム）であってもよい。 Further, the program may realize a part of the functions described above. Further, the above program may be a file that can realize the above-mentioned function in combination with a program already recorded in the computer system, that is, a so-called difference file (difference program).
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例であり、発明の範囲を限定しない。これらの実施形態は、発明の要旨を逸脱しない範囲で、追加、種々の省略、置き換え、変更を行ってよい。 Although some embodiments of the present invention have been described, these embodiments are examples and do not limit the scope of the invention. These embodiments may be added, variously omitted, replaced, and modified without departing from the scope of the invention.
１０・・・対象装置、車両
２０、２０ａ、２０ｂ、２０ｃ、２０ｄ・・・周辺車両
３０、３０ａ、３０ｂ・・・路側機
４０・・・異常判定装置
１０１・・・操作部
１０２・・・動作部
１０３・・・操作情報取得部
１０４、２０１、２０１ａ、２０１ｂ、２０１ｃ、２０１ｄ、３０１、３０１ａ、３０１ｂ・・・無線通信部
１０４ａ・・・操作情報送信部
１０４ｂ・・・動作異常情報受信部
１０５・・・報知部
１０６、２０３、２０３ａ、２０３ｂ、２０３ｃ、２０３ｄ、３０３、３０３ａ、３０３ｂ・・・記憶部
２０２、２０２ａ、２０２ｂ、２０２ｃ、２０２ｄ、３０２、３０２ａ、３０２ｂ・・・カメラ
２０４、２０４ａ、２０４ｂ、２０４ｃ、２０４ｄ、３０４、３０４ａ、３０４ｂ、４０４・・・異常判定部
10... Target device,
Claims (4)
前記対象装置は、
前記対象装置に対する操作に基づいて前記操作に連動した動作を行う動作部と、
前記操作に基づく操作情報及び前記対象装置を特定することができる前記対象装置のナンバー及び位置を示す情報を含む車両パケット信号を前記対象装置の外部に送信する操作情報送信部と、
前記異常判定装置から前記動作部の動作の異常の通知を示す動作異常報知信号を受信する動作異常情報受信部と、
を備え、
前記異常判定装置は、
前記車両パケット信号を受信すると、前記対象装置のナンバーを示す情報と同一の情報を示す画像が受信直前に撮影された画像に映っているか否かを判定する異常判定部であって、前記対象装置の位置を示す情報が示す対象装置と、自異常判定部を備える前記異常判定装置との相対位置を算出し、算出した相対位置が特定のしきい値の範囲内である場合に、前記対象装置のナンバーを示す情報と同一の情報を示す画像が受信直前に撮影された画像に映っていると判定し、前記対象装置のナンバーを示す情報と同一の情報を示す画像が受信直前に撮影された画像に映っていると判定した場合に、前記操作情報と、前記対象装置のナンバーを示す情報と同一の情報を示す画像の位置を基準とした相対的な位置によって示される前記動作部の撮影画像とに基づいて、前記動作部の動作が異常であるか否かを判定する異常判定部、
を備える、
異常判定システム。 An abnormality determination system comprising a target device and an abnormality determination device,
The target device is
An operation unit that performs an operation linked to the operation based on the operation on the target device;
An operation information transmission unit that transmits a vehicle packet signal including operation information based on the operation and information indicating the number and position of the target device capable of specifying the target device, to the outside of the target device,
An operation abnormality information receiving unit that receives an operation abnormality notification signal indicating a notification of an operation abnormality of the operation unit from the abnormality determination device,
Equipped with
The abnormality determination device,
When the vehicle packet signal is received, the abnormality determining unit determines whether or not an image showing the same information as the information indicating the number of the target device is reflected in the image captured immediately before the reception. position and the target device indicated by the information indicating the, if calculating the relative position of the abnormality determination apparatus comprising a self-abnormality determining unit, calculated relative position is within a particular threshold, the target device It is determined that an image showing the same information as the information showing the number of is reflected in the image taken immediately before the reception, and an image showing the same information as the information showing the number of the target device was taken just before the reception. When it is determined that the image is reflected in the image, the captured image of the operation unit indicated by the relative position based on the position of the operation information and the image indicating the same information as the information indicating the number of the target device. based on the bets, the abnormality determination unit that the operation of the operation unit to determine whether it is abnormal,
With
Anomaly judgment system.
請求項１に記載の異常判定システム。 The operating unit is a lamp that lights, blinks, and goes off.
The abnormality determination system according to claim 1.
請求項１または請求項２に記載の異常判定システム。 The operation unit is provided in an automobile,
The abnormality determination system according to claim 1 or 2.
前記対象装置の動作部が、前記対象装置に対する操作に基づいて前記操作に連動した動作部の動作を行うこと、
前記対象装置の操作情報送信部が、前記操作に基づく操作情報及び前記対象装置を特定することができる前記対象装置のナンバー及び位置を示す情報を含む車両パケット信号を前記対象装置の外部に送信すること、
前記異常判定装置の異常判定部は、前記車両パケット信号を受信すると、前記対象装置のナンバーを示す情報と同一の情報を示す画像が受信直前に撮影された画像に映っているか否かを判定する異常判定部であって、前記異常判定部が、前記対象装置の位置を示す情報が示す対象装置と、前記異常判定部を備える前記異常判定装置との相対位置を算出し、算出した相対位置が特定のしきい値の範囲内である場合に、前記対象装置のナンバーを示す情報と同一の情報を示す画像が受信直前に撮影された画像に映っていると判定し、前記対象装置のナンバーを示す情報と同一の情報を示す画像が受信直前に撮影された画像に映っていると判定した場合に、前記操作情報と、前記対象装置のナンバーを示す情報と同一の情報を示す画像の位置を基準とした相対的な位置によって示される前記動作部の撮影画像とに基づいて、前記動作部の動作が異常であるか否かを判定すること、
前記対象装置の動作異常情報受信部が、前記異常判定装置から前記動作部の動作の異常の通知を示す動作異常報知信号を受信すること、
を含む判定方法。 A determination method of an abnormality determination system comprising a target device and an abnormality determination device,
The operation unit of the target device performs an operation of the operation unit linked to the operation based on an operation on the target device,
The operation information transmission unit of the target device transmits a vehicle packet signal including operation information based on the operation and information indicating the number and position of the target device capable of specifying the target device to the outside of the target device. thing,
Upon receiving the vehicle packet signal , the abnormality determination unit of the abnormality determination device determines whether or not an image showing the same information as the information showing the number of the target device is reflected in the image taken immediately before reception. An abnormality determining unit , wherein the abnormality determining unit calculates the relative position between the target device indicated by the information indicating the position of the target device and the abnormality determining device including the abnormality determining unit, and the calculated relative position is When it is within the range of a specific threshold value, it is determined that an image showing the same information as the information showing the number of the target device is reflected in the image taken immediately before reception, and the number of the target device is set. If it is determined that the image showing the same information as the information shown is reflected in the image taken immediately before the reception, the operation information and the position of the image showing the same information as the information showing the number of the target device are displayed. based on the captured image of the operation portion shown by reference to the relative position, that the operation of the operation unit to determine whether it is abnormal,
The operation abnormality information receiving unit of the target device receives an operation abnormality notification signal indicating a notification of an operation abnormality of the operation unit from the abnormality determination device,
The determination method including.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015233775A JP6728654B2 (en) | 2015-11-30 | 2015-11-30 | Abnormality determination system and determination method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015233775A JP6728654B2 (en) | 2015-11-30 | 2015-11-30 | Abnormality determination system and determination method |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2017102585A JP2017102585A (en) | 2017-06-08 |
| JP6728654B2 true JP6728654B2 (en) | 2020-07-22 |
Family
ID=59017343
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2015233775A Expired - Fee Related JP6728654B2 (en) | 2015-11-30 | 2015-11-30 | Abnormality determination system and determination method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6728654B2 (en) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP6601467B2 (en) * | 2017-08-31 | 2019-11-06 | トヨタ自動車株式会社 | Anomaly detection device, anomaly detection method, and anomaly detection system |
| CN113561896A (en) * | 2021-07-16 | 2021-10-29 | 浙江大华技术股份有限公司 | Method and device for determining abnormality of brake lamp of vehicle |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003058978A (en) * | 2001-08-09 | 2003-02-28 | Toshiba Corp | Vehicle monitoring system |
| JP2010137757A (en) * | 2008-12-12 | 2010-06-24 | Denso Corp | Failure detection device |
| JP5649053B2 (en) * | 2010-12-15 | 2015-01-07 | パナソニックＩｐマネジメント株式会社 | Light monitoring device |
| JP6281483B2 (en) * | 2014-04-17 | 2018-02-21 | 株式会社デンソー | Failure detection system, information processing apparatus, and vehicle mounting apparatus |
-
2015
- 2015-11-30 JP JP2015233775A patent/JP6728654B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2017102585A (en) | 2017-06-08 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108227703B (en) | Information processing apparatus and method, operated vehicle, and recording medium having program recorded thereon | |
| CN109421597B (en) | Abnormality detection device, abnormality detection method, and abnormality detection system | |
| CN107578644B (en) | Method and apparatus for operating a traffic infrastructure unit including a signal source | |
| US20180222473A1 (en) | Collision avoidance for personal mobility devices | |
| CN105580358B (en) | Information presentation system | |
| CN107209988B (en) | Method for determining the optimal speed of a motor vehicle approaching a traffic light | |
| JPWO2017029847A1 (en) | Information processing apparatus, information processing method, and program | |
| US11272115B2 (en) | Control apparatus for controlling multiple camera, and associated control method | |
| WO2015114699A1 (en) | Electronic device, control method for electronic device, and control program for electronic device | |
| JP5585194B2 (en) | Accident situation recording system | |
| CN113627213A (en) | Vehicle abnormal behavior monitoring method, device and system | |
| JP2018019387A (en) | Signal processing apparatus, photographing apparatus, and signal processing method | |
| US11138451B2 (en) | Training image selection system | |
| JP2019215785A (en) | Information providing apparatus, information providing method, and computer program | |
| US12525024B2 (en) | Electronic device, method, and computer readable storage medium for detection of vehicle appearance | |
| JP2019185366A (en) | Information processing device, system, method, and computer program | |
| CN111161551A (en) | Apparatus, system and method for detecting, alerting and responding to emergency vehicles | |
| JP2017068640A (en) | Vehicle-to-vehicle data communication device | |
| KR20210056632A (en) | Method for image processing based on message and electronic device implementing the same | |
| JP2019125235A (en) | Driving evaluation system and program | |
| JPWO2018016151A1 (en) | Image processing apparatus and image processing method | |
| JP6728654B2 (en) | Abnormality determination system and determination method | |
| JPWO2018016150A1 (en) | Image processing apparatus and image processing method | |
| CN112802355B (en) | Method, system and storage medium for acquiring real-scene road conditions in real time | |
| JP2003272095A (en) | Vehicle communication device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20181004 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190913 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190924 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191121 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200204 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200403 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200602 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200615 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6728654 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| LAPS | Cancellation because of no payment of annual fees |