Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP7056866B2 - Failure sign detection system, failure sign detection method and failure sign detection program - Google Patents
[go: Go Back, main page]

JP7056866B2 - Failure sign detection system, failure sign detection method and failure sign detection program - Google Patents

Failure sign detection system, failure sign detection method and failure sign detection program Download PDF

Info

Publication number
JP7056866B2
JP7056866B2 JP2017172332A JP2017172332A JP7056866B2 JP 7056866 B2 JP7056866 B2 JP 7056866B2 JP 2017172332 A JP2017172332 A JP 2017172332A JP 2017172332 A JP2017172332 A JP 2017172332A JP 7056866 B2 JP7056866 B2 JP 7056866B2
Authority
JP
Japan
Prior art keywords
image data
unit
normal
failure
difference
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017172332A
Other languages
Japanese (ja)
Other versions
JP2019049411A (en
Inventor
宗一郎 森野
恵太 鈴木
一哉 山嵜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Platforms Ltd
Original Assignee
NEC Platforms Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Platforms Ltd filed Critical NEC Platforms Ltd
Priority to JP2017172332A priority Critical patent/JP7056866B2/en
Publication of JP2019049411A publication Critical patent/JP2019049411A/en
Application granted granted Critical
Publication of JP7056866B2 publication Critical patent/JP7056866B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Testing Or Calibration Of Command Recording Devices (AREA)
  • Testing And Monitoring For Control Systems (AREA)
  • Image Analysis (AREA)

Description

本発明は、故障予兆検知システム、故障予兆検知方法及び故障予兆検知プログラムに関し、特に、監視対象装置の故障の予兆を検知するための故障予兆検知システム、故障予兆検知方法及び故障予兆検知プログラムに関する。 The present invention relates to a failure sign detection system, a failure sign detection method and a failure sign detection program, and more particularly to a failure sign detection system for detecting a failure sign of a monitored device, a failure sign detection method and a failure sign detection program.

特許文献1には、ロール紙などの記録媒体に対して印刷ジョブに応じた画像を形成する画像形成装置の検査を行う検査装置に関する技術が開示されている。当該検査装置は、画像形成がなされた記録媒体を読み取った読取画像と、印刷ジョブデータに基づくビットマップデータなどの画像データである被形成画像データとを比較し、その差分が所定の閾値を超えるか否かを判定する。このとき、当該検査装置は、所定の閾値として、画像形成の欠陥の有無を判別するための第一の閾値よりも低く設けられた第二の閾値を用いて、画像形成装置の欠陥の前兆の有無を判別する。そして、当該検査装置は、当該差分が第一又は第二の閾値を超えると判定された場合、該当する読取画像を記憶装置に格納する。 Patent Document 1 discloses a technique relating to an inspection device for inspecting an image forming device that forms an image according to a print job on a recording medium such as roll paper. The inspection device compares the scanned image read from the recording medium on which the image is formed with the formed image data which is image data such as bitmap data based on the print job data, and the difference exceeds a predetermined threshold value. Judge whether or not. At this time, the inspection device uses a second threshold value, which is set lower than the first threshold value for determining the presence or absence of a defect in image formation, as a predetermined threshold value, and is used as a precursor of a defect in the image forming device. Determine the presence or absence. Then, when it is determined that the difference exceeds the first or second threshold value, the inspection device stores the corresponding scanned image in the storage device.

特開2014-182551号公報Japanese Unexamined Patent Publication No. 2014-182551

しかしながら、上述した特許文献1では、画像の差分が所定の閾値を超えると判別された場合には、常に欠陥又は欠陥の前兆があるとして検知され、突発的な原因で本来故障ではないケースも含まれてしまうため、検知精度が不十分であるという問題点がある。 However, in the above-mentioned Patent Document 1, when it is determined that the difference between the images exceeds a predetermined threshold value, it is always detected as a defect or a sign of the defect, and a case where the failure is not originally caused by a sudden cause is also included. Therefore, there is a problem that the detection accuracy is insufficient.

本発明は、このような問題点を解決するためになされたものであり、監視対象装置の故障の予兆を精度良く検知するための故障予兆検知システム、故障予兆検知方法及び故障予兆検知プログラムを提供することを目的とする。 The present invention has been made to solve such a problem, and provides a failure sign detection system, a failure sign detection method, and a failure sign detection program for accurately detecting a failure sign of a monitored device. The purpose is to do.

本発明の第1の態様にかかる故障予兆検知システムは、
監視対象装置における正常時の測定データを画像化した正常画像データを記憶する記憶部と、
前記監視対象装置から所定の監視間隔で測定された測定データを画像化した監視画像データと、前記正常画像データとの差分が、第1の範囲外であるか否かを判定する一次判定部と、
前記一次判定部により複数回、前記差分が前記第1の範囲外であると判定されたことに基づいて、前記監視対象装置の故障の予兆の有無を判定する二次判定部と、
を備える。
The failure sign detection system according to the first aspect of the present invention is
A storage unit that stores normal image data, which is an image of normal measurement data in the monitored device,
A primary determination unit for determining whether or not the difference between the monitoring image data obtained by imaging the measurement data measured from the monitoring target device at a predetermined monitoring interval and the normal image data is outside the first range. ,
A secondary determination unit that determines whether or not there is a sign of failure of the monitored device based on the determination that the difference is out of the first range a plurality of times by the primary determination unit.
To prepare for.

本発明の第2の態様にかかる故障予兆検知方法は、
監視対象装置から所定の監視間隔で測定された測定データを画像化した監視画像データと、前記監視対象装置における正常時の測定データを画像化した正常画像データとの差分が、第1の範囲外であるか否かを判定する一次判定ステップと、
前記一次判定ステップにより複数回、前記差分が前記第1の範囲外であると判定されたことに基づいて、前記監視対象装置の故障の予兆の有無を判定する二次判定ステップと、
を含む。
The failure sign detection method according to the second aspect of the present invention is
The difference between the monitored image data obtained by imaging the measurement data measured from the monitored device at a predetermined monitoring interval and the normal image data obtained by imaging the normal measurement data of the monitored device is out of the first range. The primary judgment step to judge whether or not it is
A secondary determination step for determining whether or not there is a sign of failure of the monitored device based on the determination that the difference is out of the first range a plurality of times by the primary determination step.
including.

本発明の第3の態様にかかる故障予兆検知プログラムは、
監視対象装置から所定の監視間隔で測定された測定データを画像化した監視画像データと、前記監視対象装置における正常時の測定データを画像化した正常画像データとの差分が、第1の範囲外であるか否かを判定する一次判定処理と、
前記一次判定処理により複数回、前記差分が前記第1の範囲外であると判定されたことに基づいて、前記監視対象装置の故障の予兆の有無を判定する二次判定処理と、
をコンピュータに実行させる。
The failure sign detection program according to the third aspect of the present invention is
The difference between the monitored image data obtained by imaging the measurement data measured from the monitored device at a predetermined monitoring interval and the normal image data obtained by imaging the normal measurement data of the monitored device is out of the first range. The primary judgment process to judge whether or not it is
A secondary determination process for determining whether or not there is a sign of failure of the monitored device based on the determination that the difference is out of the first range a plurality of times by the primary determination process.
Let the computer run.

本発明により、監視対象装置の故障の予兆を精度良く検知するための故障予兆検知システム、故障予兆検知方法及び故障予兆検知プログラムを提供することができる。 INDUSTRIAL APPLICABILITY According to the present invention, it is possible to provide a failure sign detection system, a failure sign detection method, and a failure sign detection program for accurately detecting a failure sign of a monitored device.

本発明の実施形態1にかかる故障予兆検知システムの構成を示すブロック図である。It is a block diagram which shows the structure of the failure sign detection system which concerns on Embodiment 1 of this invention. 本発明の実施形態1にかかる故障予兆検知方法の流れを示すフローチャートである。It is a flowchart which shows the flow of the failure sign detection method which concerns on Embodiment 1 of this invention. 本発明の実施形態2にかかる故障予兆検知システムの構成を示すブロック図である。It is a block diagram which shows the structure of the failure sign detection system which concerns on Embodiment 2 of this invention. 本発明の実施形態2にかかる故障予兆検知方法の流れを示すフローチャートである。It is a flowchart which shows the flow of the failure sign detection method which concerns on Embodiment 2 of this invention. 本発明の実施形態3にかかる故障予兆検知システムの構成を示すブロック図である。It is a block diagram which shows the structure of the failure sign detection system which concerns on Embodiment 3 of this invention. 本発明の実施形態3にかかるホワイトリスト登録処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the white list registration process which concerns on Embodiment 3 of this invention. 本発明の実施形態4にかかる故障予兆検知システムの構成を示すブロック図である。It is a block diagram which shows the structure of the failure sign detection system which concerns on Embodiment 4 of this invention. 本発明の実施形態4にかかるフィードバック処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the feedback processing which concerns on Embodiment 4 of this invention. 本発明の実施形態5にかかる故障予兆検知システムの構成を示すブロック図である。It is a block diagram which shows the structure of the failure sign detection system which concerns on Embodiment 5 of this invention. 本発明の実施形態5にかかるホワイトリスト登録処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the whitelist registration process which concerns on Embodiment 5 of this invention.

以下では、本発明の実施形態について、図面を参照しながら詳細に説明する。各図面において、同一又は対応する要素には同一の符号が付されており、説明の明確化のため、必要に応じて重複説明は省略される。 Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings. In each drawing, the same or corresponding elements are designated by the same reference numerals, and duplicate explanations are omitted as necessary for the sake of clarity of explanation.

<実施形態1>
図1は、本発明の実施形態1にかかる故障予兆検知システム20の構成を示すブロック図である。故障予兆検知システム20は、監視対象装置10を監視し、監視対象装置10の故障の予兆を検知するための情報システムである。ここで、監視対象装置10は、例えば、工場の設備機器等であり、故障予兆検知システム20は、監視対象装置10の動作音や振動等を定期的に監視するものとする。故障予兆検知システム20は、記憶部21と、一次判定部22と、二次判定部23とを備える。
<Embodiment 1>
FIG. 1 is a block diagram showing a configuration of a failure sign detection system 20 according to the first embodiment of the present invention. The failure sign detection system 20 is an information system for monitoring the monitored device 10 and detecting a failure sign of the monitored device 10. Here, the monitored device 10 is, for example, equipment in a factory, and the failure sign detection system 20 periodically monitors the operating sound, vibration, and the like of the monitored device 10. The failure sign detection system 20 includes a storage unit 21, a primary determination unit 22, and a secondary determination unit 23.

記憶部21は、正常画像データ211と監視画像データ212とを記憶する。例えば、記憶部21は、不揮発性の記憶装置である。正常画像データ211は、監視対象装置10における正常時の測定データを波形として画像化した情報である。また、正常画像データ211は、監視対象装置10が故障していない状態を示す情報であるため、故障の予兆検知におけるホワイトリストと呼ぶこともできる。監視画像データ212は、監視対象装置10から所定の監視間隔で測定された測定データを波形として画像化した情報である。ここで、測定データは、例えば、測定時刻と測定値が対応付けられた時系列データや、測定時における音声データ、振動データ等である。また、測定データを波形として画像化した情報とは、例えば、時系列データを二次元グラフ化した波形の画像データ、測定値の周波数分布を示す波形の画像データ等である。なお、前記画像データは波形に限らず、例えば横軸を時間軸、縦軸を周波数として周波数毎の音等のレベルを色の濃度等で表した画像データ等であってもよい。 The storage unit 21 stores the normal image data 211 and the monitoring image data 212. For example, the storage unit 21 is a non-volatile storage device. The normal image data 211 is information obtained by imaging normal measurement data in the monitored device 10 as a waveform. Further, since the normal image data 211 is information indicating a state in which the monitored device 10 has not failed, it can also be called a white list in detecting a sign of failure. The monitoring image data 212 is information obtained by imaging measurement data measured from the monitoring target device 10 at a predetermined monitoring interval as a waveform. Here, the measurement data is, for example, time-series data in which the measurement time and the measured value are associated with each other, voice data at the time of measurement, vibration data, and the like. Further, the information obtained by imaging the measured data as a waveform is, for example, image data of a waveform obtained by graphing time-series data in a two-dimensional graph, image data of a waveform showing a frequency distribution of measured values, and the like. The image data is not limited to the waveform, and may be, for example, image data in which the horizontal axis is the time axis and the vertical axis is the frequency and the level of sound or the like for each frequency is represented by the color density or the like.

一次判定部22は、監視画像データ212と、正常画像データ211との差分が、第1の範囲外であるか否かを判定する。つまり、一次判定部22は、監視画像データ212と正常画像データ211とを画像として比較し、画像としての差分情報を算出し、差分情報が所定の閾値を超えるか否かを判定する。そして、一次判定部22は、差分情報が所定の閾値を超えると判定した場合、差分が第1の範囲外であると判定するものとする。 The primary determination unit 22 determines whether or not the difference between the monitoring image data 212 and the normal image data 211 is outside the first range. That is, the primary determination unit 22 compares the monitored image data 212 and the normal image data 211 as an image, calculates the difference information as an image, and determines whether or not the difference information exceeds a predetermined threshold value. Then, when the primary determination unit 22 determines that the difference information exceeds a predetermined threshold value, it is determined that the difference is out of the first range.

二次判定部23は、一次判定部22により複数回、差分が第1の範囲外であると判定されたことに基づいて、監視対象装置10の故障の予兆の有無を判定する。つまり、二次判定部23は、一定期間内で一度だけ一次判定部22により差分が第1の範囲外であると判定されたとしても故障の予兆であるとは判定しない。そして、二次判定部23は、一次判定部22により差分が第1の範囲外であると判定されたことが、一定期間内に所定回数以上、又は、一定期間内に連続して発生している場合に、監視対象装置10に故障の予兆があると判定する。 The secondary determination unit 23 determines whether or not there is a sign of failure of the monitored device 10 based on the determination that the difference is out of the first range a plurality of times by the primary determination unit 22. That is, even if the primary determination unit 22 determines that the difference is out of the first range only once within a certain period, the secondary determination unit 23 does not determine that it is a sign of failure. Then, the secondary determination unit 23 determines that the difference is out of the first range by the primary determination unit 22 more than a predetermined number of times within a certain period, or continuously within a certain period. If so, it is determined that the monitored device 10 has a sign of failure.

尚、記憶部21、一次判定部22及び二次判定部23は、同一のコンピュータ装置内で実現されてもよい。その場合、例えば、一次判定部22及び二次判定部23の処理が実装された故障予兆検知プログラムを当該コンピュータ装置の制御部が読み込み実行することで、一次判定部22及び二次判定部23の処理を実現する。また、記憶部21は、外付けのストレージ装置であってもよい。さらに、一次判定部22及び二次判定部23は、2以上のコンピュータ装置により分散して実現されても構わない。 The storage unit 21, the primary determination unit 22, and the secondary determination unit 23 may be realized in the same computer device. In that case, for example, the control unit of the computer device reads and executes the failure sign detection program in which the processes of the primary determination unit 22 and the secondary determination unit 23 are implemented, so that the primary determination unit 22 and the secondary determination unit 23 are executed. Realize the processing. Further, the storage unit 21 may be an external storage device. Further, the primary determination unit 22 and the secondary determination unit 23 may be distributed and realized by two or more computer devices.

図2は、本発明の実施形態1にかかる故障予兆検知方法の流れを示すフローチャートである。前提として、記憶部21には、監視対象装置10から正常時に測定されたデータに基づく波形データである正常画像データ211と、監視対象装置10から監視時に測定されたデータに基づく波形データである監視画像データ212とが予め保存されているものとする。 FIG. 2 is a flowchart showing the flow of the failure sign detection method according to the first embodiment of the present invention. As a premise, the storage unit 21 contains normal image data 211, which is waveform data based on data measured from the monitored device 10 during normal operation, and monitoring, which is waveform data based on data measured from the monitored device 10 during monitoring. It is assumed that the image data 212 and the image data 212 are stored in advance.

まず、一次判定部22は、正常画像データ211と監視画像データ212とを比較して、一次判定を行う(S11)。具体的には、一次判定部22は、記憶部21から正常画像データ211及び監視画像データ212を読み出し、読み出した正常画像データ211及び監視画像データ212のそれぞれを画像認識した結果を比較して差分を数値情報として算出する。そして、一次判定部22は、差分が第1の範囲外であるか否かを判定する(S12)。差分が第1の範囲内であればステップS11へ戻り、次に測定されたデータについて、ステップS11を行う。 First, the primary determination unit 22 compares the normal image data 211 with the monitoring image data 212 and makes a primary determination (S11). Specifically, the primary determination unit 22 reads the normal image data 211 and the monitoring image data 212 from the storage unit 21, compares the results of image recognition of each of the read normal image data 211 and the monitoring image data 212, and makes a difference. Is calculated as numerical information. Then, the primary determination unit 22 determines whether or not the difference is outside the first range (S12). If the difference is within the first range, the process returns to step S11, and then step S11 is performed on the measured data.

一方、差分が第1の範囲外と判定された場合、一次判定部22により複数回、差分が第1の範囲外と判定されたか否かを判定する(S13)。一回目であれば、ステップS11へ戻り、次に測定されたデータについて、ステップS11を行う。 On the other hand, when the difference is determined to be out of the first range, the primary determination unit 22 determines whether or not the difference is determined to be out of the first range a plurality of times (S13). If it is the first time, the process returns to step S11, and then step S11 is performed for the measured data.

一方、複数回であれば、二次判定部23は、二次判定を行う(S14)。具体的には、二次判定部23は、一次判定部22により差分が第1の範囲外であると判定されたことが、一定期間内に所定回数以上、又は、一定期間内に連続して発生している場合に、監視対象装置10に故障の予兆があると判定する。故障の予兆がないと判定した場合、ステップS11へ戻り、次に測定されたデータについて、ステップS11を行う。一方、故障の予兆があると判定した場合、当該処理を終了する。以降、故障の予兆をユーザへ通報等することができる。 On the other hand, if it is a plurality of times, the secondary determination unit 23 makes a secondary determination (S14). Specifically, the secondary determination unit 23 determines that the difference is out of the first range by the primary determination unit 22 more than a predetermined number of times within a certain period, or continuously within a certain period. If it has occurred, it is determined that the monitored device 10 has a sign of failure. If it is determined that there is no sign of failure, the process returns to step S11, and then step S11 is performed for the measured data. On the other hand, if it is determined that there is a sign of failure, the process is terminated. After that, it is possible to notify the user of a sign of failure.

例えば、工場内で稼働する所定の機械が監視対象装置であり、その機械音を測定することにより、当該機械の故障の予兆を検知するものとする。この場合、監視中に作業員の声や工場内のスピーカの音等が測定音に紛れて測定されてしまうことがある。このような測定データの波形は、正常時の機械音の波形とは異なるため、一次判定だけであれば故障の予兆ありとして検知されてしまう。しかしながら、作業員の声等は機械の故障とは無関係であり、しかも一時的なものであることが多い。そのため、例えば、監視間隔が5分程度であれば、監視の度に作業員の声が紛れて測定されることは稀である。そこで、本実施形態1では、所定の監視間隔で測定された測定データの波形に対する一次判定で複数回、検知された場合を対象として二次判定を行うものである。これにより、一時的に異常な波形が検知されてもそれが継続して、または、頻繁に検知されないようであれば、故障の予兆とはみなさないことで、過剰な検知を抑制することができる。 For example, a predetermined machine operating in a factory is a monitored device, and a sign of failure of the machine is detected by measuring the machine sound. In this case, the voice of a worker, the sound of a speaker in a factory, or the like may be mixed with the measurement sound during monitoring. Since the waveform of such measurement data is different from the waveform of the mechanical sound in the normal state, it is detected as a sign of failure if only the primary determination is made. However, the voices of workers and the like are irrelevant to machine failures and are often temporary. Therefore, for example, if the monitoring interval is about 5 minutes, it is rare that the voice of the worker is confused and measured every time the monitoring is performed. Therefore, in the first embodiment, the secondary determination is performed for the case where the waveform of the measurement data measured at a predetermined monitoring interval is detected a plurality of times in the primary determination. As a result, even if an abnormal waveform is detected temporarily, if it continues or is not detected frequently, it can be suppressed from excessive detection by not considering it as a sign of failure. ..

このように、本実施形態1では、単に一回だけホワイトリストに該当しなかったことで故障の予兆と検知するのではなく、複数回発生する事象に限り、故障の予兆として検知している。これにより、突発的な原因で本来故障ではないケースを除外し、誤検知を軽減するため、故障予兆の検知精度を向上させることができる。 As described above, in the first embodiment, it is not detected as a sign of failure simply because it does not correspond to the whitelist only once, but it is detected as a sign of failure only for an event that occurs a plurality of times. As a result, cases that are not originally a failure due to a sudden cause are excluded, and false detection is reduced, so that the accuracy of detecting a failure sign can be improved.

また、故障の予兆検知にホワイトリストを用いることで、予め異常ケースを網羅する必要がなく、未知の異常ケースも検知できる。そして、事前に異常ケースを検知するための動作確認も不要であるため、導入時のコストを軽減できる。 Further, by using the whitelist for detecting the sign of failure, it is not necessary to cover the abnormal cases in advance, and unknown abnormal cases can be detected. Further, since it is not necessary to confirm the operation for detecting an abnormal case in advance, the cost at the time of introduction can be reduced.

<実施形態2>
本実施形態2は、上述した実施形態1の改良例である。すなわち、前記記憶部は、複数種類の前記正常画像データを記憶し、前記一次判定部は、前記監視画像データと、前記複数種類のそれぞれの前記正常画像データとの差分の全てが前記第1の範囲外である場合に、当該差分が前記第1の範囲外であると判定するものである。このように、ホワイトリストに正常ケースを複数種類登録することで、誤検知を軽減することができる。
<Embodiment 2>
The second embodiment is an improved example of the first embodiment described above. That is, the storage unit stores a plurality of types of the normal image data, and the primary determination unit stores all the differences between the monitoring image data and the plurality of types of the normal image data. When it is out of the range, it is determined that the difference is out of the first range. In this way, by registering a plurality of types of normal cases in the white list, false positives can be reduced.

また、前記一次判定部は、前記差分が前記第1の範囲外であると判定した場合に前記二次判定部へその旨を通知し、前記二次判定部は、前記一次判定部からの通知の受付頻度又は当該通知の継続性が所定条件を超える場合に、前記故障の予兆が有ると判定することが望ましい。これにより、実際には異常ではない突発的なケースをある程度の妥当性をもって除外でき、検知精度を向上できる。 Further, when the primary determination unit determines that the difference is out of the first range, the primary determination unit notifies the secondary determination unit to that effect, and the secondary determination unit notifies the secondary determination unit to that effect. It is desirable to determine that there is a sign of the failure when the reception frequency of the above or the continuity of the notification exceeds a predetermined condition. As a result, sudden cases that are not actually abnormal can be excluded with a certain degree of validity, and the detection accuracy can be improved.

さらに、前記二次判定部により前記故障の予兆が有ると判定された場合に、前記監視画像データを表示する表示部をさらに備えることが望ましい。これにより、異常と検知された波形データをユーザが目視できるため、検知の妥当性の判定が容易となる。 Further, it is desirable to further include a display unit for displaying the monitoring image data when the secondary determination unit determines that there is a sign of the failure. As a result, the user can visually check the waveform data detected as an abnormality, so that the validity of the detection can be easily determined.

図3は、本発明の実施形態2にかかる故障予兆検知システム200の構成を示すブロック図である。故障予兆検知システム200は、上述した故障予兆検知システム20を具体化したものであり、監視対象装置10を監視し、監視対象装置10の故障の予兆を検知するための情報システムである。故障予兆検知システム200は、測定部210と、画像変換部220と、一次判定部230と、二次判定部240と、通報部250と、記憶部260とを備える。 FIG. 3 is a block diagram showing the configuration of the failure sign detection system 200 according to the second embodiment of the present invention. The failure sign detection system 200 embodies the failure sign detection system 20 described above, and is an information system for monitoring the monitored device 10 and detecting a failure sign of the monitored device 10. The failure sign detection system 200 includes a measurement unit 210, an image conversion unit 220, a primary determination unit 230, a secondary determination unit 240, a notification unit 250, and a storage unit 260.

記憶部260は、上述した記憶部21の一例であり、測定データ261と、監視画像データ262と、ホワイトリスト263と、差分閾値264と、通知頻度265と、通知継続時間266とを記憶する。測定データ261は、監視対象装置10から測定された音、振動又は匂い等の物理量と測定時刻との組合せの時系列データ等である。監視画像データ262は、上述した監視画像データ212と同等である。ホワイトリスト263は、複数種類の正常画像データを含む情報群である。例えば、測定データ261が音声データの場合、ホワイトリスト263には、純粋な機械(監視対象装置10)の正常な動作音(他の音が混ざらないもの)、監視対象装置10が設置された室内の空調の音と前記機械の正常な動作音とが混在した音、及び、監視対象装置10の動作を停止させた際の、つまり機械音がない状態での空調の音等が挙げられる。さらに空調の音としては、エアコンの弱冷房である場合の冷房音と前記機械の正常な動作音とが混在した音や、エアコンの強冷房である場合の冷房音と前記機械の正常な動作音とが混在した音等を含めて良い。これにより、季節や時間帯ごとに異なる実際の測定音に近い音をホワイトリストとして用いることができる。そのため、故障でないケースを一次判定により精度よく除外できる。 The storage unit 260 is an example of the storage unit 21 described above, and stores measurement data 261, monitoring image data 262, whitelist 263, difference threshold value 264, notification frequency 265, and notification duration 266. The measurement data 261 is time-series data or the like of a combination of physical quantities such as sound, vibration, or odor measured from the monitored device 10 and the measurement time. The surveillance image data 262 is equivalent to the above-mentioned surveillance image data 212. The white list 263 is an information group including a plurality of types of normal image data. For example, when the measurement data 261 is audio data, the whitelist 263 shows the normal operating sound of a pure machine (monitoring target device 10) (one that is not mixed with other sounds), and the room in which the monitoring target device 10 is installed. Examples thereof include a sound in which the sound of the air conditioning and the normal operation sound of the machine are mixed, and the sound of the air conditioning when the operation of the monitored device 10 is stopped, that is, in the state where there is no machine sound. Further, as the sound of the air conditioner, the cooling sound when the air conditioner is weakly cooled and the normal operating sound of the machine are mixed, and the cooling sound when the air conditioner is strongly cooled and the normal operating sound of the machine are used. Sounds in which and are mixed may be included. This makes it possible to use a sound close to the actual measured sound, which differs depending on the season or time zone, as a whitelist. Therefore, cases that are not failures can be accurately excluded by the primary determination.

差分閾値264は、監視画像データ262とホワイトリスト263内の各正常画像データとの各差分が通常と異なることを一次判定により検知するための閾値である。差分閾値264は、複数種類の正常画像データのそれぞれにおいて異なる値であってもよい。 The difference threshold value 264 is a threshold value for detecting that the difference between the monitoring image data 262 and each normal image data in the whitelist 263 is different from the normal one by the primary determination. The difference threshold value 264 may be a different value in each of the plurality of types of normal image data.

通知頻度265は、一定期間内に一次判定部230から二次判定部240へ通知された回数である。言い換えると、通知頻度265は、一定期間内に一次判定部230により差分が差分閾値264を超えたと判定された回数である。通知継続時間266は、測定部210における測定間隔(監視間隔)に対して一次判定部230からの通知が連続している回数又は時間である。 The notification frequency 265 is the number of times the primary determination unit 230 notifies the secondary determination unit 240 within a certain period of time. In other words, the notification frequency 265 is the number of times that the primary determination unit 230 determines that the difference exceeds the difference threshold 264 within a certain period of time. The notification duration 266 is the number or time of consecutive notifications from the primary determination unit 230 with respect to the measurement interval (monitoring interval) in the measurement unit 210.

測定部210は、所定の監視間隔により監視対象装置10における所定の物理量を取得し、測定データ261として記憶部260に保存する。画像変換部220は、記憶部260から測定データ261を読み出し、読み出した測定データ261を二次元グラフ等により波形として表示した場合の画像データに変換し、監視画像データ262として記憶部260に保存する。 The measurement unit 210 acquires a predetermined physical quantity in the monitored device 10 at a predetermined monitoring interval and stores it in the storage unit 260 as measurement data 261. The image conversion unit 220 reads the measurement data 261 from the storage unit 260, converts the read measurement data 261 into image data when displayed as a waveform by a two-dimensional graph or the like, and stores it in the storage unit 260 as the monitoring image data 262. ..

一次判定部230は、上述した一次判定部22の一例であり、監視画像データ262とホワイトリスト263内の各正常画像データとを比較し、それぞれの差分を算出する。そして、一次判定部230は、算出した差分のそれぞれが差分閾値264を超えるか否かを判定する。そして、一次判定部230は、差分の全てが差分閾値264を超えると判定した場合、二次判定部240へその旨を通知する。 The primary determination unit 230 is an example of the above-mentioned primary determination unit 22, and compares the monitoring image data 262 with each normal image data in the whitelist 263 and calculates the difference between them. Then, the primary determination unit 230 determines whether or not each of the calculated differences exceeds the difference threshold value 264. Then, when the primary determination unit 230 determines that all of the differences exceed the difference threshold value 264, the primary determination unit 230 notifies the secondary determination unit 240 to that effect.

二次判定部240は、上述した二次判定部23の一例であり、一次判定部230からの通知の受付頻度又は当該通知の継続性が所定条件を超える場合に、監視対象装置10に故障の予兆が有ると判定する。そして、二次判定部240は、監視対象装置10に故障の予兆が有ると判定した場合、通報部250に対して故障予兆通知を出力する。すなわち、二次判定部240は、一定期間内に一次判定部230からの通知を受ける度に、通知頻度265を加算する。そして、二次判定部240は、通知頻度265が所定回数を超えた場合に、通報部250へ故障予兆通知を出力するまた、二次判定部240は、一定期間内に一次判定部230からの通知を受ける度に、測定部210の監視間隔において連続して通知を受け付けた場合に通知継続時間266の計測を続ける。または、二次判定部240は、通知継続時間266の継続回数を加算する。そして、二次判定部240は、通知継続時間266が所定時間又は所定回数を超える場合に、通報部250へ故障予兆通知を出力する。尚、二次判定部240は、通知頻度265及び通知継続時間266のいずれか一方又は両方を用いて、二次判定を行っても構わない。 The secondary determination unit 240 is an example of the above-mentioned secondary determination unit 23, and when the frequency of receiving notifications from the primary determination unit 230 or the continuity of the notifications exceeds a predetermined condition, the monitored device 10 fails. Judge that there is a sign. Then, when the secondary determination unit 240 determines that the monitored device 10 has a failure sign, the secondary determination unit 240 outputs a failure sign notification to the reporting unit 250. That is, the secondary determination unit 240 adds the notification frequency 265 each time the notification from the primary determination unit 230 is received within a certain period. Then, the secondary determination unit 240 outputs a failure sign notification to the notification unit 250 when the notification frequency 265 exceeds a predetermined number of times, and the secondary determination unit 240 is from the primary determination unit 230 within a certain period of time. Every time a notification is received, the measurement of the notification duration 266 is continued when the notification is continuously received at the monitoring interval of the measurement unit 210. Alternatively, the secondary determination unit 240 adds the number of continuations of the notification duration 266. Then, when the notification duration 266 exceeds a predetermined time or a predetermined number of times, the secondary determination unit 240 outputs a failure sign notification to the notification unit 250. The secondary determination unit 240 may perform the secondary determination using either or both of the notification frequency 265 and the notification duration 266.

通報部250は、二次判定部240からの故障予兆検知に応じて各種の通報を行う。例えば、通報部250は、表示部251と、警報部252と、メール送信部253とを備える。表示部251は、画面等の表示装置であり、二次判定部240から故障予兆通知を受け付けた場合に、該当する監視画像データ262を記憶部260から読み出し、読み出した監視画像データ262を画面に表示する。これにより、監視対象装置10の故障監視を行うユーザは、故障の予兆と検知された経緯を容易に把握することができ、速やかにその後の対応を取ることができる。 The reporting unit 250 makes various notifications according to the failure sign detection from the secondary determination unit 240. For example, the reporting unit 250 includes a display unit 251, an alarm unit 252, and a mail transmitting unit 253. The display unit 251 is a display device such as a screen, and when a failure sign notification is received from the secondary determination unit 240, the corresponding monitoring image data 262 is read from the storage unit 260, and the read monitoring image data 262 is displayed on the screen. indicate. As a result, the user who monitors the failure of the monitored device 10 can easily grasp the sign of the failure and the process of detection, and can promptly take a subsequent action.

警報部252は、二次判定部240から故障予兆通知を受け付けた場合に、ユーザに対して音等により警報出力を行う。メール送信部253は、二次判定部240から故障予兆通知を受け付けた場合に、予め設定されたユーザのメールアドレスに対して監視対象装置10に故障の予兆が検知された旨を示す電子メールを送信する。尚、メール送信部253は、送信する電子メールに監視画像データ262を含めても構わない。 When the alarm unit 252 receives the failure sign notification from the secondary determination unit 240, the alarm unit 252 outputs an alarm to the user by sound or the like. When the mail transmission unit 253 receives the failure sign notification from the secondary determination unit 240, the mail transmission unit 253 sends an e-mail indicating that the failure sign has been detected in the monitored device 10 for the preset user's e-mail address. Send. The mail transmission unit 253 may include the monitoring image data 262 in the e-mail to be transmitted.

図4は、本発明の実施形態2にかかる故障予兆検知方法の流れを示すフローチャートである。前提として、記憶部260には、複数種類の正常画像データを含むホワイトリスト263と、差分閾値264とが少なくとも予め保存されているものとする。 FIG. 4 is a flowchart showing the flow of the failure sign detection method according to the second embodiment of the present invention. As a premise, it is assumed that the white list 263 including a plurality of types of normal image data and the difference threshold value 264 are stored in the storage unit 260 at least in advance.

まず、測定部210は、所定の監視間隔で監視対象装置10を測定する(S21)。そして、測定部210は、監視対象装置10から測定されたデータを測定データ261として記憶部260に保存する。次に、画像変換部220は、記憶部260から読み出した測定データ261を波形として画像化し、監視画像データ262として記憶部260に保存する(S22)。 First, the measuring unit 210 measures the monitored device 10 at predetermined monitoring intervals (S21). Then, the measuring unit 210 stores the data measured from the monitored device 10 as the measurement data 261 in the storage unit 260. Next, the image conversion unit 220 images the measurement data 261 read from the storage unit 260 as a waveform and stores it in the storage unit 260 as the monitoring image data 262 (S22).

続いて、一次判定部230は、監視画像データ262と、ホワイトリスト263内の各正常画像データとを比較し、それぞれの差分を算出する(S23)。そして、一次判定部230は、算出した差分の全てが差分閾値264を超えるか否かを判定する(S24)。 Subsequently, the primary determination unit 230 compares the monitoring image data 262 with each normal image data in the whitelist 263, and calculates the difference between them (S23). Then, the primary determination unit 230 determines whether or not all of the calculated differences exceed the difference threshold value 264 (S24).

ステップS24で差分の一部でも差分閾値264を超えないと判定した場合、ステップS21へ戻る。一方、ステップS24で差分の全てが差分閾値264を超えると判定した場合、一次判定部230は、その旨を二次判定部240へ通知する(S25)。 If it is determined in step S24 that even a part of the difference does not exceed the difference threshold value 264, the process returns to step S21. On the other hand, when it is determined in step S24 that all of the differences exceed the difference threshold value 264, the primary determination unit 230 notifies the secondary determination unit 240 to that effect (S25).

その後、二次判定部240は、一次判定部230からの通知に応じて、通知頻度265及び通知継続時間266の算出を行う(S26)。そして、二次判定部240は、通知頻度265が所定回数を超えるか、又は、通知継続時間266が所定時間を超えるか否かを判定する(S27)。ステップS27において、いずれの条件も超えないと判定された場合、ステップS21へ戻る。一方、ステップS27において、いずれかの条件を超えると判定された場合、二次判定部240は、通報部250へ故障予兆通知を行う(S28)。 After that, the secondary determination unit 240 calculates the notification frequency 265 and the notification duration 266 in response to the notification from the primary determination unit 230 (S26). Then, the secondary determination unit 240 determines whether the notification frequency 265 exceeds the predetermined number of times, or the notification continuation time 266 exceeds the predetermined time (S27). If it is determined in step S27 that none of the conditions is exceeded, the process returns to step S21. On the other hand, if it is determined in step S27 that any of the conditions is exceeded, the secondary determination unit 240 notifies the notification unit 250 of the failure sign (S28).

通報部250は、二次判定部240からの故障予兆通知に応じて、表示、警報及びメール送信を行う(S29)。すなわち、表示部251は、該当する監視画像データ262を記憶部260から読み出し、画面に表示する。警報部252は、警報出力を行う。メール送信部253は、予め設定されたユーザのメールアドレスに対して故障の予兆を検知された旨を示す電子メールを送信する。 The reporting unit 250 displays, alerts, and sends an e-mail in response to a failure sign notification from the secondary determination unit 240 (S29). That is, the display unit 251 reads the corresponding monitoring image data 262 from the storage unit 260 and displays it on the screen. The alarm unit 252 outputs an alarm. The mail transmission unit 253 sends an e-mail indicating that a sign of failure has been detected to a preset user's e-mail address.

このように本実施形態2により、ホワイトリストに正常ケースを複数種類登録することで、例えば、監視対象の機械音以外の様々な環境音(空調等)を加味して一次判定を行うことができる。そのため、一次判定による誤検知を軽減することができる。 As described above, by registering a plurality of types of normal cases in the white list according to the second embodiment, for example, various environmental sounds (air conditioning, etc.) other than the mechanical sound to be monitored can be added to perform the primary determination. .. Therefore, it is possible to reduce erroneous detection due to the primary determination.

また、一次判定により通知された統計情報を用いて二次判定を行うことで、その通知の傾向により熟練者が故障の予兆を見分けるような精度の良い検知を行うことができる。さらに、異常として検知された波形データをユーザが目視できるため、検知の妥当性の判定が容易となる。 Further, by performing the secondary determination using the statistical information notified by the primary determination, it is possible to perform accurate detection so that the expert can identify the sign of failure based on the tendency of the notification. Further, since the waveform data detected as an abnormality can be visually checked by the user, it becomes easy to determine the validity of the detection.

<実施形態3>
本実施形態3は、上述した実施形態2の改良例である。すなわち、前記監視対象装置から測定された測定データを波形として画像化した第1画像データを、前記正常画像データとして前記記憶部に追加登録する登録部をさらに備えるものである。これにより、ホワイトリストへの登録が容易となる。また、事前に異常データの準備が不要であり、様々な状況の正常データを容易に登録可能となる。
<Embodiment 3>
The third embodiment is an improved example of the second embodiment described above. That is, it further includes a registration unit for additionally registering the first image data, which is an image of the measurement data measured from the monitoring target device as a waveform, in the storage unit as the normal image data. This facilitates whitelisting. In addition, it is not necessary to prepare abnormal data in advance, and normal data in various situations can be easily registered.

さらに、前記登録部は、前記追加登録する前に、前記第1画像データと前記記憶部に登録済みの前記正常画像データである第2画像データとを比較し、前記第1画像データと前記第2画像データとの差分が第2の範囲内である場合、当該第1画像データと当該第2画像データのうち一方を削除し、他方を前記記憶部に登録することが望ましい。これにより、重複登録を防止し、ホワイトリストのデータ量を抑制できる。 Further, the registration unit compares the first image data with the second image data which is the normal image data registered in the storage unit before the additional registration, and the first image data and the first image data. When the difference from the two image data is within the second range, it is desirable to delete one of the first image data and the second image data and register the other in the storage unit. As a result, duplicate registration can be prevented and the amount of whitelist data can be suppressed.

図5は、本発明の実施形態3にかかる故障予兆検知システム200aの構成を示すブロック図である。尚、図5では、図3と同様の構成については適宜、記載を省略し、説明も省略するものとする。 FIG. 5 is a block diagram showing the configuration of the failure sign detection system 200a according to the third embodiment of the present invention. In FIG. 5, the description of the same configuration as that of FIG. 3 will be omitted as appropriate, and the description will also be omitted.

故障予兆検知システム200aは、上述した故障予兆検知システム200の構成に加え、登録部270を備える。登録部270は、監視対象装置10から測定された測定データ261を波形として画像化した測定画像データ267(第1画像データ)を、ホワイトリスト263の正常画像データとして記憶部260に追加登録する。ここで、登録部270は、追加登録する前に、第1画像データと記憶部260に登録済みの(ホワイトリスト263内の)正常画像データである第2画像データとを比較し、第1画像データと第2画像データとの差分が重複判定閾値268(第2の範囲)内である場合、第1画像データと第2画像データのうち一方を削除し、他方を記憶部260に登録する。 The failure sign detection system 200a includes a registration unit 270 in addition to the configuration of the failure sign detection system 200 described above. The registration unit 270 additionally registers the measurement image data 267 (first image data), which is an image of the measurement data 261 measured from the monitoring target device 10 as a waveform, in the storage unit 260 as normal image data of the whitelist 263. Here, the registration unit 270 compares the first image data with the second image data (in the white list 263) registered in the storage unit 260 before additional registration, and the first image. When the difference between the data and the second image data is within the duplication determination threshold 268 (second range), one of the first image data and the second image data is deleted, and the other is registered in the storage unit 260.

図6は、本発明の実施形態3にかかるホワイトリスト登録処理の流れを示すフローチャートである。前提として、記憶部260には、1以上の正常画像データを含むホワイトリスト263と、重複判定閾値268とが少なくとも予め保存されているものとする。また、本実施形態3にかかるホワイトリスト登録処理は、上述した実施形態2にかかる故障予兆検知方法の事前準備として実施することができる。また、当該ホワイトリスト登録処理は、図4のステップS21の監視間隔の間に実施しても構わない。 FIG. 6 is a flowchart showing the flow of the whitelist registration process according to the third embodiment of the present invention. As a premise, it is assumed that at least the white list 263 including one or more normal image data and the duplication determination threshold value 268 are stored in the storage unit 260 in advance. Further, the whitelist registration process according to the third embodiment can be carried out as a preliminary preparation for the failure sign detection method according to the second embodiment described above. Further, the whitelist registration process may be performed during the monitoring interval of step S21 in FIG.

まず、測定部210は、監視対象装置10の通常動作時に、測定を行う(S31)。そして、測定部210は、監視対象装置10から測定されたデータを測定データ261として記憶部260に保存する。次に、画像変換部220は、記憶部260から読み出した測定データ261を波形として画像化し、測定画像データ267として記憶部260に保存する(S32)。 First, the measuring unit 210 makes a measurement during normal operation of the monitored device 10 (S31). Then, the measuring unit 210 stores the data measured from the monitored device 10 as the measurement data 261 in the storage unit 260. Next, the image conversion unit 220 images the measurement data 261 read from the storage unit 260 as a waveform and stores it in the storage unit 260 as the measurement image data 267 (S32).

続いて、登録部270は、測定画像データ267と、ホワイトリスト263内の各正常画像データとを比較し、それぞれの差分を算出する(S33)。そして、登録部270は、算出した差分の全てが重複判定閾値268を超えるか否かを判定する(S34)。 Subsequently, the registration unit 270 compares the measured image data 267 with each normal image data in the whitelist 263, and calculates the difference between them (S33). Then, the registration unit 270 determines whether or not all of the calculated differences exceed the duplication determination threshold value 268 (S34).

ステップS34で差分の全てが重複判定閾値268を超えると判定した場合、登録部270は、測定画像データ267をホワイトリスト263に追加して登録する(S35)。一方、ステップS34で差分の一部でも重複判定閾値268の範囲内であると判定した場合、登録部270は、測定画像データ267を削除し(S36)、ホワイトリスト263への登録を行わない。尚、ステップS36において、登録部270は、測定画像データ267を削除せず、測定画像データ267と重複すると判定された正常画像データを削除し、測定画像データ267をホワイトリスト263に追加登録してもよい。 When it is determined in step S34 that all of the differences exceed the overlap determination threshold value 268, the registration unit 270 adds the measurement image data 267 to the whitelist 263 and registers it (S35). On the other hand, when it is determined in step S34 that even a part of the difference is within the range of the duplication determination threshold value 268, the registration unit 270 deletes the measurement image data 267 (S36) and does not register it in the white list 263. In step S36, the registration unit 270 does not delete the measurement image data 267, deletes the normal image data determined to overlap with the measurement image data 267, and additionally registers the measurement image data 267 in the whitelist 263. May be good.

このように、本実施形態3により、ホワイトリストへの正常画像データの重複登録を防止し、ホワイトリストのデータ量を抑制できる。また、事前に異常データの準備をせずとも、監視対象装置10の通常動作時に測定したデータを容易にホワイトリストへ登録することができる。そのため、正常時の様々な状況について網羅することが容易となる。 As described above, according to the third embodiment, it is possible to prevent duplicate registration of normal image data in the whitelist and suppress the amount of data in the whitelist. Further, the data measured during the normal operation of the monitored device 10 can be easily registered in the white list without preparing the abnormal data in advance. Therefore, it becomes easy to cover various situations at normal times.

<実施形態4>
本実施形態4は、上述した実施形態2又は3の改良例である。すなわち、実施形態2に対して、前記表示部に表示された前記監視画像データに対して正常である旨の回答を受け付けた場合に、当該監視画像データを前記正常画像データとして前記記憶部に追加登録する登録部をさらに備えるものである。または、実施形態3に対して、前記登録部は、前記表示部に表示された前記監視画像データに対して正常である旨の回答を受け付けた場合に、当該監視画像データを前記第1画像データとし、当該第1画像データを前記正常画像データとして前記記憶部に追加登録するものである。これにより、故障予兆の検知結果に対するユーザによる判定結果のフィードバックにより検知精度を向上できる。
<Embodiment 4>
The fourth embodiment is an improved example of the second or third embodiment described above. That is, when the response to the embodiment 2 that the monitoring image data displayed on the display unit is normal is received, the monitoring image data is added to the storage unit as the normal image data. It also has a registration unit for registration. Alternatively, when the registration unit receives a response to the third embodiment that the monitoring image data displayed on the display unit is normal, the monitoring image data is used as the first image data. The first image data is additionally registered in the storage unit as the normal image data. As a result, the detection accuracy can be improved by the feedback of the determination result by the user with respect to the detection result of the failure sign.

図7は、本発明の実施形態4にかかる故障予兆検知システム200bの構成を示すブロック図である。尚、図7では、図3と同様の構成については適宜、記載を省略し、説明も省略するものとする。 FIG. 7 is a block diagram showing the configuration of the failure sign detection system 200b according to the fourth embodiment of the present invention. In FIG. 7, the description of the same configuration as that of FIG. 3 will be omitted as appropriate, and the description will also be omitted.

故障予兆検知システム200bは、上述した故障予兆検知システム200の構成に加え、受付部281と、登録部282とを備える。尚、登録部282は、図5の登録部270と共用しても構わない。受付部281は、ユーザUから、表示部251に表示された監視画像データ262に対して正常(故障の予兆なし)又は異常(故障の予兆あり)である旨の回答を受け付ける。登録部282は、受付部281において正常である旨の回答を受け付けた場合に、監視画像データ262をホワイトリスト263内の正常画像データとして記憶部260に追加登録する。 The failure sign detection system 200b includes a reception unit 281 and a registration unit 282 in addition to the configuration of the failure sign detection system 200 described above. The registration unit 282 may be shared with the registration unit 270 of FIG. The reception unit 281 receives a reply from the user U that the monitoring image data 262 displayed on the display unit 251 is normal (no sign of failure) or abnormal (presence of failure). When the reception unit 281 receives a reply indicating that it is normal, the registration unit 282 additionally registers the monitoring image data 262 as normal image data in the whitelist 263 in the storage unit 260.

図8は、本発明の実施形態4にかかるフィードバック処理の流れを示すフローチャートである。前提として、図4のステップS29により、故障の予兆が有るとして検知された監視画像データ262が表示部251に表示されているものとする。 FIG. 8 is a flowchart showing the flow of feedback processing according to the fourth embodiment of the present invention. As a premise, it is assumed that the monitoring image data 262 detected by step S29 in FIG. 4 as having a sign of failure is displayed on the display unit 251.

まず、監視対象装置10の故障監視を行うユーザUは、表示部251に表示された監視画像データ262を目視して、監視画像データ262が故障の予兆を示すか否かを判断する。そして、受付部281は、ユーザUから監視画像データ262に対する正常又は異常である旨の回答(フィードバック)を受け付ける(S41)。 First, the user U who monitors the failure of the monitored device 10 visually checks the monitoring image data 262 displayed on the display unit 251 and determines whether or not the monitoring image data 262 shows a sign of failure. Then, the reception unit 281 receives a response (feedback) from the user U to the effect that the monitoring image data 262 is normal or abnormal (S41).

ここで、回答が監視画像データ262が正常データ、つまり、誤検知であることを示す場合、登録部282は、監視画像データ262をホワイトリスト263内の正常画像データとして記憶部260に追加登録する(S43)。一方、回答が監視画像データ262が異常データ、つまり、検知が正しく、故障予兆の可能性があることを示す場合、登録部282は、監視画像データ262の追加登録を行わない。例えば、登録部282は、監視画像データ262を削除する。 Here, when the answer indicates that the monitored image data 262 is normal data, that is, false detection, the registration unit 282 additionally registers the monitored image data 262 as normal image data in the whitelist 263 in the storage unit 260. (S43). On the other hand, when the answer indicates that the monitoring image data 262 is abnormal data, that is, the detection is correct and there is a possibility of a failure sign, the registration unit 282 does not additionally register the monitoring image data 262. For example, the registration unit 282 deletes the monitoring image data 262.

このように、本実施形態4により、故障予兆の検知結果に対するユーザによる判定結果のフィードバックにより検知精度を向上できる。 As described above, according to the fourth embodiment, the detection accuracy can be improved by the feedback of the determination result by the user with respect to the detection result of the failure sign.

<実施形態5>
本実施形態5は、上述した実施形態3又は4の変形例である。すなわち、前記登録部は、前記追加登録する前に、前記第1画像データと前記記憶部に登録済みの前記正常画像データである第2画像データとを比較し、前記第1画像データと前記第2画像データとの差分が第2の範囲内である場合、当該第1画像データと当該第2画像データとを統合して統合画像データを生成し、当該統合画像データを前記正常画像データとして前記記憶部に追加登録し、かつ、前記第1の範囲の幅を調整するものである。尚、前記第1画像データを、実施形態4における正常である旨の回答を受け付けた、前記表示部に表示された前記監視画像データとしてもよい。これにより、類似ケースをまとめて、その周辺を正常ケースと判定することで、ホワイトリストのデータ量を抑制しつつ、検知精度を向上できる。
<Embodiment 5>
The fifth embodiment is a modification of the third or fourth embodiment described above. That is, before the additional registration, the registration unit compares the first image data with the second image data which is the normal image data registered in the storage unit, and the first image data and the first image data. 2 When the difference from the image data is within the second range, the first image data and the second image data are integrated to generate integrated image data, and the integrated image data is used as the normal image data. It is additionally registered in the storage unit and the width of the first range is adjusted. The first image data may be the monitoring image data displayed on the display unit, which has received the reply that it is normal in the fourth embodiment. As a result, the detection accuracy can be improved while suppressing the amount of data in the whitelist by collecting similar cases and determining the surroundings as normal cases.

図9は、本発明の実施形態5にかかる故障予兆検知システム200cの構成を示すブロック図である。尚、図9では、図5と同様の構成については適宜、記載を省略し、説明も省略するものとする。登録部270aは、上述した登録部270と同様に、追加登録する前に、測定画像データ267(第1画像データ)と記憶部260に登録済みの(ホワイトリスト263内の)正常画像データである第2画像データとを比較する。そして、第1画像データと第2画像データとの差分が重複判定閾値268(第2の範囲)内である場合、登録部270aは、第1画像データと第2画像データとを統合して統合画像データを生成し、当該統合画像データをホワイトリスト263内の正常画像データとして記憶部260に追加登録する。また、登録部270aは、差分閾値264の値、つまり、第1の範囲の幅を調整する。 FIG. 9 is a block diagram showing the configuration of the failure sign detection system 200c according to the fifth embodiment of the present invention. In FIG. 9, the description of the same configuration as that of FIG. 5 is omitted as appropriate, and the description is also omitted. Similar to the registration unit 270 described above, the registration unit 270a is the measurement image data 267 (first image data) and the normal image data (in the whitelist 263) registered in the storage unit 260 before the additional registration. Compare with the second image data. Then, when the difference between the first image data and the second image data is within the overlap determination threshold 268 (second range), the registration unit 270a integrates and integrates the first image data and the second image data. Image data is generated, and the integrated image data is additionally registered in the storage unit 260 as normal image data in the white list 263. Further, the registration unit 270a adjusts the value of the difference threshold value 264, that is, the width of the first range.

図10は、本発明の実施形態5にかかるホワイトリスト登録処理の流れを示すフローチャートである。尚、ステップS31からS35までは、上述した図6と同等であるため、説明を省略する。 FIG. 10 is a flowchart showing the flow of the whitelist registration process according to the fifth embodiment of the present invention. Since steps S31 to S35 are the same as those in FIG. 6 described above, the description thereof will be omitted.

ここで、ステップS34で差分の一部でも重複判定閾値268の範囲内であると判定した場合、登録部270aは、追加登録する前に、測定画像データ267と、重複判定閾値268の範囲内と判定された正常画像データとを統合して統合画像データを生成する(S37)。そして、登録部270aは、統合画像データをホワイトリスト263に追加登録する(S38)。また、登録部270aは、測定画像データ267と重複判定閾値268の範囲内と判定された正常画像データとを記憶部260から削除する(S39)。その後、登録部270aは、差分閾値264を調整する(S40)。具体的には、登録部270aは、測定画像データ267から元の差分閾値264分離れた場合と、重複判定閾値268の範囲内と判定された正常画像データから元の差分閾値264分離れた場合とのいずれも含まれるように、差分閾値264を増加する。つまり、第1の範囲を拡大する。 Here, when it is determined in step S34 that even a part of the difference is within the range of the duplication determination threshold value 268, the registration unit 270a determines that the measurement image data 267 and the duplication determination threshold value 268 are within the range before additional registration. The determined normal image data is integrated to generate integrated image data (S37). Then, the registration unit 270a additionally registers the integrated image data in the white list 263 (S38). Further, the registration unit 270a deletes the measurement image data 267 and the normal image data determined to be within the range of the duplication determination threshold value 268 from the storage unit 260 (S39). After that, the registration unit 270a adjusts the difference threshold value 264 (S40). Specifically, the registration unit 270a separates the original difference threshold value 264 from the measurement image data 267 and the original difference threshold value 264 from the normal image data determined to be within the range of the overlap determination threshold value 268. The difference threshold 264 is increased so that both of the above are included. That is, the first range is expanded.

このように、本実施形態5により、類似する波形データをまとめて、その周辺を正常ケースと判定することで、ホワイトリストのデータ量を抑制しつつ、検知精度を向上できる。 As described above, according to the fifth embodiment, by collecting similar waveform data and determining the periphery thereof as a normal case, it is possible to improve the detection accuracy while suppressing the amount of data in the white list.

<実施形態6>
本実施形態6は、上述した実施形態2から5の改良例である。すなわち、ホワイトリストとして登録された各正常画像データのそれぞれにその属性情報を対応付けるものである。例えば、各正常画像データにその特徴を示すテキスト情報を対応付ける。テキスト情報としては、例えば、エアコンが弱冷房である場合の監視対象装置10の正常な動作音、といったものである。また、実施形態4の受付部281がユーザUからの回答として、テキスト情報を受け付け、登録部282が監視画像データ262をホワイトリスト263への追加登録する際に併せて、受け付けたテキスト情報を対応付けるとよい。
<Embodiment 6>
The sixth embodiment is an improved example of the above-mentioned embodiments 2 to 5. That is, the attribute information is associated with each of the normal image data registered as the white list. For example, each normal image data is associated with text information indicating its characteristics. The text information is, for example, the normal operating sound of the monitored device 10 when the air conditioner is weakly cooled. Further, when the reception unit 281 of the fourth embodiment receives text information as a reply from the user U and the registration unit 282 additionally registers the monitoring image data 262 to the whitelist 263, the received text information is associated with the reception unit 281. It is good.

このように、本実施形態6により、ユーザUがホワイトリスト263に登録された各正常画像データの属性を容易に把握できるため、ユーザUによるホワイトリスト263のメンテナンス性を向上することができる。 As described above, according to the sixth embodiment, the user U can easily grasp the attributes of each normal image data registered in the whitelist 263, so that the maintainability of the whitelist 263 by the user U can be improved.

<その他の実施形態>
なお、本発明は上記実施形態に限られたものではなく、趣旨を逸脱しない範囲で適宜変更することが可能である。
<Other embodiments>
The present invention is not limited to the above embodiment, and can be appropriately modified without departing from the spirit.

また、上述の実施形態では、本発明をハードウェアの構成として説明したが、本発明は、これに限定されるものではない。本発明は、任意の処理を、CPU(Central Processing Unit)にコンピュータプログラムを実行させることにより実現することも可能である。 Further, in the above-described embodiment, the present invention has been described as a hardware configuration, but the present invention is not limited thereto. The present invention can also realize arbitrary processing by causing a CPU (Central Processing Unit) to execute a computer program.

上述の例において、プログラムは、様々なタイプの非一時的なコンピュータ可読媒体(non-transitory computer readable medium)を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体(tangible storage medium)を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体(例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ)、光磁気記録媒体(例えば光磁気ディスク)、CD-ROM(Read Only Memory)、CD-R、CD-R/W、DVD(Digital Versatile Disc)、半導体メモリ(例えば、マスクROM、PROM(Programmable ROM)、EPROM(Erasable PROM)、フラッシュROM、RAM(Random Access Memory))を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体(transitory computer readable medium)によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。 In the above example, the program can be stored and supplied to the computer using various types of non-transitory computer readable medium. Non-temporary computer-readable media include various types of tangible storage media. Examples of non-temporary computer readable media include magnetic recording media (eg, flexible disks, magnetic tapes, hard disk drives), optomagnetic recording media (eg, optomagnetic disks), CD-ROMs (Read Only Memory), CD-Rs. Includes CD-R / W, DVD (Digital Versatile Disc), semiconductor memory (eg, mask ROM, PROM (Programmable ROM), EPROM (Erasable PROM), flash ROM, RAM (Random Access Memory)). The program may also be supplied to the computer by various types of transient computer readable medium. Examples of temporary computer readable media include electrical, optical, and electromagnetic waves. The temporary computer-readable medium can supply the program to the computer via a wired communication path such as an electric wire and an optical fiber, or a wireless communication path.

10 監視対象装置
20 故障予兆検知システム
21 記憶部
211 正常画像データ
212 監視画像データ
22 一次判定部
23 二次判定部
200 故障予兆検知システム
210 測定部
220 画像変換部
230 一次判定部
240 二次判定部
250 通報部
251 表示部
252 警報部
253 メール送信部
260 記憶部
261 測定データ
262 監視画像データ
263 ホワイトリスト
264 差分閾値
265 通知頻度
266 通知継続時間
200a 故障予兆検知システム
270 登録部
267 測定画像データ
268 重複判定閾値
200b 故障予兆検知システム
281 受付部
282 登録部
200c 故障予兆検知システム
270a 登録部
U ユーザ
10 Monitored device 20 Failure sign detection system 21 Storage unit 211 Normal image data 212 Monitoring image data 22 Primary judgment unit 23 Secondary judgment unit 200 Failure sign detection system 210 Measuring unit 220 Image conversion unit 230 Primary judgment unit 240 Secondary judgment unit 250 Notification unit 251 Display unit 252 Alarm unit 253 Mail transmission unit 260 Storage unit 261 Measurement data 262 Monitoring image data 263 White list 264 Difference threshold 265 Notification frequency 266 Notification duration 200a Failure sign detection system 270 Registration unit 267 Measurement image data 268 Duplicate Judgment threshold 200b Failure sign detection system 281 Reception section 282 Registration section 200c Failure sign detection system 270a Registration section U User

Claims (10)

監視対象装置から所定の監視間隔で測定された時系列データである測定データを表示部に表示した場合の画像データに変換する画像変換部と、
前記監視対象装置における正常時の測定データが前記画像変換部により変換された正常画像データを記憶する記憶部と、
前記測定データが前記画像変換部により変換された監視画像データと、前記正常画像データとの差分が、第1の範囲外であるか否かを判定する一次判定部と、
前記一次判定部により複数回、前記差分が前記第1の範囲外であると判定されたことに基づいて、前記監視対象装置の故障の予兆の有無を判定する二次判定部と、
を備える故障予兆検知システム。
An image conversion unit that converts measurement data, which is time-series data measured from a monitored device at a predetermined monitoring interval, into image data when displayed on the display unit, and an image conversion unit.
A storage unit that stores normal image data in which normal measurement data in the monitored device is converted by the image conversion unit, and a storage unit.
A primary determination unit for determining whether or not the difference between the monitoring image data whose measurement data is converted by the image conversion unit and the normal image data is outside the first range.
A secondary determination unit that determines whether or not there is a sign of failure of the monitored device based on the determination that the difference is out of the first range a plurality of times by the primary determination unit.
A failure sign detection system equipped with.
前記記憶部は、複数種類の前記正常画像データを記憶し、
前記一次判定部は、前記監視画像データと、前記複数種類のそれぞれの前記正常画像データとの前記差分の全てが前記第1の範囲外である場合に、当該差分が前記第1の範囲外であると判定する
請求項1に記載の故障予兆検知システム。
The storage unit stores a plurality of types of the normal image data, and stores the normal image data.
When the difference between the monitoring image data and the normal image data of each of the plurality of types is outside the first range, the primary determination unit determines that the difference is outside the first range. The failure sign detection system according to claim 1.
前記一次判定部は、
前記差分が前記第1の範囲外であると判定した場合に前記二次判定部へその旨を通知し、
前記二次判定部は、
前記一次判定部からの通知の受付頻度又は当該通知の継続性が所定条件を超える場合に、前記故障の予兆が有ると判定する
請求項1又は2に記載の故障予兆検知システム。
The primary determination unit is
When it is determined that the difference is out of the first range, the secondary determination unit is notified to that effect.
The secondary determination unit is
The failure sign detection system according to claim 1 or 2, wherein it is determined that there is a sign of failure when the frequency of receiving notifications from the primary determination unit or the continuity of the notification exceeds a predetermined condition.
前記監視対象装置から正常時に測定された前記測定データが前記画像変換部により変換された第1画像データを、前記正常画像データとして前記記憶部に追加登録する登録部をさらに備える
請求項1乃至3のいずれか1項に記載の故障予兆検知システム。
Claims 1 to 3 further include a registration unit for additionally registering the first image data obtained by converting the measurement data measured in a normal state from the monitored device to the image conversion unit as the normal image data in the storage unit. The failure sign detection system according to any one of the above items.
前記登録部は、
前記追加登録する前に、前記第1画像データと前記記憶部に登録済みの前記正常画像データである第2画像データとを比較し、
前記第1画像データと前記第2画像データとの前記差分が第2の範囲内である場合、当該第1画像データと当該第2画像データのうち一方を削除し、他方を前記記憶部に登録する
請求項4に記載の故障予兆検知システム。
The registration unit
Before the additional registration, the first image data and the second image data, which is the normal image data registered in the storage unit, are compared.
When the difference between the first image data and the second image data is within the second range, one of the first image data and the second image data is deleted, and the other is registered in the storage unit. The failure sign detection system according to claim 4.
前記登録部は、
前記追加登録する前に、前記第1画像データと前記記憶部に登録済みの前記正常画像データである第2画像データとを比較し、
前記第1画像データと前記第2画像データとの前記差分が第2の範囲内である場合、当該第1画像データと当該第2画像データとを統合して統合画像データを生成し、当該統合画像データを前記正常画像データとして前記記憶部に追加登録し、かつ、前記第1の範囲の幅を調整する
請求項4に記載の故障予兆検知システム。
The registration unit
Before the additional registration, the first image data and the second image data, which is the normal image data registered in the storage unit, are compared.
When the difference between the first image data and the second image data is within the second range, the first image data and the second image data are integrated to generate integrated image data, and the integration is performed. The failure sign detection system according to claim 4, wherein the image data is additionally registered in the storage unit as the normal image data, and the width of the first range is adjusted.
前記二次判定部により前記故障の予兆が有ると判定された場合に、前記表示部が前記監視画像データを表示する
請求項1乃至6のいずれか1項に記載の故障予兆検知システム。
When the secondary determination unit determines that there is a sign of the failure, the display unit displays the monitoring image data.
The failure sign detection system according to any one of claims 1 to 6.
前記登録部は、
前記表示部に表示された前記監視画像データに対して正常である旨の回答を受け付けた場合に、当該監視画像データを前記第1画像データとし、当該第1画像データを前記正常画像データとして前記記憶部に追加登録する
請求項4乃至6のいずれか1項に従属する請求項7に記載の故障予兆検知システム。
The registration unit
When a reply to the effect that the monitored image data displayed on the display unit is normal is received, the monitored image data is used as the first image data, and the first image data is used as the normal image data. The failure sign detection system according to claim 7, which is subordinate to any one of claims 4 to 6 to be additionally registered in the storage unit.
監視対象装置から所定の監視間隔で測定された時系列データである測定データを表示部に表示した場合の監視画像データに変換する画像変換ステップと、
前記監視画像データと、前記監視対象装置における正常時の測定データが前記画像変換ステップにより変換された正常画像データとの差分が、第1の範囲外であるか否かを判定する一次判定ステップと、
前記一次判定ステップにより複数回、前記差分が前記第1の範囲外であると判定されたことに基づいて、前記監視対象装置の故障の予兆の有無を判定する二次判定ステップと、
を含む故障予兆検知方法。
An image conversion step for converting measurement data, which is time-series data measured from a monitored device at a predetermined monitoring interval, into monitoring image data when displayed on the display unit, and an image conversion step.
A primary determination step for determining whether or not the difference between the monitored image data and the normal image data obtained by converting the normal measurement data in the monitored device by the image conversion step is outside the first range. ,
A secondary determination step for determining whether or not there is a sign of failure of the monitored device based on the determination that the difference is out of the first range a plurality of times by the primary determination step.
Failure sign detection method including.
監視対象装置から所定の監視間隔で測定された時系列データである測定データを表示部に表示した場合の監視画像データに変換する画像変換処理と、
前記監視画像データと、前記監視対象装置における正常時の測定データが前記画像変換処理により変換された正常画像データとの差分が、第1の範囲外であるか否かを判定する一次判定処理と、
前記一次判定処理により複数回、前記差分が前記第1の範囲外であると判定されたことに基づいて、前記監視対象装置の故障の予兆の有無を判定する二次判定処理と、
をコンピュータに実行させる故障予兆検知プログラム。
Image conversion processing that converts measurement data, which is time-series data measured from the monitored device at a predetermined monitoring interval, into monitoring image data when displayed on the display unit, and image conversion processing.
A primary determination process for determining whether or not the difference between the monitored image data and the normal image data obtained by converting the measurement data in the normal state of the monitored device by the image conversion process is out of the first range. ,
A secondary determination process for determining whether or not there is a sign of failure of the monitored device based on the determination that the difference is out of the first range a plurality of times by the primary determination process.
A failure sign detection program that causes the computer to execute.
JP2017172332A 2017-09-07 2017-09-07 Failure sign detection system, failure sign detection method and failure sign detection program Active JP7056866B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2017172332A JP7056866B2 (en) 2017-09-07 2017-09-07 Failure sign detection system, failure sign detection method and failure sign detection program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017172332A JP7056866B2 (en) 2017-09-07 2017-09-07 Failure sign detection system, failure sign detection method and failure sign detection program

Publications (2)

Publication Number Publication Date
JP2019049411A JP2019049411A (en) 2019-03-28
JP7056866B2 true JP7056866B2 (en) 2022-04-19

Family

ID=65905510

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017172332A Active JP7056866B2 (en) 2017-09-07 2017-09-07 Failure sign detection system, failure sign detection method and failure sign detection program

Country Status (1)

Country Link
JP (1) JP7056866B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2026014248A1 (en) * 2024-07-09 2026-01-15 東京エレクトロン株式会社 Image processing system, inspection system, and image processing method

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3166788U (en) 2011-01-07 2011-03-24 株式会社 アイチメンテナンス Elevator diagnostic device
JP2013053875A (en) 2011-09-01 2013-03-21 Railway Technical Research Institute Inspection support device, program, and inspection support method
JP2016222420A (en) 2015-06-01 2016-12-28 株式会社明電舎 Elevator diagnostic equipment

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3166788U (en) 2011-01-07 2011-03-24 株式会社 アイチメンテナンス Elevator diagnostic device
JP2013053875A (en) 2011-09-01 2013-03-21 Railway Technical Research Institute Inspection support device, program, and inspection support method
JP2016222420A (en) 2015-06-01 2016-12-28 株式会社明電舎 Elevator diagnostic equipment

Also Published As

Publication number Publication date
JP2019049411A (en) 2019-03-28

Similar Documents

Publication Publication Date Title
CN108700853B (en) A system that automatically infers equipment details from controller configuration details
JPWO2018104985A1 (en) Anomaly analysis method, program and system
CN110906508B (en) Method and system for fault detection of air conditioner sensor
US20170277232A1 (en) Information processing apparatus, method for detecting air intake fault, and storage medium
JP6370132B2 (en) Communication abnormality detection device, communication abnormality detection method and program
JP2008225912A (en) Electronic device centralized management program, electronic device centralized management apparatus, and electronic device centralized management method
CN105404266A (en) Method and apparatus for monitoring area
CN119556044A (en) A transformer status monitoring method, system, device and medium
JP7056866B2 (en) Failure sign detection system, failure sign detection method and failure sign detection program
CN117522376A (en) A battery production and processing quality supervision system
WO2019230040A1 (en) Prediction data server and x-ray thickness measurement system
KR100980314B1 (en) Hotspot Surveillance System in History
JP2018044938A (en) Monitoring system
CA3114157C (en) Process management device, process management method, and process management program storage medium
JP2010015246A (en) Failure information analysis management system
CN116929433A (en) Sensor monitoring method, system, terminal and storage medium
WO2020089968A1 (en) Information processing apparatus
CN109313103A (en) Predictive Monitoring Systems and Methods
JP2017174348A (en) River monitoring system, river monitoring method and river monitoring program
JP2020085675A (en) Degradation diagnosing system, degradation diagnosing device, degradation diagnosing method, and computer program
US10955829B2 (en) System and a method to enable zero defect production
JP2007116586A (en) Facility supervisory system
JP2006268515A (en) Pci card trouble management system
JP2010153568A (en) Control system and control method
US20240070596A1 (en) Information processing method, information processing device, and recording medium

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200817

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210615

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210727

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210921

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220308

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220329

R150 Certificate of patent or registration of utility model

Ref document number: 7056866

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150