Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP7646466B2 - Monitoring device, monitoring system, and monitoring method - Google Patents
[go: Go Back, main page]

JP7646466B2 - Monitoring device, monitoring system, and monitoring method - Google Patents

Monitoring device, monitoring system, and monitoring method Download PDF

Info

Publication number
JP7646466B2
JP7646466B2 JP2021097212A JP2021097212A JP7646466B2 JP 7646466 B2 JP7646466 B2 JP 7646466B2 JP 2021097212 A JP2021097212 A JP 2021097212A JP 2021097212 A JP2021097212 A JP 2021097212A JP 7646466 B2 JP7646466 B2 JP 7646466B2
Authority
JP
Japan
Prior art keywords
flare
volume
image
unit
pixel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021097212A
Other languages
Japanese (ja)
Other versions
JP2022188921A (en
Inventor
治久 後藤
寛志 清家
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Eneos Corp
Original Assignee
Eneos Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Eneos Corp filed Critical Eneos Corp
Priority to JP2021097212A priority Critical patent/JP7646466B2/en
Publication of JP2022188921A publication Critical patent/JP2022188921A/en
Application granted granted Critical
Publication of JP7646466B2 publication Critical patent/JP7646466B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Closed-Circuit Television Systems (AREA)
  • Fire-Detection Mechanisms (AREA)
  • Emergency Alarm Devices (AREA)
  • Image Analysis (AREA)

Description

本発明は、監視装置、監視システムおよび監視方法に関する。 The present invention relates to a monitoring device, a monitoring system, and a monitoring method.

製油所では、製油の過程で排出された余剰のガスをフレアスタックと呼ばれる設備で焼却する。フレアスタックのフレア放出部の先端からは、余剰のガスの燃焼により生じる火炎(フレア)や黒煙が放出される。フレアガスラインは製油所の複数装置からの配管に接続されている。配管の安全弁のシールが劣化すると、本来製油所内で利用されるガスがフレアガスラインに流入し、フレア放出部の先端からフレアとして放出される場合がある。これは、省エネルギーの観点から好ましくない。本来製油所内で利用されるガスが流入すると、フレアの大きさが通常より大きくなる。この性質を利用して、フレアの状態を監視用カメラで撮影し、監視員がその映像を目視によって確認しながら、本来製油所内で利用されるガスがフレアガスラインに流入していないかどうかの監視を行うことが多い。 In refineries, excess gas discharged during the refining process is incinerated in equipment called a flare stack. Flames (flares) and black smoke resulting from the combustion of excess gas are emitted from the tip of the flare discharge section of the flare stack. The flare gas line is connected to piping from multiple devices in the refinery. If the seal of the safety valve of the piping deteriorates, gas that is actually used in the refinery may flow into the flare gas line and be released as a flare from the tip of the flare discharge section. This is undesirable from the viewpoint of energy conservation. When gas that is actually used in the refinery flows in, the size of the flare becomes larger than usual. Taking advantage of this property, the state of the flare is often photographed by a surveillance camera, and a monitor visually checks the image to monitor whether gas that is actually used in the refinery is flowing into the flare gas line.

特許文献1には、フレアスタックから放出されるフレアの異常や黒煙の発生を検出する監視装置が記載されている。特許文献1に記載の監視装置は、映像を取得する映像取得部と、その映像を解析し、フレアを放出するバーナー部を基準として設定された所定の異常フレア領域を認識する映像解析部と、異常フレア領域に占めるフレアの大きさに基づいて、異常フレアを検出する異常フレア判定部と、を備え、フレアが映った領域の画素数を算出し、異常フレア判定部は、画素数が所定の閾値以上となると異常フレアと判定する。 Patent Document 1 describes a monitoring device that detects abnormalities in flares emitted from a flare stack and the generation of black smoke. The monitoring device described in Patent Document 1 includes an image acquisition unit that acquires images, an image analysis unit that analyzes the images and recognizes a predetermined abnormal flare area set based on the burner unit that emits the flare, and an abnormal flare determination unit that detects abnormal flare based on the size of the flare that occupies the abnormal flare area, calculates the number of pixels in the area where the flare is captured, and the abnormal flare determination unit determines that a flare is abnormal when the number of pixels is equal to or greater than a predetermined threshold value.

特開2019-175066号公報JP 2019-175066 A

フレアスタックでは、フレアガスの流量(本来製油所内で利用されるガスの流入に伴うフレアガスの流量増加)を把握する必要がある。フレアガスの流量は、フレアガスラインにガス流量計を設置して監視することができる。しかし、新たにフレアガスラインにガス流量計を設置するには、装置の定期修理期間に実施する必要があり、工事できる期間に制限がある。ガス流量計の設置に要する費用は高額となる。また、監視用カメラでフレアを撮影し、監視員が目視により確認する方法では、フレアが大きくなることに基づいてフレアガスの流量が多いことは推定できても、定量的に把握することはできない。簡便で低コストにフレアガスの流量を計測する方法が求められている。特許文献1にも、フレアガスの流量を計測する方法は記載されていない。 In a flare stack, it is necessary to grasp the flow rate of flare gas (the increase in the flow rate of flare gas due to the inflow of gas that is originally used in the refinery). The flow rate of flare gas can be monitored by installing a gas flow meter in the flare gas line. However, installing a new gas flow meter in the flare gas line must be carried out during a regular maintenance period for the equipment, and there is a limit to the period during which construction can be carried out. The cost of installing a gas flow meter is high. In addition, in a method in which a flare is photographed with a surveillance camera and a supervisor visually checks it, although it can be estimated that the flare gas flow rate is high based on the size of the flare, it is not possible to quantitatively grasp the flow rate. There is a demand for a simple and low-cost method of measuring the flow rate of flare gas. Patent Document 1 does not describe a method of measuring the flow rate of flare gas.

そこでこの発明は、上述の課題を解決することのできる監視装置、監視システムおよび監視方法を提供することを目的としている。 The present invention aims to provide a monitoring device, a monitoring system, and a monitoring method that can solve the above problems.

本発明の一態様によれば、監視装置は、フレアを撮影した映像を取得する映像取得部と、前記映像を解析し、前記フレアが写った画素を識別する映像解析部と、前記フレアが写った画素に基づいて、前記フレアの体積を推定するフレア体積推定部と、連続して撮影された前記映像について算出された前記フレアの体積に基づいて、前記フレアを発生させるフレアガスの所定の単位時間における流量を推定するフレアガス流量推定部と、前記フレアガスの流量と所定の閾値とを比較してアラームを発報する出力部と、を備える。 According to one aspect of the present invention, the monitoring device includes an image acquisition unit that acquires an image of a flare, an image analysis unit that analyzes the image and identifies pixels in which the flare is captured, a flare volume estimation unit that estimates the volume of the flare based on the pixels in which the flare is captured, a flare gas flow rate estimation unit that estimates the flow rate of the flare gas that generates the flare in a predetermined unit time based on the flare volume calculated for the continuously captured images, and an output unit that compares the flow rate of the flare gas with a predetermined threshold value and issues an alarm.

本発明の一態様によれば、監視システムは、フレアスタックにおけるフレアの放出部周辺の映像を撮影する撮像装置と、前記映像を取得する上記の監視装置と、を備える。 According to one aspect of the present invention, a monitoring system includes an imaging device that captures video of the area surrounding the flare emission portion of the flare stack, and the above-mentioned monitoring device that acquires the video.

本発明の一態様によれば、監視方法は、フレアを撮影した映像を取得するステップと、前記映像を解析し、前記フレアが写った画素を識別するステップと、前記フレアが写った画素に基づいて、前記フレアの体積を推定するステップと、連続して撮影された前記映像について算出された前記フレアの体積に基づいて、前記フレアを発生させるフレアガスの所定の単位時間における流量を推定するステップと、前記フレアガスの流量と所定の閾値とを比較してアラームを発報するステップと、を有する。 According to one aspect of the present invention, a monitoring method includes the steps of acquiring an image of a flare, analyzing the image and identifying pixels in which the flare is captured, estimating the volume of the flare based on the pixels in which the flare is captured, estimating the flow rate of the flare gas that causes the flare in a predetermined unit time based on the flare volume calculated for the continuously captured images, and comparing the flow rate of the flare gas with a predetermined threshold and issuing an alarm.

本発明によれば、フレアガスの流量を推定することができる。 According to the present invention, the flow rate of flare gas can be estimated.

一実施形態における監視システムの一例を示す図である。FIG. 1 illustrates an example of a monitoring system according to an embodiment. 一実施形態における監視装置の一例を示す機能ブロック図である。FIG. 2 is a functional block diagram illustrating an example of a monitoring device according to an embodiment. 一実施形態における監視装置が解析する映像の一例を示す図である。FIG. 2 is a diagram illustrating an example of a video analyzed by a monitoring device according to an embodiment. 一実施形態におけるフレアの検出処理を説明する第1の図である。FIG. 11 is a first diagram illustrating a flare detection process according to an embodiment. 一実施形態におけるフレアの検出処理を説明する第2の図である。FIG. 11 is a second diagram illustrating the flare detection process according to an embodiment. 一実施形態におけるフレアの検出処理を説明する第3の図である。FIG. 11 is a third diagram illustrating the flare detection process according to an embodiment. 一実施形態におけるフレアの検出処理を説明する第4の図である。FIG. 4 is a fourth diagram illustrating a flare detection process according to an embodiment. 一実施形態におけるフレアの検出処理を説明する第5の図である。FIG. 5 is a fifth diagram illustrating a flare detection process in an embodiment. 一実施形態におけるフレアの体積推定処理を説明する第1の図である。FIG. 11 is a first diagram illustrating a flare volume estimation process according to an embodiment. 一実施形態におけるフレアの体積推定処理を説明する第2の図である。FIG. 11 is a second diagram illustrating the flare volume estimation process in an embodiment. 一実施形態におけるフレアガス流量の推定処理を説明する図である。FIG. 4 is a diagram illustrating a process for estimating a flare gas flow rate in one embodiment. 一実施形態におけるフレアガス流量の実測値と推定値の一例を示す図である。FIG. 4 is a diagram showing an example of actual measured values and estimated values of flare gas flow rates in one embodiment. 一実施形態における設定処理の一例を示す図である。FIG. 11 is a diagram illustrating an example of a setting process according to an embodiment. 一実施形態におけるフレアガス流量の推定処理の一例を示す図である。FIG. 11 is a diagram showing an example of a process for estimating a flare gas flow rate in one embodiment.

<実施形態>
以下、一実施形態によるフレアスタックの監視システムについて図1~図14を参照して説明する。
図1は、本発明の一実施形態における監視システムの一例を示す図である。
図1に、監視システム1の構成を示す。図1に示すように監視システム1は、カメラ10と、映像取得装置15と、映像分配装置20と、監視用モニター25と、監視装置30と、中央監視装置40と、を備える。図示するように、カメラ10と映像取得装置15、映像取得装置15と映像分配装置20、映像分配装置20と監視用モニター25、映像分配装置20と監視装置30はそれぞれ通信可能に接続されている。
<Embodiment>
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS A flare stack monitoring system according to one embodiment will now be described with reference to FIGS.
FIG. 1 is a diagram showing an example of a monitoring system according to an embodiment of the present invention.
Fig. 1 shows the configuration of a surveillance system 1. As shown in Fig. 1, the surveillance system 1 includes a camera 10, a video acquisition device 15, a video distribution device 20, a surveillance monitor 25, a surveillance device 30, and a central surveillance device 40. As shown in the figure, the camera 10 and the video acquisition device 15, the video acquisition device 15 and the video distribution device 20, the video distribution device 20 and the surveillance monitor 25, and the video distribution device 20 and the surveillance device 30 are each connected so as to be able to communicate with each other.

カメラ10は、フレアスタック先端のフレアの放出部(フレアを放散する煙突の先端部。以下、フレア放出部と記載する。)と、その周辺の映像を撮影する。カメラ10は、撮影した映像を映像取得装置15へ出力する。カメラ10が撮影した映像をフレア映像と記載する。カメラ10は、動画を撮影する撮像装置であることが好ましいが、例えば、所定の時間間隔で静止画を撮影するものであってもよい。また、カメラ10は、赤外線カメラであってもよい。フレアスタックでは、フレアの拡大を抑えるため、フレア放出部51の直上へ蒸気を注入することがある。この場合、フレアの大きさは小さくなるが、代わりに注入した蒸気も観測される。赤外線カメラであれば、蒸気を検出することができるためフレアと蒸気を区別することにより、より正確にフレアガスの流量を推定することができる。また、赤外線カメラであれば、本来製油所内で利用されるガスの1種である水素ガスが放出されたときにもその水素ガスを検出することができる。カメラ10は、有線のケーブルで映像取得装置15と接続されていてもよいし、無線通信で映像取得装置15や監視装置30と接続されていてもよい。また、カメラ10は、複数台設けられていてもよい。 The camera 10 captures images of the flare discharge section at the tip of the flare stack (the tip of the chimney that dissipates the flare. Hereinafter, this will be referred to as the flare discharge section) and its surroundings. The camera 10 outputs the captured images to the image acquisition device 15. The images captured by the camera 10 will be referred to as flare images. The camera 10 is preferably an imaging device that captures moving images, but may also capture still images at a predetermined time interval, for example. The camera 10 may also be an infrared camera. In a flare stack, steam may be injected directly above the flare discharge section 51 to suppress the spread of the flare. In this case, the size of the flare becomes smaller, but the injected steam is also observed instead. Since an infrared camera can detect steam, it is possible to distinguish between the flare and steam and more accurately estimate the flow rate of the flare gas. In addition, an infrared camera can detect hydrogen gas, which is a type of gas that is originally used in oil refineries, when the hydrogen gas is released. The camera 10 may be connected to the image capture device 15 by a wired cable, or may be connected to the image capture device 15 and the monitoring device 30 by wireless communication. In addition, multiple cameras 10 may be provided.

映像取得装置15は、カメラ10が撮影したフレア映像を取得し、そのフレア映像を映像分配装置20へ出力する。
映像分配装置20は、映像の分配する機能を有している。映像分配装置20は、映像取得装置15から取得したフレア映像を監視用モニター25と監視装置30へ出力する。
監視用モニター25は、フレア映像を表示する。監視員は、監視用モニター25に表示されたフレア映像を監視する。具体的には、監視員は、監視用モニター25に表示されたフレア映像を見てフレア放出部51の周辺や上空を確認し、フレアが大きくなっていないか、失火していないか、黒煙が発生していないかなどを目視により監視する。
The image capturing device 15 captures the flare image captured by the camera 10 and outputs the flare image to the image distribution device 20.
The video distribution device 20 has a function of distributing video. The video distribution device 20 outputs the flare video acquired from the video acquisition device 15 to the monitoring monitor 25 and the monitoring device 30.
Surveillance monitor 25 displays the flare image. An observer monitors the flare image displayed on surveillance monitor 25. Specifically, the observer looks at the flare image displayed on surveillance monitor 25, checks the surroundings of flare emission section 51 and the sky above, and visually monitors whether the flare is getting larger, whether there is a misfire, whether black smoke is being generated, and the like.

監視装置30は、カメラ10が撮影したフレア映像を解析して、フレアガスの流量を推定する。監視装置30は、フレアガスの流量を推定すると、その推定結果やアラーム等を監視装置30の表示部や監視装置30に接続された表示装置へ表示し、監視員に通知する。また、監視装置30は、フレアガス流量の推定値やアラーム等を中央監視装置40へ送信する。次に監視装置30について詳しく説明する。 The monitoring device 30 analyzes the flare video captured by the camera 10 and estimates the flow rate of the flare gas. After estimating the flow rate of the flare gas, the monitoring device 30 displays the estimation result and an alarm, etc. on the display unit of the monitoring device 30 or a display device connected to the monitoring device 30, and notifies the monitor. The monitoring device 30 also transmits the flare gas flow rate estimate and the alarm, etc. to the central monitoring device 40. Next, the monitoring device 30 will be described in detail.

図2は、本発明の一実施形態における監視装置の一例を示す機能ブロック図である。
監視装置30は、CPU(Central Processing Unit)等の演算装置を備えたPC(Personal Computer)やサーバ等のコンピュータである。図示するように監視装置30は、映像取得部31と、設定情報取得部32と、映像解析部33と、フレア体積推定部34と、フレアガス流量推定部35と、記憶部36と、出力部37と、を備えている。
FIG. 2 is a functional block diagram illustrating an example of a monitoring device according to an embodiment of the present invention.
The monitoring device 30 is a computer such as a PC (Personal Computer) or a server equipped with a calculation device such as a CPU (Central Processing Unit). As shown in the figure, the monitoring device 30 includes an image acquisition unit 31, a setting information acquisition unit 32, an image analysis unit 33, a flare volume estimation unit 34, a flare gas flow rate estimation unit 35, a storage unit 36, and an output unit 37.

映像取得部31は、カメラ10が撮影したフレア映像を取得する。映像取得部31は、フレア映像を映像解析部33へ出力する。
設定情報取得部32は、フレア映像の解析に必要な各種の設定情報を取得する。設定情報取得部32は、取得した設定情報を記憶部36に記録する。例えば、設定情報取得部32は、フレア放出部51の幅の長さ(実際の長さ)の情報の入力を受け付ける。
映像解析部33は、フレア映像を解析し、フレアが写った画素とそうでない画素を識別する。ここで、図3を参照する。図3は、本発明の一実施形態における監視装置が解析する映像の一例を示す図である。図3にカメラ10が撮影したフレア映像50の一例を示す。なお、52~53で示す矩形の枠は、フレア映像50そのものではなく、フレア映像の解析に必要な領域を示している。これらの領域は、設定情報取得部32が取得した設定情報に基づいて配置される。
The image acquiring unit 31 acquires the flare image captured by the camera 10. The image acquiring unit 31 outputs the flare image to the image analyzing unit 33.
The setting information acquisition unit 32 acquires various setting information necessary for analyzing the flare image. The setting information acquisition unit 32 records the acquired setting information in the storage unit 36. For example, the setting information acquisition unit 32 accepts an input of information on the width (actual length) of the flare emitting portion 51.
The image analysis unit 33 analyzes the flare image and distinguishes between pixels in which a flare is captured and pixels in which a flare is not captured. Reference is now made to FIG. 3. FIG. 3 is a diagram showing an example of an image analyzed by a monitoring device in one embodiment of the present invention. FIG. 3 shows an example of a flare image 50 captured by the camera 10. Note that the rectangular frames indicated by 52 and 53 do not represent the flare image 50 itself, but represent areas necessary for analyzing the flare image. These areas are arranged based on the setting information acquired by the setting information acquisition unit 32.

(1)例えば、映像解析部33は、フレア映像に映るフレア放出部51を、その形状に基づくパターン認識により検出する。映像解析部33は、検出したフレア放出部51の所定の位置(例えば、フレア放出部51の先端の中心)を、フレア映像50における基準位置として設定する。映像解析部33は、例えば、フレア映像50の左下端を原点としたときの基準位置の座標情報を記憶部36に記録する。あるいは、映像解析部33が画像を解析するのではなく、監視員が、フレア放出部51の先端中心の座標情報を監視装置30へ入力してもよい。 (1) For example, the video analysis unit 33 detects the flare emitting portion 51 shown in the flare image by pattern recognition based on its shape. The video analysis unit 33 sets a predetermined position of the detected flare emitting portion 51 (for example, the center of the tip of the flare emitting portion 51) as a reference position in the flare image 50. For example, the video analysis unit 33 records in the storage unit 36 coordinate information of the reference position when the lower left edge of the flare image 50 is set as the origin. Alternatively, instead of the video analysis unit 33 analyzing the image, the monitor may input coordinate information of the tip center of the flare emitting portion 51 to the monitoring device 30.

(2)映像解析部33は、設定情報取得部32が取得した設定情報に基づいて、基準位置に基づく所定範囲をフレア監視エリア52、背景エリア53として設定する。
フレア監視エリア52は、例えば、フレア放出部51の先端からフレア54が観察される範囲を規定する。
背景エリア53は、フレアや黒煙が到達しない領域に設定される。背景エリア53は、例えば、フレア放出部51から十分に離れ、構造物が存在しない空間の一部について設定される。フレア監視エリア52、背景エリア53は監視員が任意に設定することができる。
(2) Based on the setting information acquired by the setting information acquisition unit 32, the video analysis unit 33 sets a predetermined range based on the reference position as the flare monitoring area 52 and the background area 53.
The flare monitoring area 52 defines, for example, the range in which the flare 54 is observed from the tip of the flare emitting portion 51 .
Background area 53 is set in an area where flares and black smoke do not reach. Background area 53 is set, for example, in a part of space that is sufficiently far from flare emitting unit 51 and in which no structures exist. Flare monitoring area 52 and background area 53 can be set arbitrarily by a monitor.

(3)映像解析部33は、フレアに対応するRGB輝度値(RGB色空間における赤、緑、青の256階調の値)に基づいて、フレア映像50からフレア54を検出する。フレアに対応するRGB輝度値の値は、後述する処理により、映像解析部33は、フレア監視エリア52に含まれる画素を解析してフレアに対応するRGB輝度値を設定してもよいし、監視員が監視装置30へフレアに対応するRGB輝度値を入力し、設定情報取得部32がその値を取得してもよい。 (3) The video analysis unit 33 detects a flare 54 from the flare image 50 based on the RGB luminance values (256 gradation values of red, green, and blue in the RGB color space) corresponding to the flare. The video analysis unit 33 may set the RGB luminance values corresponding to the flare by analyzing the pixels included in the flare monitoring area 52 through processing described below, or a monitor may input the RGB luminance values corresponding to the flare to the monitoring device 30, and the setting information acquisition unit 32 may acquire the values.

(4)映像解析部33は、フレア映像50のうちフレア放出部51が写った画素について、フレア放出部51の幅に対応する画素数をカウントする。
(5)映像解析部33は、フレア映像50のうちフレア54が写った画素について、フレア放出部51の中心を通る中心線からフレア54の左右端までの画素数をそれぞれカウントする。
(4) The image analysis unit 33 counts the number of pixels in the flare image 50 in which the flare emitting portion 51 appears, the number of pixels corresponding to the width of the flare emitting portion 51 .
(5) The image analysis unit 33 counts the number of pixels in the flare image 50 where the flare 54 appears from a center line passing through the center of the flare emitting portion 51 to the left and right ends of the flare 54 .

フレア体積推定部34は、フレア映像に基づいて、フレア54の体積を推定する。より具体的には、フレア体積推定部34は、映像解析部33によって解析された映像におけるフレア54が放出されるフレア放出部51の中心を通る垂直方向の中心線でフレア54を左右に分割したときの右側の領域について、右側のフレアの形状は円柱の右半分であると仮定して、フレア54の上下方向(高さ方向)1画素ごとの体積を算出する。左側の領域についても、左側のフレアの形状は円柱の左半分であると仮定して、フレア54の上下方向(高さ方向)1画素ごとの体積を算出する。フレア体積推定部34は、1画素ごとの体積をフレアの上端から下端まで積算してフレア54の右側と左側の体積をそれぞれ算出し、それらを合計してフレア54全体の体積を推定する。 The flare volume estimation unit 34 estimates the volume of the flare 54 based on the flare image. More specifically, the flare volume estimation unit 34 assumes that the shape of the right-side flare is the right half of a cylinder for the right-side region when the flare 54 in the image analyzed by the image analysis unit 33 is divided into left and right parts along a vertical center line passing through the center of the flare emission unit 51 from which the flare 54 is emitted, and calculates the volume of each pixel in the up-down direction (height direction) of the flare 54. The flare volume estimation unit 34 also assumes that the shape of the left-side flare is the left half of a cylinder and calculates the volume of each pixel in the up-down direction (height direction) of the flare 54 for the left-side region. The flare volume estimation unit 34 calculates the volumes of the right and left sides of the flare 54 by integrating the volumes for each pixel from the top to the bottom of the flare, and estimates the volume of the entire flare 54 by adding them up.

フレアガス流量推定部35は、フレア体積推定部34が推定したフレア54全体の体積に基づいて、所定の単位時間あたりのフレアガス流量を推定する。より具体的には、フレアガス流量推定部35は、時刻T1に撮影されたフレア映像に基づいてフレア体積推定部34が推定したフレア54の体積V1と、時刻T1から一定時間ΔT後の時刻T2に撮影された映像に基づいてフレア体積推定部34が推定したフレアの体積V2との平均を計算して、これをΔTにおける瞬間的なフレアガス流量として推定し、この値を所定の単位時間TUにおけるフレアガス流量の推定値に換算する。また、フレアガス流量推定部35は、フレアガスの流量の推定値と予め設定された閾値とを比較して、単位時間あたりのフレアガスの流量、又は、連続する単位時間におけるフレアガスの流量の増加が閾値を超えていればアラームの発報を出力部37へ指示する。 The flare gas flow rate estimation unit 35 estimates the flare gas flow rate per predetermined unit time based on the total volume of the flare 54 estimated by the flare volume estimation unit 34. More specifically, the flare gas flow rate estimation unit 35 calculates the average of the volume V1 of the flare 54 estimated by the flare volume estimation unit 34 based on the flare image captured at time T1 and the volume V2 of the flare estimated by the flare volume estimation unit 34 based on the image captured at time T2, a certain time ΔT after time T1, estimates this as the instantaneous flare gas flow rate at ΔT, and converts this value into an estimate of the flare gas flow rate in a predetermined unit time TU. The flare gas flow rate estimation unit 35 also compares the estimate of the flare gas flow rate with a preset threshold value, and instructs the output unit 37 to issue an alarm if the flare gas flow rate per unit time or the increase in the flare gas flow rate in successive unit times exceeds the threshold value.

記憶部36は、種々の情報を記憶する。例えば、記憶部36は、フレア放出部51の基準位置の座標情報や、フレアに対応するRGB輝度値の設定情報、フレアガス流量と画素数の関係を示す検量線などを記憶する。 The memory unit 36 stores various information. For example, the memory unit 36 stores coordinate information of the reference position of the flare emission unit 51, setting information of RGB luminance values corresponding to the flare, a calibration curve showing the relationship between the flare gas flow rate and the number of pixels, etc.

出力部37は、フレアガス流量推定部35によるフレアガス流量の推定結果を表示したり、設定情報を入力したりするためのユーザインタフェースの画像を生成する。また、出力部37は、フレアガス流量推定部35の指示に基づいてアラームを出力する。 The output unit 37 generates an image of a user interface for displaying the flare gas flow rate estimation result by the flare gas flow rate estimation unit 35 and inputting setting information. The output unit 37 also outputs an alarm based on an instruction from the flare gas flow rate estimation unit 35.

図4~図8は、それぞれ一実施形態におけるフレアの検出処理を説明する第1の図~第5の図である。
図4(a)にフレア映像50の一部の例を示す。図4(b)に、フレア映像50を解析してフレアだけを抽出した画像(以下、フレア画像と記載する。)を示す。図4(b)に示すフレア画像の作成方法を次に示す。まず、監視員が、図5に示すようにフレアに対応するRGB輝度値の範囲を設定する。図5のR5はR(赤)の輝度の範囲、G5はG(緑)の輝度の範囲、B5はB(青)の輝度の範囲を示している。次に映像解析部33が、画像処理によって、設定された範囲に含まれる輝度値を有する画素を、フレアを示す画素として抽出する。フレアを示す画素と、非フレアを示す画素とに異なる色を付して画像を生成する。これにより図4(b)のフレア画像が得られる。図4(b)のフレア画像では、円環状の領域がフレアとして表示されている。図4(a)と図4(b)を比較して分かるように、図4(b)のフレア画像では、フレアの一部しか検出できていない。
4 to 8 are first to fifth diagrams, respectively, illustrating a flare detection process in one embodiment.
FIG. 4(a) shows an example of a part of a flare image 50. FIG. 4(b) shows an image in which only the flare is extracted by analyzing the flare image 50 (hereinafter, referred to as a flare image). The method of creating the flare image shown in FIG. 4(b) is as follows. First, an observer sets the range of RGB luminance values corresponding to the flare as shown in FIG. 5. In FIG. 5, R5 indicates the range of R (red) luminance, G5 indicates the range of G (green) luminance, and B5 indicates the range of B (blue) luminance. Next, the image analysis unit 33 extracts pixels having luminance values included in the set range as pixels indicating a flare by image processing. An image is generated by assigning different colors to pixels indicating a flare and pixels indicating no flare. This results in the flare image in FIG. 4(b). In the flare image in FIG. 4(b), a circular ring-shaped region is displayed as a flare. As can be seen by comparing FIG. 4(a) and FIG. 4(b), only a part of the flare can be detected in the flare image in FIG. 4(b).

本実施形態では、フレアの検出精度を向上するために、RGB輝度のR(赤)と、G(緑)と、B(青)の各色の輝度値を座標軸とする3次元空間を用意する。そして、この3次元空間内に、フレアが写った代表的な画素(フレア画素)のRGB輝度値をプロットし、フレアが写っていない非フレアの画素(背景画素)のRGB輝度値をプロットし、フレア映像50の各画素のRGB輝度値をこの3次元空間内にプロットする。ここで、図6を参照する。図6の点61は、フレアが写った代表的な画素のRGB輝度値をプロットした点である。点63は、空などの背景が写った画素のRGB輝度値をプロットした点である。点62は、フレア映像50内のある画素のRGB輝度値をプロットした点である。映像解析部33は、フレア映像50内の画素のRGB輝度値をプロットした点62の座標と代表的なフレアのRGB輝度値をプロットした点61の座標とに基づいて、点62と点61の間の距離(ベクトル64の長さ;第1の距離)を算出する。また、映像解析部33は、フレア映像50内の画素のRGB輝度値をプロットした点62の座標と背景のRGB輝度値をプロットした点63の座標とに基づいて、点62と点63の間の距離(ベクトル65の長さ;第2の距離)を算出する。そして、映像解析部33は、点62に対応する画素を、ベクトル64の長さとベクトル65の長さのうち短い方に分類する。つまり、映像解析部33は、ベクトル64の長さが短ければ、点62に対応する画素を、フレアを示す画素(第1画素)であると判定し、ベクトル65の長さが短ければ、非フレアを示す画素(第2画素)であると判定する。映像解析部33は、フレア映像50内の全画素について同様の判定を行う。映像解析部33は、フレアと判定した画素と、非フレアと判定した画素とに異なる色を付してフレア画像を作成する。このような処理によって得られたフレア画像を図7(a)に示す。 In this embodiment, in order to improve the accuracy of flare detection, a three-dimensional space is prepared in which the luminance values of each color of R (red), G (green), and B (blue) of RGB luminance are the coordinate axes. Then, in this three-dimensional space, the RGB luminance values of a representative pixel (flare pixel) in which a flare is reflected are plotted, and the RGB luminance values of a non-flare pixel (background pixel) in which a flare is not reflected are plotted, and the RGB luminance values of each pixel of the flare image 50 are plotted in this three-dimensional space. Here, refer to FIG. 6. Point 61 in FIG. 6 is a point where the RGB luminance values of a representative pixel in which a flare is reflected are plotted. Point 63 is a point where the RGB luminance values of a pixel in which a background such as the sky is reflected are plotted. Point 62 is a point where the RGB luminance values of a pixel in the flare image 50 are plotted. The image analysis unit 33 calculates the distance between the points 62 and 61 (the length of the vector 64; the first distance) based on the coordinates of the point 62 where the RGB luminance values of the pixel in the flare image 50 are plotted and the coordinates of the point 61 where the RGB luminance values of the representative flare are plotted. The image analysis unit 33 also calculates the distance between the points 62 and 63 (the length of the vector 65; the second distance) based on the coordinates of the point 62 where the RGB luminance values of the pixel in the flare image 50 are plotted and the coordinates of the point 63 where the RGB luminance values of the background are plotted. Then, the image analysis unit 33 classifies the pixel corresponding to the point 62 into the one having the shorter length of the vector 64 and the vector 65. That is, if the length of the vector 64 is short, the image analysis unit 33 determines that the pixel corresponding to the point 62 is a pixel indicating a flare (first pixel), and if the length of the vector 65 is short, the image analysis unit 33 determines that the pixel corresponding to the point 62 is a pixel indicating a non-flare (second pixel). The image analysis unit 33 performs the same determination for all pixels in the flare image 50. The image analysis unit 33 creates a flare image by applying different colors to pixels determined to be a flare and pixels determined to be a non-flare. The flare image obtained by this process is shown in FIG. 7(a).

図7(a)のフレア画像を参照すると、図4(b)のフレア画像と比較してより多くの領域がフレアとして検出されていて、検出されるフレアの領域が改善されていることが分かる。しかし、図7(a)のフレア画像では、フレアの中心部に空洞が生じている。次にこの空洞を補完する処理について説明する。まず、映像解析部33は、図7(a)に示すフレア画像を、例えば、Y軸方向に上から下方向へ所定の画素数を有する幅ごとに分割し、分割してできた一列の部分画像の各々に対して以下の処理を行う。映像解析部33は、一列の部分画像について、X軸方向に左から右へスキャンする。そのときにフレアを示す画素が所定の画素数以上連続して検知されて、次に非フレアを示す画素が所定の画素数以上連続して検知されて、その次にフレアを示す画素が所定の画素数以上連続して検知されたならば、映像解析部33は、その部分画像では空洞が含まれていると判定する。そして、フレアを示す画素群に挟まれた非フレアを示す画素群をフレアとして認識し、これらの画素群にフレアに対応する色(図7(a)と同様の色でもよいし、異なる色でもよい。)を付す。このような空洞を補完する処理を行った結果を得られるフレア画像を図7(b)に示す。 With reference to the flare image in FIG. 7(a), it can be seen that more areas are detected as flares compared to the flare image in FIG. 4(b), and the area of the detected flare has been improved. However, in the flare image in FIG. 7(a), a cavity is generated in the center of the flare. Next, the process of complementing this cavity will be described. First, the video analysis unit 33 divides the flare image shown in FIG. 7(a), for example, from top to bottom in the Y-axis direction into widths each having a predetermined number of pixels, and performs the following process on each of the partial images in a row obtained by dividing the image. The video analysis unit 33 scans the partial images in a row from left to right in the X-axis direction. At that time, if pixels indicating flare are detected consecutively for a predetermined number of pixels or more, then pixels indicating non-flare are detected consecutively for a predetermined number of pixels or more, and then pixels indicating flare are detected consecutively for a predetermined number of pixels or more, the video analysis unit 33 determines that the partial image contains a cavity. Then, the group of pixels not showing flare that are sandwiched between groups of pixels showing flare are recognized as flare, and these groups of pixels are given a color corresponding to the flare (this may be the same color as in FIG. 7(a) or a different color). The flare image obtained as a result of performing this process of filling in the cavities is shown in FIG. 7(b).

図8(a)に、図4(a)とは別のフレア映像50の一例を示す。この例では、フレア放出部51の先端部から比較的小さなフレアが放出されている。図6を用いて説明したフレア映像50の画素ごとに代表的なフレアのRGB輝度値を示す点および背景のRGB輝度値を示す点との距離に基づいてフレアが写った画素を検出する方法であれば、図8(b)のフレア画像に示すようにフレアが小さいときでも、検出可能なことが確認できた。 Figure 8 (a) shows an example of a flare image 50 different from that shown in Figure 4 (a). In this example, a relatively small flare is emitted from the tip of the flare emitting portion 51. It was confirmed that the method of detecting pixels in which a flare is captured based on the distance between a point showing a representative RGB luminance value of a flare and a point showing an RGB luminance value of the background for each pixel of the flare image 50 described using Figure 6 can detect the flare even when it is small, as shown in the flare image in Figure 8 (b).

このようにフレア画像を補正すると、フレアガス流量推定部35は、フレアガスの流量を計算する。フレア放出部51へフレアガスが供給されると、放出されるフレアは一瞬ごとに燃え尽きる。フレア放出部51へ連続してフレアガスが供給されると、連続してフレアが観測される。フレアガスの流量とフレア54の大きさには正の相関があり、フレア画像が撮影された瞬間のフレアガス流量は、フレア画像に写ったフレア54の体積の一次関数で表すことができると考える。次に図9を参照して、フレア体積推定部34が、フレア画像からフレアの体積を算出する方法について説明する。 After correcting the flare image in this manner, the flare gas flow rate estimation unit 35 calculates the flow rate of the flare gas. When flare gas is supplied to the flare discharge unit 51, the released flare burns out every moment. When flare gas is continuously supplied to the flare discharge unit 51, flares are continuously observed. There is a positive correlation between the flow rate of the flare gas and the size of the flare 54, and it is considered that the flare gas flow rate at the moment the flare image is captured can be expressed as a linear function of the volume of the flare 54 captured in the flare image. Next, a method for the flare volume estimation unit 34 to calculate the volume of the flare from the flare image will be described with reference to FIG. 9.

図9は、一実施形態におけるフレア体積の算出処理を説明する第1の図である。
設定情報取得部32が、監視員から入力されたフレア放出部51の直径51Lの長さを取得し、記憶部36に記録する。映像解析部33は、フレア放出部51が写った画素に基づいて、直径51Lに相当する画素数をカウントする。説明の便宜のため、フレア映像に写るフレア放出部51は垂直方向に延伸しており、直径51Lを規定する画素はフレア映像の水平方向(X軸方向)に並んでいるとする。映像解析部33は、フレア映像のY軸方向の所定位置(フレア放出部51が写った位置)をX軸方向に左から右へスキャンする。映像解析部33は、フレア放出部51が写った画素をカウントし、直径51Lの画素数を検出する。例えば、映像解析部33は、監視員によって指定されたフレア放出部51の直径を示す範囲の画素数をカウントしてもよいし、監視員によって指定された輝度値(フレア放出部51を示す輝度値)を有する画素数をカウントしてもよい。フレア体積推定部34は、監視員から入力された直径51Lの長さを検出した画素数で除算して1画素あたりの大きさL_U(1画素の水平方向の長さおよび垂直方向の長さ)を算出する。次に、フレア54の正面から向かって右半分と左半分に分けて体積を計算する。まず、映像解析部33は、フレア放出部51の中心を通る垂直方向の中心線Y(中心線YをY軸とも呼ぶ。)を設定する。また、映像解析部33は、Y軸上のフレア放出部51の上端を原点Oに設定する。映像解析部33は、垂直方向の中心線YのY軸方向の位置y1における中心線Yから水平に右方向にフレア54のエッジ(境界)までの画素数C_Ry1をカウントする。フレア体積推定部34は、カウントされた画素数C_Ry1に1画素あたりの大きさL_Uを乗算して、火炎距離Y_Ry1を算出する。フレア体積推定部34は、π×(Y_Ry1×L_U÷2を計算して、Y軸方向の位置y1におけるフレア54の一部の体積を算出する。ここで、上式は火炎距離Y_Ry1を半径、高さを1画素の大きさL_Uとしたときの円柱の体積の右半分を計算するものである。例えば、フレア体積推定部34は、原点Oからフレア54の頂上に相当する位置yTまで、位置y1をY軸方向に1画素ずつずらして、各位置におけるフレア54の右側の体積を求め、これらを合計する。同様に、フレア体積推定部34は、位置y2における中心線Yから水平に向かって左方向にフレア54のエッジ(境界)までの画素数C_Ly2をカウントし、画素数C_Ly2に1画素あたりの大きさL_Uを乗算して、火炎距離Y_Ly2を算出する。フレア体積推定部34は、π×(Y_Ly2×L_U÷2を計算して、Y軸方向の位置y2における高さを1画素の大きさL_Uとしたときのフレア54の一部の体積を算出する。フレア体積推定部34は、原点Oからフレア54の頂上に相当する位置yTまで、位置y2をY軸方向に1画素ずつずらして、各位置におけるフレア54の左側の体積を求め、これらを合計する。フレア体積推定部34は、左右の体積を合計してフレア54の体積を算出する。つまり、フレア体積推定部34は、図9の式(1)によって、フレア54の体積V(t)を算出する。
FIG. 9 is a first diagram illustrating the process of calculating the flare volume in one embodiment.
The setting information acquisition unit 32 acquires the length of the diameter 51L of the flare emitting unit 51 input by the observer and records it in the storage unit 36. The image analysis unit 33 counts the number of pixels corresponding to the diameter 51L based on the pixels in which the flare emitting unit 51 is captured. For convenience of explanation, it is assumed that the flare emitting unit 51 captured in the flare image extends in the vertical direction, and the pixels defining the diameter 51L are arranged in the horizontal direction (X-axis direction) of the flare image. The image analysis unit 33 scans a predetermined position in the Y-axis direction of the flare image (the position in which the flare emitting unit 51 is captured) from left to right in the X-axis direction. The image analysis unit 33 counts the pixels in which the flare emitting unit 51 is captured, and detects the number of pixels of the diameter 51L. For example, the image analysis unit 33 may count the number of pixels in a range indicating the diameter of the flare emitting unit 51 designated by the observer, or may count the number of pixels having a luminance value (luminance value indicating the flare emitting unit 51) designated by the observer. The flare volume estimation unit 34 calculates the size per pixel L_U (the horizontal and vertical lengths of one pixel) by dividing the length of the diameter 51L input by the observer by the number of detected pixels. Next, the flare 54 is divided into the right half and the left half as viewed from the front and the volume is calculated. First, the image analysis unit 33 sets a vertical center line Y (the center line Y is also called the Y axis) that passes through the center of the flare emitting unit 51. The image analysis unit 33 also sets the upper end of the flare emitting unit 51 on the Y axis as the origin O. The image analysis unit 33 counts the number of pixels C_R y1 from the center line Y at the position y1 in the Y-axis direction of the vertical center line Y to the edge (boundary) of the flare 54 in the horizontal direction to the right. The flare volume estimation unit 34 multiplies the counted number of pixels C_R y1 by the size per pixel L_U to calculate the flame distance Y_R y1 . The flare volume estimation unit 34 calculates π×(Y_R y1 ) 2 ×L_U÷2 to calculate the volume of a part of the flare 54 at the position y1 in the Y-axis direction. Here, the above formula is for calculating the right half of the volume of a cylinder when the flame distance Y_R y1 is the radius and the height is the size of one pixel L_U. For example, the flare volume estimation unit 34 shifts the position y1 by one pixel in the Y-axis direction from the origin O to a position yT corresponding to the top of the flare 54, obtains the volume of the right side of the flare 54 at each position, and sums these. Similarly, the flare volume estimation unit 34 counts the number of pixels C_L y2 from the center line Y at the position y2 to the edge (boundary) of the flare 54 in the horizontal direction to the left, and multiplies the number of pixels C_L y2 by the size per pixel L_U to calculate the flame distance Y_L y2 . The flare volume estimation unit 34 calculates π×(Y_L y2 ) 2 ×L_U÷2 to calculate the volume of a portion of the flare 54 when the height at the position y2 in the Y-axis direction is set to the size of one pixel L_U. The flare volume estimation unit 34 shifts the position y2 by one pixel at a time in the Y-axis direction from the origin O to the position yT corresponding to the top of the flare 54, obtains the volume of the left side of the flare 54 at each position, and sums these. The flare volume estimation unit 34 calculates the volume of the flare 54 by summing the left and right volumes. That is, the flare volume estimation unit 34 calculates the volume V(t) of the flare 54 by the formula (1) in FIG. 9.

また、フレア体積推定部34は、フレア54の形状が左右対称ではない場合、フレア54の体積の算出を行わない。つまり、フレア体積推定部34は、フレア放出部51の中心を通る垂直方向の中心線でフレア54を左右に分割したときの右側の領域と左側の領域の面積の比を、例えば、左側の領域の面積÷右側の領域の面積によって計算し、前記比が1より大きい場合はその逆数を計算し、計算した比が所定の閾値以上の場合にフレア形状が左右対称とみなし、フレア54の体積を推定する。フレア54の形状が左右対称ではない例を図10に示す。フレア体積推定部34は、フレア画像において、フレア放出部51の中心を通る垂直方向の中心線Yの原点Oからフレア54のエッジを結ぶベクトルを作成する。例えば、フレア体積推定部34は、中心線Yを基準として原点回りに所定の角度θずつベクトル方向をずらしてベクトルを作成する。フレア体積推定部34は、作成したベクトルの長さを計算し、中心線Yよりも向かって右側の領域で作成されたベクトルの長さの和と、中心線Yよりも向かって左側の領域で作成したベクトルの長さの和と、をそれぞれ計算する。図10の例では、フレア体積推定部34は、ベクトルV1~V6を作成し、各ベクトルの長さを算出する。フレア体積推定部34は、ベクトルV1~V2の長さの和L1を計算し、また、ベクトルV3~V6の長さの和L2を計算する。フレア体積推定部34は、例えば、L1に対するL2の比を計算し、前記比が1より大きい場合は逆数を計算し、計算した比が所定の閾値未満であれば、フレア54が左右対称ではないと判定し、L1とL2の比が所定の閾値以上であれば、フレア54が左右対称であると判定する。フレア54が左右対称ではない場合、フレア体積推定部34は、フレア54の体積を算出せず、左右対称の場合、図9で説明した処理によってフレア54の体積を算出する。 In addition, the flare volume estimation unit 34 does not calculate the volume of the flare 54 when the shape of the flare 54 is not symmetrical. In other words, the flare volume estimation unit 34 calculates the ratio of the area of the right side region to the area of the left side region when the flare 54 is divided into left and right by a vertical center line passing through the center of the flare emission unit 51, for example, by dividing the area of the left side region by the area of the right side region, and if the ratio is greater than 1, calculates the inverse of the ratio. If the calculated ratio is equal to or greater than a predetermined threshold, the flare shape is considered to be symmetrical, and estimates the volume of the flare 54. An example of a flare 54 shape that is not symmetrical is shown in FIG. 10. The flare volume estimation unit 34 creates a vector that connects the edge of the flare 54 from the origin O of the vertical center line Y passing through the center of the flare emission unit 51 in the flare image. For example, the flare volume estimation unit 34 creates a vector by shifting the vector direction around the origin by a predetermined angle θ with the center line Y as a reference. The flare volume estimation unit 34 calculates the length of the created vector, and calculates the sum of the lengths of the vectors created in the area on the right side of the center line Y and the sum of the lengths of the vectors created in the area on the left side of the center line Y. In the example of FIG. 10, the flare volume estimation unit 34 creates vectors V1 to V6 and calculates the length of each vector. The flare volume estimation unit 34 calculates the sum L1 of the lengths of the vectors V1 to V2, and calculates the sum L2 of the lengths of the vectors V3 to V6. The flare volume estimation unit 34 calculates, for example, the ratio of L2 to L1, and if the ratio is greater than 1, calculates the reciprocal, and if the calculated ratio is less than a predetermined threshold, determines that the flare 54 is not symmetrical, and if the ratio of L1 to L2 is equal to or greater than a predetermined threshold, determines that the flare 54 is symmetrical. If the flare 54 is not symmetrical, the flare volume estimation unit 34 does not calculate the volume of the flare 54, and if it is symmetrical, calculates the volume of the flare 54 by the process described in FIG. 9.

フレアガス流量推定部35は、時刻tに撮影されたフレア画像に基づいて、当該フレア画像に写るフレア54の体積V(t)が算出されると、所定の単位時間あたりのフレアガスの流量を推定する。ここで、図11を参照する。図11の縦軸はフレア54の体積を示し、横軸は時間を示す。フレア体積推定部34は、フレア映像が撮影されるたびに、上述の方法でフレア54の体積Vを算出する。例えば、フレア体積推定部34は、時刻T1に撮影されたフレア映像から体積V1を算出し、次の時刻T2に撮影されたフレア映像から体積V2を算出する。フレアガス流量推定部35は、時刻T2の体積V2を算出されると、1つ前に撮影されたフレア映像に基づいて算出された体積V1と体積V2とを用いて、次式(2)によって、単位時間TUあたりのフレアガスの流量Nを算出する。
N=(V1+V2)×ΔT÷2×(TU÷ΔT)・・・・(2)
When the volume V(t) of the flare 54 shown in the flare image captured at time t is calculated based on the flare image, the flare gas flow rate estimation unit 35 estimates the flow rate of the flare gas per a predetermined unit time. Here, FIG. 11 is referred to. The vertical axis of FIG. 11 indicates the volume of the flare 54, and the horizontal axis indicates time. The flare volume estimation unit 34 calculates the volume V of the flare 54 by the above-mentioned method every time a flare image is captured. For example, the flare volume estimation unit 34 calculates the volume V1 from the flare image captured at time T1, and calculates the volume V2 from the flare image captured at the next time T2. When the volume V2 at time T2 is calculated, the flare gas flow rate estimation unit 35 calculates the flow rate N of the flare gas per unit time TU by the following formula (2) using the volumes V1 and V2 calculated based on the flare image captured immediately before.
N=(V1+V2)×ΔT÷2×(TU÷ΔT)・・・(2)

ここで、ΔTはT1~T2までの時間である。つまり、時刻T1における体積V1と時刻T2の体積V2を上辺と底辺とする台形の面積をΔTにおける流量とみなし、この流量を単位時間TUあたりの流量Nに換算する。なお、フレア映像が連続して取得されるような場合、つまりΔTが十分に短い場合には、体積V1~V2の時間平均を求めて、この値をフレアガス流量とみなし、この値を単位時間TUあたりの流量Nに換算してもよい(次式(2´))。
N=(V1+V2)÷2×(TU÷ΔT)・・・・(2´)
Here, ΔT is the time from T1 to T2. That is, the area of a trapezoid with the volume V1 at time T1 and the volume V2 at time T2 as its top and bottom sides is regarded as the flow rate at ΔT, and this flow rate is converted into the flow rate N per unit time TU. Note that when flare images are continuously acquired, that is, when ΔT is sufficiently short, the time average of the volumes V1 to V2 may be found, and this value may be regarded as the flare gas flow rate, and this value may be converted into the flow rate N per unit time TU (the following formula (2')).
N=(V1+V2)÷2×(TU÷ΔT)...(2')

フレアガス流量推定部35は、新たなフレア映像が撮影されるたびに単位時間TUあたりのフレアガスの流量を算出する。例えば、時刻T3には、時刻T2の体積V2と時刻T3の体積V3に基づいて、時刻T3におけるフレアガスの流量を算出し、時刻T4には、時刻T3の体積V3と時刻T4の体積V4に基づいて、時刻T4におけるフレアガスの流量を算出する。時刻T5以降についても同様である。 The flare gas flow rate estimation unit 35 calculates the flow rate of the flare gas per unit time TU each time a new flare image is captured. For example, at time T3, the flare gas flow rate is calculated based on the volume V2 at time T2 and the volume V3 at time T3, and at time T4, the flare gas flow rate is calculated based on the volume V3 at time T3 and the volume V4 at time T4. The same applies to times T5 and after.

図12にフレアガス流量の実測値と、図11を用いて説明した推定方法により算出したフレアガス流量Nとを示す。図12の縦軸は単位時間TUあたりのフレアガス流量を示し、横軸は時間を示す。グラフL1はフレアガス流量の実測値である。グラフL2は本実施形態の推定方法によるフレアガス流量Nを示す。図示するように、本実施形態のフレアガス流量の推定方法により、実測値と類似する推移を示すグラフが得られた。そこで、フレアガス流量推定部35は、上記の式(2)又は式(2´)によって計算できるフレアガス流量Nを、さらに以下の式(3)により補正することにより、フレアガス流量の推定値を算出する。
フレアガス流量推定値=α×N+β ・・・・(3)
ここでα、βは任意の実数である。α、βは実測値が得られる場合には実測値との比較、熟練者の知見、工学的な知見などにより定める。そして、フレアガス流量推定部35は、式(3)により算出したフレアガス流量の推定値と、所定の閾値とを比較して、フレアガス流量の推定値が閾値を上回っていれば、アラームの発報を出力部37に指示する。
Fig. 12 shows the actual measured value of the flare gas flow rate and the flare gas flow rate N calculated by the estimation method described with reference to Fig. 11. The vertical axis of Fig. 12 indicates the flare gas flow rate per unit time TU, and the horizontal axis indicates time. Graph L1 shows the actual measured value of the flare gas flow rate. Graph L2 shows the flare gas flow rate N by the estimation method of this embodiment. As shown in the figure, a graph showing a similar transition to the actual measured value was obtained by the flare gas flow rate estimation method of this embodiment. Therefore, the flare gas flow rate estimation unit 35 calculates an estimated value of the flare gas flow rate by further correcting the flare gas flow rate N, which can be calculated by the above formula (2) or formula (2'), by the following formula (3).
Estimated flare gas flow rate = α × N + β (3)
Here, α and β are any real numbers. α and β are determined by comparison with actual measured values when they are available, knowledge of an expert, engineering knowledge, etc. Then, the flare gas flow rate estimating unit 35 compares the estimated value of the flare gas flow rate calculated by the formula (3) with a predetermined threshold value, and if the estimated value of the flare gas flow rate exceeds the threshold value, instructs the output unit 37 to issue an alarm.

次に監視システム1によるフレアガス流量の推定処理について説明する。
(設定処理)
まず、フレアガス流量の推定に先立って、各種設定処理を行う。
図13は、一実施形態における設定処理の一例を示す図である。
まず、映像取得部31はカメラ10が撮影したフレア映像を取得する(ステップS1)。出力部37は、各カメラが撮影したフレア映像を監視装置30のモニターに表示する。次に監視員は、各フレア映像を参照して、フレア放出部51の先端位置を設定する(ステップS2)。例えば、監視員は、先端部の座標情報を入力する等によって先端位置を指定する入力を行う。設定情報取得部32は、入力された情報を取得する。先端位置の座標情報が入力された場合、設定情報取得部32は、その座標情報をフレア放出部51の先端位置の設定情報として記憶部36に記録する。フレア放出部51の先端位置の設定は、映像解析部33が、画像解析により行ってもよい。
Next, the process of estimating the flare gas flow rate by the monitoring system 1 will be described.
(Setting process)
First, prior to estimating the flare gas flow rate, various setting processes are performed.
FIG. 13 is a diagram illustrating an example of a setting process according to an embodiment.
First, the image acquisition unit 31 acquires the flare image captured by the camera 10 (step S1). The output unit 37 displays the flare images captured by each camera on the monitor of the monitoring device 30. Next, the monitor refers to each flare image and sets the tip position of the flare emitting unit 51 (step S2). For example, the monitor performs input to specify the tip position by inputting coordinate information of the tip. The setting information acquisition unit 32 acquires the input information. When the coordinate information of the tip position is input, the setting information acquisition unit 32 records the coordinate information in the storage unit 36 as setting information of the tip position of the flare emitting unit 51. The setting of the tip position of the flare emitting unit 51 may be performed by the image analysis unit 33 through image analysis.

次に監視員は、各フレア映像を参照して、フレア監視エリア52、背景エリア53を設定する(ステップS3)。フレア監視エリア52は、フレアが写った画素の代表的なRGB輝度値を検出する目的で設定する。監視員は、フレア放出部51の先端付近の小さな範囲をフレア監視エリア52として設定する。これは、フレア以外の背景等が含まれないようにするためである。監視員は、フレア監視エリア52に対応する矩形の領域の頂点の座標を入力する等して、フレア監視エリア52を設定する。設定情報取得部32は、入力された座標情報をフレア監視エリア52の設定情報として記憶部36に記録する。 The monitor then refers to each flare image and sets the flare monitoring area 52 and background area 53 (step S3). The flare monitoring area 52 is set for the purpose of detecting the representative RGB luminance values of pixels in which the flare is captured. The monitor sets a small range near the tip of the flare emitting section 51 as the flare monitoring area 52. This is to ensure that the background other than the flare is not included. The monitor sets the flare monitoring area 52 by inputting the coordinates of the vertices of a rectangular area corresponding to the flare monitoring area 52, for example. The setting information acquisition section 32 records the input coordinate information in the memory section 36 as setting information for the flare monitoring area 52.

背景エリア53は、空などの背景のRGB輝度値を検出する目的で設定する。監視員は、フレアや煙が写り込まない範囲を背景エリア53として設定する。監視員は、背景エリア53に対応する矩形の領域の頂点の座標を入力する等して、背景エリア53を設定する。設定情報取得部32は、入力された座標情報を背景エリア53の設定情報として記憶部36に記録する。 The background area 53 is set for the purpose of detecting the RGB luminance values of the background, such as the sky. The observer sets an area in which no flare or smoke is captured as the background area 53. The observer sets the background area 53 by, for example, inputting the coordinates of the vertices of a rectangular area that corresponds to the background area 53. The setting information acquisition unit 32 records the input coordinate information in the memory unit 36 as setting information for the background area 53.

これらの設定を行って、監視員が所定の操作を行うと、映像解析部33は、映像取得部31が取得したフレア映像のうちフレア監視エリア52に含まれる各画素のRGB輝度値を算出する。映像解析部33は、任意の画素のRGB輝度値を選択して、この値を代表的なフレアのRGB輝度値(図6の点61に相当)として記憶部36に記録する。また、映像解析部33は、映像取得部31が取得したフレア映像のうち背景エリア53に含まれる各画素のRGB輝度値を算出する。映像解析部33は、任意の画素のRGB輝度値を選択して、この値を背景のRGB輝度値(図6の点63に相当)として記憶部36に記録する。または、映像解析部33は、背景エリア53に含まれる各画素のRGB輝度値の平均値を計算して、この値を背景のRGB輝度値として記憶部36に記録する。あるいは、映像解析部33が算出したフレア監視エリア52に含まれる各画素のRGB輝度値を監視装置30の表示部に表示し、表示された輝度値を参照しながら、監視員が適切なRGB輝度値を監視装置30へ入力することによって、代表的なフレアのRGB輝度値を設定してもよい。背景のRGB輝度値についても同様である。 After these settings are made and the monitor performs a specified operation, the image analysis unit 33 calculates the RGB luminance value of each pixel included in the flare monitoring area 52 of the flare image acquired by the image acquisition unit 31. The image analysis unit 33 selects the RGB luminance value of an arbitrary pixel and records this value in the storage unit 36 as the RGB luminance value of a representative flare (corresponding to point 61 in FIG. 6). The image analysis unit 33 also calculates the RGB luminance value of each pixel included in the background area 53 of the flare image acquired by the image acquisition unit 31. The image analysis unit 33 selects the RGB luminance value of an arbitrary pixel and records this value in the storage unit 36 as the RGB luminance value of the background (corresponding to point 63 in FIG. 6). Alternatively, the image analysis unit 33 calculates the average value of the RGB luminance values of each pixel included in the background area 53 and records this value in the storage unit 36 as the RGB luminance value of the background. Alternatively, the RGB luminance values of each pixel included in the flare monitoring area 52 calculated by the video analysis unit 33 may be displayed on the display unit of the monitoring device 30, and the monitor may input appropriate RGB luminance values into the monitoring device 30 while referring to the displayed luminance values, thereby setting the RGB luminance values of a representative flare. The same applies to the RGB luminance values of the background.

なお、フレアの代表的なRGB輝度値や背景のRGB輝度値の典型値を、時間帯や季節、天候などに応じて予め複数セット準備してもよい。そして、監視員がこの典型値を選択することによって、フレアの代表的なRGB輝度値や背景のRGB輝度値が設定されてもよい。例えば、記憶部36には、晴れの日のフレアの代表的なRGB輝度値および背景のRGB輝度値、雨の日のフレアの代表的なRGB輝度値および背景のRGB輝度値、昼間のフレアの代表的なRGB輝度値および背景のRGB輝度値、夕方のフレアの代表的なRGB輝度値および背景のRGB輝度値、などが典型値として記録されていてもよい。また、フレアのRGB輝度値について、代表的な値が複数存在する場合(例えば、フレアの中心付近のRGB輝度値と境界付近のRGB輝度値)、複数のRGB輝度値を設定してもよい。 Note that a plurality of sets of typical values of the flare's RGB luminance value and the background's RGB luminance value may be prepared in advance according to the time period, season, weather, etc. Then, the observer may select this typical value to set the flare's typical RGB luminance value and the background's RGB luminance value. For example, the storage unit 36 may store typical values such as a typical RGB luminance value of a flare on a sunny day and a typical RGB luminance value of a flare on a rainy day, a typical RGB luminance value of a flare in the daytime and a typical RGB luminance value of a flare in the evening and a typical RGB luminance value of a flare in the background. In addition, when there are a plurality of typical values for the flare's RGB luminance value (for example, an RGB luminance value near the center of the flare and an RGB luminance value near the boundary), a plurality of RGB luminance values may be set.

次に監視員は、アラーム発報の判定用閾値を監視装置30に設定する(ステップS4)。監視員は、フレアガスの流量に応じた複数の閾値を設定してもよい。例えば、監視員は、フレアガスの流量が“X1”Nm/hを上回ったら、“フレアガス流量がX1を超えました”とのアラームを発報し、“X2”Nm/h(X2>X1)を上回ったら、“フレアガス流量がX2を超えました”とのアラームを発報するように設定する。また、監視員は、フレアガス流量の変動(増加)に対する閾値を設定してもよい。例えば、時刻T1におけるフレアガス流量の推定値NT1と、時刻T1の次にフレアガス流量を推定する時刻である時刻T2におけるフレアガス流量の推定値NT2の関係がNT2>NT1であってそれらの差が“X3”Nm/hを上回ったら、“フレアガス流量がX3を超えて増加しました”とのアラームを発報するように設定する。また、監視員は、フレアガスの流量の増加量に応じて複数の閾値を設定してもよい。設定情報取得部32は、入力された閾値とアラームの内容を記憶部36に記録する。 Next, the monitor sets a threshold value for determining whether or not to issue an alarm in the monitoring device 30 (step S4). The monitor may set a plurality of threshold values according to the flow rate of the flare gas. For example, the monitor sets the threshold value to issue an alarm stating "The flare gas flow rate has exceeded X1" when the flow rate of the flare gas exceeds "X1" Nm 3 /h, and to issue an alarm stating "The flare gas flow rate has exceeded X2" when the flow rate exceeds "X2" Nm 3 /h (X2 > X1). The monitor may also set a threshold value for fluctuations (increases) in the flare gas flow rate. For example, the monitor sets the threshold value to issue an alarm stating "The flare gas flow rate has increased beyond X3" when the relationship between the estimated value N T1 of the flare gas flow rate at time T1 and the estimated value N T2 of the flare gas flow rate at time T2, which is the time when the flare gas flow rate is next estimated after time T1, is N T2 > N T1 and the difference between them exceeds "X3" Nm 3 /h. The monitor may set a plurality of thresholds according to the increase in the flow rate of the flare gas. The setting information acquisition unit 32 records the input thresholds and the content of the alarm in the storage unit 36.

次に監視員は、フレア放出部51の幅の長さを設定する(ステップS5)。例えば、監視員は、フレア放出部51の幅が何メートルかを入力する。設定情報取得部32は、入力されたフレア放出部51の幅の長さを取得し、記憶部36に記録する。 Then, the observer sets the width of the flare emission section 51 (step S5). For example, the observer inputs the width of the flare emission section 51 in meters. The setting information acquisition section 32 acquires the input width of the flare emission section 51 and records it in the memory section 36.

次に監視員は、各フレア映像を参照して、フレア放出部51の幅の範囲を設定する(ステップS6)。例えば、監視員は、フレア放出部51の左端の座標情報と右端の座標情報を入力する等によってフレア放出部51の幅の範囲を指定する入力を行う。設定情報取得部32は、入力された情報を取得する。フレア放出部51の左右端の座標情報が入力された場合、設定情報取得部32は、その座標情報をフレア放出部51の幅の範囲を規定する設定情報として記憶部36に記録する。フレア放出部51の幅の設定は、映像解析部33が、画像解析により行ってもよい。 Then, the monitor sets the width range of the flare emitting section 51 with reference to each flare image (step S6). For example, the monitor performs input to specify the width range of the flare emitting section 51 by inputting coordinate information of the left end and coordinate information of the right end of the flare emitting section 51. The setting information acquisition section 32 acquires the input information. When coordinate information of the left and right ends of the flare emitting section 51 is input, the setting information acquisition section 32 records the coordinate information in the storage section 36 as setting information that specifies the width range of the flare emitting section 51. The width of the flare emitting section 51 may be set by the video analysis section 33 through image analysis.

(フレアガス流量の推定処理)
次にフレアガス流量の推定処理について説明する。図14は、一実施形態におけるフレアガス流量の推定処理の一例を示す図である。まず、映像取得部31がカメラ10によって撮影されたフレア映像を取得する(ステップS11)。映像取得部31は、フレア映像を映像解析部33へ出力する。映像解析部33は、フレア映像の各画素につき、以下の処理を行う。
(Flare gas flow rate estimation process)
Next, the process of estimating the flare gas flow rate will be described. Fig. 14 is a diagram showing an example of the process of estimating the flare gas flow rate in one embodiment. First, the image acquisition unit 31 acquires a flare image captured by the camera 10 (step S11). The image acquisition unit 31 outputs the flare image to the image analysis unit 33. The image analysis unit 33 performs the following process for each pixel of the flare image.

まず、映像解析部33は、フレア映像のある画素のRGB輝度値を解析する(ステップS12)。次に映像解析部33は、解析したRGB輝度値を、Rの輝度値、Gの輝度値、Bの輝度値を座標軸に持つRGBの3次元空間にプロットする(ステップS13)。プロットされた点は、図6の点62に相当する。次に映像解析部33は、代表的なフレアのRGB輝度値および背景のRGB輝度値からの距離を計算する(ステップS14)。具体的には、映像解析部33は、代表的なフレアのRGB輝度値に対応する点(図6の点61)と、プロットした点(図6の点62)との距離を算出する。また、映像解析部33は、背景のRGB輝度値に対応する点(図6の点63)と、プロットした点(図6の点62)との距離を算出する。このとき、例えば、時間帯ごとにフレアの代表的なRGB輝度値および背景のRGB輝度値が設定されている場合、映像解析部33は、現在の時間帯に応じたフレアおよび背景のRGB輝度値の情報を記憶部36から読み出して3次元空間にプロットする。また、例えば、代表的なフレアのRGB輝度値が複数設定されている場合、それぞれのRGB輝度値に対応する点と、ステップS13にてプロットした点との距離を算出する。 First, the image analysis unit 33 analyzes the RGB luminance values of pixels with a flare image (step S12). Next, the image analysis unit 33 plots the analyzed RGB luminance values in a three-dimensional RGB space with the R luminance value, the G luminance value, and the B luminance value as coordinate axes (step S13). The plotted point corresponds to point 62 in FIG. 6. Next, the image analysis unit 33 calculates the distance from the RGB luminance value of the representative flare and the RGB luminance value of the background (step S14). Specifically, the image analysis unit 33 calculates the distance between the point corresponding to the RGB luminance value of the representative flare (point 61 in FIG. 6) and the plotted point (point 62 in FIG. 6). The image analysis unit 33 also calculates the distance between the point corresponding to the RGB luminance value of the background (point 63 in FIG. 6) and the plotted point (point 62 in FIG. 6). At this time, for example, if representative RGB luminance values of the flare and the background are set for each time period, the video analysis unit 33 reads information on the RGB luminance values of the flare and the background according to the current time period from the storage unit 36 and plots them in three-dimensional space. Also, for example, if multiple representative RGB luminance values of the flare are set, the video analysis unit 33 calculates the distance between the point corresponding to each RGB luminance value and the point plotted in step S13.

次に映像解析部33は、解析したRGB輝度値に対応する点が、フレアの代表的なRGB輝度値に対応する点に近いかどうかを判定する(ステップS15)。フレアの代表的なRGB輝度値に対応する点に近い場合(ステップS15;Yes)、映像解析部33は、今回解析した画素は、フレアが写った画素であると判定する(ステップS16)。背景のRGB輝度値に対応する点に近い場合(ステップS15;No)、映像解析部33は、今回解析した画素は、背景が写った画素であると判定する(ステップS17)。次に映像解析部33は、フレア映像の全画素について解析を行ったかどうかを判定し(ステップS18)、全画素についての解析が完了するまで、ステップS12からの処理を繰り返す。映像解析部33は、ステップS12~S18の処理を繰り返す中で、フレアと判定した画素と背景と判定した画素に異なる色を付したフレア画像(図7(a))を作成する。 Next, the image analysis unit 33 judges whether the point corresponding to the analyzed RGB luminance value is close to a point corresponding to a representative RGB luminance value of the flare (step S15). If it is close to a point corresponding to a representative RGB luminance value of the flare (step S15; Yes), the image analysis unit 33 judges that the pixel analyzed this time is a pixel in which the flare is reflected (step S16). If it is close to a point corresponding to the RGB luminance value of the background (step S15; No), the image analysis unit 33 judges that the pixel analyzed this time is a pixel in which the background is reflected (step S17). Next, the image analysis unit 33 judges whether the analysis has been performed for all pixels of the flare image (step S18), and repeats the process from step S12 until the analysis of all pixels is completed. While repeating the processes of steps S12 to S18, the image analysis unit 33 creates a flare image (FIG. 7(a)) in which pixels determined to be flare and pixels determined to be background are colored differently.

なお、ステップS12~ステップS18の処理をフレア映像に含まれる全画素について行うこととしたが、例えば、フレアスタックの設備が写っている箇所など、明らかにフレアが写らないエリアについては処理対象外としてもよい。あるいは、監視対象エリアを設定できるようにして、監視対象エリア内の画素に対してのみステップS12~ステップS18の処理を行うようにしてもよい。 Note that, although the processing of steps S12 to S18 is performed on all pixels contained in the flare image, areas where the flare is clearly not visible, such as areas where flare stack equipment is visible, may be excluded from processing. Alternatively, a monitored area may be set, and steps S12 to S18 may be performed only on pixels within the monitored area.

全画素についてフレアか背景かを判定する処理が完了すると、次に映像解析部33は、フレアと判定された画素群の中に空洞が存在するかどうかを判定する(ステップS19)。映像解析部33は、フレア画像を垂直方向に所定の画素数ごとに分割し、分割してできた部分画像ごとに水平方向にスキャンする。映像解析部33は、スキャンしたときにフレアが写った画素群、背景が写った画素群、フレアが写った画素群の順で画素群が検出されると空洞が存在すると判定する。空洞が存在する場合(ステップS19;Yes)、映像解析部33は、空洞が存在する部分画像について図7を用いて説明した空洞補完処理を行う(ステップS20)。具体的には、映像解析部33は、フレアの画素群に挟まれた非フレアの画像群にフレアであることを示す色を付してフレア画像を更新する。空洞が存在しない場合(ステップS19;No)、ステップS21の処理に進む。次に映像解析部33は、全部分画像について空洞の検出処理を行ったかどうかを判定し(ステップS21)、全部分画像について空洞の検出処理、補完処理が完了するまで、ステップS19からの処理を繰り返す。 When the process of determining whether all pixels are flares or background is completed, the image analysis unit 33 next determines whether a cavity exists in the pixel group determined to be a flare (step S19). The image analysis unit 33 divides the flare image vertically into a predetermined number of pixels, and scans each of the divided partial images horizontally. The image analysis unit 33 determines that a cavity exists when the pixel group in which a flare is captured, the pixel group in which a background is captured, and the pixel group in which a flare is captured are detected in this order during scanning. If a cavity exists (step S19; Yes), the image analysis unit 33 performs the cavity completion process described using FIG. 7 on the partial image in which a cavity exists (step S20). Specifically, the image analysis unit 33 updates the flare image by applying a color indicating that the non-flare image group sandwiched between the flare pixel groups is a flare. If a cavity does not exist (step S19; No), the process proceeds to step S21. Next, the video analysis unit 33 determines whether cavity detection processing has been performed for all partial images (step S21), and repeats the processing from step S19 until cavity detection processing and completion processing have been completed for all partial images.

なお、フレアの補完処理は、フレア画像を水平方向に所定の画素数ごとに分割し、分割してできた部分画像ごとに垂直方向にスキャンしたときにフレアが写った画素群、背景が写った画素群、フレアが写った画素群の順で画素群が検出されるとその部分画像に空洞が存在すると判定してもよい。 The flare complementation process may involve dividing the flare image horizontally into a predetermined number of pixels, scanning each of the resulting partial images vertically, and determining that a cavity exists in the partial image if pixel groups are detected in the following order: a pixel group that reflects the flare, a pixel group that reflects the background, and a pixel group that reflects the flare.

空洞の補完処理が完了すると、次に映像解析部33は、フレア画像に基づいて、フレアと判定された画素の形状が、フレア放出部51の中心を通る垂直方向の中心線(図9の中心線Y)に対して左側と右側の領域に分けたときに左側の領域と右側の領域が対称かどうかを判定する(ステップS22)。フレア体積推定部34は、図10を用いて説明したように、原点Oからフレアのエッジに向かってベクトルを複数作成し、左側の領域に作成されたベクトルの長さの合計と、右側の領域にて作成されたベクトルの長さの合計とを比較する。左右のベクトル長さの合計の比を計算し、前記比が1より大きい場合は逆数を計算し、計算した比が閾値以上の場合、フレア体積推定部34は、フレアは左右対称であると判定する。左右のベクトル長さの合計の比が閾値未満の場合、フレア体積推定部34は、フレアは左右対称ではないと判定する。左右対称ではない場合(ステップS22;No)。図14の処理を終了する。 When the cavity complementation process is completed, the image analysis unit 33 next determines whether the shape of the pixel determined to be a flare is symmetrical between the left and right regions when the shape is divided into left and right regions with respect to the vertical center line (center line Y in FIG. 9) passing through the center of the flare emission unit 51 based on the flare image (step S22). As described with reference to FIG. 10, the flare volume estimation unit 34 creates multiple vectors from the origin O toward the edge of the flare and compares the total length of the vectors created in the left region with the total length of the vectors created in the right region. It calculates the ratio of the total length of the left and right vectors, and if the ratio is greater than 1, it calculates the reciprocal. If the calculated ratio is equal to or greater than a threshold value, the flare volume estimation unit 34 determines that the flare is symmetrical. If the ratio of the total length of the left and right vectors is less than a threshold value, the flare volume estimation unit 34 determines that the flare is not symmetrical. If it is not symmetrical (step S22; No). The process of FIG. 14 ends.

左右対称の場合(ステップS22;Yes)。フレア体積推定部34は、フレア54の左右の単位高さごとの体積ΔVを算出する(ステップS23)。例えば、フレア体積推定部34は、垂直方向の1画素ごとに中心線Yからフレア54の左端までの長さを半径とする円柱の左半分の体積を計算し、中心線Yからフレア54の右端までの長さを半径とする円柱の右半分の体積を計算する。なお、中心線Yから左端までの長さは、フレア体積推定部34が、中心線Yから左端までの画素数に図13のステップS5で入力された長さをステップS6で入力されたフレア放出部51の幅の範囲に含まれている水平方向の画素数で除算した値を乗じて算出する。中心線Yから右端までの長さについても同様である。フレア体積推定部34は、左側の体積と右側の体積を合計し、垂直方向の単位高さごとの体積ΔVを算出する。次にフレア体積推定部34は、フレア54の垂直方向にΔVを積算し、体積Vを算出する(ステップS24)。 In the case of left-right symmetry (step S22; Yes), the flare volume estimation unit 34 calculates the volume ΔV for each unit height on the left and right sides of the flare 54 (step S23). For example, the flare volume estimation unit 34 calculates the volume of the left half of a cylinder whose radius is the length from the center line Y to the left end of the flare 54 for each pixel in the vertical direction, and calculates the volume of the right half of a cylinder whose radius is the length from the center line Y to the right end of the flare 54. The length from the center line Y to the left end is calculated by the flare volume estimation unit 34 multiplying the number of pixels from the center line Y to the left end by the value obtained by dividing the length input in step S5 of FIG. 13 by the number of pixels in the horizontal direction included in the range of the width of the flare emission unit 51 input in step S6. The same applies to the length from the center line Y to the right end. The flare volume estimation unit 34 sums up the volumes on the left side and the right side to calculate the volume ΔV for each unit height in the vertical direction. Next, the flare volume estimation unit 34 integrates ΔV in the vertical direction of the flare 54 to calculate the volume V (step S24).

次にフレアガス流量推定部35は、体積Vの時間平均を算出し、フレアガス流量を推定する(ステップS25)。例えば、フレアガス流量推定部35は、時刻T1に撮影されたフレア映像に基づいて算出されたフレア54の体積V1と、時刻T1からΔT後の時刻T2に撮影されたフレア映像に基づいて算出されたフレア54の体積V2と、に基づいて、ΔTにおける体積Vの時間平均(V1+V2)÷2を算出する(ΔTが十分に短いとき)。フレアガス流量推定部35は、ΔTにおける体積Vの時間平均を単位時間TUあたりの体積Vの合計に換算して、これに所定の係数αを乗じて、所定の補正項βを加算した値をフレアガスの流量として算出する。
フレアガスの流量=α{(V1+V2)÷2×(TU/ΔT)}+β・・・(3)
Next, the flare gas flow rate estimation unit 35 calculates the time average of the volume V and estimates the flare gas flow rate (step S25). For example, the flare gas flow rate estimation unit 35 calculates the time average of the volume V at ΔT (V1+V2)÷2 based on the volume V1 of the flare 54 calculated based on the flare image taken at time T1 and the volume V2 of the flare 54 calculated based on the flare image taken at time T2, which is ΔT after time T1 (when ΔT is sufficiently short). The flare gas flow rate estimation unit 35 converts the time average of the volume V at ΔT into the total of the volume V per unit time TU, multiplies this by a predetermined coefficient α, and adds a predetermined correction term β to calculate the flow rate of the flare gas.
Flow rate of flare gas=α{(V1+V2)÷2×(TU/ΔT)}+β (3)

あるいは、カメラ10による撮影間隔が数分などΔTが長いとき、フレアガス流量推定部35は、以下の式(3´)によってフレアガス流量を推定する。
フレアガス流量の推定値=α{(V1+V2)×ΔT÷2×(TU/ΔT)}+β
・・・(3´)
なお、α、βは、過去の実測値や工学的な知見などに基づいて設定される。
Alternatively, when ΔT is long, such as when the interval between images taken by the camera 10 is several minutes, the flare gas flow rate estimation unit 35 estimates the flare gas flow rate by the following formula (3′).
Estimated value of flare gas flow rate = α {(V1 + V2) × ΔT ÷ 2 × (TU / ΔT)} + β
... (3')
It should be noted that α and β are set based on past measured values, engineering knowledge, and the like.

次にフレアガス流量推定部35は、式(3)又は式(3´)で算出したフレアガス流量の推定値と、ステップS4で設定された閾値とを比較する。フレアガス流量の推定値が閾値を上回っている場合、フレアガス流量推定部35は、閾値に対応するアラームを出力するように出力部37へ指示する。又は、フレアガス流量推定部35は、時刻T-ΔTに推定したフレアガス流量の推定値よりも時刻Tに推定したフレアガス流量の推定値が閾値以上増加していれば、この間に配管のシール劣化などによりフレアガス流量が増大したとみなして、アラームを出力するように出力部37へ指示する。フレアガス流量の増加分に対する閾値は複数設けられていてもよい。出力部37は、フレアガス流量の推定値やアラームを出力する(ステップS26)。これにより、カメラ10が撮影したフレア映像に基づいて、フレアガスの流量を推定することができる。 Next, the flare gas flow rate estimation unit 35 compares the flare gas flow rate estimate calculated by formula (3) or formula (3') with the threshold value set in step S4. If the flare gas flow rate estimate exceeds the threshold value, the flare gas flow rate estimation unit 35 instructs the output unit 37 to output an alarm corresponding to the threshold value. Alternatively, if the flare gas flow rate estimate at time T is greater than the flare gas flow rate estimate at time T-ΔT by more than the threshold value, the flare gas flow rate estimation unit 35 assumes that the flare gas flow rate has increased during this period due to deterioration of the seal of the piping, etc., and instructs the output unit 37 to output an alarm. Multiple threshold values for the increase in the flare gas flow rate may be set. The output unit 37 outputs the flare gas flow rate estimate and the alarm (step S26). This makes it possible to estimate the flare gas flow rate based on the flare video captured by the camera 10.

本実施形態の監視システム1によれば、フレア映像を監視装置30に入力するだけで、フレアガスの流量を推定することができる。また、フレアガス流量の増加分に対する閾値を設定することで、フレアガス流量が増加し始めたときにリアルタイムにアラームを発報することができる。これにより、配管の劣化などによりフレアガス流量が増加したことを早期に把握し、対処することができる。また、不確かな目視によるフレアの確認や、高価な流量計の導入を行うこと無く、フレアガスの流量増加(すなわち、本来製油所内で利用されるガスの流入)を把握することができる。また、図1に示すようにフレア映像を監視用モニター25に表示させて従来通りの監視を行いつつ、監視装置30が通知するフレアガス流量の推定結果や通報されたアラームを参照することができる。また、監視員は、余剰ガスの性質やフレアスタックの設置環境などに応じて、フレア監視エリア52、背景エリア53、閾値、フレアに対応する輝度値などを任意に設定することができるので、どのような設備にも適用することができる。 According to the monitoring system 1 of this embodiment, the flow rate of the flare gas can be estimated simply by inputting the flare image into the monitoring device 30. In addition, by setting a threshold value for the increase in the flare gas flow rate, an alarm can be issued in real time when the flare gas flow rate begins to increase. This allows an increase in the flare gas flow rate due to deterioration of the piping or the like to be recognized early and dealt with. In addition, an increase in the flow rate of the flare gas (i.e., the inflow of gas that is originally used in the refinery) can be recognized without unreliable visual confirmation of the flare or the introduction of an expensive flow meter. In addition, as shown in FIG. 1, the flare image can be displayed on the monitoring monitor 25 to perform monitoring as in the past, while referring to the estimated result of the flare gas flow rate notified by the monitoring device 30 and the alarm that was notified. In addition, the monitor can arbitrarily set the flare monitoring area 52, background area 53, threshold value, brightness value corresponding to the flare, etc. according to the properties of the surplus gas and the installation environment of the flare stack, so that it can be applied to any facility.

監視装置30における各処理の過程は、例えば監視装置30が有するCPU等がプログラムを実行することによって実現できる。監視装置30によって実行されるプログラムは、コンピュータが読み取り可能な記録媒体に記録され、この記録媒体に記録されたプログラムを読み出して実行することによって実現してもよい。なお、監視装置30は、OSや周辺機器等のハードウェアを含むものとする。また、コンピュータが読み取り可能な記録媒体は、例えば、フレキシブルディスク、光磁気ディスク、ROM、CD-ROM等の可搬媒体、監視装置30に内蔵されるハードディスク等の記憶装置である。また、コンピュータが読み取り可能な記録媒体には、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間の間、動的にプログラムを保持するもの、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含んでもよい。また上記プログラムは、前述した機能の一部を実現するためのものであってもよく、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであってもよい。 Each process in the monitoring device 30 can be realized, for example, by the CPU or the like of the monitoring device 30 executing a program. The program executed by the monitoring device 30 may be recorded in a computer-readable recording medium and realized by reading and executing the program recorded in the recording medium. The monitoring device 30 includes hardware such as an OS and peripheral devices. The computer-readable recording medium is, for example, a portable medium such as a flexible disk, an optical magnetic disk, a ROM, a CD-ROM, or a storage device such as a hard disk built into the monitoring device 30. The computer-readable recording medium may also include a medium that dynamically holds a program for a short period of time, such as a communication line when transmitting a program via a network such as the Internet or a communication line such as a telephone line, or a medium that holds a program for a certain period of time, such as a volatile memory inside a computer system that is the server or client in that case. The above program may also be one for realizing part of the above-mentioned functions, or may be one that can realize the above-mentioned functions in combination with a program already recorded in the computer system.

その他、本発明の趣旨を逸脱しない範囲で、上記した実施の形態における構成要素を周知の構成要素に置き換えることは適宜可能である。また、この発明の技術範囲は上記の実施形態に限られるものではなく、本発明の趣旨を逸脱しない範囲において種々の変更を加えることが可能である。
なお、RGB輝度値とは、RGB色空間における赤(R)、緑(G)、青(B)の輝度値(0~255)の組み合わせで表される値のことである、白黒輝度値とは、0(黒)~255(白)の256階調で表される値のことである。
In addition, the components in the above-described embodiment may be replaced with known components as appropriate without departing from the spirit of the present invention. Furthermore, the technical scope of the present invention is not limited to the above-described embodiment, and various modifications may be made without departing from the spirit of the present invention.
Note that an RGB luminance value is a value expressed by a combination of red (R), green (G), and blue (B) luminance values (0 to 255) in the RGB color space, and a black and white luminance value is a value expressed in 256 levels from 0 (black) to 255 (white).

1・・・監視システム
10・・・カメラ
15・・・映像取得装置
20・・・映像分配装置
25・・・監視用モニター
30・・・監視装置
31・・・映像取得部
32・・・設定情報取得部
33・・・映像解析部
34・・・フレア体積推定部
35・・・フレアガス流量推定部
36・・・記憶部
37・・・出力部
50・・・フレア映像
52・・・フレア監視エリア
53・・・背景エリア
REFERENCE SIGNS LIST 1 Surveillance system 10 Camera 15 Image acquisition device 20 Image distribution device 25 Surveillance monitor 30 Surveillance device 31 Image acquisition section 32 Setting information acquisition section 33 Image analysis section 34 Flare volume estimation section 35 Flare gas flow rate estimation section 36 Memory section 37 Output section 50 Flare image 52 Flare monitoring area 53 Background area

Claims (8)

フレアを撮影した映像を取得する映像取得部と、
前記映像を解析し、前記フレアが写った画素を識別する映像解析部と、
前記フレアが写った画素に基づいて、前記フレアの体積を推定するフレア体積推定部と、
連続して撮影された前記映像について算出された前記フレアの体積に基づいて、前記フレアを発生させるフレアガスの所定の単位時間における流量を推定するフレアガス流量推定部と、
前記フレアガスの流量と所定の閾値とを比較してアラームを発報する出力部と、
を備え
前記フレア体積推定部は、前記映像における前記フレアの放出部の中心を通る垂直方向の中心線で前記フレアを左右に分割したときの右側の領域について、フレアの上端から下端までの単位高さごとに、前記中心線から前記フレアの右端までの距離を半径とする円柱の半分の体積を算出し、前記単位高さごとに算出した体積を積算して前記フレアの右側の体積を推定し、左側の領域について、フレアの上端から下端までの単位高さごとに、前記中心線から前記フレアの左端までの距離を半径とする円柱の半分の体積を算出し、前記単位高さごとに算出した体積を積算して前記フレアの左側の体積を推定し、前記フレアの右側の体積と前記フレアの左側の体積を合計して前記フレアの体積を推定する、監視装置。
an image acquisition unit for acquiring an image of a flare;
an image analysis unit that analyzes the image and identifies pixels in which the flare is captured;
a flare volume estimation unit that estimates a volume of the flare based on pixels in which the flare is captured;
a flare gas flow rate estimation unit that estimates a flow rate of the flare gas that generates the flare in a predetermined unit time based on a volume of the flare calculated for the continuously captured images;
an output unit that compares the flow rate of the flare gas with a predetermined threshold value and issues an alarm;
Equipped with
the flare volume estimation unit calculates, for a right-side region when the flare is divided into left and right parts by a vertical center line passing through the center of the emission part of the flare in the image, half the volume of a cylinder whose radius is the distance from the center line to the right end of the flare, for each unit height from the top to the bottom of the flare, and estimates the volume of the right side of the flare by integrating the volumes calculated for each unit height; calculates, for a left-side region, half the volume of a cylinder whose radius is the distance from the center line to the left end of the flare, for each unit height from the top to the bottom of the flare, and estimates the volume of the left side of the flare by integrating the volumes calculated for each unit height; and estimates the volume of the flare by summing the volume of the right side of the flare and the volume of the left side of the flare .
前記フレア体積推定部は、前記フレアの放出部の中心を通る垂直方向の中心線で前記フレアを左右に分割したときの前記フレアの右側の領域の面積に対する左側の領域の面積の比を計算し、前記比が1より大きい場合はその逆数を計算し、計算した前記比が所定の閾値以上の場合に前記フレアの体積を推定する、
請求項1に記載の監視装置。
the flare volume estimation unit calculates a ratio of an area of a left side region of the flare to an area of a right side region of the flare when the flare is divided into left and right parts by a vertical center line passing through a center of an emission portion of the flare, and calculates the reciprocal of the ratio when the ratio is greater than 1, and estimates the volume of the flare when the calculated ratio is equal to or greater than a predetermined threshold value.
The monitoring device according to claim 1 .
前記出力部は、前記フレアガス流量推定部が推定した前記フレアガスの流量が、所定の閾値以上となるか、所定の閾値以上増加すると、アラームを発報する、
請求項1または請求項2に記載の監視装置。
The output unit issues an alarm when the flow rate of the flare gas estimated by the flare gas flow rate estimation unit becomes equal to or exceeds a predetermined threshold value or increases by equal to or exceeds a predetermined threshold value.
The monitoring device according to claim 1 or 2 .
前記映像解析部は、前記フレアが写った所定のフレア画素の輝度値と、前記フレア以外が写った所定の背景画素の輝度値とに基づいて、前記映像に含まれる各画素を、前記フレア画素に近い第1画素と前記背景画素に近い第2画素の何れかに分類し、前記第1画素に分類された全画素数を算出する、
請求項1から請求項の何れか1項に記載の監視装置。
The image analysis unit classifies each pixel included in the image into either a first pixel close to the flare pixel or a second pixel close to the background pixel based on a luminance value of a predetermined flare pixel in which the flare is captured and a luminance value of a predetermined background pixel in which something other than the flare is captured, and calculates the total number of pixels classified into the first pixel.
The monitoring device according to any one of claims 1 to 3 .
前記映像解析部は、RGB輝度値を座標軸とする3次元空間において、前記映像に含まれる1つの画素である検出対象画素のRGB輝度値で表される座標と、予め定められた前記フレアに対応するRGB輝度値で表される座標との距離を算出し、算出された距離に基づいて前記検出対象画素が前記第1画素に分類されるか前記第2画素に分類されるかを判定する、
請求項に記載の監視装置。
the image analysis unit calculates a distance between coordinates represented by RGB luminance values of a detection target pixel, which is one pixel included in the image, and coordinates represented by RGB luminance values corresponding to the predetermined flare, in a three-dimensional space having RGB luminance values as coordinate axes, and determines whether the detection target pixel is classified as the first pixel or the second pixel based on the calculated distance .
5. The monitoring device according to claim 4 .
前記映像解析部は、前記第2画素に分類された前記検出対象画素が、前記第1画素に分類された画素群に挟まれた位置に存在する場合、当該検出対象画素を、前記第1画素に分類する、
請求項に記載の監視装置。
When the detection target pixel classified as the second pixel is located between pixels classified as the first pixel, the image analysis unit classifies the detection target pixel as the first pixel.
The monitoring device according to claim 5 .
フレアスタックにおけるフレアの放出部周辺の映像を撮影する撮像装置と、
前記映像を取得する請求項1から請求項の何れか1項に記載の監視装置と、
を備える監視システム。
an imaging device for capturing an image of the vicinity of a flare emission portion in the flare stack;
A monitoring device according to any one of claims 1 to 6 that acquires the video;
A surveillance system comprising:
フレアを撮影した映像を取得するステップと、
前記映像を解析し、前記フレアが写った画素を識別するステップと、
前記フレアが写った画素に基づいて、前記フレアの体積を推定するステップと、
連続して撮影された前記映像について算出された前記フレアの体積に基づいて、前記フレアを発生させるフレアガスの所定の単位時間における流量を推定するステップと、
前記フレアガスの流量と所定の閾値とを比較してアラームを発報するステップと、
を有し、
前記フレアの体積を推定するステップは、前記映像における前記フレアの放出部の中心を通る垂直方向の中心線で前記フレアを左右に分割したときの右側の領域について、フレアの上端から下端までの単位高さごとに、前記中心線から前記フレアの右端までの距離を半径とする円柱の半分の体積を算出し、前記単位高さごとに算出した体積を積算して前記フレアの右側の体積を推定し、左側の領域について、フレアの上端から下端までの単位高さごとに、前記中心線から前記フレアの左端までの距離を半径とする円柱の半分の体積を算出し、前記単位高さごとに算出した体積を積算して前記フレアの左側の体積を推定し、前記フレアの右側の体積と前記フレアの左側の体積を合計して前記フレアの体積を推定する、監視方法。
Obtaining an image of the flare;
analyzing the image to identify pixels in which the flare is captured;
estimating a volume of the flare based on pixels in which the flare is captured;
estimating a flow rate of the flare gas causing the flare in a predetermined unit time based on the volume of the flare calculated for the continuously captured images;
A step of comparing the flow rate of the flare gas with a predetermined threshold value and issuing an alarm;
having
the step of estimating the volume of the flare includes calculating, for a right-hand region when the flare is divided into left and right parts by a vertical center line passing through the center of the emission part of the flare in the image, half the volume of a cylinder whose radius is the distance from the center line to the right end of the flare, for each unit height from the top to the bottom of the flare, and integrating the volumes calculated for each unit height to estimate the volume of the right side of the flare; calculating, for a left-hand region, half the volume of a cylinder whose radius is the distance from the center line to the left end of the flare, for each unit height from the top to the bottom of the flare, and integrating the volumes calculated for each unit height to estimate the volume of the left side of the flare; and estimating the volume of the flare by summing the volumes of the right side of the flare and the left side of the flare .
JP2021097212A 2021-06-10 2021-06-10 Monitoring device, monitoring system, and monitoring method Active JP7646466B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2021097212A JP7646466B2 (en) 2021-06-10 2021-06-10 Monitoring device, monitoring system, and monitoring method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2021097212A JP7646466B2 (en) 2021-06-10 2021-06-10 Monitoring device, monitoring system, and monitoring method

Publications (2)

Publication Number Publication Date
JP2022188921A JP2022188921A (en) 2022-12-22
JP7646466B2 true JP7646466B2 (en) 2025-03-17

Family

ID=84532674

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021097212A Active JP7646466B2 (en) 2021-06-10 2021-06-10 Monitoring device, monitoring system, and monitoring method

Country Status (1)

Country Link
JP (1) JP7646466B2 (en)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008199173A (en) 2007-02-09 2008-08-28 Ikegami Tsushinki Co Ltd Pilot flame monitoring method and apparatus
US20080233523A1 (en) 2007-03-22 2008-09-25 Honeywell International Inc. Flare characterization and control system
US20090046172A1 (en) 2007-08-14 2009-02-19 Honeywell International Inc. Flare Monitoring
JP2011076311A (en) 2009-09-30 2011-04-14 Dainippon Printing Co Ltd Mobile object detection device and similarity/dissimilarity determination method for pixel
JP2020160794A (en) 2019-03-26 2020-10-01 Eneos株式会社 Monitoring device, monitoring system and monitoring method
JP2021145158A (en) 2020-03-10 2021-09-24 Eneos株式会社 Monitoring device, monitoring system, and monitoring method

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04335481A (en) * 1991-05-10 1992-11-24 Fujitsu Ltd Method and device for extracting area for color image

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008199173A (en) 2007-02-09 2008-08-28 Ikegami Tsushinki Co Ltd Pilot flame monitoring method and apparatus
US20080233523A1 (en) 2007-03-22 2008-09-25 Honeywell International Inc. Flare characterization and control system
US20090046172A1 (en) 2007-08-14 2009-02-19 Honeywell International Inc. Flare Monitoring
JP2011076311A (en) 2009-09-30 2011-04-14 Dainippon Printing Co Ltd Mobile object detection device and similarity/dissimilarity determination method for pixel
JP2020160794A (en) 2019-03-26 2020-10-01 Eneos株式会社 Monitoring device, monitoring system and monitoring method
JP2021145158A (en) 2020-03-10 2021-09-24 Eneos株式会社 Monitoring device, monitoring system, and monitoring method

Also Published As

Publication number Publication date
JP2022188921A (en) 2022-12-22

Similar Documents

Publication Publication Date Title
JP6966970B2 (en) Monitoring equipment, monitoring system and monitoring method
KR101245057B1 (en) Method and apparatus for sensing a fire
JP2024008990A (en) Monitoring device, monitoring system and monitoring method
KR101075063B1 (en) Fire-Flame Detection Using Fuzzy Logic
US9001214B2 (en) Spectral estimation method, system and reference target design method
JP5867268B2 (en) Unevenness inspection apparatus and unevenness inspection method
KR100922784B1 (en) Image-based fire detection method and crime prevention and disaster prevention system using the same
CN110458803A (en) Frame image color cast and brightness detection method and device based on colored ribbon calibration
KR101906900B1 (en) Fire detection system using thermovision camera
JP2008243181A (en) Smoke sensing device and method
JP6265132B2 (en) Image recognition processing aptitude display system, method and program
KR101204259B1 (en) A method for detecting fire or smoke
KR20080077481A (en) Fire Detection Method and System Using Image Processing
JP2012098045A (en) Crack detector and crack detection program
KR20140109671A (en) Flame dete ction method based on gray imaging signal of a cameras
KR101490769B1 (en) Method and apparatus of detecting fire using brightness and area variation
CN113408479A (en) Flame detection method and device, computer equipment and storage medium
KR101693959B1 (en) Fire detection System and Method using Features of Spatio-temporal Video Blocks
US9230188B2 (en) Objective metric relating to perceptual color differences between images
JP2023116618A (en) Monitoring device, monitoring system and monitoring method
JP7646466B2 (en) Monitoring device, monitoring system, and monitoring method
KR20100118368A (en) Fire detecting method using hidden markov models in video surveillance and monitoring system
KR101938120B1 (en) Thermal imaging apparatus and method for providing thermal imaging analysis information
JP7257212B2 (en) Monitoring device, monitoring system and monitoring method
JP3625442B2 (en) Object detection method, object detection apparatus, and object detection program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20231115

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20240920

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20241015

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20241211

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20250212

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20250305

R150 Certificate of patent or registration of utility model

Ref document number: 7646466

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350