JP7727900B2 - lighting system - Google Patents
lighting systemInfo
- Publication number
- JP7727900B2 JP7727900B2 JP2024091978A JP2024091978A JP7727900B2 JP 7727900 B2 JP7727900 B2 JP 7727900B2 JP 2024091978 A JP2024091978 A JP 2024091978A JP 2024091978 A JP2024091978 A JP 2024091978A JP 7727900 B2 JP7727900 B2 JP 7727900B2
- Authority
- JP
- Japan
- Prior art keywords
- unit
- camera
- lighting
- photographing
- lighting device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02B—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO BUILDINGS, e.g. HOUSING, HOUSE APPLIANCES OR RELATED END-USER APPLICATIONS
- Y02B20/00—Energy efficient lighting technologies, e.g. halogen lamps or gas discharge lamps
- Y02B20/40—Control techniques providing energy savings, e.g. smart controller or presence detection
Landscapes
- Circuit Arrangement For Electric Light Sources In General (AREA)
- Arrangement Of Elements, Cooling, Sealing, Or The Like Of Lighting Devices (AREA)
- Selective Calling Equipment (AREA)
Description
本発明の実施形態は、照明システムに関する。 An embodiment of the present invention relates to a lighting system.
空間に設置された複数の照明装置が照明するエリアをカメラで撮影する照明システムが導入されている。このような照明システムに対し、例えば、工場での生産ラインの監視や、オフィス内での従業員の状態監視を行うモニタシステムへの適用が提案されている。 Lighting systems that use cameras to capture images of areas illuminated by multiple lighting devices installed in a space have been introduced, and applications of such lighting systems have been proposed, for example, as monitoring systems for factory production lines and for monitoring the status of employees in offices.
しかしながら、従来の照明システムは、単に作業者などのモニタを行うに留まり、生産性の向上などへの適用は、考えられていなかった。 However, conventional lighting systems were limited to simply monitoring workers and did not consider applications such as improving productivity.
本発明が解決しようとする課題は、生産性の向上への適用が可能な照明システムを提供することである。 The problem that this invention aims to solve is to provide a lighting system that can be applied to improving productivity.
実施形態に係る照明システムは、第1の照明部と第1の撮影部とを具備し、第1の撮影部により撮影された撮影範囲における所定領域に配置される人の全員が含まれる第1の高さに設置される第1のカメラ付き照明装置と、
第2の照明部と第2の撮影部とを具備し、前記人に想定される手元に対する高さであり、前記第1の高さと異なる第2の高さに設置される第2のカメラ付き照明装置と、
前記第1の撮影部および前記第2の撮影部のうち少なくとも一方により撮影された撮影範囲における状態を検出するとともに、第1の撮影部により撮影された撮影範囲における所定領域に含まれる人数を検出する検出部と、
前記検出部により検出された前記状態に応じて、前記第1のカメラ付き照明装置と、前記第2のカメラ付き照明装置とを連携させて所定の制御を行う制御部と、
を具備する管理装置と、具備する。
The lighting system according to the embodiment includes a first lighting unit and a first photographing unit, and a first camera-equipped lighting device installed at a first height that includes all people located in a predetermined area in a photographing range photographed by the first photographing unit ;
a second lighting device with a camera, the second lighting device having a second lighting unit and a second photographing unit, and installed at a second height that is a height relative to an assumed hand of the person and that is different from the first height;
a detection unit that detects a state in a photographing range photographed by at least one of the first photographing unit and the second photographing unit, and detects the number of people included in a predetermined area in the photographing range photographed by the first photographing unit;
a control unit that performs predetermined control by coordinating the first camera-equipped lighting device and the second camera-equipped lighting device in accordance with the state detected by the detection unit;
and a management device comprising:
本発明によれば、生産性の向上への適用が可能な照明システムを提供することができる。 The present invention provides a lighting system that can be applied to improving productivity.
以下に説明する実施形態に係る照明システム1a、1bは、第1のカメラ付き照明装置10aと、第2のカメラ付き照明装置10bと、管理装置100と、を含む。第1のカメラ付き照明装置10aは、第1の照明部20aと第1の撮影部30aとを具備し、第1の高さに設置される。第2のカメラ付き照明装置10bは、第2の照明部20bと第2の撮影部30bとを具備し、第1の高さと異なる第2の高さに設置される。管理装置100は、第1の撮影部30aおよび第2の撮影部30bのうち少なくとも一方により撮影された撮影範囲における状態を検出する検出部4bと、検出部4bにより検出された状態に応じて、第1のカメラ付き照明装置10aと、第2のカメラ付き照明装置10bとを連携させて所定の制御を行う制御部4と、具備する。 The lighting systems 1a and 1b according to the embodiments described below include a first camera-equipped lighting device 10a, a second camera-equipped lighting device 10b, and a management device 100. The first camera-equipped lighting device 10a includes a first lighting unit 20a and a first capturing unit 30a and is installed at a first height. The second camera-equipped lighting device 10b includes a second lighting unit 20b and a second capturing unit 30b and is installed at a second height different from the first height. The management device 100 includes a detection unit 4b that detects the state of the image capture range captured by at least one of the first capturing unit 30a and the second capturing unit 30b, and a control unit 4 that performs predetermined control by coordinating the first camera-equipped lighting device 10a and the second camera-equipped lighting device 10b in accordance with the state detected by the detection unit 4b.
以下に説明する実施形態に係る制御部4は、検出部4bにより状態に異常が検出された場合に、第1の撮影部30aにより撮影された第1の撮影データと、第2の撮影部30bにより撮影された第2の撮影データと、を異常が検出された時刻に基づき関連付ける。 In the embodiment described below, when the detector 4b detects an abnormality in the condition, the controller 4 associates the first image data captured by the first image capture unit 30a with the second image data captured by the second image capture unit 30b based on the time the abnormality was detected.
以下に説明する実施形態に係る第1の高さは、第2の高さより高い。 In the embodiments described below, the first height is higher than the second height.
以下に説明する実施形態に係る第1の高さは、第1の撮影部30aに撮影された撮影範囲における所定領域75に配置される人80の全員が含まれる高さであり、第2の高さは、人80に想定される手元に対応する高さである。 In the embodiment described below, the first height is a height that includes all of the people 80 positioned in the specified area 75 in the shooting range captured by the first imaging unit 30a, and the second height is a height that corresponds to the expected hands of the people 80.
以下に説明する実施形態に係る制御部4は、検出部4bにより第1撮影部30aに撮影された撮影範囲における所定領域75で異常が検出された場合に、第2の照明部20bの照明態様を変化させる。 In the embodiment described below, the control unit 4 changes the illumination mode of the second illumination unit 20b when the detection unit 4b detects an abnormality in a predetermined area 75 within the imaging range captured by the first imaging unit 30a.
以下に説明する実施形態に係る制御部4は、検出された異常に対応する第2の照明部20bの照明態様を変化させる。 In the embodiment described below, the control unit 4 changes the illumination mode of the second illumination unit 20b in response to the detected abnormality.
以下に説明する実施形態に係る検出部4bは、所定領域75に含まれる人80の間の距離が所定未満の場合を異常として検出し、制御部4は、人80の間の距離に基づき異常が検出された場合に、通知を出力する。 In the embodiment described below, the detection unit 4b detects an abnormality when the distance between people 80 included in the predetermined area 75 is less than a predetermined value, and the control unit 4 outputs a notification when an abnormality is detected based on the distance between people 80.
以下に説明する実施形態に係る制御部4は、検出部4bにより状態の異常が検出された場合に、通知を出力する。 In the embodiment described below, the control unit 4 outputs a notification when the detection unit 4b detects an abnormal state.
以下に説明する実施形態に係る制御部4は、検出部4bにより検出された撮影範囲に含まれる撮影対象の状態に基づき、撮影対象の動作間隔を測定する。 In the embodiment described below, the control unit 4 measures the movement interval of the subject based on the state of the subject included in the shooting range detected by the detection unit 4b.
以下に説明する実施形態に係る照明システム1a、1bは、カメラ付き照明装置10aと、管理装置100と、を含む。カメラ付き照明装置10aは、照明部20aと撮影部30aとを具備する。管理装置100は、撮影部30aにより撮影された撮影範囲における所定領域75に含まれる人数を検出する検出部4bと、検出部4bにより所定領域75に所定の人数が検出されない場合に、通知を出力する制御部4と、を具備する。 The lighting systems 1a and 1b according to the embodiments described below include a camera-equipped lighting device 10a and a management device 100. The camera-equipped lighting device 10a includes a lighting unit 20a and a photographing unit 30a. The management device 100 includes a detection unit 4b that detects the number of people included in a predetermined area 75 within the photographing range photographed by the photographing unit 30a, and a control unit 4 that outputs a notification when the detection unit 4b does not detect the specified number of people in the predetermined area 75.
[実施形態]
以下に、本発明に係る実施形態を図面に基づき説明する。なお、以下に示す実施形態は、本発明が開示する技術を限定するものではない。また、以下に示す実施形態及び変形例は、矛盾しない範囲で適宜組合せることができる。また、以下の説明において、同一構成には同一符号を付与して後出の説明を適宜省略する。
[Embodiment]
Hereinafter, embodiments of the present invention will be described with reference to the drawings. Note that the embodiments described below do not limit the technology disclosed by the present invention. Furthermore, the embodiments and modifications described below can be combined as appropriate within a range that does not cause inconsistencies. Furthermore, in the following description, the same components are given the same reference numerals, and subsequent description will be omitted as appropriate.
(実施形態に適用可能なカメラ付き照明装置について)
図1は、実施形態に係る照明システムが有するカメラ付き照明装置の外観例を示す斜視図である。図1に示すように、カメラ付き照明装置10aは、照明部20a、撮影部30a、本体部40aを有する。カメラ付き照明装置10aは、本体部40aが天井面へ設置され、照明部20aから出力される光が照射面の一例である床面へ向けて照射される天井直付けタイプの照明装置である。カメラ付き照明装置10aは、例えば工場での生産ラインの監視やオフィス内での従業員の状態監視などの用途で主に屋内で使用される。
(Regarding a camera-equipped lighting device applicable to the embodiment)
Fig. 1 is a perspective view showing an example of the appearance of a camera-equipped lighting device included in a lighting system according to an embodiment. As shown in Fig. 1, the camera-equipped lighting device 10a includes a lighting unit 20a, an image capturing unit 30a, and a main body 40a. The camera-equipped lighting device 10a is a ceiling-mounted lighting device in which the main body 40a is installed on a ceiling surface and light output from the lighting unit 20a is irradiated toward a floor surface, which is an example of an illumination surface. The camera-equipped lighting device 10a is primarily used indoors for applications such as monitoring production lines in factories or monitoring the status of employees in offices.
なお、説明を分かりやすくするために、図1には、鉛直下向きを正方向とし、鉛直上向きを負方向とするZ軸を含む3次元の直交座標系を図示している。また、X軸はカメラ付き照明装置10aの長さ方向に、Y軸はカメラ付き照明装置10aの幅方向に、それぞれ沿うように図示している。かかる直交座標系は、後出の説明に用いる他の図面でも示す場合がある。 For ease of understanding, Figure 1 illustrates a three-dimensional Cartesian coordinate system including a Z axis, with the vertical downward direction as the positive direction and the vertical upward direction as the negative direction. The X axis is illustrated as running along the length of the camera-equipped lighting device 10a, and the Y axis is illustrated as running along the width of the camera-equipped lighting device 10a. This Cartesian coordinate system may also be shown in other drawings used in the following explanations.
照明部20aは、Y軸方向に沿うように配置された、長尺状のシャーシまたは基板(不図示)上に所定の間隔で配置された複数の発光素子(不図示)を有し、シャーシとの間に発光素子が収容されるよう床面側、すなわちZ軸正方向側に拡散カバー21aが設けられた照明バーである。 The lighting unit 20a is an illumination bar that has multiple light-emitting elements (not shown) arranged at predetermined intervals on a long chassis or substrate (not shown) that is arranged along the Y-axis direction, and a diffusion cover 21a is provided on the floor side, i.e., the positive Z-axis side, so that the light-emitting elements are housed between the chassis and the light-emitting elements.
拡散カバー21aは、例えば、アクリルやポリカーボネート等の透光性の材料から作られている。拡散カバー21aは、フロスト処理が施されて複数の発光素子から出射される光を拡散する機能を有するようになっている。なお、拡散カバー21aに適宜拡散材や着色剤を混入させてもよい。 The diffusion cover 21a is made of a translucent material such as acrylic or polycarbonate. The diffusion cover 21a is frosted to diffuse the light emitted from the multiple light-emitting elements. The diffusion cover 21a may also contain diffusing materials or colorants as appropriate.
撮影部30aは、遮光カバー31aと、後述するカメラとを有し、照明部20aのX軸負方向側に隣り合うように並んで配置される。 The photographing unit 30a has a light-shielding cover 31a and a camera (described below), and is arranged adjacent to the lighting unit 20a on the negative side of the X axis.
本体部40aは、照明部20aおよび撮影部30aを保持する。また、本体部40aは、カメラ付き照明装置10aを天井その他の所定の位置に取り付けるための取付部材を兼ねる。 The main body 40a holds the lighting unit 20a and the imaging unit 30a. The main body 40a also serves as a mounting member for attaching the camera-equipped lighting device 10a to a ceiling or other predetermined location.
遮光カバー31aは、本体部40aとの間にカメラを覆うように本体部40aのZ軸正方向側に配設される。また、遮光カバー31aは、カメラのレンズと対向する位置に設けられた貫通口を有する。このような遮光カバー31aを配設することで、照明部20aの拡散カバー21aから照射された光をカメラのレンズに入り込みにくくすることができる。 The light-shielding cover 31a is disposed on the positive Z-axis side of the main body 40a so as to cover the camera between it and the main body 40a. The light-shielding cover 31a also has a through-hole located opposite the camera lens. By disposing this light-shielding cover 31a, it is possible to prevent light emitted from the diffusion cover 21a of the illumination unit 20a from entering the camera lens.
上述では、カメラ付き照明装置10aが長尺状の照明部20aを有するように説明したが、これはこの例に限定されない。例えば、カメラ付き照明装置10aは、円盤状のシーリングライトであってもよいし、円環状であってもよい。 In the above description, the camera-equipped lighting device 10a has been described as having an elongated lighting unit 20a, but this is not limited to this example. For example, the camera-equipped lighting device 10a may be a disc-shaped ceiling light or may be annular.
次に、カメラ付き照明装置10aの機能的構成について説明する。図2は、実施形態に係る照明システムが有するカメラ付き照明装置10aの構成の一例を模式的に示すブロック図である。 Next, the functional configuration of the camera-equipped lighting device 10a will be described. Figure 2 is a block diagram that schematically shows an example of the configuration of the camera-equipped lighting device 10a included in the lighting system according to the embodiment.
図2に示すように、カメラ付き照明装置10aは、接続部50、本体部40a、照明部20a、撮影部30aを備える。接続部50は、カメラ付き照明装置10aを動作させる各種ケーブルの接続用の端子が配置された端子台である。 As shown in FIG. 2, the camera-equipped lighting device 10a includes a connection unit 50, a main body unit 40a, a lighting unit 20a, and an image capturing unit 30a. The connection unit 50 is a terminal block on which terminals for connecting various cables that operate the camera-equipped lighting device 10a are arranged.
本体部40aは、電源部41、制御マイコン42を有する。電源部41は、接続部50を介して交流電源60から供給された交流電力を直流電力に変換して出力する電源回路を有する。交流電源60は、例えば商用電源である。 The main body 40a has a power supply unit 41 and a control microcomputer 42. The power supply unit 41 has a power supply circuit that converts AC power supplied from an AC power supply 60 via the connection unit 50 into DC power and outputs it. The AC power supply 60 is, for example, a commercial power supply.
また、電源部41は、直流電流を所定の電圧(例えば、50V)で照明部20aへ給電し、後述する発光素子22の点灯を制御する。電源部41は、点灯制御部の一例である。
さらに、電源部41は、直流電流を所定の電圧(例えば、5V)に変換し、撮影部30aへ給電する。
The power supply unit 41 also supplies direct current at a predetermined voltage (for example, 50 V) to the illumination unit 20a and controls the lighting of the light-emitting elements 22, which will be described later. The power supply unit 41 is an example of a lighting control unit.
Furthermore, the power supply unit 41 converts the direct current into a predetermined voltage (for example, 5 V) and supplies the power to the imaging unit 30a.
制御マイコン42は、図示されないメモリに予め設定された制御信号を生成し、電源部41、点灯制御部および後述する撮影制御部にそれぞれ出力する処理部である。 The control microcomputer 42 is a processing unit that generates control signals that are pre-stored in a memory (not shown) and outputs them to the power supply unit 41, the lighting control unit, and the photography control unit (described later).
照明部20aは、複数の発光素子22を有する。発光素子22は、シャーシ上の配線パターンにそれぞれ接続されており、電源部41から直流出力が供給され、点灯制御部により点灯制御される。発光素子22は、例えばセラミックスで形成された本体に配設されたLED(Light Emitting Diode)チップと、このLEDチップを封止するエポキシ系樹脂やシリコーン樹脂等のモールド用の透光性樹脂とを含む。 The lighting unit 20a has multiple light-emitting elements 22. The light-emitting elements 22 are each connected to a wiring pattern on the chassis, receive DC output from the power supply unit 41, and are controlled by the lighting control unit. The light-emitting elements 22 include an LED (Light Emitting Diode) chip mounted in a body made of, for example, ceramic, and a translucent molding resin, such as epoxy resin or silicone resin, that seals the LED chip.
LEDチップは、例えば、青色光を発する青色のLEDチップである。透光性樹脂には、蛍光体が混入されており、白色光を出射できるようにするために、青色の光とは補色の関係にある黄色系の光を放射する黄色蛍光体が使用されている。なお、LEDチップは、例えば赤色光や緑色光、あるいは白色光を発するものであってもよい。また、透光性樹脂は、乳白色を有し、光を拡散させる拡散部材であってもよい。 The LED chip is, for example, a blue LED chip that emits blue light. A phosphor is mixed into the translucent resin, and a yellow phosphor that emits yellow light, which is complementary to blue light, is used to enable the emission of white light. The LED chip may also emit, for example, red light, green light, or white light. The translucent resin may also be a diffusion material that has a milky white color and diffuses light.
また、LEDは、LEDチップを直接照明部20aが有するシャーシまたは基板に実装するようにしてもよく、また、砲弾型のLEDを実装するようにしてもよく、実装方式や形式は、特に限定されるものではない。 The LEDs may be mounted as LED chips directly on the chassis or board of the lighting unit 20a, or as bullet-shaped LEDs; there are no particular limitations on the mounting method or format.
撮影部30aは、撮影制御部32およびカメラ33を有する。撮影制御部32は、カメラ33による撮影を制御する。カメラ33は、例えばCCD(Charge Coupled Device)やCMOS(Complementary Metal Oxide Semiconductor)イメージセンサなど、電子的に画像を取得する撮像素子と、レンズとを備え、撮像素子およびレンズ等に応じた所定の画角を撮影する。撮影部30aは、カメラ33で撮影された画像を記録させるための記憶部(図示せず)を有してもよい。 The photographing unit 30a has a photographing control unit 32 and a camera 33. The photographing control unit 32 controls photographing by the camera 33. The camera 33 has an image sensor that electronically acquires images, such as a CCD (Charge Coupled Device) or CMOS (Complementary Metal Oxide Semiconductor) image sensor, and a lens, and photographs an image at a predetermined angle of view according to the image sensor, lens, etc. The photographing unit 30a may have a storage unit (not shown) for recording images photographed by the camera 33.
図3は、実施形態に係る照明システムが有する別のカメラ付き照明装置10bの外観例を示す模式図である。図3に示すカメラ付き照明装置10bは、図1の示したカメラ付き照明装置10aの照明部20aを、カメラ付き照明装置10aの長手方向に縮めたような形状とされ、拡散カバー21bが設けられた照明部20bと、遮光カバー31bが設けられた撮影部30bと、本体部40bとを有する。これらカメラ付き照明装置10bが有する照明部20b、拡散カバー21b、撮影部30b、遮光カバー31bおよび本体部40bの機能および構成は、図1を用いて説明したカメラ付き照明装置10aが有する照明部20a、拡散カバー21a、撮影部30a、遮光カバー31aおよび本体部40aの機能および構成と同等であるので、ここでの詳細な説明を省略する。 Figure 3 is a schematic diagram showing an example of the exterior of another camera-equipped lighting device 10b included in the lighting system according to the embodiment. The camera-equipped lighting device 10b shown in Figure 3 has a shape similar to that of the lighting unit 20a of the camera-equipped lighting device 10a shown in Figure 1, but shortened in the longitudinal direction of the camera-equipped lighting device 10a. It includes the lighting unit 20b equipped with a diffusion cover 21b, the photographing unit 30b equipped with a light-shielding cover 31b, and the main body 40b. The functions and configurations of the lighting unit 20b, diffusion cover 21b, photographing unit 30b, light-shielding cover 31b, and main body 40b of the camera-equipped lighting device 10b are equivalent to the functions and configurations of the lighting unit 20a, diffusion cover 21a, photographing unit 30a, light-shielding cover 31a, and main body 40a of the camera-equipped lighting device 10a described using Figure 1, and therefore will not be described in detail here.
カメラ付き照明装置10bは、本体部40bが例えばアーム部材といった取付部材により、壁面、棚面、机上などに、照明部20bから出力される光が、照射対象の一例である、作業者の手元に向けて照射されるように設置される。カメラ付き照明装置10bは、例えば工場での作業者における作業の監視や、オフィス内での従業員の状態監視などの用途で、主に屋内にて使用される。なお、カメラ付き照明装置10bの形状は、図3に示した形状に限定されない。例えば、カメラ付き照明装置10bは、円盤状、円環状であってもよい。 The camera-equipped lighting device 10b is installed on a wall, shelf, desk, etc., using a mounting member such as an arm, attached to the main body 40b, so that light output from the lighting unit 20b is directed toward the worker's hands, which are an example of an illumination target. The camera-equipped lighting device 10b is primarily used indoors, for example, for monitoring the work of workers in a factory or the status of employees in an office. The shape of the camera-equipped lighting device 10b is not limited to the shape shown in Figure 3. For example, the camera-equipped lighting device 10b may be disk-shaped or annular.
(実施形態に係る照明システムについて)
次に、図4Aおよび図4Bを用いて、実施形態に係る照明システムについて説明する。
図4Aは、実施形態に係る照明システムの概要を示す図である。なお、以下では、照明システム1aが工場に導入される場合を例に挙げて説明する。
(Lighting system according to the embodiment)
Next, a lighting system according to an embodiment will be described with reference to FIGS. 4A and 4B.
4A is a diagram showing an overview of a lighting system according to an embodiment. Note that the following description will be given taking as an example a case where the lighting system 1a is installed in a factory.
図4Aに示される、実施形態に係る照明システム1aは、工場あるいは工場を運営する組織の内部で完結するオンプレミスのシステムとして構成される例である。図4Aに示すように、実施形態に係る照明システム1aは、それぞれ複数のカメラ付き照明装置10aおよび10b(図4Aにおいては、共に照明装置と記載)と、管理装置100とを備える。また、図4Aに示す例では、各カメラ付き照明装置10aおよび10bが工場の作業現場(例えば、製造ライン等)に設置される場合を示す。 The lighting system 1a according to the embodiment shown in FIG. 4A is an example configured as an on-premise system that is completed within a factory or an organization that operates a factory. As shown in FIG. 4A, the lighting system 1a according to the embodiment includes multiple camera-equipped lighting devices 10a and 10b (both referred to as lighting devices in FIG. 4A) and a management device 100. The example shown in FIG. 4A also illustrates a case where each of the camera-equipped lighting devices 10a and 10b is installed at a factory work site (e.g., a production line, etc.).
管理装置100は、作業現場に設置された各カメラ付き照明装置10aおよび10bを管理する装置である。例えば、管理装置100は、各カメラ付き照明装置10aおよび10bの照明部20aおよび20bそれぞれの照明態様や、撮影部30aおよび30bの撮影向き、倍率等をネットワーク65を介して遠隔で制御する。 The management device 100 is a device that manages the camera-equipped lighting devices 10a and 10b installed at the work site. For example, the management device 100 remotely controls the lighting modes of the lighting units 20a and 20b of the camera-equipped lighting devices 10a and 10b, the shooting directions and magnifications of the shooting units 30a and 30b, etc. via the network 65.
また、管理装置100は、各撮影部30aおよび30bで撮影された画像または映像を収集し、記憶する。例えば、管理装置100によって収集された画像または映像は、作業現場の監視等に用いられる。 The management device 100 also collects and stores images or videos captured by each of the imaging units 30a and 30b. For example, the images or videos collected by the management device 100 are used for monitoring the work site, etc.
ところで、上述のように、管理装置100には、各撮影部30aおよび30bで撮影された撮影データが集積される。しかしながら、従来においては、管理装置に集積された撮影データを記憶したり、管理者に対して表示したりするに留まっており、生産性の向上などへの適用は、考えられていなかった。 As mentioned above, the management device 100 accumulates the image data captured by each of the image capture units 30a and 30b. However, in the past, the image data accumulated in the management device was merely stored and displayed to the administrator, and no consideration was given to applications such as improving productivity.
そこで、実施形態に係る管理装置100では、カメラ付き照明装置10aで取得される第1の撮影データから撮影現場における異常を検出し、異常が検出された第1の撮影データの箇所と、当該箇所に対応する第2の撮影データの箇所とを関連付ける。実施形態に係る管理装置100は、これにより、生産性の向上への適用を図ることを可能とする。 The management device 100 according to the embodiment detects abnormalities at the shooting site from the first shooting data acquired by the camera-equipped lighting device 10a, and associates the location in the first shooting data where the abnormality was detected with the corresponding location in the second shooting data. This makes it possible for the management device 100 according to the embodiment to be applied to improving productivity.
なお、以下では、カメラ付き照明装置10aおよび10bによる撮影が行われる撮影現場が作業場である場合について説明する。また、作業場における異常とは、当該作業場においてあるべき状態以外の所定の状態を示す。例えば、作業場に配置される作業者の人数が所定以外の人数であったり、作業場の所定位置に所定量の生産物あるいは部品等が無い場合に、作業場において異常が発生したとする。すなわち、実施形態に係る管理装置100は、例えば、作業場に配置される人数や、所定位置の物品の量などを検出し、検出結果を規定値と比較して異常の有無を検出する。 In the following, we will explain the case where the shooting location where the camera-equipped lighting devices 10a and 10b take photos is a workplace. An abnormality in a workplace refers to a predetermined state that is different from the state that the workplace should be in. For example, an abnormality in a workplace occurs when the number of workers assigned to the workplace is different from the predetermined number, or when a predetermined amount of products or parts are not in a predetermined position in the workplace. In other words, the management device 100 according to the embodiment detects, for example, the number of people assigned to the workplace or the amount of goods in a predetermined position, and compares the detection results with specified values to detect whether or not an abnormality exists.
図4Aの例では、実施形態に係る照明システム1aが工場などにおけるオンプレミスのシステムとして構成される例について説明した。実施形態に係る照明システムは、これに限らず、実施形態に係る照明システムは、インターネットなどの外部のネットワークを介して、作業現場と管理装置100と通信を行うように構成することができる。 In the example of Figure 4A, an example has been described in which the lighting system 1a according to the embodiment is configured as an on-premise system in a factory or the like. The lighting system according to the embodiment is not limited to this, and the lighting system according to the embodiment can be configured to communicate between the work site and the management device 100 via an external network such as the Internet.
図4Bは、実施形態に係る別の例による照明システムの概要を示す図である。図4Bにおいて、照明システム1bは、工場内の作業現場に設置される各カメラ付き照明装置10aおよび10b(図4Bにおいては、共に照明装置と記載)が、インターネットなどの外部のネットワーク66を介して、サーバ200に接続される。サーバ200は、図4Aに示した管理装置100の機能を含む。ネットワーク66およびサーバ200は、それぞれクラウドネットワークおよびクラウドサーバであってよい。また、図4Bの例では、例えば工場内に設置されるモニタ装置201が、ネットワーク66を介してサーバ200と接続される。 Figure 4B is a diagram showing an overview of a lighting system according to another example of an embodiment. In Figure 4B, lighting system 1b includes camera-equipped lighting devices 10a and 10b (both referred to as lighting devices in Figure 4B) installed at work sites within a factory, which are connected to server 200 via an external network 66 such as the Internet. Server 200 includes the functions of management device 100 shown in Figure 4A. Network 66 and server 200 may be a cloud network and cloud server, respectively. In the example of Figure 4B, for example, a monitor device 201 installed within a factory is connected to server 200 via network 66.
なお、上述では、サーバ200が管理装置100の機能を全て含むように説明したが、これはこの例に限定されない。例えば、工場あるいは工場を運営する組織内に管理装置100を設置し、管理装置100の機能のうち一部の機能(学習機能など)をサーバ200に持たせることも可能である。 In the above description, the server 200 is described as including all of the functions of the management device 100, but this is not limited to this example. For example, the management device 100 can be installed within a factory or an organization that operates a factory, and some of the functions of the management device 100 (such as a learning function) can be provided to the server 200.
(実施形態に適用可能なカメラ付き照明装置の設置について)
図5Aおよび図5Bは、実施形態に適用可能な、カメラ付き照明装置10aおよび10bの設置例を示す模式図である。なお、図5Aおよび図5Bの例では、作業場は、所定人数(この例では4人)の人80(以下、作業者80)が作業台72に対して整列して配置される構成を単位としている。図5Aは、作業場を作業者80の整列方向から見た模式図、図5Bは、作業場を作業者80の整列方向に平行な方向から見た模式図をそれぞれ示している。
(Installation of a camera-equipped lighting device applicable to the embodiment)
5A and 5B are schematic diagrams showing installation examples of camera-equipped lighting devices 10a and 10b applicable to the embodiment. In the examples of Fig. 5A and Fig. 5B, the work site is a unit configured such that a predetermined number of people 80 (four in this example) (hereinafter referred to as workers 80) are lined up around a work table 72. Fig. 5A is a schematic diagram of the work site viewed from the lined-up direction of the workers 80, and Fig. 5B is a schematic diagram of the work site viewed from a direction parallel to the lined-up direction of the workers 80.
カメラ付き照明装置10aは、床面71の方向を照射するように、本体部40aにより天井70に取り付けられる。図5Bの例では、カメラ付き照明装置10aは、照明部20aが作業台72と平行、且つ、撮影部30aの撮影対象となる複数の作業者80の全員(この例では4人)が撮影範囲に含まれるような配置で設置される。カメラ付き照明装置10aが設置される高さH(第1の高さ)および位置は、例えば、当該撮影対象となる所定数の作業者80の全員(この例では4人)が整列される整列方向の長さWと、当該カメラ付き照明装置10aの撮影部30aが含むカメラ33の当該整列方向における画角αと、想定される作業者80の頭部の高さhと、に基づき決定することができる。 The camera-equipped lighting device 10a is attached to the ceiling 70 by the main body 40a so as to illuminate the direction of the floor surface 71. In the example of Fig. 5B, the camera-equipped lighting device 10a is installed so that the lighting unit 20a is parallel to the workbench 72 and so that all of the multiple workers 80 (four in this example) who are to be photographed by the photographing unit 30a are included in the photographing range. The height H (first height) and position at which the camera-equipped lighting device 10a is installed can be determined based, for example, on the length W in the alignment direction in which all of the predetermined number of workers 80 (four in this example) who are to be photographed are lined up, the angle of view α in the alignment direction of the camera 33 included in the photographing unit 30a of the camera-equipped lighting device 10a, and the expected height h of the heads of the workers 80.
また、図5Aおよび図5Bの例では、各作業者80は、床面71に立った状態で作業を行うことが想定されている。したがって、作業台72は、立った状態の作業者80が手元において作業が容易な高さに設けられる。これに限らず、各作業者が椅子などに座った状態で作業を行うようにし、作業台72を対応する高さに設けてもよい。 In the examples of Figures 5A and 5B, it is assumed that each worker 80 will be working while standing on the floor 71. Therefore, the workbench 72 is set at a height that allows the standing worker 80 to easily work with it at hand. However, it is also possible for each worker to work while sitting on a chair or the like, and for the workbench 72 to be set at a corresponding height.
各作業者80に対して、カメラ付き照明装置10bがそれぞれ設置される。カメラ付き照明装置10bは、アーム部材などの取り付け部材74により、壁面、棚、作業台72などに取り付けられる。図5Bの例では、カメラ付き照明装置10bは、取り付け部材74により、作業台72の前面の壁面に取り付けられている。 A camera-equipped lighting device 10b is installed for each worker 80. The camera-equipped lighting device 10b is attached to a wall, shelf, workbench 72, etc. by an attachment member 74 such as an arm member. In the example of Figure 5B, the camera-equipped lighting device 10b is attached to the wall in front of the workbench 72 by an attachment member 74.
カメラ付き照明装置10bは、カメラ付き照明装置10aが設置される高さより低い高さ(第2の高さ)、例えば各作業者80が作業を行う手元を照射する高さおよび配置で設置される。このように設置することで、カメラ付き照明装置10bの撮影部30aは、当該カメラ付き照明装置10bに対応する作業者80の手元をより詳細に撮影可能となる。 The camera-equipped lighting device 10b is installed at a height (second height) lower than the height at which the camera-equipped lighting device 10a is installed, for example, at a height and position that illuminates the hands of each worker 80 as they work. By installing it in this manner, the image capturing unit 30a of the camera-equipped lighting device 10b can capture more detailed images of the hands of the worker 80 corresponding to that camera-equipped lighting device 10b.
なお、図5Bの例では、カメラ付き照明装置10bが作業者80と1対1の関係で設けられているが、これはこの例に限定されない。複数、例えば2乃至3人の作業者80に対して1台のカメラ付き照明装置10bを設けてもよい。この場合、カメラ付き照明装置10bの撮影部30bで撮影された第2の撮影データによる撮影画像に対し、各作業者80が配置される位置が関連付けられる。 In the example of Figure 5B, the camera-equipped lighting device 10b is provided in a one-to-one relationship with the worker 80, but this is not limited to this example. One camera-equipped lighting device 10b may be provided for multiple workers 80, for example, two or three workers 80. In this case, the position where each worker 80 is located is associated with the image captured by the second imaging data captured by the imaging unit 30b of the camera-equipped lighting device 10b.
(実施形態に係る管理装置の詳細)
次に、実施形態に係る管理装置100について、より詳細に説明する。なお、ここでは、図4Aを用いて説明した管理装置100について説明を行う。図4Bを用いて説明したサーバ200は、以下に説明する図4Aの管理装置100と同等の機能を含むものとする。
(Details of the management device according to the embodiment)
Next, the management device 100 according to the embodiment will be described in more detail. Note that the management device 100 described using Fig. 4A will be described here. The server 200 described using Fig. 4B is assumed to include the same functions as the management device 100 shown in Fig. 4A, which will be described below.
図6は、実施形態に係る管理装置100の機能を説明するための一例の機能ブロック図である。図6に示すように、実施形態に係る管理装置100は、通信部2と、記憶部3と、制御部4とを備える。通信部2は、ネットワーク65を介して各カメラ付き照明装置10aおよび10bとデータ通信を行う通信モジュールである。 Figure 6 is an example functional block diagram illustrating the functions of the management device 100 according to the embodiment. As shown in Figure 6, the management device 100 according to the embodiment includes a communication unit 2, a storage unit 3, and a control unit 4. The communication unit 2 is a communication module that performs data communication with each of the camera-equipped lighting devices 10a and 10b via a network 65.
記憶部3は、例えば、フラッシュメモリ等の半導体メモリ素子、または、HDD(Hard Disk Drive)、光ディスク等のデータを不揮発性に記憶可能な記憶装置である。図6示す例において、記憶部3は、撮影データデータベース3a、特定情報データベース3bおよび作業データデータベース3cを有する。 The storage unit 3 is, for example, a semiconductor memory element such as a flash memory, or a storage device capable of non-volatilely storing data, such as an HDD (Hard Disk Drive) or optical disc. In the example shown in FIG. 6, the storage unit 3 has a shooting data database 3a, a specific information database 3b, and a work data database 3c.
撮影データデータベース3aは、各カメラ付き照明装置10aおよび10bで撮影された撮影データを記憶するデータベースである。 The photography data database 3a is a database that stores photography data captured by each of the camera-equipped lighting devices 10a and 10b.
特定情報データベース3bは、作業場における異常を検出するための特定情報を格納するデータベースである。特定情報の一例として、作業場の所定領域に配置される人数、作業場において生産物や部品などが収容される所定位置の状態を示すデータ、これら生産物や部品などの形状を示すデータ、各作業者80の作業に係る動作を示すデータ、等が挙げられる。特定情報のうち少なくとも一部の情報は、例えば、後述する学習部4fによって生成されてよい。 The specific information database 3b is a database that stores specific information for detecting abnormalities in the workplace. Examples of specific information include the number of people assigned to a specific area in the workplace, data indicating the state of specific locations in the workplace where products, parts, etc. are stored, data indicating the shapes of these products, parts, etc., and data indicating the work-related movements of each worker 80. At least some of the specific information may be generated, for example, by the learning unit 4f, which will be described later.
作業データデータベース3cは、各製造ラインの作業効率に関する情報を記憶するデータベースである。例えば、作業効率に関する情報は、後述する測定部4eによって生成される。 The work data database 3c is a database that stores information about the work efficiency of each production line. For example, the information about work efficiency is generated by the measurement unit 4e, which will be described later.
次に、制御部4について説明する。制御部4は、例えば、CPU(Central Processing
Unit)、ROM(Read Only Memory)、RAM(Random Access Memory)、入出力ポートなどを有するマイクロコンピュータや各種の回路を含む。
Next, the control unit 4 will be described. The control unit 4 is, for example, a CPU (Central Processing Unit).
It includes a microcomputer and various circuits that have a memory unit (RAM), a ROM (Read Only Memory), a RAM (Random Access Memory), input/output ports, etc.
図6に示す例では、制御部4は、取得部4aと、検出部4bと、タグ付け部4cと、再生部4dと、測定部4eと、学習部4fと、通知部4gとを含む。取得部4a、検出部4b、タグ付け部4c、再生部4d、測定部4e、学習部4fおよび通知部4gの機能は、例えば、制御部4のCPUが制御部4のRAM、ROM、または記憶部3に記憶されているプログラムを読み出して実行することにより実現される。 In the example shown in FIG. 6, the control unit 4 includes an acquisition unit 4a, a detection unit 4b, a tagging unit 4c, a playback unit 4d, a measurement unit 4e, a learning unit 4f, and a notification unit 4g. The functions of the acquisition unit 4a, the detection unit 4b, the tagging unit 4c, the playback unit 4d, the measurement unit 4e, the learning unit 4f, and the notification unit 4g are realized, for example, by the CPU of the control unit 4 reading and executing a program stored in the RAM, ROM, or memory unit 3 of the control unit 4.
なお、取得部4a、検出部4b、タグ付け部4c、再生部4d、測定部4e、学習部4fおよび通知部4gは、それぞれ一部または全部がASIC(Application Specific Integrated Circuit)やFPGA(Field Programmable Gate Array)等のハードウェアで構成されてもよい。 The acquisition unit 4a, detection unit 4b, tagging unit 4c, playback unit 4d, measurement unit 4e, learning unit 4f, and notification unit 4g may each be configured in part or in whole using hardware such as an ASIC (Application Specific Integrated Circuit) or FPGA (Field Programmable Gate Array).
取得部4aは、カメラ付き照明装置10aが備える撮影部30aにより作業現場が撮影された第1の撮影データと、カメラ付き照明装置10bが備える撮影部30bにより作業現場が撮影された第2の撮影データと、を取得する。例えば、取得部4aは、リアルタイムで各撮影部30aおよび30bから第1および第2の撮影データを取得し、取得した第1および第2の撮影データを、それぞれ取得毎に撮影データデータベース3aに格納する。 The acquisition unit 4a acquires first image data of the work site captured by the image capture unit 30a included in the camera-equipped lighting device 10a, and second image data of the work site captured by the image capture unit 30b included in the camera-equipped lighting device 10b. For example, the acquisition unit 4a acquires the first and second image data from the image capture units 30a and 30b in real time, and stores the acquired first and second image data in the image capture data database 3a each time it is acquired.
このとき、例えば1台のカメラ付き照明装置10aにより撮影された第1の撮影データと、当該カメラ付き照明装置10aの撮影範囲に含まれる所定人数の作業者80それぞれに対応する各カメラ付き照明装置10bにより撮影された第2の撮影データそれぞれと、を関連付けて撮影データデータベース3aに格納することができる。このように、第1の撮影データと、第1の撮影データに関連する第2の撮影データとを関連付けて撮影データデータベース3aに格納することで、作業内容の振り返りや検証が容易となり、作業効率の改善に繋げることができる。 In this case, for example, first photography data captured by one camera-equipped lighting device 10a and second photography data captured by each camera-equipped lighting device 10b corresponding to a predetermined number of workers 80 within the photography range of that camera-equipped lighting device 10a can be associated and stored in the photography data database 3a. In this way, by associating the first photography data with the second photography data related to the first photography data and storing them in the photography data database 3a, it becomes easier to review and verify the work content, leading to improved work efficiency.
なお、製造ラインが複数ある場合、製造ライン毎に第1の映像データと第2の映像データとを関連付けて、順次、撮影データデータベース3aに格納する。 If there are multiple production lines, the first video data and second video data are associated with each other for each production line and stored sequentially in the shooting data database 3a.
検出部4bは、取得部4aによって取得された第1および第2の撮影データと、特定情報とに基づき、作業場(撮影現場)の状態を検出する。ここで、作業場の状態は、作業場における異常を含む。ここで、上述のように、「作業場における異常」とは、例えば、作業場に配置される作業者の人数が所定以外の人数であったり、作業場の所定位置に所定量の生産物あるいは部品等が無い等の、当該作業場においてあるべき状態以外の所定の状態を示してよい。 The detection unit 4b detects the state of the workplace (photography site) based on the first and second photography data acquired by the acquisition unit 4a and the specific information. Here, the state of the workplace includes abnormalities in the workplace. As described above, "abnormalities in the workplace" may refer to a predetermined state other than the state that the workplace should be in, such as the number of workers assigned to the workplace being different from the predetermined number, or the absence of a predetermined amount of products or parts in a predetermined location in the workplace.
例えば、検出部4bは、取得部4aによって取得された、カメラ付き照明装置10aの撮影部30aにより撮影された第1の撮影データに対して画像解析を行い、第1の撮影データによる撮影範囲に含まれる人を認識することができる。検出部4bは、例えば、認識された人の数が所定人数以外の場合に、異常を検出する。 For example, the detection unit 4b performs image analysis on the first image data captured by the image capture unit 30a of the camera-equipped lighting device 10a and acquired by the acquisition unit 4a, and can recognize people included in the image capture range of the first image data. The detection unit 4b detects an abnormality, for example, when the number of recognized people is other than a predetermined number.
また例えば、検出部4bは、第1の撮影データに対する画像解析により、第1の撮影データによる撮影範囲の所定位置にある物品を認識することができる。検出部4bは、学習部4fにおいて学習されたモデルを用いて人や物品の認識を実行することができる。これに限らず、検出部4bは、第1の撮影データに対してパターンマッチングなどを用いて人や物品の認識を行ってもよい。検出部4bは、例えば、認識された物品の量が所定量あるいは予測される量と異なる場合に、異常を検出する。 For example, the detection unit 4b can recognize objects located at a predetermined position within the range of photography using the first photography data by performing image analysis on the first photography data. The detection unit 4b can recognize people and objects using a model learned by the learning unit 4f. Not limited to this, the detection unit 4b may also recognize people and objects using pattern matching or the like on the first photography data. The detection unit 4b detects an abnormality, for example, when the amount of recognized objects differs from a predetermined amount or an expected amount.
さらに、検出部4bは、取得部4aにより取得されたカメラ付き照明装置10bの撮影部30bにより撮影された第2の撮影データに対して画像解析を行い、第2の撮影データによる撮影範囲に含まれる人の認識を行い、認識された人の動作を認識することができる。検出部4bは、認識された動作に基づき、その動作が正常か否かを検出することができる。 Furthermore, the detection unit 4b performs image analysis on the second image data captured by the image capture unit 30b of the camera-equipped lighting device 10b acquired by the acquisition unit 4a, recognizes people included in the image capture range of the second image data, and can recognize the movements of the recognized people. Based on the recognized movements, the detection unit 4b can detect whether the movements are normal or not.
タグ付け部4cは、検出部4bによって第1の撮影データに基づき異常が検出された場合に、第1の撮影データの当該異常が検出された箇所(異常検出箇所)に異常に関する異常情報をタグ付けする。例えば、異常情報はフラグであり、第1の撮影データの異常が検出されたフレームのフラグを「1」とし、異常が検出されないフレームのフラグを「0」とすることができる。 When the detection unit 4b detects an abnormality based on the first photographed data, the tagging unit 4c tags the location in the first photographed data where the abnormality was detected (the abnormality detection location) with abnormality information related to the abnormality. For example, the abnormality information is a flag, and the flag for a frame in which an abnormality was detected in the first photographed data can be set to "1" and the flag for a frame in which no abnormality was detected can be set to "0."
また、タグ付け部4cは、検出部4bによって第1の撮影データに基づき異常が検出された場合に、第1の撮影データの当該異常が検出された箇所に対応する第2の撮影データの箇所に、タグ付を行うことができる。これにより、第1の撮影データと第2の撮影データとの間で異常情報に基づく関連付けが行われ、第1の撮影データにおいて検出された異常に対応する、第2の映像データの内容を容易に確認でき、作業の振り返りや検証を効率的に実行可能となる。 Furthermore, when the detection unit 4b detects an abnormality based on the first shooting data, the tagging unit 4c can tag the location in the second shooting data that corresponds to the location in the first shooting data where the abnormality was detected. This allows the first shooting data and the second shooting data to be associated based on the abnormality information, making it easy to check the content of the second video data that corresponds to the abnormality detected in the first shooting data, and enabling efficient review and verification of work.
再生部4dは、タグ付け部4cによって異常情報がタグ付けされた第1の撮影データを切り取って再生することができる。すなわち、再生部4dは、撮影データデータベース3aから異常情報がタグ付けされた第1の撮影データを抽出し、再生する。また、再生部4dは、同様にして、タグ付け部4cによって第1の撮影データの異常検出箇所に対応した箇所にタグ付けされた第2の撮影データを切り取って再生することもできる。 The playback unit 4d can cut out and play back the first shooting data tagged with abnormality information by the tagging unit 4c. That is, the playback unit 4d extracts the first shooting data tagged with abnormality information from the shooting data database 3a and plays it back. Similarly, the playback unit 4d can also cut out and play back the second shooting data tagged by the tagging unit 4c at a location corresponding to the location where an abnormality was detected in the first shooting data.
そして、再生部4dは、撮影時刻を表示しつつ、第1の撮影データや第2の撮影データの再生を行う。これにより、第1の撮影データについては異常の状態を示す箇所のみを再生することができるので、異常の状態を用意に把握することが可能となる。また、第2の撮影データについては、第1の撮影データに基づき検出された異常に対応する箇所のみを再生することができるので、異常の状態をより詳細に把握することが可能となる。 The playback unit 4d then plays back the first and second shooting data while displaying the shooting time. This allows only the portions of the first shooting data that indicate an abnormality to be played back, making it possible to easily grasp the abnormality. Furthermore, with regard to the second shooting data, it allows only the portions that correspond to the abnormality detected based on the first shooting data to be played back, making it possible to grasp the abnormality in more detail.
なお、この際には、例えば、異常を検出した時刻を基準として前後所定期間(例えば、前後1分間)を併せて再生することが好ましい。 In this case, it is preferable to also play back a predetermined period (e.g., one minute before and after) based on the time when the abnormality was detected.
測定部4eは、第1の撮影データあるいは第2の撮影データに基づき、各種の測定を行う。 The measurement unit 4e performs various measurements based on the first or second imaging data.
測定部4eは、例えば、第2の撮影データから、各作業者80の単位時間当たりの作業効率を測定することができる。より具体的には、測定部4eは、例えば検出部4bにより第2の撮影データそれぞれに基づき認識された、第2の撮影データそれぞれに対応する各作業者80の動作に基づき、各作業者80による作業のタクトタイム(動作間隔)をそれぞれ測定することができる。また、測定部4eは、第1の撮影データから、当該第1の撮影データの撮影範囲に含まれる所定人数の作業者80それぞれの動きの時間間隔等を測定することも可能である。これらの測定結果は、例えば、作業管理者による各作業者80の配置転換の検討を容易にするために用いることができる。 The measurement unit 4e can measure the work efficiency per unit time of each worker 80, for example, from the second photographed data. More specifically, the measurement unit 4e can measure the takt time (action interval) of the work performed by each worker 80 based on the actions of each worker 80 corresponding to each piece of second photographed data, which have been recognized by the detection unit 4b based on each piece of second photographed data. The measurement unit 4e can also measure, from the first photographed data, the time interval between the movements of a predetermined number of workers 80 included in the photographed range of the first photographed data. These measurement results can be used, for example, to facilitate the work manager's consideration of reassigning each worker 80.
学習部4fは、例えば、過去の第2の撮影データから、当該第2の撮影データに対応する作業者80について、上述した作業者80の作業動作を学習し、モデルを生成、更新することができる。例えば、学習部4fは、作業者80の正常な作業動作を教師データとする機械学習によって、モデルを生成する。学習部4fは、このようなモデルを、作業者80毎に生成する。検出部4bは、このモデルに基づき、各作業者80の動作の異常を検出することができる。 The learning unit 4f can, for example, learn the above-mentioned work movements of the worker 80 corresponding to the second photographed data from past second photographed data, and generate and update a model. For example, the learning unit 4f generates a model through machine learning using the normal work movements of the worker 80 as training data. The learning unit 4f generates such a model for each worker 80. The detection unit 4b can detect abnormalities in the movements of each worker 80 based on this model.
また例えば、学習部4fは、過去の第1の撮影データから、当該第1の撮影データの撮影範囲に含まれる所定位置における生産物や部品などの物品、および、その物品の増減速度などを学習し、モデルを生成、更新することができる。検出部4bは、このモデルに基づき、生産物や物品に関する異常を検出することができる。 For example, the learning unit 4f can learn from past first photography data about items such as products and parts at specific positions within the photography range of the first photography data, as well as the rate at which the items increase or decrease, and generate and update a model. The detection unit 4b can detect abnormalities related to products and items based on this model.
なお、図4Aに示した構成において、学習部4fの構成を管理装置100とは別の装置(例えば、クラウドネットワーク)に設けることにしてもよい。 In the configuration shown in FIG. 4A, the learning unit 4f may be configured in a device (e.g., a cloud network) separate from the management device 100.
通知部4gは、検出部4bによって異常が検出された場合に、作業者あるいは作業管理者に通知する。すなわち、管理装置100では、即時的に異常の発生を通知する。例えば、通知部4gは、検出された異常に対応するカメラ付き照明装置10bにおける照明部20bの照明態様を変更することで、当該カメラ付き照明装置10bに対応する作業者80に対して異常を通知することができる。 When an abnormality is detected by the detection unit 4b, the notification unit 4g notifies the worker or work manager. That is, the management device 100 immediately notifies the occurrence of an abnormality. For example, the notification unit 4g can notify the worker 80 corresponding to the camera-equipped lighting device 10b of the abnormality by changing the lighting mode of the lighting unit 20b in the camera-equipped lighting device 10b that corresponds to the detected abnormality.
ここで、照明態様とは、例えば照明を駆動する周波数や、照明の照度を含む。さらには、照明態様の変更を、照明の点滅、色温度の変更などにより実現することも可能である。
この場合において、照明態様の変更によって作業をストップさせてしまうと、作業効率の低下を招くため、作業に支障が出ない範囲で照明態様を変更することが好ましい。
Here, the lighting mode includes, for example, the frequency at which the lighting is driven and the illuminance of the lighting. Furthermore, the lighting mode can be changed by turning the lighting on and off, changing the color temperature, etc.
In this case, if work is stopped due to a change in the lighting mode, it will result in a decrease in work efficiency, so it is preferable to change the lighting mode within a range that does not interfere with work.
これに限らず、通知部4gは、この通知を、作業場内のスピーカによる音出力や、パトランプなどにより異常を作業者80に通知するようにしてもよい。また、通知部4gは、検出された異常に対応するカメラ付き照明装置10aにおける照明部20aの照明態様を変化させることもできる。 Alternatively, the notification unit 4g may notify the worker 80 of the abnormality by sound output from a speaker in the workplace, a patrol lamp, or the like. The notification unit 4g may also change the lighting mode of the lighting unit 20a in the camera-equipped lighting device 10a in response to the detected abnormality.
(実施形態に係る異常検出の具体例)
次に、実施形態に係る異常検出について、より具体的に説明する。
(Specific example of abnormality detection according to the embodiment)
Next, abnormality detection according to the embodiment will be described in more detail.
・第1の具体例
先ず、第1の具体例として、カメラ付き照明装置10aの撮影部30aにより撮影された第1の撮影データを用いた異常検出の例について説明する。第1の具体例では、管理装置100は、第1の撮影データから、撮影部30aによる撮影範囲内の所定領域に含まれる人(作業者80)を認識し、認識された人数を測定する。管理装置100は、測定された人数が所定人数以外の場合に、通知を出力する。
First Specific Example First, as a first specific example, an example of anomaly detection using first image data captured by the image capture unit 30a of the camera-equipped lighting device 10a will be described. In the first specific example, the management device 100 recognizes people (workers 80) included in a predetermined area within the image capture range of the image capture unit 30a from the first image data and counts the number of recognized people. The management device 100 outputs a notification if the counted number of people is other than the predetermined number.
図7Aおよび図7Bは、第1の撮影データにより撮影された撮影画像を模式的に示す図である。図7Aおよび図7Bにおいて、作業台72の直近の所定領域75は、4人の作業者80が含まれる状態が正常な状態であるものとする。すなわち、この場合、所定領域75における所定人数は、4人である。 Figures 7A and 7B are schematic diagrams showing images captured using the first imaging data. In Figures 7A and 7B, the normal state of the predetermined area 75 immediately adjacent to the workbench 72 is one in which four workers 80 are included. In other words, in this case, the predetermined number of people in the predetermined area 75 is four.
管理装置100において、検出部4bは、取得部4aによりカメラ付き照明装置10aの撮影部30aから取得された第1の撮影データから、所定領域75に含まれる各作業者801~804を認識し、認識された人数を計数する。図7Aの例では、所定領域75において4人の作業者801~804が認識されているので、検出部4bは、異常が無いとする。 In the management device 100, the detection unit 4b recognizes each of the workers 80 1 to 80 4 included in the predetermined area 75 from the first photographing data acquired by the acquisition unit 4a from the photographing unit 30a of the camera-equipped lighting device 10a, and counts the number of recognized workers. In the example of Fig. 7A, four workers 80 1 to 80 4 are recognized in the predetermined area 75, so the detection unit 4b determines that there is no abnormality.
これに対して、図7Bの例では、所定領域75に上述の作業者801~804に加えて作業者805が含まれており、検出部4bは、所定領域において5人の作業者801~805を認識する。この場合、所定領域75には、所定人数の4人を超える作業者801~805が含まれているため、検出部4bは、異常を検出する。例えば、図7Bの例では、作業者804の作業においてトラブル等が発生し、その対応に作業者805が呼ばれた状況などが考えられる。通知部4gは、検出部4bにおける異常の検出に応じて、例えば作業管理者への通知を行う。 In contrast, in the example of Fig. 7B, the predetermined area 75 includes worker 805 in addition to the above-mentioned workers 801 to 804 , and the detection unit 4b recognizes five workers 801 to 805 in the predetermined area. In this case, since the predetermined area 75 includes workers 801 to 805 , which exceeds the predetermined number of four, the detection unit 4b detects an abnormality. For example, in the example of Fig. 7B, a problem may have occurred in the work of worker 804 , and worker 805 may have been called in to deal with the problem. In response to the detection of an abnormality by the detection unit 4b, the notification unit 4g notifies, for example, the work manager.
このように、カメラ付き照明装置10aの撮影部30aにより撮影された第1の撮影データに基づき撮影現場の異常を検出することで、トラブル等に対して迅速且つ適切の対応することができ、生産性の改善が可能である。 In this way, by detecting abnormalities at the shooting site based on the first shooting data captured by the camera unit 30a of the camera-equipped lighting device 10a, it is possible to respond quickly and appropriately to problems, etc., and improve productivity.
図8は、実施形態に係る、第1の撮影データを用いた異常検出処理を示す一例のフローチャートである。なお、図8において、カメラ付き照明装置10aを「高所カメラ」として示している。また、図8のフローチャートによる処理は、所定周期(例えば第1の撮影データのフレーム周期)で繰り返されて実行される。 Figure 8 is a flowchart illustrating an example of anomaly detection processing using first captured data according to an embodiment. In Figure 8, the camera-equipped lighting device 10a is shown as a "high-altitude camera." The processing according to the flowchart in Figure 8 is repeatedly executed at a predetermined cycle (e.g., the frame cycle of the first captured data).
ステップS100で、管理装置100は、取得部4aにより、高所カメラ(カメラ付き照明装置10a)の撮影部30aで撮影された第1の撮影データを取得する。次のステップS101で、管理装置100は、検出部4bにより、ステップS100で取得部4aにより取得された第1の撮影データに対して画像解析を行い、第1の撮影データによる撮影画像に含まれる人を認識する。次のステップS102で、管理装置100は、検出部4bにより、撮影画像における検出エリア(所定領域75)内で認識された人数を測定する。 In step S100, the management device 100 acquires, via the acquisition unit 4a, first image data captured by the image capture unit 30a of the elevated camera (camera-equipped lighting device 10a). In the next step S101, the management device 100 performs, via the detection unit 4b, image analysis on the first image data acquired by the acquisition unit 4a in step S100, and recognizes people included in the image captured by the first image data. In the next step S102, the management device 100 counts, via the detection unit 4b, the number of people recognized within a detection area (predetermined region 75) in the captured image.
次のステップS103で、管理装置100は、検出部4bにより、ステップS102で測定された人数が所定人数か否かを判定する。管理装置100は、測定された人数が所定人数であると判定した場合(ステップS103、「Yes」)、図8のフローチャートによる一連の処理を終了させる。 In the next step S103, the management device 100 uses the detection unit 4b to determine whether the number of people measured in step S102 is the predetermined number. If the management device 100 determines that the measured number of people is the predetermined number (step S103, "Yes"), it ends the series of processes according to the flowchart in Figure 8.
一方、管理装置100は、測定された人数が所定人数ではない(所定人数を超える人数、あるいは、所定人数未満の人数)と判定した場合(ステップS103、「No」)、処理をステップS104に移行させ、通知部4gにより通知を出力する。 On the other hand, if the management device 100 determines that the measured number of people is not the specified number (more than the specified number of people or less than the specified number of people) (step S103, "No"), it transitions the process to step S104 and outputs a notification via the notification unit 4g.
・第2の具体例
次に、実施形態に係る異常検出の第2の具体例について説明する。第2の具体例は、カメラ付き照明装置10aとカメラ付き照明装置10bとを連携させる例である。
Second Specific Example Next, a second specific example of anomaly detection according to the embodiment will be described. The second specific example is an example in which the camera-equipped lighting device 10a and the camera-equipped lighting device 10b are linked together.
図9Aは、カメラ付き照明装置10aの撮影部30aにより撮影された第1の撮影データによる撮影画像300の例を示す模式図である。図9Aに示されるように、撮影画像300は、複数の作業者8010、8011および8012が作業台72に向かって作業を行っている様子が含まれる。また、撮影画像300において、棚部76は、例えば、各作業者8010~8012の作業により生産された生産物、あるいは、生産に用いる部品等を載置するために設けられている。 9A is a schematic diagram showing an example of a captured image 300 based on the first capture data captured by the capture unit 30a of the camera-equipped lighting device 10a. As shown in FIG. 9A, the captured image 300 includes a scene in which multiple workers 80 10 , 80 11 and 80 12 are working at a workbench 72. In the captured image 300, a shelf 76 is provided for placing, for example, products produced by the work of each worker 80 10 to 80 12 or parts used in production.
図9Bは、カメラ付き照明装置10bの撮影部30bにより撮影された第2の撮影データによる撮影画像301の例を示す模式図である。図9Bの例では、撮影部30bは、例えば図9Aに示す各作業者8010~8012のうち左端側の作業者8010を撮影対象としている。 9B is a schematic diagram showing an example of a captured image 301 based on the second capture data captured by the image capturing unit 30b of the camera-equipped lighting device 10b. In the example of Fig. 9B, the image capturing unit 30b captures, for example, the leftmost worker 8010 of the workers 8010 to 8012 shown in Fig. 9A.
第2の具体例では、管理装置100は、例えば、検出部4bにより第1の撮影データに基づき異常が検出された場合、タグ付け部4cにより、第1の撮影データの異常が検出された箇所(フレームあるいは時刻)にタグ付けを行う。それと共に、タグ付け部4cは、第2の撮影データの、第1の撮影データの異常が検出された箇所に対応する箇所(フレームあるいは時刻)にタグ付けを行う。 In a second specific example, in the management device 100, for example, when the detection unit 4b detects an abnormality based on the first photographed data, the tagging unit 4c tags the location (frame or time) in the first photographed data where the abnormality was detected. At the same time, the tagging unit 4c tags the location (frame or time) in the second photographed data that corresponds to the location in the first photographed data where the abnormality was detected.
このとき、タグ付け部4cは、第1の撮影データによる撮影画像300において異常が検出された位置に対応するカメラ付き照明装置10bの撮影部30bにより撮影された第2の撮影データの当該箇所に、タグ付けを行う。これに限らず、タグ付け部4cは、撮影画像300に関連する全てのカメラ付き照明装置10bの撮影部30bにより撮影された各第2の撮影データの当該箇所にタグ付けを行ってもよい。 At this time, the tagging unit 4c tags the location in the second image data captured by the image capturing unit 30b of the camera-equipped lighting device 10b that corresponds to the position where the abnormality was detected in the captured image 300 based on the first image data. This is not a limitation, and the tagging unit 4c may tag the location in each piece of second image data captured by the image capturing unit 30b of all camera-equipped lighting devices 10b related to the captured image 300.
これに限らず、管理装置100は、第2の撮影データに基づき異常が検出された場合に、第2の撮影データの異常が検出された箇所にタグ付けを行うと共に、第1の撮影データの、第2の撮影データの異常が検出された箇所に対応する箇所にタグ付けを行うこともできる。 In addition to this, when an abnormality is detected based on the second photographed data, the management device 100 can tag the location in the second photographed data where the abnormality was detected, and can also tag the location in the first photographed data that corresponds to the location in the second photographed data where the abnormality was detected.
このように、第1の撮影データと第2の撮影データとで、異常が検出された箇所(フレームあるいは時刻)をタグ付けにより関連付けることで、作業内容の振り返りや検証が容易となり、作業効率の改善に繋げることができる。 In this way, by tagging and associating the locations (frames or times) where abnormalities were detected in the first and second shooting data, it becomes easier to review and verify the work content, leading to improved work efficiency.
図10は、実施形態に係る、第1の撮影データおよび第2の撮影データを用いた異常検出処理を示す一例のフローチャートである。なお、図10において、カメラ付き照明装置10aを「高所カメラ」、カメラ付き照明装置10bを「低所カメラ」としてそれぞれ示している。また、図10のフローチャートによる処理は、所定周期(例えば第1の撮影データのフレーム周期)で繰り返されて実行される。 Figure 10 is a flowchart illustrating an example of anomaly detection processing using first and second image capture data according to an embodiment. In Figure 10, the camera-equipped lighting device 10a is shown as the "high camera," and the camera-equipped lighting device 10b is shown as the "low camera." The processing according to the flowchart in Figure 10 is repeated at a predetermined cycle (for example, the frame cycle of the first image capture data).
ステップS120で、管理装置100は、取得部4aにより、高所カメラ(カメラ付き照明装置10a)の撮影部30aで撮影された第1の撮影データと、低所カメラ(カメラ付き照明装置10b)の撮影部30bで撮影された第2の撮影データと、を取得する。次のステップS121で、管理装置100は、検出部4bにより、ステップS120で取得部4aにより取得された第1の撮影データに対して画像解析を行う。次のステップS122で、管理装置100は、検出部4bにより、第1の撮影データに基づき異常の有無を検出する。 In step S120, the management device 100 acquires, via the acquisition unit 4a, first image data captured by the image capture unit 30a of the high-altitude camera (camera-equipped lighting device 10a) and second image data captured by the image capture unit 30b of the low-altitude camera (camera-equipped lighting device 10b). In the next step S121, the management device 100 performs, via the detection unit 4b, image analysis of the first image data acquired by the acquisition unit 4a in step S120. In the next step S122, the management device 100 detects, via the detection unit 4b, the presence or absence of an abnormality based on the first image data.
次のステップS123で、管理装置100は、検出部4bにより、ステップS122で異常が検出されたかを判定する。管理装置100は、異常が検出されなかったと判定した場合(ステップS123、「No」)、図10のフローチャートによる一連の処理を終了させる。 In the next step S123, the management device 100 determines whether an abnormality was detected in step S122 by the detection unit 4b. If the management device 100 determines that no abnormality was detected (step S123, "No"), it ends the series of processes according to the flowchart in FIG. 10.
一方、管理装置100は、異常が検出されたと判定した場合(ステップS123、「Yes」)、処理をステップS124に移行させる。ステップS124で、管理装置100は、タグ付け部4cにより、ステップS120で取得された第2の撮影データの、第1の撮影データの異常が検出された箇所に対応する箇所(フレームあるいは時刻)にタグ付けを行う。これにより、管理装置100は、第1の撮影データに基づき検出された異常を、第2の撮影データに対して関連付けることができ、カメラ付き照明装置10aとカメラ付き照明装置10bとを連携させることができる。 On the other hand, if the management device 100 determines that an abnormality has been detected (step S123, "Yes"), it proceeds to step S124. In step S124, the management device 100 uses the tagging unit 4c to tag the location (frame or time) of the second shooting data acquired in step S120 that corresponds to the location where the abnormality was detected in the first shooting data. This allows the management device 100 to associate the abnormality detected based on the first shooting data with the second shooting data, and enables the camera-equipped lighting device 10a and the camera-equipped lighting device 10b to work together.
より具体的な例を用いて説明する。上述した図7Aおよび図7Bを参照し、管理装置100は、検出部4bにより、第1の撮影データに基づき、所定領域75に所定人数(この例では4人)を超える5人の作業者801~805が含まれ、異常が検出されたものとする(図10のステップS123、「Yes」)。この場合、管理装置100は、タグ付け部4cにより、第2の撮影データの、第1の撮影データの異常が検出された箇所に対応する箇所にタグ付けを行う。これにより、第1の撮影データに基づき検出された異常が、第2の撮影データに対して関連付けられる。 A more specific example will be described. Referring to FIGS. 7A and 7B described above, the management device 100 detects, by the detection unit 4b, that the predetermined area 75 contains five workers 80 1 to 80 5 , exceeding the predetermined number (four in this example), and that an abnormality has been detected based on the first photographed data (step S123 in FIG. 10 , “Yes”). In this case, the management device 100 uses the tagging unit 4c to tag the second photographed data at a location corresponding to the location where the abnormality was detected in the first photographed data. This associates the abnormality detected based on the first photographed data with the second photographed data.
例えば、作業管理者は、第2の撮影データのタグ付けされた箇所を含めた所定時間範囲の撮影画像を確認することで、異常の原因を容易に検証することが可能となる。 For example, a work manager can easily verify the cause of an abnormality by checking images taken within a specified time range that include the tagged area of the second shooting data.
別の例として、管理装置100は、検出部4bにより、第1の撮影データに基づき、所定領域75に所定人数(この例では4人)未満の例えば3人の作業者801~803が含まれ、異常が検出されたものとする(図10のステップS123、「Yes」)。すなわちこの場合には、所定領域75内に居るべき作業者804が所定領域75内に居ないことを示している。管理装置100は、タグ付け部4cにより、例えば当該作業者804に対応するカメラ付き照明装置10bの撮影部30bにより撮影された第2の撮影データの、第1の撮影データの異常が検出された箇所に対応する箇所にタグ付けを行う。この第2の撮影データのタグ付けされた箇所を中心に第2の撮影データの再生を行うことで、当該作業者804が居るべき場所に居ない原因(作業に必要な部品の供給が途絶えた、など)を検証することができる。 As another example, the management device 100 detects, based on the first photographic data, that the predetermined area 75 contains fewer than the predetermined number of workers (four in this example), e.g., three workers 80 1 - 80 3 , and detects an abnormality (step S123 in FIG. 10 , “Yes”). In other words, this indicates that worker 80 4 , who should be in the predetermined area 75, is not present within the predetermined area 75. The management device 100 then uses the tagging unit 4 c to tag a portion of the second photographic data captured by the photographing unit 30 b of the camera-equipped lighting device 10 b corresponding to worker 80 4 , corresponding to the portion where the abnormality was detected in the first photographic data. By playing back the second photographic data with the tagged portion of the second photographic data as the focus, it is possible to verify the reason why worker 80 4 is not where he or she should be (e.g., a supply of parts necessary for the work has been cut off).
図10のフローチャートの処理において、ステップS124の処理の代わりに、あるいは、ステップS124の処理に加えて、第1の撮影データに基づき検出された異常を、当該異常に対応するカメラ付き照明装置10bを用いて通知することができる。この通知は、例えば、カメラ付き照明装置10bの照明部20bによる照明態様を変化させることで行うことができる。 In the processing of the flowchart in FIG. 10, instead of or in addition to the processing of step S124, an abnormality detected based on the first photographic data can be notified using the camera-equipped lighting device 10b corresponding to the abnormality. This notification can be performed, for example, by changing the lighting mode of the lighting unit 20b of the camera-equipped lighting device 10b.
一例として、図9Aおよび図9Bを参照し、作業者8012が所定時刻(所定時間帯)に、所定量の生産物を纏めて棚部76に載置するように定められている場合について考える。この場合において、検出部4bは、カメラ付き照明装置10aの撮影部30aにより撮影された第1の撮影データに基づき棚部76に当該所定量の生産物が認識されなかった場合、異常を検出したと見做す(図10のステップS123、「Yes」)。そして、管理装置100は、通知部4gにより、作業者8012に対応するカメラ付き照明装置10bの照明部20bによる照明態様を変化(例えば点滅)させる。これにより、カメラ付き照明装置10aとカメラ付き照明装置10bとが連携される。作業者8012は、自身が生産物を棚部76に載置する作業を忘れていたことに気付くことができ、生産性が向上される。 9A and 9B , consider an example in which a worker 80 12 is scheduled to place a predetermined amount of produce on the shelf 76 at a predetermined time (predetermined time period). In this case, if the predetermined amount of produce is not recognized on the shelf 76 based on the first image data captured by the image capture unit 30 a of the camera-equipped lighting device 10 a, the detection unit 4 b determines that an abnormality has been detected (step S123 in FIG. 10 , “Yes”). The management device 100 then causes the notification unit 4 g to change (e.g., blink) the illumination mode of the illumination unit 20 b of the camera-equipped lighting device 10 b corresponding to the worker 80 12. This allows the camera-equipped lighting device 10 a and the camera-equipped lighting device 10 b to cooperate. The worker 80 12 can realize that he or she has forgotten to place the produce on the shelf 76, thereby improving productivity.
別の例として、図9Aおよび図9Bを参照し、棚部76における部品の在庫量が所定以下あるいは過剰になった場合に、カメラ付き照明装置10bの照明部20bの照明態様を変化させて、各作業者8010~8012に対し、その旨を通知することができる。 As another example, referring to Figures 9A and 9B, when the inventory of parts on shelf section 76 falls below a predetermined level or becomes excessive, the lighting mode of lighting section 20b of camera-equipped lighting device 10b can be changed to notify each worker 80-10 to 80-12 of this fact.
例えば、管理装置100は、検出部4bにより、カメラ付き照明装置10aの撮影部30aにより撮影された第1の撮影データに基づき棚部76にストックされる部品を認識する。管理装置100は、測定部4eにより、認識された部品の増減の速度を測定し、測定された増減速度と、現在の棚部76における部品の在庫量とに基づき、当該在庫量が0になる、あるいは、棚部76の収容能力を超えると予測される時間を算出する。管理装置100は、検出部4bにより、算出された時間が所定時間以下であれば、異常が検出されたと見做す(図10のステップS123、「Yes」)。そして、管理装置100は、通知部4gにより、例えば各作業者8010~8012に対応するカメラ付き照明装置10bそれぞれの照明部20bによる照明態様を変化(例えば点滅)させる。これにより、カメラ付き照明装置10aとカメラ付き照明装置10bとが連携される。各作業者8010~8012は、例えば部品の補充要求や補充停止の要求を適切に出すことができ、生産性が向上される。 For example, the management device 100 uses the detection unit 4b to recognize parts stocked on the shelf unit 76 based on first image data captured by the image capture unit 30a of the camera-equipped lighting device 10a. The management device 100 then uses the measurement unit 4e to measure the rate of increase or decrease of the recognized parts, and calculates the predicted time for the inventory amount to reach zero or exceed the storage capacity of the shelf unit 76 based on the measured rate of increase or decrease and the current inventory amount of parts on the shelf unit 76. If the calculated time is equal to or shorter than a predetermined time, the management device 100 determines that an abnormality has been detected (step S123 in FIG. 10 , “Yes”). Then, the management device 100 uses the notification unit 4g to change (e.g., blink) the lighting mode of the lighting unit 20b of each camera-equipped lighting device 10b corresponding to each worker 80-80 . This allows the camera-equipped lighting device 10a and the camera-equipped lighting device 10b to be linked together. Each worker 80 10 to 80 12 can appropriately issue a request for parts replenishment or a request to stop replenishment, for example, thereby improving productivity.
この例では、異常の検出に応じてカメラ付き照明装置10bの照明部20bによる照明態様を変化させているが、これはこの例に限定されない。すなわち、管理装置100は、通知部4gにより、カメラ付き照明装置10aの照明部20aの照明態様を変化させることで、これにより、第1の撮影データと第2の撮影データとを連携させ、検出された異常の各作業者8010~8012に対する通知を行ってもよい。 In this example, the lighting mode of the lighting unit 20b of the camera-equipped lighting device 10b is changed in response to the detection of an abnormality, but this is not limited to this example. That is, the management device 100 may change the lighting mode of the lighting unit 20a of the camera-equipped lighting device 10a using the notification unit 4g, thereby linking the first photographed data and the second photographed data and notifying each of the workers 80-80 of the detected abnormality .
また、上述では、カメラ付き照明装置10aの撮影部30aにより撮影された第1の撮影データに基づき検出された異常に応じて通知を行っているが、これはこの例に限定されない。例えば、実施形態に係る照明システム1aは、当該第1の撮影データと、カメラ付き照明装置10bの撮影部30bにより撮影された第2の撮影データと、のうち少なくとも一方に基づき異常が検出された場合に、通知を行うようにしてもよい。 Furthermore, in the above description, a notification is given in response to an abnormality detected based on the first image data captured by the image capture unit 30a of the camera-equipped lighting device 10a, but this is not limited to this example. For example, the lighting system 1a according to the embodiment may be configured to give a notification when an abnormality is detected based on at least one of the first image data and the second image data captured by the image capture unit 30b of the camera-equipped lighting device 10b.
・別の具体例
次に、実施形態に適用可能な、異常検出の別の具体例について説明する。上述の第1の具体例では、第1の高さに設置されるカメラ付き照明装置10aの撮影部30aで撮影された第1の撮影データに基づき異常検出を行う例について説明した。また、第2の具体例では、カメラ付き照明装置10aと、第1の高さより低い第2の高さに設置されるカメラ付き照明装置10bとを連携させて、異常検出および通知を行う例について説明した。
Next, another specific example of anomaly detection that can be applied to the embodiments will be described. In the first specific example described above, an example of anomaly detection is performed based on first image data captured by the image capturing unit 30a of the camera-equipped lighting device 10a installed at a first height. In the second specific example, an example of anomaly detection and notification is performed by linking the camera-equipped lighting device 10a with the camera-equipped lighting device 10b installed at a second height lower than the first height.
本実施形態では、これらに限定されず、カメラ付き照明装置10aとカメラ付き照明装置10bとで、それぞれ独立して異常検出を行うことも可能である。 In this embodiment, this is not limited to these, and it is also possible for the camera-equipped lighting device 10a and the camera-equipped lighting device 10b to perform anomaly detection independently.
例えば、図7Aおよび図7Bを参照し、管理装置100は、カメラ付き照明装置10aの撮影部30aにより撮影された第1の撮影データに基づき所定領域75内の人数や各作業者801~804間の距離をそれぞれ測定する。管理装置100は、検出部4bにより、例えば測定された距離が所定距離より短い場合に、異常を検出する。それと共に、管理装置100は、カメラ付き照明装置10bの撮影部30bにより撮影された第2の撮影データに基づき各作業者801~804の動作について、異常の検出やタクトタイムの測定を行う。異常が検出された場合の通知は、作業管理者に対して行ってもよいし、カメラ付き照明装置10aの照明部20aや、カメラ付き照明装置10bの照明部20bによる照明態様を変化させることで行ってもよい。 7A and 7B, the management device 100 measures the number of people in a predetermined area 75 and the distances between each of the workers 80-1 to 80-4 based on first image data captured by the image capture unit 30a of the camera-equipped lighting device 10a. The management device 100 detects an abnormality using the detection unit 4b, for example, when the measured distance is shorter than a predetermined distance. At the same time, the management device 100 detects abnormalities and measures takt time for the movements of each of the workers 80-1 to 80-4 based on second image data captured by the image capture unit 30b of the camera-equipped lighting device 10b. When an abnormality is detected, the management device 100 may notify the work manager or may change the lighting mode of the lighting unit 20a of the camera-equipped lighting device 10a or the lighting unit 20b of the camera-equipped lighting device 10b.
なお、上述した実施形態では、照明システム1aまたは1bが工場に設置される場合について説明したが、これに限定されるものではない。すなわち、照明システム1aまたは1bをオフィスや病院など、その他の場所に設置することにしてもよい。 In the above-described embodiment, the lighting system 1a or 1b is installed in a factory, but this is not limited to this. In other words, the lighting system 1a or 1b may be installed in other locations, such as an office or a hospital.
本発明の実施形態を説明したが、この実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。この実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。この実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。 Although an embodiment of the present invention has been described, this embodiment is presented as an example and is not intended to limit the scope of the invention. This embodiment can be embodied in a variety of other forms, and various omissions, substitutions, and modifications can be made without departing from the spirit of the invention. This embodiment and its variations are within the scope and spirit of the invention, as well as the invention and its equivalents as set forth in the claims.
1a,1b 照明システム4 制御部4a 取得部4b 検出部4c タグ付け部4d 再生部4e 測定部4f 学習部4g 通知部10a,10b カメラ付き照明装置20a,20b 照明部30a,30b 撮影部40a,40b 本体部70 天井71 床面72 作業台75 所定領域76 棚部80,801,802,803,804,805,8010,8011,8012100 管理装置
DESCRIPTION OF SYMBOLS 1a, 1b Lighting system 4 Control unit 4a Acquisition unit 4b Detection unit 4c Tagging unit 4d Reproduction unit 4e Measurement unit 4f Learning unit 4g Notification unit 10a, 10b Camera-equipped lighting device 20a, 20b Lighting unit 30a, 30b Photography unit 40a, 40b Main body unit 70 Ceiling 71 Floor surface 72 Workbench 75 Predetermined area 76 Shelf unit 80 , 80 1 , 80 2 , 80 3 , 80 4 , 80 5 , 80 10 , 80 11 , 80 12 100 Management device
Claims (7)
第2の照明部と第2の撮影部とを具備し、前記人に想定される手元に対する高さであり、前記第1の高さと異なる第2の高さに設置される第2のカメラ付き照明装置と、
前記第1の撮影部および前記第2の撮影部のうち少なくとも一方により撮影された撮影範囲における状態を検出するとともに、第1の撮影部により撮影された撮影範囲における所定領域に含まれる人数を検出する検出部と、
前記検出部により検出された前記状態に応じて、前記第1のカメラ付き照明装置と、前記第2のカメラ付き照明装置とを連携させて所定の制御を行う制御部と、
を具備する管理装置と、
を含む照明システム。 a first camera-equipped lighting device including a first lighting unit and a first photographing unit, the first lighting unit being installed at a first height that includes all people located in a predetermined area in a photographing range photographed by the first photographing unit;
a second lighting device with a camera, the second lighting device having a second lighting unit and a second photographing unit, and installed at a second height that is a height relative to an assumed hand of the person and that is different from the first height;
a detection unit that detects a state in a photographing range photographed by at least one of the first photographing unit and the second photographing unit, and detects the number of people included in a predetermined area in the photographing range photographed by the first photographing unit;
a control unit that performs predetermined control by coordinating the first camera-equipped lighting device and the second camera-equipped lighting device in accordance with the state detected by the detection unit;
a management device comprising:
A lighting system including:
第2の照明部と第2の撮影部とを具備し、前記第1の高さと異なる第2の高さに設置される第2のカメラ付き照明装置と、
前記第1の撮影部および前記第2の撮影部のうち少なくとも一方により撮影された撮影範囲における状態を検出するとともに、第1の撮影部により撮影された撮影範囲における所定領域に含まれる人数を検出する検出部と、
前記検出部により検出された前記状態に応じて、前記第1のカメラ付き照明装置と、前記第2のカメラ付き照明装置とを連携させて所定の制御を行うとともに、前記検出部により前記第1の撮影部により撮影された撮影範囲における所定領域で異常が検出された場合に、前記第2の照明部の照明態様を変化させる制御部と、
を具備する管理装置と、
を含む照明システム。 a first camera-equipped lighting device including a first lighting unit and a first photographing unit, the first lighting unit being installed at a first height that includes all people located in a predetermined area in a photographing range photographed by the first photographing unit;
a second camera-equipped lighting device having a second lighting unit and a second photographing unit and installed at a second height different from the first height;
a detection unit that detects a state in a photographing range photographed by at least one of the first photographing unit and the second photographing unit, and detects the number of people included in a predetermined area in the photographing range photographed by the first photographing unit;
a control unit that performs predetermined control by coordinating the first lighting device with a camera and the second lighting device with a camera in accordance with the state detected by the detection unit, and that changes the lighting mode of the second lighting unit when the detection unit detects an abnormality in a predetermined area within the shooting range photographed by the first photographing unit;
a management device comprising:
A lighting system including:
第2の照明部と第2の撮影部とを具備し、前記第1の高さと異なる第2の高さに設置される第2のカメラ付き照明装置と、
前記第1の撮影部および前記第2の撮影部のうち少なくとも一方により撮影された撮影範囲における状態を検出するとともに、第1の撮影部により撮影された撮影範囲における所定領域に含まれる人数を検出する検出部と、
前記検出部により検出された前記状態に応じて、前記第1のカメラ付き照明装置と、前記第2のカメラ付き照明装置とを連携させて所定の制御を行うとともに、前記検出部により検出された前記撮影範囲に含まれる撮影対象の状態に基づき、前記撮影対象の動作間隔を測定する制御部と、
を具備する管理装置と、
を含む照明システム。 a first camera-equipped lighting device including a first lighting unit and a first photographing unit, the first lighting unit being installed at a first height that includes all people located in a predetermined area in a photographing range photographed by the first photographing unit;
a second camera-equipped lighting device having a second lighting unit and a second photographing unit and installed at a second height different from the first height;
a detection unit that detects a state in a photographing range photographed by at least one of the first photographing unit and the second photographing unit, and detects the number of people included in a predetermined area in the photographing range photographed by the first photographing unit;
a control unit that performs predetermined control by coordinating the first lighting device with a camera and the second lighting device with a camera in accordance with the state detected by the detection unit, and that measures a movement interval of the subject based on the state of the subject included in the shooting range detected by the detection unit;
a management device comprising:
A lighting system including:
前記検出部により前記状態に異常が検出された場合に、前記第1の撮影部により撮影された第1の撮影データと、前記第2の撮影部により撮影された第2の撮影データと、を前記異常が検出された時刻に基づき関連付ける、請求項1に記載の照明システム。 The control unit
2. The lighting system according to claim 1, wherein, when the detection unit detects an abnormality in the state, the first photographing data captured by the first photographing unit and the second photographing data captured by the second photographing unit are associated with each other based on the time at which the abnormality was detected.
前記検出された前記異常に対応する前記第2の照明部の前記照明態様を変化させる、
請求項2に記載の照明システム。 The control unit
changing the illumination mode of the second illumination unit corresponding to the detected abnormality;
3. The lighting system of claim 2 .
前記所定領域に含まれる人の間の距離が所定未満の場合を異常として検出し、
前記制御部は、
前記人の間の距離に基づき異常が検出された場合に、通知を出力する、
請求項2または5に記載の照明システム。 The detection unit
Detecting an abnormality when the distance between people included in the predetermined area is less than a predetermined value,
The control unit
outputting a notification when an abnormality is detected based on the distance between the people;
6. A lighting system according to claim 2 or 5 .
前記検出部により前記状態の異常が検出された場合に、通知を出力する、
請求項1または請求項2に記載の照明システム。 The control unit
When the detection unit detects an abnormality in the state, a notification is output.
3. The lighting system according to claim 1 or claim 2 .
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2024091978A JP7727900B2 (en) | 2020-09-29 | 2024-06-06 | lighting system |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2020163609A JP7505351B2 (en) | 2020-09-29 | 2020-09-29 | Lighting System |
| JP2024091978A JP7727900B2 (en) | 2020-09-29 | 2024-06-06 | lighting system |
Related Parent Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2020163609A Division JP7505351B2 (en) | 2020-09-29 | 2020-09-29 | Lighting System |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2024107158A JP2024107158A (en) | 2024-08-08 |
| JP7727900B2 true JP7727900B2 (en) | 2025-08-22 |
Family
ID=80998379
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2020163609A Active JP7505351B2 (en) | 2020-09-29 | 2020-09-29 | Lighting System |
| JP2024091978A Active JP7727900B2 (en) | 2020-09-29 | 2024-06-06 | lighting system |
Family Applications Before (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2020163609A Active JP7505351B2 (en) | 2020-09-29 | 2020-09-29 | Lighting System |
Country Status (1)
| Country | Link |
|---|---|
| JP (2) | JP7505351B2 (en) |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2011081521A (en) | 2009-10-06 | 2011-04-21 | Funai Electric Co Ltd | Security device and security system |
| JP2017159700A (en) | 2016-03-07 | 2017-09-14 | ヤンマー株式会社 | Mobile vehicle |
| JP2018066628A (en) | 2016-10-19 | 2018-04-26 | ソリッドビジョン株式会社 | Image processing system and image processing method |
| US20180231653A1 (en) | 2017-02-14 | 2018-08-16 | Microsoft Technology Licensing, Llc | Entity-tracking computing system |
| JP2019125013A (en) | 2018-01-12 | 2019-07-25 | コニカミノルタ株式会社 | Production management system and production management program |
| JP2020118167A (en) | 2019-01-18 | 2020-08-06 | 中国電力株式会社 | Monitoring device |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH06191319A (en) * | 1992-12-24 | 1994-07-12 | Toyota Motor Corp | Travel control device for vehicle |
| JP6704183B2 (en) * | 2016-04-26 | 2020-06-03 | パナソニックIpマネジメント株式会社 | Lighting device and lighting system |
-
2020
- 2020-09-29 JP JP2020163609A patent/JP7505351B2/en active Active
-
2024
- 2024-06-06 JP JP2024091978A patent/JP7727900B2/en active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2011081521A (en) | 2009-10-06 | 2011-04-21 | Funai Electric Co Ltd | Security device and security system |
| JP2017159700A (en) | 2016-03-07 | 2017-09-14 | ヤンマー株式会社 | Mobile vehicle |
| JP2018066628A (en) | 2016-10-19 | 2018-04-26 | ソリッドビジョン株式会社 | Image processing system and image processing method |
| US20180231653A1 (en) | 2017-02-14 | 2018-08-16 | Microsoft Technology Licensing, Llc | Entity-tracking computing system |
| JP2019125013A (en) | 2018-01-12 | 2019-07-25 | コニカミノルタ株式会社 | Production management system and production management program |
| JP2020118167A (en) | 2019-01-18 | 2020-08-06 | 中国電力株式会社 | Monitoring device |
Also Published As
| Publication number | Publication date |
|---|---|
| JP7505351B2 (en) | 2024-06-25 |
| JP2022055906A (en) | 2022-04-08 |
| JP2024107158A (en) | 2024-08-08 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US12149801B2 (en) | Symbology reader with multi-core processor | |
| US11347192B2 (en) | Commissioning of a sensor system | |
| CN114970580B (en) | Symbol readers with multi-core processors, their operating systems, and methods | |
| JP6610348B2 (en) | Management program, management apparatus, and management method | |
| KR20110136095A (en) | Integrated CCTV camera device including sensor | |
| CN108240866A (en) | Optical-electric module, motion sensing apparatus and its driving method | |
| JP7727900B2 (en) | lighting system | |
| TWI258583B (en) | Device and method for optical detection of printed circuit board | |
| JP2020507854A (en) | Image analysis techniques | |
| TWI897896B (en) | Close object detection for monitoring cameras | |
| JP7404911B2 (en) | management device | |
| US20240267605A1 (en) | Imaging device | |
| JP7533134B2 (en) | Information processing device, lighting device and lighting system | |
| JP2022055399A (en) | Illumination system and management device | |
| JP2023049948A (en) | Management system | |
| JP2022056286A (en) | Illumination system | |
| TW201947927A (en) | Webcam apparatus and monitoring system | |
| US20250001320A1 (en) | Sensor module for a modular toy construction set | |
| JP2022073511A (en) | Information processing device, illumination device, and illumination system | |
| US20240205549A1 (en) | Imaging device | |
| CN224116211U (en) | An integrated vision module for robotic arms | |
| JP2021125421A (en) | Installation method of lighting device with camera and simulation device | |
| JP7467961B2 (en) | Judging device | |
| JP7245428B2 (en) | lighting system | |
| JP2025034457A (en) | Information processing device, lighting device, and information processing system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20240614 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20250225 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20250312 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20250414 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20250710 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20250723 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7727900 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |