Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP7767754B2 - Method and system for indicating paint defects on automobile production lines - Google Patents
[go: Go Back, main page]

JP7767754B2 - Method and system for indicating paint defects on automobile production lines - Google Patents

Method and system for indicating paint defects on automobile production lines

Info

Publication number
JP7767754B2
JP7767754B2 JP2021117764A JP2021117764A JP7767754B2 JP 7767754 B2 JP7767754 B2 JP 7767754B2 JP 2021117764 A JP2021117764 A JP 2021117764A JP 2021117764 A JP2021117764 A JP 2021117764A JP 7767754 B2 JP7767754 B2 JP 7767754B2
Authority
JP
Japan
Prior art keywords
defect
paint
automobile body
display
defects
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021117764A
Other languages
Japanese (ja)
Other versions
JP2023013522A (en
Inventor
慎之介 伊藤
駿介 有田
武志 本田
岳嗣 小松
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nissan Motor Co Ltd
Original Assignee
Nissan Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nissan Motor Co Ltd filed Critical Nissan Motor Co Ltd
Priority to JP2021117764A priority Critical patent/JP7767754B2/en
Publication of JP2023013522A publication Critical patent/JP2023013522A/en
Application granted granted Critical
Publication of JP7767754B2 publication Critical patent/JP7767754B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)

Description

本発明は、自動車製造ラインの塗装欠陥表示方法及びシステムに関するものである。 The present invention relates to a method and system for indicating paint defects on automobile production lines.

レーザー光源を含む光学ユニットを用いて、自動車ボディに塗装されたメタリックベースの光輝ムラを検査し、その検査結果をモニタに表示する塗装の検査装置が知られている(特許文献1)。 A paint inspection device is known that uses an optical unit including a laser light source to inspect the metallic base painted on an automobile body for uneven brightness and displays the inspection results on a monitor (Patent Document 1).

特開2017-75848号公報JP 2017-75848 A

しかしながら、上記従来技術では、塗装の検査装置で検出した塗装欠陥をモニタに表示するだけであるため、その塗装欠陥を修正する場合などに修正が行われたかどうかまで確認することはできないという問題がある。 However, the above-mentioned conventional technology only displays paint defects detected by the paint inspection device on a monitor, which means that when repairing a paint defect, it is not possible to confirm whether the repair has been made.

本発明が解決しようとする課題は、検出された塗装欠陥を措置したか否かを認識できる自動車製造ラインの塗装欠陥表示方法及びシステムを提供することである。 The problem that this invention aims to solve is to provide a method and system for indicating paint defects on automobile production lines that can determine whether or not detected paint defects have been addressed.

本発明は、欠陥検出工程と複数の欠陥修正工程が設けられた自動車製造ラインにおいて、
前記欠陥検出工程において自動車ボディの塗装欠陥を欠陥位置とともに検出し、
前記複数の欠陥修正工程のそれぞれにおいて、当該それぞれの欠陥修正工程にて前記塗装欠陥の修正を行う作業者に、修正すべき欠陥の修正範囲を割り当て、
前記複数の欠陥修正工程のそれぞれに、当該欠陥修正工程において塗装欠陥の修正を行う作業者の無線通信可能なウェアラブルデバイスを割り当て、
前記それぞれの欠陥修正工程において、前記割り当てられたそれぞれのウェアラブルデバイスのディスプレイに前記自動車ボディの表面を示す画像を表示すると共に、当該画像上の前記欠陥位置に、前記欠陥検出工程において検出した塗装欠陥のうち、前記割り当てられたそれぞれの修正範囲に含まれる前記検出した塗装欠陥のみを表示し、
前記それぞれの欠陥修正工程において、前記検出した塗装欠陥に対する措置をデータベースに入力し、前記措置が入力された塗装欠陥については、前記自動車ボディの表面を示す画像上への表示を中止又は表示の形態を変更することによって上記課題を解決する。
The present invention relates to an automobile production line having a defect detection process and a plurality of defect repair processes,
In the defect detection step, a paint defect on the automobile body is detected together with the defect position;
In each of the plurality of defect repair processes, a repair range of the defect to be repaired is assigned to an operator who will repair the coating defect in the respective defect repair process;
assigning to each of the plurality of defect repair processes a wearable device capable of wireless communication of a worker who repairs a paint defect in the defect repair process ;
In each of the defect repair processes, an image showing the surface of the automobile body is displayed on a display of each of the assigned wearable devices, and only the detected paint defects that are included in each of the assigned repair ranges among the paint defects detected in the defect detection process are displayed at the defect positions on the image;
In each of the defect repair processes, measures to be taken for the detected paint defects are entered into a database , and for paint defects for which the measures have been entered, the above problem is solved by ceasing to display them on the image showing the surface of the automobile body or by changing the display format.

本発明によれば、検出した塗装欠陥に対する措置が入力された塗装欠陥については画像上への表示が中止又は表示の形態を変更するので、検出された塗装欠陥を措置したか否かを認識することができる。 According to this invention, for paint defects for which corrective measures have been entered, the display on the image is stopped or the display format is changed, so it is possible to recognize whether the detected paint defect has been corrected.

本発明に係る自動車製造ラインの塗装欠陥表示方法及びシステムを適用した塗完検査工程を示す工程図である。1 is a process diagram showing a painting completion inspection process to which the painting defect indication method and system for an automobile production line according to the present invention is applied. 上図は、本発明に係る欠陥検出装置(パターン照射器及び撮影器)の配置例を示す側面図、下図は、パターン照射器に映し出される明暗パターンの移動例を示す正面図である。The upper figure is a side view showing an example of the arrangement of a defect detection device (pattern irradiator and camera) according to the present invention, and the lower figure is a front view showing an example of the movement of the light and dark pattern projected on the pattern irradiator. 本発明に係る塗装欠陥の検出方法の一例を示すブロック図である。1 is a block diagram showing an example of a method for detecting a coating defect according to the present invention. 本発明に係る表示装置の一例を示す正面図である。1 is a front view showing an example of a display device according to the present invention. 図4の表示装置の表示機能を説明するための図である。5 is a diagram for explaining a display function of the display device of FIG. 4. FIG. 本発明に係る補助線の一例を示すルーフパネルとフードパネルの平面図である。FIG. 2 is a plan view of a roof panel and a hood panel showing an example of an auxiliary line according to the present invention. 本発明に係る自動車製造ラインの塗装欠陥表示方法及びシステムを適用した塗完検査工程における作業手順を示すフローチャートである。1 is a flowchart showing the procedure of a painting completion inspection process to which the painting defect indication method and system for an automobile production line according to the present invention is applied.

以下、図面を参照しながら、本発明を実施するための形態例を説明する。自動車製造ラインは、主としてプレス成形ライン、車体組立ライン(溶接ラインとも称される。)、塗装ライン及び車両組立ライン(艤装ラインとも称される。)で構成されているが、本発明の自動車製造ラインの塗装欠陥表示方法及びシステムは、塗装ライン又は車両組立ラインに適用することができる。また、本発明の自動車製造ラインの塗装欠陥表示方法及びシステムは、塗装ラインにおいて、上塗り塗装を完了した塗完検査工程のほか、電着塗装を完了した工程、中塗り塗装を完了した工程などに適用することができる。たとえば電着塗装、中塗り塗装及び上塗り塗装という3コート3ベーク塗装法による塗装ラインでは、電着工程と、シーリング工程と、中塗り工程と、水研工程と、上塗り工程と、塗完検査工程と、を備える。以下に説明する実施形態は、このうちの上塗り塗装を完了した塗完検査工程に本発明を適用した場合の例である。 The following describes exemplary embodiments of the present invention with reference to the drawings. An automobile production line is primarily composed of a press-forming line, a body assembly line (also called a welding line), a painting line, and a vehicle assembly line (also called an outfitting line). The paint defect indication method and system for an automobile production line of the present invention can be applied to either a painting line or a vehicle assembly line. Furthermore, the paint defect indication method and system for an automobile production line of the present invention can be applied to a painting line, not only to the paint completion inspection process after topcoat painting is completed, but also to processes after electrodeposition painting and after intermediate coating. For example, a painting line using a three-coat, three-bake painting method (electrodeposition painting, intermediate coating, and topcoat painting) includes an electrodeposition process, a sealing process, an intermediate coating process, a water sanding process, a topcoat process, and an intermediate coating inspection process. The embodiment described below is an example of applying the present invention to the paint completion inspection process after topcoat painting is completed.

図1は、自動車製造ラインの塗装欠陥表示方法及びシステムを適用した塗完検査工程1を示す工程図である。同図において、自動車ボディBは、塗装台車(図示を省略)に搭載された状態でフロアコンベアCV1により牽引され、図1の左側から右側に向かって定速度で搬送される。なお図示は省略するが、図1の左側に上塗り乾燥炉が設けられ、図1の右側に車両組立ラインへの搬送装置が設けられている。 Figure 1 is a process diagram showing the painting completion inspection process 1 to which a paint defect indication method and system for an automobile production line is applied. In the figure, an automobile body B is loaded onto a painting cart (not shown) and pulled by a floor conveyor CV1, transporting it at a constant speed from the left side to the right side of Figure 1. Although not shown, a topcoat drying oven is provided on the left side of Figure 1, and a transport device to the vehicle assembly line is provided on the right side of Figure 1.

図1に示す塗完検査工程1は、自動車ボディBの外板面に発生した塗装欠陥を検出する欠陥検出工程11と、主としてライン内にて塗装欠陥を修正する第1欠陥修正工程12と、主としてライン外にて塗装欠陥を修正する第2欠陥修正工程13とを含む。なお、本実施形態にいう塗装欠陥とは、ゴミブツ・ワキ、糸ゴミ、ハジキなどの表面凹凸欠陥が含まれる。塗装欠陥は、図4に塗装欠陥Dとして示す。 The paint completion inspection process 1 shown in Figure 1 includes a defect detection process 11 that detects paint defects that occur on the exterior surface of the automobile body B, a first defect repair process 12 that mainly repairs paint defects within the line, and a second defect repair process 13 that mainly repairs paint defects outside the line. Note that paint defects in this embodiment include surface irregularity defects such as dust particles, popliteal particles, threads, and cissing. The paint defect is shown as paint defect D in Figure 4.

欠陥検出工程11は、搬送されてきた自動車ボディBの外板に塗装欠陥が存在するか否かを検出する工程であり、本実施形態では、自動車ボディBの外板面に生じた凹凸欠陥を自動的に検出する欠陥検出装置2が設けられている。本実施形態の欠陥検出装置2は、パターン照射器21と、撮影器22と、画像処理器と判定器と欠陥の位置を特定する制御器の機能を有するコンピュータ23と、ロボットRとを備える。 The defect detection process 11 is a process for detecting whether or not there are paint defects on the outer panels of the transported automobile body B. In this embodiment, a defect detection device 2 is provided that automatically detects uneven defects on the outer panel surface of the automobile body B. The defect detection device 2 in this embodiment includes a pattern irradiator 21, a camera 22, a computer 23 having the functions of an image processor, a judger, and a controller that identifies the location of defects, and a robot R.

パターン照射器21は、液晶ディスプレイや有機ELディスプレイなどから構成され、照射方向に対して垂直な面内において周期的に明部と暗部とが交互に現れる明暗パターンを自動車ボディBの外板面に照射するとともに、明暗パターンを明部と暗部の整列方向に、一対の明部及び暗部の1周期以上、移動させる。図2の上図は、自動車ボディBの外板面に対するパターン照射器21及び撮影器22の配置例を示す側面図、図2の下図は、パターン照射器21に映し出される明暗パターンの移動例を示す正面図である。 The pattern irradiator 21 is composed of a liquid crystal display, organic EL display, or the like, and irradiates a light-dark pattern, in which light and dark areas alternate periodically in a plane perpendicular to the irradiation direction, onto the exterior surface of the automobile body B, and moves the light-dark pattern in the direction of alignment of the light and dark areas by one or more periods of a pair of light and dark areas. The upper diagram in Figure 2 is a side view showing an example of the arrangement of the pattern irradiator 21 and camera 22 relative to the exterior surface of the automobile body B, and the lower diagram in Figure 2 is a front view showing an example of the movement of the light-dark pattern projected on the pattern irradiator 21.

本実施形態の明暗パターンは、画面の縦方向に延在する矩形の明部Paと、同じく画面の縦方向に延在する矩形の暗部Pbとが一対(1周期)となり、これが連続する縞状パターンである。こうした明暗パターンは、塗装欠陥の検査をする際に、明暗パターンを明部Paと暗部Pbの整列方向、すなわち図2の下図の左右方向に移動する。このときの移動速度は、撮影器22の撮影速度(単位時間当たりの撮影フレーム数,fps)に応じて設定される。本実施形態では、塗装欠陥の検査をする際に、一つの自動車ボディBの外板面に対して、少なくとも明部Paと暗部Pbが1周期、好ましくは2周期以上移動させる。 The light-dark pattern in this embodiment is a continuous striped pattern consisting of a pair (one cycle) of rectangular light areas Pa extending vertically on the screen and rectangular dark areas Pb also extending vertically on the screen. When inspecting for paint defects, this light-dark pattern is moved in the direction in which the light areas Pa and dark areas Pb are aligned, i.e., left and right in the lower diagram of Figure 2. The movement speed is set according to the shooting speed (number of frames shot per unit time, fps) of the camera 22. In this embodiment, when inspecting for paint defects, the light areas Pa and dark areas Pb are moved at least one cycle, and preferably two or more cycles, on the exterior surface of a single automobile body B.

撮影器22は、CCDカメラなどで構成され、図2の上図に示すように、パターン照射器21から照射された明暗パターンの自動車ボディBの外板面からの反射光が所定角度で入射されるように、パターン照射器21とともに組み付けられている。そして、撮影器22は、パターン照射器21により自動車ボディBの外板面に映る明暗パターンの画像を、パターン照射器21の明暗パターンの移動に合わせて、複数撮影する。撮影器22にて撮影された明暗パターンの画像は、画像処理器と判定器と欠陥の位置を特定する制御器との機能を有するコンピュータ23に出力される。 Photographer 22 is composed of a CCD camera or the like, and is attached to pattern irradiator 21 so that the light reflected from the exterior surface of automobile body B of the light and dark pattern irradiated by pattern irradiator 21 is incident at a predetermined angle, as shown in the upper diagram of Figure 2. Photographer 22 then takes multiple images of the light and dark pattern projected onto the exterior surface of automobile body B by pattern irradiator 21, in accordance with the movement of the light and dark pattern of pattern irradiator 21. The images of the light and dark pattern taken by photographer 22 are output to computer 23, which has the functions of an image processor, a judger, and a controller that identifies the location of defects.

コンピュータ23は、撮影器22により撮影された複数の画像から各位置の最大明度及び最小明度を抽出して最大明度画像及び最小明度画像を生成する画像処理器と、最大明度画像と最小明度画像との差分を演算し、各位置の差分の明度が、所定範囲にあるか否かを判定する判定器と、欠陥の位置を特定する制御器として機能する。具体的には、画像処理ソフトウェアと判定ソフトウェアと位置特定ソフトウェアがインストールされ、CPU,ROM,RAMといった演算器等により、これらソフトウェアの手順に沿って所定の処理が実行される。 The computer 23 functions as an image processor that extracts the maximum and minimum brightness values for each position from the multiple images captured by the camera 22 to generate maximum and minimum brightness images; a judger that calculates the difference between the maximum and minimum brightness images and determines whether the brightness difference at each position is within a specified range; and a controller that identifies the location of defects. Specifically, image processing software, judgment software, and location identification software are installed, and predetermined processing is performed in accordance with the procedures of these software by computing units such as a CPU, ROM, and RAM.

ロボットRは、ハンドの先端にパターン照射器21及び撮影器22を装着し、これらパターン照射器21及び撮影器22が自動車ボディBの外板面に対して所定の姿勢となるように搬送するように、ティーチングプログラムがインストールされている。図1には、自動車ボディBの左右それぞれに2台ずつ配置された合計4台のロボットRが示されている。これら4台のロボットRにより、自動車ボディBの5面(フード、ルーフ、トランクリッド(バックドア)、左右ボディサイド)に存在する塗装欠陥が検出される。 Robot R is equipped with a pattern irradiator 21 and a camera 22 attached to the tip of its hand, and a teaching program is installed so that the pattern irradiator 21 and camera 22 are transported in a predetermined orientation relative to the outer surface of automobile body B. Figure 1 shows a total of four robots R, two on each side of automobile body B. These four robots R detect paint defects on five surfaces of automobile body B (hood, roof, trunk lid (back door), left and right body sides).

図3は、本発明に係る塗装欠陥の検出方法の一例を示すブロック図である。画像処理プログラムがインストールされたコンピュータ23は、図3に示すように、撮影器22で撮像された撮影画像IM1を取り込み、複数の撮影画像IM1から各位置の最大明度を抽出して最大明度画像IM2を生成する。ここで、撮影画像IM1から各位置の最大明度を抽出するには、各撮影画像IM1の各画素(又は所定数の画素の集合体である画素群)の明度を検出し、各画素について最大明度を示す画素を一つの画像に合成する。またコンピュータ23は、図3に示すように、取り込んだ複数の撮影画像IM1から各位置の最小明度を抽出して最小明度画像IM3を生成する。ここで、撮影画像IM1から各位置の最小明度を抽出するには、各撮影画像IM1の各画素(又は所定数の画素の集合体である画素群)の明度を検出し、各画素について最小明度を示す画素を一つの画像に合成する。 Figure 3 is a block diagram showing an example of a paint defect detection method according to the present invention. As shown in Figure 3, a computer 23 installed with an image processing program imports images IM1 captured by a camera 22 and extracts the maximum brightness at each position from the multiple images IM1 to generate a maximum brightness image IM2. To extract the maximum brightness at each position from the multiple images IM1, the computer 23 detects the brightness of each pixel (or a pixel group consisting of a predetermined number of pixels) in each image IM1 and combines the pixels with the maximum brightness for each pixel into a single image. Also, as shown in Figure 3, the computer 23 extracts the minimum brightness at each position from the multiple images IM1 it has imported to generate a minimum brightness image IM3. To extract the minimum brightness at each position from the multiple images IM1, the computer 23 detects the brightness of each pixel (or a pixel group consisting of a predetermined number of pixels) in each image IM1 and combines the pixels with the minimum brightness for each pixel into a single image.

このようにして複数の撮影画像IM1から最小明度画像IM3を合成して求めたら、同時又は前後して合成した最大明度画像IM2と、各位置(各画素)における明度の差分を求める差分処理を実行し、差分画像IM4を生成する。そして、差分画像IM4の各画素(又は所定数の画素の集合体である画素群)を縦横に走査し、各画素(被検査面の位置に相当する)の明度を測定し、所定の閾値以上であるか否かを判定する。この走査により、測定された明度が閾値未満であるとその位置に凹凸欠陥があると判定する。この判定原理は、凹凸の乱反射による。すなわち、凹凸の乱反射によって明部Paのパターンを撮影した画像の明度は白色と黒色との間のグレー色の値を示し、暗部Pbのパターンを撮影した画像の明度も黒色と白色との間のグレー色の値を示すので、その明度の差分はゼロに近づくように小さくなる。 Once the minimum brightness image IM3 is synthesized from multiple captured images IM1 in this way, a difference process is performed to determine the difference in brightness at each position (each pixel) with the maximum brightness image IM2, which was synthesized simultaneously or laterally, to generate a difference image IM4. Each pixel (or pixel group, a collection of a predetermined number of pixels) in the difference image IM4 is then scanned vertically and horizontally to measure the brightness of each pixel (corresponding to a position on the inspected surface) and determine whether it is above a predetermined threshold. If the measured brightness is below the threshold, it is determined that a concave-convex defect exists at that position. This determination is based on diffuse reflection from the concave-convex surfaces. That is, due to diffuse reflection from the concave-convex surfaces, the brightness of an image of the pattern of the bright areas Pa exhibits a gray value between white and black, and the brightness of an image of the pattern of the dark areas Pb also exhibits a gray value between black and white, so the difference in brightness decreases toward zero.

差分画像IM4の各画素(各位置)の走査により、閾値未満となる位置が検出されたら、その位置を記憶し、欠陥位置を特定する。この欠陥検出結果は、自動車ボディBの全体の欠陥検出を終了した段階で自動車ボディBの1台分の欠陥データとして纏められ、図1の生産管理装置3に出力される。なお、欠陥の位置は、ロボットRにより移動した自動車ボディBの外板面の位置をロボットRのコントローラから取り込み、この位置とコンピュータ33により判定された欠陥の位置とを照合することにより自動車ボディBにおける欠陥の位置を特定することができる。 When a position below the threshold is detected by scanning each pixel (each position) in the difference image IM4, that position is stored and the defect position is identified. The defect detection results are compiled as defect data for one automobile body B when defect detection for the entire automobile body B is completed, and output to the production management device 3 in Figure 1. The defect position in automobile body B can be identified by capturing the position of the outer panel surface of automobile body B moved by robot R from the controller of robot R and comparing this position with the defect position determined by computer 33.

なお、欠陥検出工程11に設けられる欠陥検出装置2は、上述したものにのみ限定されず、その他の自動的に塗装欠陥を検出する欠陥検出装置も適用することができる。また、自動的に塗装欠陥を検出するものにのみ限定されず、作業者と協働して塗装欠陥を検出する欠陥検出装置であってもよい。たとえば、自動車ボディのドア開口部、バックドア開口部、エンジンルームなどのいわゆる内板面は形状が複雑であるため、内板面は作業者の目視検査で行い、外板面を機械(自動欠陥検出装置)で行ってもよい。 The defect detection device 2 provided in the defect detection process 11 is not limited to the one described above, and other defect detection devices that automatically detect paint defects can also be applied. Furthermore, it is not limited to devices that automatically detect paint defects, and may be a defect detection device that detects paint defects in collaboration with an operator. For example, since the so-called interior surfaces of an automobile body, such as the door openings, back door openings, and engine compartment, have complex shapes, the interior surfaces can be visually inspected by an operator, and the exterior surfaces can be inspected mechanically (by an automatic defect detection device).

図1に戻り、第1欠陥修正工程12は、ライン内にて塗装欠陥を修正する工程であって、そのため1タクトタイムに相当する自動車ボディBに2名の作業者Wが配置されている。生産管理装置3は、受注した車両をその仕様と共に記録し、その車両が自動車製造ラインにて着工すると、車体組立ライン、塗装ライン、車両組立ラインの全てにおいて、トラッキングデータとしてその車両の生産を管理する。そして、このトラッキングデータに、先の欠陥検出装置2で検出された塗装欠陥がその欠陥位置とともに関連付けされる。そのため、自動車ボディBが第1欠陥修正工程12に搬入されると、そのタイミングでその自動車ボディBにおいて検出された塗装欠陥が、その欠陥位置とともに、生産管理装置3から無線ルータ31を介して表示装置4に出力され、各作業者Wは、自分の作業域に到着した自動車ボディBの塗装欠陥を認識することができる。 Returning to Figure 1, the first defect repair process 12 is a process for repairing paint defects within the line, and for this purpose, two workers W are assigned to an automobile body B corresponding to one takt time. The production management device 3 records the ordered vehicle along with its specifications, and when the vehicle begins production on the automobile production line, production of that vehicle is managed as tracking data across all of the body assembly line, painting line, and vehicle assembly line. This tracking data is then associated with paint defects detected by the defect detection device 2, along with their location. Therefore, when an automobile body B is brought into the first defect repair process 12, the paint defects detected on the automobile body B at that time are output from the production management device 3 to the display device 4 via the wireless router 31, along with the defect location, allowing each worker W to recognize the paint defects on the automobile body B that has arrived in their work area.

本実施形態の表示装置4は、作業者Wが腕など身体の一部に装着可能な、いわゆるウェアラブル型小型コンピュータであり、ディスプレイ41を含む。図1に示す第1欠陥修正工程12の前段では、2名の作業者Wが、自動車ボディBの左右それぞれに存在する塗装欠陥を修正する。またこれに続く第1欠陥修正工程12の後段では、別の2名の作業者Wが、自動車ボディBの左右それぞれに存在する別の塗装欠陥を修正する。本実施形態では、第1欠陥修正工程12を2段設けたが、必要に応じて1段又は3段以上設けてもよい。また、第1欠陥修正工程12は、作業者Wが、欠陥検出装置2で検出された塗装欠陥をライン内で修正する工程であるが、欠陥検出装置2で検出された塗装欠陥が正しいか否かを判定したり、欠陥検出装置2では検出できなかった塗装欠陥を目視で検出したりしてもよい。 In this embodiment, the display device 4 is a so-called wearable small computer that can be worn by the worker W on a part of the body, such as the arm, and includes a display 41. In the first stage of the first defect repair process 12 shown in FIG. 1, two workers W repair paint defects on the left and right sides of the automobile body B. In the subsequent stage of the first defect repair process 12, two other workers W repair other paint defects on the left and right sides of the automobile body B. In this embodiment, the first defect repair process 12 has two stages, but one stage or three or more stages may be provided as needed. Furthermore, the first defect repair process 12 is a process in which the worker W repairs paint defects detected by the defect detection device 2 within the line. However, the worker W may also determine whether the paint defects detected by the defect detection device 2 are correct or visually detect paint defects not detected by the defect detection device 2.

第2欠陥修正工程13は、主としてライン外にて塗装欠陥を修正する工程であり、第1欠陥修正工程12の下流側のフロアコンベアCV1のバイパスラインに設けられている。そして、第1欠陥修正工程12にて、作業者Wが塗装欠陥を目視で確認した結果、当該塗装欠陥が「修正不可」と判定されて登録された場合、その自動車ボディBは、フロアコンベアCV1からCV2へ搬送され、ここで比較的長い時間をかけて塗装欠陥を修正する。そのため、フロアコンベアCV2は、定速搬送ではなく、所望のタイミングで自動車ボディを搬送する手動搬送される。なお、第2欠陥修正工程13は、フロアコンベアを設けない、いわゆるライン外の修正スペースであってもよい。 The second defect repair process 13 is a process that primarily repairs paint defects off-line, and is located on the bypass line of the floor conveyor CV1 downstream of the first defect repair process 12. If a worker W visually checks a paint defect in the first defect repair process 12 and determines that the paint defect is "uncorrectable" and registers it, the automobile body B is transported from the floor conveyor CV1 to CV2, where the paint defect is repaired over a relatively long period of time. For this reason, the floor conveyor CV2 does not transport the automobile body at a constant speed, but is manually transported to transport the automobile body at the desired timing. The second defect repair process 13 may also be an off-line repair space without a floor conveyor.

図4は、本発明に係る表示装置4の一例を示す正面図である。本実施形態の表示装置4は、一方の主面にディスプレイ41を備え、塗装欠陥を表示する欠陥表示機能と、塗装欠陥の修正結果を入力する修正結果入力機能とを備える。 Figure 4 is a front view showing an example of a display device 4 according to the present invention. The display device 4 of this embodiment has a display 41 on one of its main surfaces, and is equipped with a defect display function for displaying paint defects and a correction result input function for inputting the results of correcting paint defects.

表示装置4が備える欠陥表示機能とは、選択された車両情報を表示し、当該選択された車両の欠陥を、欠陥データベース情報をもとに設定された三次元車両上にプロットし表示し、さらに選択された欠陥の情報表示とサブパーツ画面での拡大表示を行う機能である。表示装置4を装着した作業者Wは、ディスプレイ41に表示された欠陥を視認することで実車の欠陥を特定し、その後の作業を行うことができる。 The defect display function of display device 4 displays selected vehicle information, plots and displays defects of the selected vehicle on a three-dimensional vehicle set based on defect database information, and further displays information about the selected defect and an enlarged view of the sub-part screen. A worker W wearing display device 4 can visually identify defects displayed on display 41 and then perform subsequent work.

また、表示装置4が備える修正結果入力機能とは、選択された欠陥の修正情報と結果をデータベースに登録し、選択された欠陥の欠陥レベル・種類を修正し、データベースに登録する機能である。作業者Wは、実車にて特定した塗装欠陥を修正したり、修正不要であると判断したり、修正不能であると判断した場合には、その欠陥の修正情報と結果をデータベースに登録することができる。また、欠陥検出装置2で検出された塗装欠陥を視認することで、欠陥レベルと欠陥種類が特定できるので、これらの情報を修正することもできる。 The display device 4 also has a correction result input function that registers the correction information and results of a selected defect in a database, and corrects the defect level and type of the selected defect and registers it in the database. If worker W corrects a paint defect identified on an actual vehicle, determines that correction is not necessary, or determines that correction is impossible, he or she can register the defect correction information and results in the database. Furthermore, by visually checking the paint defect detected by the defect detection device 2, the defect level and defect type can be identified, and this information can also be corrected.

本実施形態の表示装置4は、これら欠陥表示機能及び修正結果入力機能以外にも、補助線の登録及び表示を行う機能、表示を拡大・縮小・移動させる機能、画像表示の視点を切り換える機能、作業領域(又は作業者W)ごとの修正範囲を設定するとともに、設定された修正範囲の欠陥のみを表示又は修正入力する機能、表示装置4ごとに作業領域を設定するとともに、設定された作業領域に基づいた表示を行う機能、作業領域ごとに作業者を設定するとともに欠陥の修正情報と作業者とを関連付ける機能、欠陥切り替えボタン及び欠陥シンボルのタッチ選択で欠陥の選択を切り換える機能、画像表示に使用する車両三次元データ及び付属情報を登録する機能などを備える。以下、これらを含めて表示装置4の構成を説明する。 In addition to these defect display and correction result input functions, the display device 4 of this embodiment also has the following functions: registering and displaying auxiliary lines; zooming in, out, and moving the display; switching the viewpoint of the image display; setting a correction range for each work area (or worker W) and displaying or inputting corrections for only defects within the set correction range; setting a work area for each display device 4 and displaying based on the set work area; setting a worker for each work area and associating defect correction information with the worker; switching defect selection by touching the defect switching button and defect symbol; and registering three-dimensional vehicle data and associated information used for image display. The configuration of the display device 4, including these functions, is described below.

本実施形態の表示装置4は、図4に示すように左側にメイン画面42、右側にサブパーツ画面43が表示される。メイン画面42の上部421には、選択された車両情報が表示される。この車両情報は生産管理装置3から出力される。なお、表示装置4に表示するべき車両は、作業者Wが表示装置4を操作することで選択可能であるが、ライン稼働中は、生産管理装置3のトラッキングデータにより、その作業者Wの作業領域に到着した自動車ボディBの車両情報が自動的に選択されて表示される。 As shown in Figure 4, the display device 4 of this embodiment displays a main screen 42 on the left and a sub-parts screen 43 on the right. The upper part 421 of the main screen 42 displays selected vehicle information. This vehicle information is output from the production management device 3. Note that the vehicle to be displayed on the display device 4 can be selected by the worker W operating the display device 4, but while the line is in operation, the vehicle information of the automobile body B that has arrived in the worker W's work area is automatically selected and displayed based on the tracking data from the production management device 3.

メイン画面42の中央部422には自動車ボディBの平面図、正面図、背面図、右側面図及び左側面図の五面図が表示され、この画像に重畳するように補助線Lと塗装欠陥Dが表示される。また、メイン画面42の下部423には、塗装欠陥Dの欠陥レベルと欠陥種類が表示される。欠陥レベルは、たとえば予め決められたN段階評価とされ、欠陥種類とは、ゴミブツ・ワキ、糸ゴミ、ハジキなどである。欠陥種類の右に表示されたカッコ内の数字は、選択された欠陥の番号と、その作業者Wの作業範囲に登録された欠陥総数を示す。たとえば1/3は、その作業者Wの作業範囲に登録された欠陥総数が3であり、現在選択されている欠陥の番号が1という意味である。 The central section 422 of the main screen 42 displays five views of the automobile body B: plan view, front view, rear view, right side view, and left side view. Superimposed on these images are auxiliary lines L and paint defects D. The lower section 423 of the main screen 42 also displays the defect level and defect type of the paint defect D. The defect level is, for example, a predetermined N-level evaluation, and the defect types include dust particles, flaking, thread waste, and repelling. The numbers in parentheses to the right of the defect type indicate the selected defect number and the total number of defects registered in the work area of that worker W. For example, 1/3 means that the total number of defects registered in the work area of that worker W is 3, and the currently selected defect number is 1.

メイン画面42の中央部422に表示された五面図のいずれかをタッチ操作することで、そのサブアッセンブリ部品がサブパーツ画面43に表示される。図4は、メイン画面42においてフードの左側をタッチ操作した場合を示す。 By touching any of the five-view drawings displayed in the center 422 of the main screen 42, the corresponding subassembly part is displayed on the sub-parts screen 43. Figure 4 shows the case where the left side of the hood is touched on the main screen 42.

サブパーツ画面43の中央部には、メイン画面42で選択されたサブアッセンブリ部品が表示される。作業者Wが、サブパーツ画面43をピンチアウト操作する(2本の指を広げるように動かす)ことで表示されたサブアッセンブリ部品が拡大表示され、逆にサブパーツ画面43をピンチイン操作する(2本の指を狭めるように動かす)ことで表示されたサブアッセンブリ部品が縮小表示される。また、作業者Wが、サブパーツ画面43をスクロール操作することで表示画面が指の移動方向にスクロールされる。 The sub-assembly part selected on the main screen 42 is displayed in the center of the sub-parts screen 43. When worker W pinches out on the sub-parts screen 43 (moving two fingers apart), the displayed sub-assembly part is enlarged. Conversely, when worker W pinches in on the sub-parts screen 43 (moving two fingers closer together), the displayed sub-assembly part is reduced. In addition, when worker W scrolls the sub-parts screen 43, the display screen is scrolled in the direction of the finger movement.

サブパーツ画面43の左右上部431には「前へ」及び「次へ」タッチボタンが表示され、「前へ」にタッチすると前車の車両情報に遷移し、「次へ」にタッチすると後車の車両情報に遷移する。また、サブパーツ画面43の左右下部432には「前へ」及び「次へ」タッチボタンが表示され、「前へ」にタッチすると、複数ある塗装欠陥Dのうちの強調表示(赤丸印で囲うなどする表示)が前の塗装欠陥Dに移動し、「次へ」にタッチすると次の塗装欠陥Dに遷移する。 The "Previous" and "Next" touch buttons are displayed on the upper left and right sides 431 of the sub-parts screen 43; touching "Previous" will transition to vehicle information for the preceding vehicle, and touching "Next" will transition to vehicle information for the following vehicle. The "Previous" and "Next" touch buttons are also displayed on the lower left and right sides 432 of the sub-parts screen 43; touching "Previous" will move the highlight (such as a red circle) of the multiple paint defects D to the previous paint defect D; touching "Next" will transition to the next paint defect D.

サブパーツ画面43の下部433には「修正済み」、「修正不可」及び「修正不要」のタッチボタンが表示されている。上述した修正結果入力機能である。このタッチボタンは、強調表示がされた状態の塗装欠陥Dに対し、その作業者が修正を完了した場合には「修正済み」をタッチする。しかし、作業者が、実車の塗装欠陥Dを確認したところ、ライン内で修正不可能と判断した場合には「修正不可」をタッチし、塗装欠陥Dとして検出されたが、実車の塗装欠陥Dを確認したところ修正不要であると判定した場合には「修正不要」をタッチする。一つの塗装欠陥Dに対して、「修正済み」、「修正不可」及び「修正不要」のいずれかが入力された場合には、それ以降はその塗装欠陥Dの表示を中止するか、又はこれに代えて、入力されたことが識別できるように表示の形態を変更する。表示の形態を変更することとは、塗装欠陥の表示の色彩を変更したり、強調マークの形態を変更したりすることが含まれる。これに対して、一つの塗装欠陥Dに対して、「修正済み」、「修正不可」及び「修正不要」のいずれもが入力されなかった場合には、担当する作業者Wの作業領域を過ぎても、その塗装欠陥Dの表示を継続する。 The bottom 433 of the subpart screen 43 displays touch buttons for "Corrected," "Cannot be corrected," and "No correction required." This is the correction result input function described above. When a worker completes the correction of a highlighted paint defect D, they touch "Corrected." However, if the worker examines the actual vehicle and determines that the paint defect D cannot be corrected within the production line, they touch "Cannot be corrected." If the paint defect D is detected but the worker examines the actual vehicle and determines that correction is not required, they touch "No correction required." When "Corrected," "Cannot be corrected," or "No correction required" is entered for a paint defect D, the display of that paint defect D is discontinued, or, instead, the display format is changed to indicate that the entry has been made. Changing the display format includes changing the color of the paint defect display or the format of the highlight mark. In contrast, if none of "Corrected," "Cannot be corrected," or "No correction required" is entered for a paint defect D, the display of that paint defect D continues even after it has passed the assigned worker W's work area.

サブパーツ画面43の外周部434には8つの矢印形状のタッチボタンが表示され、いずれかの矢印形状のタッチボタンをタッチすると、その矢印方向から見た三次元画像が表示される。図5は、それぞれの矢印形状のタッチボタンをタッチしたときに表示される三次元画像の一例を吹き出し図として示す図である。実車における塗装欠陥が見つからない場合や見つけ難い場合には、視線方向を変えることで見つけ易くなるからである。 Eight arrow-shaped touch buttons are displayed on the outer periphery 434 of the sub-parts screen 43, and touching one of the arrow-shaped touch buttons displays a three-dimensional image viewed from the direction of the arrow. Figure 5 shows an example of a three-dimensional image displayed when each arrow-shaped touch button is touched, in the form of a balloon. If a paint defect on the actual vehicle cannot be found or is difficult to find, changing the line of sight can make it easier to find.

本実施形態の表示装置4は、補助線の表示機能により、メイン画面42に表示される五面図の画像と、サブパーツ画面43に表示されるサブアッセンブリ部品の画像に補助線Lが重畳して表示される。本実施形態の補助線Lは、自動車ボディBの特徴点を通過する、自動車ボディの前後方向、左右方向又は上下方向に沿う直線であることが望ましい。また、この特徴点としては、サブアッセンブリ部品の端点、キャラクタライン、孔、切り欠き、アーチ形状の中心点など、任意の位置を確認する際に目印になり、他と識別しやすいものであることが望ましい。図6は、補助線の一例を示すルーフパネルとフードパネルの平面図である。 In this embodiment, the display device 4 uses an auxiliary line display function to display auxiliary lines L superimposed on the image of the five-view drawing displayed on the main screen 42 and the image of the sub-assembly part displayed on the sub-parts screen 43. In this embodiment, the auxiliary lines L are preferably straight lines that pass through characteristic points of the automobile body B and run along the front-to-back, left-to-right, or up-to-down directions of the automobile body. Furthermore, it is desirable that these characteristic points be landmarks that can be used to confirm any position, such as the end points of the sub-assembly parts, character lines, holes, notches, or the center points of arch shapes, and that are easily distinguishable from others. Figure 6 is a plan view of a roof panel and a hood panel showing an example of auxiliary lines.

図6の左図に示すルーフパネルの場合、車両の左右方向の中心を通る車両前後方向に延在する補助線L1は、自動車ボディBの左右方向の中心という特徴点を通る直線である。また、車両の左右方向に延在する補助線L2は、その両端部がリヤドアの後端に一致するという特徴点を通る直線である。さらに、車両の左右方向に延在する補助線L3は、その両端部がセンターピラーの上端に一致するという特徴点を通る直線である。ルーフパネルを視認した場合、これらの補助線L1~L3が相対位置を認識する際の目印になる。 In the case of the roof panel shown in the left diagram of Figure 6, auxiliary line L1, which extends in the longitudinal direction of the vehicle and passes through the center of the vehicle in the lateral direction, is a straight line that passes through a characteristic point, the center of the vehicle body B in the lateral direction. Furthermore, auxiliary line L2, which also extends in the lateral direction of the vehicle, is a straight line that passes through a characteristic point, where both ends of the auxiliary line L2 coincide with the rear ends of the rear door. Furthermore, auxiliary line L3, which also extends in the lateral direction of the vehicle, is a straight line that passes through a characteristic point, where both ends of the auxiliary line L3 coincide with the top ends of the center pillar. When the roof panel is visually recognized, these auxiliary lines L1 to L3 serve as landmarks for recognizing relative positions.

同様に、図6のフードパネルの場合、車両の左右方向の中心を通る車両前後方向に延在する補助線L4は、自動車ボディBの左右方向の中心という特徴点を通る直線である。また、車両の左右方向に延在する補助線L5は、その両端部がフロントホイールアーチの中心に一致するという特徴点を通る直線である。さらに、車両の左右方向に延在する補助線L6は、その両端部がフロントフェンダの切欠き部に一致するという特徴点を通る直線である。フードパネルを視認した場合、これらの補助線L4~L6が相対位置を認識する際の目印になる。 Similarly, in the case of the hood panel in Figure 6, auxiliary line L4, which extends in the longitudinal direction of the vehicle and passes through the left-right center of the vehicle, is a straight line that passes through a characteristic point, the left-right center of automobile body B. Furthermore, auxiliary line L5, which extends in the left-right direction of the vehicle, is a straight line that passes through a characteristic point, where both ends of the line coincide with the center of the front wheel arch. Furthermore, auxiliary line L6, which extends in the left-right direction of the vehicle, is a straight line that passes through a characteristic point, where both ends of the line coincide with the cutout portion of the front fender. When the hood panel is visually observed, these auxiliary lines L4 to L6 serve as landmarks for recognizing relative positions.

次に作用を説明する。図7は、本実施形態の塗完検査工程における作業手順を示すフローチャートである。まず、ステップST1において、塗完検査工程1の欠陥検出工程11に自動車ボディBが到着すると、生産管理装置3からのトラッキングデータにより車両IDを認識する。そして、ステップST2において、欠陥検出装置2を用いて自動車ボディBの外板面に存在する塗装欠陥、すなわちゴミブツ・ワキ、糸ゴミ、ハジキなどの表面凹凸欠陥を自動検出し、ステップST3において塗装欠陥の有無とその欠陥位置を特定し、コンピュータ23から生産管理装置3へ塗装欠陥と欠陥位置とを出力し、車両情報に関連付けて記録する。 Next, the operation will be explained. Figure 7 is a flowchart showing the work procedure in the painting completion inspection process of this embodiment. First, in step ST1, when the automobile body B arrives at the defect detection process 11 of the painting completion inspection process 1, the vehicle ID is recognized using tracking data from the production management device 3. Then, in step ST2, the defect detection device 2 automatically detects paint defects present on the outer panel surface of the automobile body B, i.e., surface irregularity defects such as dust particles, popliteal particles, thread debris, and repelling. In step ST3, the presence or absence of paint defects and their locations are identified, and the paint defects and their locations are output from the computer 23 to the production management device 3, where they are recorded in association with vehicle information.

欠陥検出工程11を通過した自動車ボディBが第1欠陥修正工程12の前段に到着すると、ステップST4において、生産管理装置3から無線ルータ31を介し、第1欠陥修正工程12の前段及び後段に配置された4名の作業者Wが装着する表示装置4のそれぞれに、その自動車ボディBにおいて検出された塗装欠陥Dをその欠陥位置とともに表示する。このとき、予め設定された補助線Lも自動車ボディBの画像に重畳して表示する。 When the automobile body B that has passed through the defect detection process 11 arrives at the stage preceding the first defect repair process 12, in step ST4, the paint defects D detected on the automobile body B, along with their locations, are displayed on the display devices 4 worn by the four workers W positioned preceding and following the first defect repair process 12 via the production management device 3 via the wireless router 31. At this time, a preset auxiliary line L is also displayed superimposed on the image of the automobile body B.

ステップST5において、第1欠陥修正工程12の前段及び後段に配置された4名の作業者Wは、各自に割り当てられ、表示装置4に表示された塗装欠陥Dと実車の塗装欠陥を照らし合わせ、欠陥レベルと欠陥種類を確認し、必要に応じて修正したうえで登録する。また、塗装欠陥が、ライン内で修正可能であって修正を完了したら「修正済み」のタッチボタンをタッチし、塗装欠陥が修正を必要としない軽微なもの又は誤検出であって修正不要と判定したら「修正不要」のタッチボタンをタッチする。仮に、塗装欠陥がライン内で修正不可能であり、第2欠陥修正工程13での修正が必要であると判定したら「修正不能」のタッチボタンをタッチする。 In step ST5, the four workers W, who are stationed before and after the first defect repair process 12, compare the paint defect D displayed on the display device 4 with the paint defect on the actual vehicle, confirm the defect level and type, and correct it as necessary before registering it. If the paint defect can be corrected within the line and the correction is complete, the worker touches the "Corrected" touch button. If the paint defect is determined to be minor and does not require correction, or is a false detection and does not require correction, the worker touches the "No correction required" touch button. If the paint defect cannot be corrected within the line and the worker determines that correction is required in the second defect repair process 13, the worker touches the "Cannot be corrected" touch button.

作業者Wのタクトタイムが経過したら、ステップST6において、ステップST2にて検出されて作業者Wの各自に割り当てられた塗装欠陥に対し、「修正済み」、「修正不能」又は「修正不要」という修正結果が全て入力されたか否かを判定する。割り当てられた塗装欠陥について修正結果が入力されていないと、その作業者Wの作業が完遂されていないことになるから、ステップST7へ進み、塗完検査工程1の後工程である車両組立ラインへの搬送を禁止する。これにより、作業者Wの作業ミスの見逃しを防止することができる。 Once the takt time for worker W has elapsed, step ST6 determines whether all correction results, such as "corrected," "uncorrectable," or "no correction required," have been entered for the painting defects detected in step ST2 and assigned to each worker W. If correction results have not been entered for the assigned painting defects, the work of that worker W has not been completed, and so the process proceeds to step ST7, prohibiting transport to the vehicle assembly line, which is the process following the painting completion inspection process 1. This prevents worker W's work errors from being overlooked.

これに対して、ステップST6において、ステップST2にて検出されて作業者Wの各自に割り当てられた塗装欠陥に対し、「修正済み」、「修正不能」又は「修正不要」という修正結果が全て入力されている場合は、ステップST8へ進む。ステップST8において、入力された結果が「修正済み」又は「修正不要」である場合はステップST10へ進み、入力された結果が「修正不能」である場合はステップST9へ進む。 On the other hand, if in step ST6, the correction results "corrected," "uncorrectable," or "no correction required" have all been entered for the painting defects detected in step ST2 and assigned to each worker W, the process proceeds to step ST8. If the entered result in step ST8 is "corrected" or "no correction required," the process proceeds to step ST10; if the entered result is "uncorrectable," the process proceeds to step ST9.

ステップST9において、「修正不能」との結果が入力された自動車ボディBは、第2欠陥修正工程13に搬送され、ライン内では修正できない塗装欠陥を修正したのち、その結果「修正済み」を入力する。 In step ST9, the automobile body B for which the result "cannot be corrected" has been input is transported to the second defect correction process 13, where the paint defects that cannot be corrected on the line are corrected, and the result is input as "corrected."

ステップST10において、「修正済み」又は「修正不要」が入力された塗装欠陥については表示装置4への表示を中止する。そして、ステップSTにおいて、車両組立ラインへの搬送を許可する。 In step ST10, for paint defects for which "corrected" or "no correction required" has been entered, display on display device 4 is discontinued. Then, in step ST, transportation to the vehicle assembly line is permitted.

以上のとおり、本実施形態の自動車製造ラインの塗装欠陥表示方法及びシステムによれば、自動車ボディBの塗装欠陥Dを欠陥位置とともに検出し、自動車ボディBの表面を示す画像上の欠陥位置に検出した塗装欠陥Dを表示し、検出した塗装欠陥に対する措置を入力する場合、措置が入力された塗装欠陥Dについては、自動車ボディBの表面を示す画像上への表示を中止する。そのため、作業者Wは、検出された塗装欠陥を措置したか否かを容易に認識することができる。 As described above, the paint defect display method and system for an automobile production line of this embodiment detects paint defects D on an automobile body B along with their locations, displays the detected paint defects D at the defect locations on an image showing the surface of the automobile body B, and, when a remedial action is input for a detected paint defect, stops displaying the paint defect D on the image showing the surface of the automobile body B for which a remedial action has been input. This allows the worker W to easily recognize whether or not the detected paint defect has been remediated.

また本実施形態の自動車製造ラインの塗装欠陥表示方法及びシステムによれば、自動車ボディBの塗装欠陥Dを欠陥位置とともに検出し、自動車ボディBの表面を示す画像上の欠陥位置に検出した塗装欠陥Dを表示し、検出した塗装欠陥に対する措置を入力する場合、措置が入力された塗装欠陥Dについては、自動車ボディBの表面を示す画像上への表示の形態を変更する。そのため、作業者Wは、検出された塗装欠陥を措置したか否かを容易に認識することができる。これに加えて、措置が入力された後も表示は継続しているので、同一作業者による再措置や他の作業者によるダブルチェックが可能になる。 Furthermore, according to the paint defect display method and system for an automobile production line of this embodiment, paint defects D on an automobile body B are detected along with their locations, and the detected paint defects D are displayed at the defect locations on an image showing the surface of the automobile body B. When an action to address the detected paint defects is input, the display format on the image showing the surface of the automobile body B is changed for the paint defects D for which an action has been input. This allows worker W to easily recognize whether or not the detected paint defects have been addressed. In addition, because the display continues even after the action has been input, re-action by the same worker or double-checking by another worker is possible.

また本実施形態の自動車製造ラインの塗装欠陥表示方法及びシステムによれば、自動車ボディBの表面を示す画像上に表示された塗装欠陥Dについては、前記措置が入力されるまでは当該表示を継続するので、作業者Wは、検出された塗装欠陥を措置したか否かをより一層容易に認識することができる。 Furthermore, according to the paint defect display method and system for an automobile production line of this embodiment, paint defect D displayed on an image showing the surface of automobile body B continues to be displayed until the above-mentioned measures are input, making it even easier for worker W to recognize whether the detected paint defect has been addressed.

また本実施形態の自動車製造ラインの塗装欠陥表示方法及びシステムによれば、措置は、修正済み、修正不要又は修正不能の何れが選択されるので、作業者Wは、検出された塗装欠陥を措置したか否かをより一層容易に認識することができる。 Furthermore, according to the paint defect display method and system for automobile production lines of this embodiment, the action can be selected as either corrected, no correction required, or uncorrectable, so the worker W can more easily recognize whether or not the detected paint defect has been corrected.

また本実施形態の自動車製造ラインの塗装欠陥表示方法及びシステムによれば、塗装欠陥と前記補助線とを含む自動車ボディの表面を示す画像は、無線通信可能なウェアラブル表示装置のディスプレイに表示されるので、視線を大きく変化させることなく認識することができる。そのため、作業者Wは、検出された塗装欠陥を措置したか否かをより一層容易に認識することができる。 Furthermore, according to the paint defect display method and system for an automobile production line of this embodiment, an image showing the surface of the automobile body, including the paint defect and the auxiliary line, is displayed on the display of a wirelessly-enabled wearable display device, so it can be recognized without significantly changing one's line of sight. This makes it even easier for worker W to recognize whether or not the detected paint defect has been addressed.

1…塗完検査工程(自動車製造ライン)
11…欠陥検出工程
12…第1欠陥修正工程
13…第2欠陥修正工程
2…欠陥検出装置
21…パターン照射器
22…撮影器
23…コンピュータ
3…生産管理装置
31…無線ルータ
4…表示装置
41…ディスプレイ
42…メイン画面
421…上部
422…中央部
423…下部
43…サブパーツ画面
431…左右上部
432…左右下部
433…下部
434…外周部
B…自動車ボディ
CV1,CV2…フロアコンベア
R…ロボット
W…作業者
D…塗装欠陥
L,L1~L6…補助線
1...Painting inspection process (automobile production line)
11...Defect detection process 12...First defect repair process 13...Second defect repair process 2...Defect detection device 21...Pattern irradiator 22...Photographer 23...Computer 3...Production management device 31...Wireless router 4...Display device 41...Display 42...Main screen 421...Upper part 422...Central part 423...Lower part 43...Sub-parts screen 431...Upper left and right 432...Lower left and right 433...Lower part 434...Outer periphery B...Automobile body CV1, CV2...Floor conveyor R...Robot W...Worker D...Painting defect L, L1 to L6...Auxiliary line

Claims (3)

欠陥検出工程と複数の欠陥修正工程が設けられた自動車製造ラインにおいて、
前記欠陥検出工程において自動車ボディの塗装欠陥を欠陥位置とともに検出し、
前記複数の欠陥修正工程のそれぞれの前において、当該それぞれの欠陥修正工程にて前記塗装欠陥の修正を行う作業者に、修正すべき欠陥の修正範囲を割り当て、
前記複数の欠陥修正工程のそれぞれに、当該欠陥修正工程において塗装欠陥の修正を行う作業者の無線通信可能なウェアラブルデバイスを割り当て、
前記それぞれの欠陥修正工程において、前記割り当てられたそれぞれのウェアラブルデバイスのディスプレイに前記自動車ボディの表面を示す画像を表示すると共に、当該画像上の前記欠陥位置に、前記欠陥検出工程において検出した塗装欠陥のうち、前記割り当てられたそれぞれの修正範囲に含まれる前記検出した塗装欠陥のみを表示し、
前記それぞれの欠陥修正工程において、前記検出した塗装欠陥に対する措置をデータベースに入力し、前記措置が入力された塗装欠陥については、前記自動車ボディの表面を示す画像上への表示を中止又は表示の形態を変更する自動車製造ラインの塗装欠陥表示方法。
In an automobile production line that has a defect detection process and multiple defect repair processes,
In the defect detection step, a paint defect on the automobile body is detected together with the defect position;
Before each of the plurality of defect repair processes, a repair range of the defect to be repaired is assigned to an operator who will repair the coating defect in each of the defect repair processes;
assigning to each of the plurality of defect repair processes a wearable device capable of wireless communication of a worker who repairs a paint defect in the defect repair process ;
In each of the defect repair processes, an image showing the surface of the automobile body is displayed on a display of each of the assigned wearable devices, and only the detected paint defects that are included in each of the assigned repair ranges among the paint defects detected in the defect detection process are displayed at the defect positions on the image;
A paint defect display method for an automobile production line, in which in each defect repair process, measures to be taken for the detected paint defects are entered into a database , and for paint defects for which the measures have been entered, the display on the image showing the surface of the automobile body is stopped or the display format is changed.
前記自動車ボディの表面を示す画像上に表示された塗装欠陥については、前記措置が入力されるまでは当該表示を継続する請求項1に記載の自動車製造ラインの塗装欠陥表示方法。 A paint defect display method for an automobile production line as described in claim 1, wherein paint defects displayed on an image showing the surface of the automobile body continue to be displayed until the corrective action is input. 欠陥検出工程と複数の欠陥修正工程が設けられ、前記複数の欠陥修正工程のそれぞれにおいて修正すべき欠陥の修正範囲が割り当てられた自動車製造ラインにおいて、
前記欠陥検出工程に設けられ、自動車ボディの塗装欠陥を欠陥位置とともに検出する欠陥検出装置と、
前記複数の欠陥修正工程のそれぞれに割り当てられ、前記塗装欠陥に対する措置を入力し、前記欠陥検出装置で検出した塗装欠陥をディスプレイに表示する無線通信可能なウェアラブルデバイスと、を備え、
前記それぞれの欠陥修正工程に割り当てられた前記それぞれのウェアラブルデバイスのディスプレイに、前記自動車ボディの表面を示す画像を表示すると共に、当該画像上の前記欠陥位置に、前記欠陥検出工程において検出した塗装欠陥のうち、前記割り当てられたそれぞれの修正範囲に含まれる前記検出した塗装欠陥のみを表示し、
前記ウェアラブルデバイスにより前記措置が入力された塗装欠陥については、前記自動車ボディの表面を示す画像上への表示を中止又は表示の形態を変更する自動車製造ラインの塗装欠陥表示システム。
In an automobile production line having a defect detection process and a plurality of defect repair processes, a repair range of a defect to be repaired is assigned to each of the plurality of defect repair processes,
a defect detection device provided in the defect detection process for detecting paint defects on the automobile body and their locations;
a wearable device capable of wireless communication, which is assigned to each of the plurality of defect repair processes, and which inputs measures to be taken for the paint defects and displays the paint defects detected by the defect detection device on a display;
an image showing the surface of the automobile body is displayed on a display of each of the wearable devices assigned to each of the defect repair processes, and only the detected paint defects detected in the defect detection process that are included in each of the assigned repair ranges are displayed at the defect positions on the image;
A paint defect display system for an automobile production line that stops displaying or changes the display format on an image showing the surface of the automobile body for paint defects for which the action has been input by the wearable device .
JP2021117764A 2021-07-16 2021-07-16 Method and system for indicating paint defects on automobile production lines Active JP7767754B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2021117764A JP7767754B2 (en) 2021-07-16 2021-07-16 Method and system for indicating paint defects on automobile production lines

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2021117764A JP7767754B2 (en) 2021-07-16 2021-07-16 Method and system for indicating paint defects on automobile production lines

Publications (2)

Publication Number Publication Date
JP2023013522A JP2023013522A (en) 2023-01-26
JP7767754B2 true JP7767754B2 (en) 2025-11-12

Family

ID=85128916

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021117764A Active JP7767754B2 (en) 2021-07-16 2021-07-16 Method and system for indicating paint defects on automobile production lines

Country Status (1)

Country Link
JP (1) JP7767754B2 (en)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2025006900A (en) * 2023-06-30 2025-01-17 株式会社三洋物産 Gaming Machines
JP2025006904A (en) * 2023-06-30 2025-01-17 株式会社三洋物産 Gaming Machines
JP2025006902A (en) * 2023-06-30 2025-01-17 株式会社三洋物産 Gaming Machines
JP2025006901A (en) * 2023-06-30 2025-01-17 株式会社三洋物産 Gaming Machines
JP2025032785A (en) * 2023-08-28 2025-03-12 株式会社三洋物産 Gaming Machines
JP2025032789A (en) * 2023-08-28 2025-03-12 株式会社三洋物産 Gaming Machines
JP2025032779A (en) * 2023-08-28 2025-03-12 株式会社三洋物産 Gaming Machines
JP2025140453A (en) 2024-03-14 2025-09-29 株式会社リコー Output device, output system, and output method

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012145427A (en) 2011-01-12 2012-08-02 Olympus Corp Substrate inspection system, display device, and display method
JP2016126769A (en) 2014-12-26 2016-07-11 古河機械金属株式会社 Inspection result output device, inspection result output method, and program
JP2017009528A (en) 2015-06-25 2017-01-12 ダイハツ工業株式会社 How to determine whether a defect is acceptable
JP2017075848A (en) 2015-10-15 2017-04-20 株式会社オプセル Coating inspection device and inspection method
JP2019159770A (en) 2018-03-13 2019-09-19 オムロン株式会社 Discrimination system, discrimination device, learning device, discrimination method, and program
WO2021084381A1 (en) 2019-10-28 2021-05-06 3M Innovative Properties Company Automated vehicle repair system

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3178508B2 (en) * 1996-06-26 2001-06-18 日産自動車株式会社 Surface defect inspection equipment

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012145427A (en) 2011-01-12 2012-08-02 Olympus Corp Substrate inspection system, display device, and display method
JP2016126769A (en) 2014-12-26 2016-07-11 古河機械金属株式会社 Inspection result output device, inspection result output method, and program
JP2017009528A (en) 2015-06-25 2017-01-12 ダイハツ工業株式会社 How to determine whether a defect is acceptable
JP2017075848A (en) 2015-10-15 2017-04-20 株式会社オプセル Coating inspection device and inspection method
JP2019159770A (en) 2018-03-13 2019-09-19 オムロン株式会社 Discrimination system, discrimination device, learning device, discrimination method, and program
WO2021084381A1 (en) 2019-10-28 2021-05-06 3M Innovative Properties Company Automated vehicle repair system

Also Published As

Publication number Publication date
JP2023013522A (en) 2023-01-26

Similar Documents

Publication Publication Date Title
JP7767754B2 (en) Method and system for indicating paint defects on automobile production lines
EP3388781B1 (en) System and method for detecting defects in specular or semi-specular surfaces by means of photogrammetric projection
JP5947169B2 (en) Appearance inspection apparatus, appearance inspection method and program
WO2011144964A1 (en) Inspection system and method of defect detection on specular surfaces
WO2021103153A1 (en) Method for controlling robot for spraying detection and remediation on inner surface of automobile
JP2007527993A (en) Inspection path setting and inspection area determination method
IT201800006253A1 (en) Method and system for the localization of points on a complex surface in space
US10766135B2 (en) Teach pendant and robot control system
CN203791808U (en) Intelligent welding robot based on machine vision
KR101640425B1 (en) System and method for inspecting sealer application condition
CN115436394A (en) An appearance defect detection system and method
US20190197676A1 (en) Object inspection system and object inspection method
JP6598296B2 (en) Sealer applicator
JP7718132B2 (en) Method and system for indicating paint defects on automobile production lines
CN115922713B (en) An error-proof detection method for vehicle configuration based on multi-robot collaboration
JPH109841A (en) Surface defect inspection equipment
CN112444283B (en) Vehicle assembly detection device and vehicle assembly production system
JP3211681B2 (en) Painting defect inspection equipment
CN110763703A (en) Projection type system for assisting printed circuit board in quick positioning, fixed-point amplification and observation
JP3460541B2 (en) Method and apparatus for inspecting defects on inspected surface
KR102738516B1 (en) System and method for teaching sealing robots
JP3178508B2 (en) Surface defect inspection equipment
KR100955381B1 (en) Bridge Inspection System for Continuous Arrangement of Images
JP4186533B2 (en) Welding position automatic scanning control device and automatic scanning welding method
TWI659207B (en) Projection-type auxiliary system assisting printed circuit board to quickly locate target and capable of zooming in at fixed points

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20240514

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20241217

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20241218

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20250121

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20250422

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20250602

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20250930

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20251013

R150 Certificate of patent or registration of utility model

Ref document number: 7767754

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150