Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP7618905B2 - Skin evaluation device, method, program, and system - Google Patents
[go: Go Back, main page]

JP7618905B2 - Skin evaluation device, method, program, and system - Google Patents

Skin evaluation device, method, program, and system Download PDF

Info

Publication number
JP7618905B2
JP7618905B2 JP2020209359A JP2020209359A JP7618905B2 JP 7618905 B2 JP7618905 B2 JP 7618905B2 JP 2020209359 A JP2020209359 A JP 2020209359A JP 2020209359 A JP2020209359 A JP 2020209359A JP 7618905 B2 JP7618905 B2 JP 7618905B2
Authority
JP
Japan
Prior art keywords
skin
light
amount
ratio
reflected
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020209359A
Other languages
Japanese (ja)
Other versions
JP2022096316A (en
Inventor
久美子 菊地
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shiseido Co Ltd
Original Assignee
Shiseido Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shiseido Co Ltd filed Critical Shiseido Co Ltd
Priority to JP2020209359A priority Critical patent/JP7618905B2/en
Publication of JP2022096316A publication Critical patent/JP2022096316A/en
Application granted granted Critical
Publication of JP7618905B2 publication Critical patent/JP7618905B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Description

本発明は、肌評価装置、方法、プログラム、およびシステムに関する。 The present invention relates to a skin evaluation device, method, program, and system.

従来、物体が有する光学的な特性(以下、光学特性ともいう)が光沢感や透明感などの質感を生み出すことが知られている。肌についても、「ツヤのある肌である」、「マットな肌である」、「透明感がある」、「くすみがある」といった質感に、肌の光学特性が関与していることが知られている。 It has been known that the optical properties of an object (hereinafter referred to as optical properties) create textures such as gloss and transparency. It is also known that the optical properties of skin are involved in the textures such as "glossy skin," "matte skin," "transparency," and "dullness."

「ツヤのある肌である」、「マットな肌である」、「透明感がある」、「くすみがある」といった質感は、肌の美しさの知覚を左右する重要な因子である。そのため、肌の光学特性に基づいた肌の評価が行われている(特許文献1~5)。 Textures such as "glossy skin," "matte skin," "transparency," and "dullness" are important factors that influence the perception of skin beauty. For this reason, skin is evaluated based on its optical properties (Patent Documents 1 to 5).

特許第4133248号公報Patent No. 4133248 特許第5340907号公報Patent No. 5340907 特開2003-190120号公報JP 2003-190120 A 国際公開第2016/0158061号International Publication No. 2016/0158061 特許第6029379号公報Patent No. 6029379

しかしながら、従来の手法では、肌で生じる全ての光を総合的に評価することができなかった。 However, previous methods were unable to comprehensively evaluate all the light generated by the skin.

そこで、本発明では、肌の光学特性を総合的に評価することを目的とする。 Therefore, the present invention aims to comprehensively evaluate the optical properties of skin.

本発明の一実施形態である肌評価装置は、光が照射された肌の形状情報および色情報を取得する取得部と、前記形状情報および色情報を用いて、前記照射により前記肌の表面で鏡面反射された光の前記肌からの光の全体に対する比率と、前記肌の表面で拡散反射された光の前記肌からの光の全体に対する比率と、前記肌の内部での散乱の後に前記肌の外部に放出された光の前記肌からの光の全体に対する比率と、を算出する算出部と、を備える。 One embodiment of the skin evaluation device includes an acquisition unit that acquires shape information and color information of skin irradiated with light, and a calculation unit that uses the shape information and color information to calculate the ratio of light specularly reflected from the surface of the skin due to the irradiation to the total light from the skin, the ratio of light diffusely reflected from the surface of the skin to the total light from the skin, and the ratio of light emitted to the outside of the skin after scattering inside the skin to the total light from the skin.

本発明によれば、肌の光学特性を総合的に評価することができる。 The present invention makes it possible to comprehensively evaluate the optical properties of skin.

本発明の一実施形態に係る全体の構成図である。1 is an overall configuration diagram according to an embodiment of the present invention; 本発明の一実施形態に係る肌評価装置の機能ブロック図である。1 is a functional block diagram of a skin evaluation device according to an embodiment of the present invention. 本発明の一実施形態に係る肌評価処理のフローチャートである。4 is a flowchart of a skin evaluation process according to an embodiment of the present invention. 本発明の一実施形態に係る光量比率算出処理のフローチャートである。11 is a flowchart of a light amount ratio calculation process according to an embodiment of the present invention. 本発明の一実施形態に係る表面反射・表面下散乱の分離と鏡面反射・拡散反射の分離について説明するための図である。1 is a diagram for explaining separation of surface reflection/subsurface scattering and separation of specular reflection/diffuse reflection according to an embodiment of the present invention. FIG. 本発明の一実施形態に係る表面反射・表面下散乱の分離の手法について説明するための図である。1A to 1C are diagrams for explaining a method for separating surface reflection and subsurface scattering according to an embodiment of the present invention. 本発明の一実施形態に係る肌評価装置のハードウェア構成の一例を示すブロック図である。1 is a block diagram showing an example of a hardware configuration of a skin evaluation device according to an embodiment of the present invention.

以下、図面に基づいて本発明の実施の形態を説明する。 The following describes an embodiment of the present invention based on the drawings.

<用語の説明>
・本明細書において、「鏡面反射」とは、肌の表面において発生する光の反射のうち、入射角と反射角が等しいものである。
・本明細書において、「拡散反射」とは、肌の表面において発生する光の反射のうち、鏡面反射を除いたものである。
・本明細書において、「表面下散乱」とは、光が肌の表面を透過し、肌の内部で散乱した後に、肌の表面から外部に出ることをいう。
<Terminology>
In this specification, "specular reflection" refers to the reflection of light that occurs on the surface of the skin, where the angle of incidence and the angle of reflection are equal.
In this specification, "diffuse reflection" refers to the reflection of light that occurs on the surface of the skin, excluding specular reflection.
As used herein, "subsurface scattering" refers to light passing through the surface of the skin, being scattered inside the skin, and then exiting the skin surface.

<全体の構成>
図1は、本発明の一実施形態に係る全体の構成図である。肌評価システム1は、肌評価装置10と、撮像機器20と、光源30と、を含む。以下、それぞれについて説明する。
<Overall composition>
1 is a diagram showing the overall configuration of an embodiment of the present invention. The skin evaluation system 1 includes a skin evaluation device 10, an image capture device 20, and a light source 30. Each of these will be described below.

肌評価装置10は、肌の光学特性を評価するためのコンピュータである。肌評価装置10は、撮像機器20が撮影した画像を用いて(具体的には、肌の形状情報および肌の色情報を用いて)、光源30からの照射により肌の表面で鏡面反射された光(以下、鏡面反射光ともいう)の光量と、光源30からの照射により肌の表面で拡散反射された光(以下、表面での拡散反射光ともいう)の光量と、光源30からの照射により肌の内部での散乱の後に肌の外部に放出された光(以下、表面下散乱光ともいう)の光量と、を算出する。また、肌評価装置10は、肌からの光の全体量(つまり、鏡面反射光の光量と、表面での拡散反射光の光量と、表面下散乱光の光量と、の総和)に対する各光量の比率を算出する。さらに、肌評価装置10は、各々の光量、および、肌からの光の全体量(つまり、各々の光量の総和)に対する各光量の比率の少なくとも一方に基づいて、肌を評価することができる。例えば、肌評価装置10は、パーソナルコンピュータ、タブレット端末、スマートフォン等である。 The skin evaluation device 10 is a computer for evaluating the optical characteristics of the skin. The skin evaluation device 10 uses the image captured by the imaging device 20 (specifically, using the skin shape information and skin color information) to calculate the amount of light specularly reflected on the surface of the skin by irradiation from the light source 30 (hereinafter also referred to as specular reflected light), the amount of light diffusely reflected on the surface of the skin by irradiation from the light source 30 (hereinafter also referred to as diffuse reflected light on the surface), and the amount of light emitted to the outside of the skin after scattering inside the skin by irradiation from the light source 30 (hereinafter also referred to as subsurface scattered light). In addition, the skin evaluation device 10 calculates the ratio of each amount of light to the total amount of light from the skin (i.e., the sum of the amount of specular reflected light, the amount of diffuse reflected light on the surface, and the amount of subsurface scattered light). Furthermore, the skin evaluation device 10 can evaluate the skin based on at least one of the amount of light and the ratio of each amount of light to the total amount of light from the skin (i.e., the sum of the amount of each amount of light). For example, the skin evaluation device 10 is a personal computer, a tablet terminal, a smartphone, etc.

このように、本発明では、単一の撮像機器20および単一の光源30を用いて撮影された画像から、肌の物理特性(肌の形状)と肌の光学特性(肌で生じる全ての光)とを評価する。 In this way, the present invention evaluates the physical characteristics of the skin (skin shape) and the optical characteristics of the skin (all light generated by the skin) from images captured using a single imaging device 20 and a single light source 30.

撮像機器20は、肌を撮影するための機器である。具体的には、撮像機器20は、光学特性を評価される肌を撮影する。 The imaging device 20 is a device for photographing skin. Specifically, the imaging device 20 photographs the skin whose optical characteristics are to be evaluated.

なお、肌評価装置10は、撮像機器20が撮影した画像から、肌の3次元形状を示す形状情報および色情報(具体的には、各点のX座標・Y座標・Z座標の値、および、各点のRGBの各値)、あるいは、肌の2次元形状を示す形状情報および色情報(具体的には、各点のX座標・Y座標の値、および、各点のRGBの各値)を取得することができる。 The skin evaluation device 10 can obtain shape information and color information indicating the three-dimensional shape of the skin (specifically, the X-coordinate, Y-coordinate, and Z-coordinate values of each point, and the RGB values of each point) from the image captured by the imaging device 20, or shape information and color information indicating the two-dimensional shape of the skin (specifically, the X-coordinate, Y-coordinate values of each point, and the RGB values of each point).

光源30は、自ら光を発する人工光源である。 Light source 30 is an artificial light source that emits its own light.

なお、図1では、肌評価装置10と撮像機器20と光源30とを別々の機器として説明したが、肌評価装置10と撮像機器20と光源30とのうちの少なくとも2つを1つの機器で実装してもよい。 Note that in FIG. 1, the skin evaluation device 10, the imaging device 20, and the light source 30 are described as separate devices, but at least two of the skin evaluation device 10, the imaging device 20, and the light source 30 may be implemented in a single device.

<機能ブロック>
図2は、本発明の一実施形態に係る肌評価装置10の機能ブロック図である。図2に示されるように、肌評価装置10は、画像取得部101と、算出部102と、評価部103と、を備えることができる。また、肌評価装置10は、プログラムを実行することで、画像取得部101、算出部102、評価部103として機能することができる。
<Function block>
Fig. 2 is a functional block diagram of the skin evaluation device 10 according to one embodiment of the present invention. As shown in Fig. 2, the skin evaluation device 10 can include an image acquisition unit 101, a calculation unit 102, and an evaluation unit 103. Moreover, the skin evaluation device 10 can function as the image acquisition unit 101, the calculation unit 102, and the evaluation unit 103 by executing a program.

画像取得部101は、光源30からの光が照射された肌の画像を、撮像機器20から取得する。画像取得部101は、撮像機器20から取得した画像から、肌の3次元形状を示す形状情報および色情報(具体的には、各点のX座標・Y座標・Z座標の値、および、各点のRGBの各値)、あるいは、肌の2次元形状を示す形状情報および色情報(具体的には、各点のX座標・Y座標の値、および、各点のRGBの各値)を取得する。 The image acquisition unit 101 acquires an image of the skin illuminated with light from the light source 30 from the imaging device 20. From the image acquired from the imaging device 20, the image acquisition unit 101 acquires shape information and color information indicating the three-dimensional shape of the skin (specifically, the X-coordinate, Y-coordinate, and Z-coordinate values of each point, and the RGB values of each point), or shape information and color information indicating the two-dimensional shape of the skin (specifically, the X-coordinate, Y-coordinate values of each point, and the RGB values of each point).

算出部102は、肌の形状情報および肌の色情報を用いて、光源30からの照射により肌の表面で鏡面反射された光(鏡面反射光)の光量と、光源30からの照射により肌の表面で拡散反射された光(表面での拡散反射光)の光量と、光源30からの照射により肌の内部での散乱の後に肌の外部に放出された光(表面下散乱光)の光量と、を算出する。また、算出部102は、肌からの光の全体量(つまり、鏡面反射光の光量と、表面での拡散反射光の光量と、表面下散乱光の光量と、の総和)に対する各光量の比率を算出する。以下、<<表面反射と表面下散乱の分離>>と<<鏡面反射と拡散反射の分離>>に分けて説明する。 The calculation unit 102 uses the skin shape information and skin color information to calculate the amount of light specularly reflected from the surface of the skin upon irradiation from the light source 30 (specular reflected light), the amount of light diffusely reflected from the surface of the skin upon irradiation from the light source 30 (diffuse reflected light at the surface), and the amount of light emitted to the outside of the skin after scattering inside the skin upon irradiation from the light source 30 (subsurface scattered light). The calculation unit 102 also calculates the ratio of each amount of light to the total amount of light from the skin (i.e., the sum of the amount of specular reflected light, the amount of diffuse reflected light at the surface, and the amount of subsurface scattered light). Below, the explanation is divided into <<Separation of surface reflection and subsurface scattering>> and <<Separation of specular reflection and diffuse reflection>>.

<<表面反射と表面下散乱の分離>>
算出部102は、肌の表面で反射された光(以下、表面反射光ともいう)の光量と、肌の内部での散乱の後に肌の外部に放出された光(表面下散乱光)の光量と、を算出する。また、算出部102は、表面反射光の光量と表面下散乱光の光量との総和に対する表面反射光の光量の比率、および、表面反射光の光量と表面下散乱光の光量との総和に対する表面下散乱光の光量の比率を算出する。
<<Separation of surface reflection and subsurface scattering>>
The calculation unit 102 calculates the amount of light reflected by the surface of the skin (hereinafter also referred to as surface reflected light) and the amount of light (subsurface scattered light) emitted to the outside of the skin after scattering inside the skin. In addition, the calculation unit 102 calculates the ratio of the amount of surface reflected light to the sum of the amount of surface reflected light and the amount of subsurface scattered light, and the ratio of the amount of subsurface scattered light to the sum of the amount of surface reflected light and the amount of subsurface scattered light.

例えば、算出部102は、プロジェクタにより照射・非照射のパターン光を投影された肌が撮影された画像において、照射領域における光量と非照射領域における光量との差分を算出して、肌の表面で反射された光(表面反射光)の成分と、肌の内部での散乱の後に肌の外部に放出された光(表面下散乱光)の成分と、に分離する。算出部102は、分離に基づいて、各々の光量(つまり、表面反射光の光量および表面下散乱光の光量)、および、肌からの光の全体量に対する各光量の比率(つまり、表面反射光の光量と表面下散乱光の光量との総和に対する表面反射光の光量の比率、および、表面反射光の光量と表面下散乱光の光量との総和に対する表面下散乱光の光量の比率)を算出する。 For example, the calculation unit 102 calculates the difference between the amount of light in the illuminated area and the amount of light in the non-illuminated area in an image of skin onto which illuminated and non-illuminated pattern light is projected by a projector, and separates the light into a component of light reflected on the surface of the skin (surface reflected light) and a component of light emitted to the outside of the skin after scattering inside the skin (subsurface scattered light). Based on the separation, the calculation unit 102 calculates the amount of light (i.e., the amount of surface reflected light and the amount of subsurface scattered light) and the ratio of each amount of light to the total amount of light from the skin (i.e., the ratio of the amount of surface reflected light to the sum of the amount of surface reflected light and the amount of subsurface scattered light, and the ratio of the amount of subsurface scattered light to the sum of the amount of surface reflected light and the amount of subsurface scattered light).

<<鏡面反射と拡散反射の分離>>
算出部102は、肌の表面で鏡面反射された光(鏡面反射光)の光量と、肌の表面で拡散反射された光(表面での拡散反射光)の光量と、を算出する。また、算出部102は、鏡面反射光の光量と表面での拡散反射光の光量との総和に対する鏡面反射光の光量の比率、および、鏡面反射光の光量と表面での拡散反射光の光量との総和に対する表面での拡散反射光の光量の比率を算出する。
<<Separation of specular reflection and diffuse reflection>>
The calculation unit 102 calculates the amount of light specularly reflected from the skin surface (specular reflected light) and the amount of light diffusely reflected from the skin surface (diffuse reflected light from the surface). The calculation unit 102 also calculates the ratio of the amount of specular reflected light to the sum of the amount of specular reflected light and the amount of diffuse reflected light from the surface, and the ratio of the amount of diffuse reflected light from the surface to the sum of the amount of specular reflected light and the amount of diffuse reflected light from the surface.

例えば、算出部102は、偏光フィルタを用いて撮影された無偏光画像と偏光フィルタを用いずに撮影された偏光画像との差分を算出して、肌からの光の全体量から肌の表面で鏡面反射された光(鏡面反射光)の成分を分離する(なお、肌からの光の全体量=鏡面反射光+それ以外の光(表面での拡散反射光+表面下散乱光)であるので、分離された後の残りの光には、表面での拡散反射光と表面下散乱光が含まれる)。算出部102は、分離された後の残りの光から表面下散乱光を差し引くことによって、表面での拡散反射光の光量を算出することができる。 For example, the calculation unit 102 calculates the difference between an unpolarized image captured using a polarizing filter and a polarized image captured without using a polarizing filter, and separates the component of light specularly reflected from the skin surface (specular reflected light) from the total amount of light from the skin (note that since the total amount of light from the skin = specular reflected light + other light (diffuse reflected light from the surface + subsurface scattered light), the light remaining after separation includes diffuse reflected light from the surface and subsurface scattered light). The calculation unit 102 can calculate the amount of diffuse reflected light from the surface by subtracting the subsurface scattered light from the remaining light after separation.

算出部102は、分離に基づいて、各々の光量(つまり、鏡面反射光の光量および表面での拡散反射光の光量)、および、肌からの光の全体量に対する各光量の比率(つまり、鏡面反射光の光量と表面での拡散反射光の光量と表面下散乱光の光量との総和に対する鏡面反射光の光量の比率、および、鏡面反射光の光量と表面での拡散反射光の光量と表面下散乱光の光量との総和に対する表面での拡散反射光の光量の比率)を算出する。なお、本明細書では、偏光フィルタを用いる手法を説明したが、本発明では、二色性反射モデルによる分離の手法、形状情報を利用した鏡面反射の分離の手法を適用することもできる。 Based on the separation, the calculation unit 102 calculates the amount of each light (i.e., the amount of specular reflected light and the amount of diffuse reflected light at the surface) and the ratio of each amount of light to the total amount of light from the skin (i.e., the ratio of the amount of specular reflected light to the sum of the amount of specular reflected light, the amount of diffuse reflected light at the surface, and the amount of subsurface scattered light, and the ratio of the amount of diffuse reflected light at the surface to the sum of the amount of specular reflected light, the amount of diffuse reflected light at the surface, and the amount of subsurface scattered light). Note that although the present specification describes a method using a polarizing filter, the present invention can also apply a separation method using a dichroic reflection model and a method of separating specular reflection using shape information.

なお、<<表面反射と表面下散乱の分離>>の肌の表面で反射された光は、<<鏡面反射と拡散反射の分離>>の肌の表面で鏡面反射された光との肌の表面で拡散反射された光とからなる。 Note that the light reflected from the skin surface in <<Separation of surface reflection and subsurface scattering>> consists of light specularly reflected from the skin surface and light diffusely reflected from the skin surface in <<Separation of specular reflection and diffuse reflection>>.

評価部103は、算出部102が算出した各々の光量(つまり、鏡面反射光の光量、表面での拡散反射光の光量、表面下散乱光の光量)、および、肌からの光の全体量(つまり、各々の光量の総和)に対する各光量の比率の少なくとも一方に基づいて、肌を評価する。例えば、評価部103は、算出部102が算出した比率と所定の比率(例えば、肌が最も美しく見える比率)との差に基づいて、肌を評価することができる。例えば、評価部103は、比率(照射により肌の表面で鏡面反射された光と、肌の表面で拡散反射された光と、肌の内部での散乱の後に肌の外部に放出された光と、の光量の比率)と肌の状態との対応関係に基づいて、肌を評価することができる。 The evaluation unit 103 evaluates the skin based on at least one of the amounts of light calculated by the calculation unit 102 (i.e., the amount of specularly reflected light, the amount of diffusely reflected light on the surface, and the amount of subsurface scattered light) and the ratio of each amount of light to the total amount of light from the skin (i.e., the sum of each amount of light). For example, the evaluation unit 103 can evaluate the skin based on the difference between the ratio calculated by the calculation unit 102 and a predetermined ratio (e.g., the ratio at which the skin looks most beautiful). For example, the evaluation unit 103 can evaluate the skin based on the correspondence between the ratio (the ratio of the amount of light specularly reflected on the surface of the skin due to irradiation, the light diffusely reflected on the surface of the skin, and the light emitted to the outside of the skin after scattering inside the skin) and the skin condition.

例えば、評価部103は、肌の表面で鏡面反射された光の光量が多いと、ツヤのある肌であると評価することができる。また、例えば、評価部103は、肌の表面で拡散反射された光の光量が多いと、マットな肌であると評価することができる。また、例えば、評価部103は、肌の内部での散乱の後に肌の外部に放出された光の光量が多いと、透明感がある肌であると評価することができる。 For example, the evaluation unit 103 can evaluate the skin as having a glossy appearance when the amount of light specularly reflected from the skin surface is large. Also, for example, the evaluation unit 103 can evaluate the skin as having a matte appearance when the amount of light diffusely reflected from the skin surface is large. Also, for example, the evaluation unit 103 can evaluate the skin as having a translucent appearance when the amount of light emitted to the outside of the skin after being scattered inside the skin is large.

<<肌の3次元形状に基づく光量の補正>>
本発明の一実施形態では、肌評価装置10は、肌の3次元形状を示す形状情報に基づいて、鏡面反射光の光量と表面での拡散反射光の光量と表面下散乱光の光量とのうちの少なくとも1つの光量を補正する(つまり、増減させる)ことができる。肌の鏡面反射は、肌の表面の凹凸などの形状の影響を受ける。つまり、頬がふっくらした形状とそうではない形状といった形状の違いが、鏡面反射(つまり、肌のツヤ)の評価に影響を与えている。鏡面反射に限らず、肌の形状によって光の当たり方は異なる。そのため、本発明の一実施形態では、肌の3次元形状を活用して、各箇所(例えば、顔の頬等の各箇所)に当たる光の量を補正することにより、肌の光学特性の評価の精度を向上させることができる。
<<Light intensity correction based on 3D skin shape>>
In one embodiment of the present invention, the skin evaluation device 10 can correct (i.e., increase or decrease) at least one of the amount of specular reflected light, the amount of diffusely reflected light on the surface, and the amount of subsurface scattered light based on shape information indicating the three-dimensional shape of the skin. The specular reflection of the skin is affected by the shape of the skin, such as the unevenness of the surface. In other words, differences in shape, such as whether the cheeks are plump or not, affect the evaluation of the specular reflection (i.e., skin luster). Not only specular reflection, but also the way light hits the skin varies depending on the shape of the skin. Therefore, in one embodiment of the present invention, the three-dimensional shape of the skin is utilized to correct the amount of light hitting each part (for example, each part of the face, such as the cheeks) to improve the accuracy of the evaluation of the optical properties of the skin.

<方法>
以下、図3を参照しながら肌評価処理について説明し、図4を参照しながら光量比率算出処理について説明する。
Methods
Hereinafter, the skin evaluation process will be described with reference to FIG. 3, and the light amount ratio calculation process will be described with reference to FIG.

図3は、本発明の一実施形態に係る肌評価処理のフローチャートである。 Figure 3 is a flowchart of a skin evaluation process according to one embodiment of the present invention.

ステップ1(S1)において、画像取得部101は、光源30からの光が照射された肌の画像を、撮像機器20から取得する。次に、画像取得部101は、撮像機器20から取得した画像から、肌の3次元形状を示す形状情報および色情報(具体的には、各点のX座標・Y座標・Z座標の値、および、各点のRGBの各値)、あるいは、肌の2次元形状を示す形状情報および色情報(具体的には、各点のX座標・Y座標の値、および、各点のRGBの各値)を取得する。 In step 1 (S1), the image acquisition unit 101 acquires an image of skin illuminated with light from the light source 30 from the imaging device 20. Next, the image acquisition unit 101 acquires shape information and color information indicating the three-dimensional shape of the skin (specifically, the X-coordinate, Y-coordinate, and Z-coordinate values of each point, and the RGB values of each point) or shape information and color information indicating the two-dimensional shape of the skin (specifically, the X-coordinate, Y-coordinate values of each point, and the RGB values of each point) from the image acquired from the imaging device 20.

ステップ2(S2)において、算出部102は、S1で取得された肌の形状情報および肌の色情報を用いて、光源30からの照射により肌の表面で鏡面反射された光(鏡面反射光)の光量と、光源30からの照射により肌の表面で拡散反射された光(表面での拡散反射光)の光量と、光源30からの照射により肌の内部での散乱の後に肌の外部に放出された光(表面下散乱光)の光量と、を算出する。次に、算出部102は、肌からの光の全体量(つまり、鏡面反射光の光量と、表面での拡散反射光の光量と、表面下散乱光の光量と、の総和)に対する各光量の比率を算出する。 In step 2 (S2), the calculation unit 102 uses the skin shape information and skin color information acquired in S1 to calculate the amount of light specularly reflected from the surface of the skin upon irradiation from the light source 30 (specular reflected light), the amount of light diffusely reflected from the surface of the skin upon irradiation from the light source 30 (diffuse reflected light at the surface), and the amount of light emitted to the outside of the skin after scattering inside the skin upon irradiation from the light source 30 (subsurface scattered light). Next, the calculation unit 102 calculates the ratio of each amount of light to the total amount of light from the skin (i.e., the sum of the amount of specular reflected light, the amount of diffuse reflected light at the surface, and the amount of subsurface scattered light).

ステップ3(S3)において、評価部103は、S2で算出された各々の光量(つまり、鏡面反射光の光量、表面での拡散反射光の光量、表面下散乱光の光量)、および、肌からの光の全体量(つまり、各々の光量の総和)に対する各光量の比率の少なくとも一方に基づいて、肌を評価する。例えば、評価部103は、S2で算出された比率と所定の比率との差に基づいて、肌を評価することができる。例えば、評価部103は、比率(照射により肌の表面で鏡面反射された光と、肌の表面で拡散反射された光と、肌の内部での散乱の後に肌の外部に放出された光と、の光量の比率)と肌の状態との対応関係に基づいて、肌を評価することができる。 In step 3 (S3), the evaluation unit 103 evaluates the skin based on at least one of the amounts of light calculated in S2 (i.e., the amount of specularly reflected light, the amount of diffusely reflected light on the surface, and the amount of subsurface scattered light) and the ratio of each amount of light to the total amount of light from the skin (i.e., the sum of each amount of light). For example, the evaluation unit 103 can evaluate the skin based on the difference between the ratio calculated in S2 and a predetermined ratio. For example, the evaluation unit 103 can evaluate the skin based on the correspondence between the ratio (the ratio of the amount of light specularly reflected on the surface of the skin due to irradiation, the light diffusely reflected on the surface of the skin, and the light emitted to the outside of the skin after scattering inside the skin) and the skin condition.

図4は、本発明の一実施形態に係る光量比率算出処理(図3のS2)のフローチャートである。 Figure 4 is a flowchart of the light intensity ratio calculation process (S2 in Figure 3) according to one embodiment of the present invention.

ステップ11(S11)において、算出部102は、表面反射と表面下散乱を分離する。具体的には、算出部102は、肌の表面で反射された光(表面反射光)の光量と、肌の内部での散乱の後に肌の外部に放出された光(表面下散乱光)の光量と、を算出する。次に、算出部102は、表面反射光の光量と表面下散乱光の光量との総和に対する表面反射光の光量の比率、および、表面反射光の光量と表面下散乱光の光量との総和に対する表面下散乱光の光量の比率を算出する。 In step 11 (S11), the calculation unit 102 separates surface reflection and subsurface scattering. Specifically, the calculation unit 102 calculates the amount of light reflected on the surface of the skin (surface reflected light) and the amount of light emitted to the outside of the skin after scattering inside the skin (subsurface scattered light). Next, the calculation unit 102 calculates the ratio of the amount of surface reflected light to the sum of the amount of surface reflected light and the amount of subsurface scattered light, and the ratio of the amount of subsurface scattered light to the sum of the amount of surface reflected light and the amount of subsurface scattered light.

例えば、算出部102は、プロジェクタにより照射・非照射のパターン光を投影された肌が撮影された画像において、照射領域における光量と非照射領域における光量との差分を算出する。次に、算出部102は、該差分に基づいて、肌の表面で反射された光(表面反射光)の成分と、肌の内部での散乱の後に肌の外部に放出された光(表面下散乱光)の成分と、に分離する。次に、算出部102は、該分離に基づいて、各々の光量(つまり、表面反射光の光量および表面下散乱光の光量)、および、肌からの光の全体量に対する各光量の比率(つまり、表面反射光の光量と表面下散乱光の光量との総和に対する表面反射光の光量の比率、および、表面反射光の光量と表面下散乱光の光量との総和に対する表面下散乱光の光量の比率)を算出する。 For example, the calculation unit 102 calculates the difference between the amount of light in the illuminated area and the amount of light in the non-illuminated area in an image of skin onto which illuminated and non-illuminated pattern light is projected by a projector. Next, based on the difference, the calculation unit 102 separates the light into a component of light reflected on the surface of the skin (surface reflected light) and a component of light emitted to the outside of the skin after scattering inside the skin (subsurface scattered light). Next, based on the separation, the calculation unit 102 calculates the amount of light (i.e., the amount of surface reflected light and the amount of subsurface scattered light) and the ratio of each amount of light to the total amount of light from the skin (i.e., the ratio of the amount of surface reflected light to the sum of the amount of surface reflected light and the amount of subsurface scattered light, and the ratio of the amount of subsurface scattered light to the sum of the amount of surface reflected light and the amount of subsurface scattered light).

ステップ12(S12)において、算出部102は、鏡面反射と拡散反射を分離する。具体的には、算出部102は、肌の表面で鏡面反射された光(鏡面反射光)の光量と、肌の表面で拡散反射された光(表面での拡散反射光)の光量と、を算出する。次に、算出部102は、鏡面反射光の光量と表面での拡散反射光の光量との総和に対する鏡面反射光の光量の比率、および、鏡面反射光の光量と表面での拡散反射光の光量との総和に対する表面での拡散反射光の光量の比率を算出する。 In step 12 (S12), the calculation unit 102 separates specular reflection from diffuse reflection. Specifically, the calculation unit 102 calculates the amount of light specularly reflected from the skin surface (specular reflected light) and the amount of light diffusely reflected from the skin surface (diffuse reflected light at the surface). Next, the calculation unit 102 calculates the ratio of the amount of specular reflected light to the sum of the amount of specular reflected light and the amount of diffuse reflected light at the surface, and the ratio of the amount of diffuse reflected light at the surface to the sum of the amount of specular reflected light and the amount of diffuse reflected light at the surface.

例えば、算出部102は、偏光フィルタを用いて撮影された無偏光画像と偏光フィルタを用いずに撮影された偏光画像との差分を算出する。次に、算出部102は、該差分に基づいて、肌の表面で鏡面反射された光(鏡面反射光)の成分と、肌の表面で拡散反射された光(表面での拡散反射光)の成分と、に分離する。次に、算出部102は、該分離に基づいて、各々の光量(つまり、鏡面反射光の光量および表面での拡散反射光の光量)、および、肌からの光の全体量に対する各光量の比率(つまり、鏡面反射光の光量と表面での拡散反射光の光量と表面下散乱光の光量との総和に対する鏡面反射光の光量の比率、および、鏡面反射光の光量と表面での拡散反射光の光量と表面下散乱光の光量との総和に対する表面での拡散反射光の光量の比率)を算出する。 For example, the calculation unit 102 calculates the difference between a non-polarized image captured using a polarizing filter and a polarized image captured without using a polarizing filter. Next, based on the difference, the calculation unit 102 separates the light into a component of light specularly reflected (specular reflected light) from a component of light diffusely reflected (diffuse reflected light at the surface) from the skin surface. Next, based on the separation, the calculation unit 102 calculates the amount of light of each component (i.e., the amount of specular reflected light and the amount of diffuse reflected light at the surface) and the ratio of each amount of light to the total amount of light from the skin (i.e., the ratio of the amount of specular reflected light to the sum of the amount of specular reflected light, the amount of diffuse reflected light at the surface, and the amount of subsurface scattered light, and the ratio of the amount of diffuse reflected light at the surface to the sum of the amount of specular reflected light, the amount of diffuse reflected light at the surface, and the amount of subsurface scattered light).

なお、S11の肌の表面で反射された光は、S12の肌の表面で鏡面反射された光とS12の肌の表面で拡散反射された光とからなる。 The light reflected by the skin surface of S11 consists of light specularly reflected by the skin surface of S12 and light diffusely reflected by the skin surface of S12.

図5は、本発明の一実施形態に係る表面反射・表面下散乱の分離と鏡面反射・拡散反射の分離について説明するための図である。 Figure 5 is a diagram explaining the separation of surface reflection/subsurface scattering and the separation of specular reflection/diffuse reflection according to one embodiment of the present invention.

撮像機器20は、光源30からの光が照射されたユーザの顔の肌を撮影する。具体的には、撮像機器20は、表面反射と表面下散乱を分離するための画像、および、鏡面反射と拡散反射を分離するための画像を撮影する。このように、本発明では、表面反射と表面下散乱を分離するための画像、および、鏡面反射と拡散反射を分離するための画像は、単一の撮像機器20および単一の光源30を用いて撮影される。肌評価装置10は、画像から肌の形状(3次元形状または2次元形状)および色を示す情報を取得し、光源30からの照射により肌の表面で鏡面反射された光(鏡面反射光)の光量と、光源30からの照射により肌の表面で拡散反射された光(表面での拡散反射光)の光量と、光源30からの照射により肌の内部での散乱の後に肌の外部に放出された光(表面下散乱光)の光量と、を算出する。そして、肌評価装置10は、肌からの光の全体量(つまり、鏡面反射光の光量と、表面での拡散反射光の光量と、表面下散乱光の光量と、の総和)に対する各光量の比率を算出する。 The imaging device 20 captures the skin of the user's face illuminated with light from the light source 30. Specifically, the imaging device 20 captures an image for separating surface reflection and subsurface scattering, and an image for separating specular reflection and diffuse reflection. Thus, in the present invention, the image for separating surface reflection and subsurface scattering, and the image for separating specular reflection and diffuse reflection are captured using a single imaging device 20 and a single light source 30. The skin evaluation device 10 acquires information indicating the shape (three-dimensional shape or two-dimensional shape) and color of the skin from the image, and calculates the amount of light (specular reflected light) specularly reflected on the surface of the skin by irradiation from the light source 30, the amount of light (diffuse reflected light on the surface) diffusely reflected on the surface of the skin by irradiation from the light source 30, and the amount of light (subsurface scattered light) emitted to the outside of the skin after scattering inside the skin by irradiation from the light source 30. The skin evaluation device 10 then calculates the ratio of each light amount to the total amount of light from the skin (i.e., the sum of the amount of specularly reflected light, the amount of diffusely reflected light from the surface, and the amount of subsurface scattered light).

図6は、本発明の一実施形態に係る表面反射・表面下散乱の分離の手法について説明するための図である。 Figure 6 is a diagram explaining a method for separating surface reflection and subsurface scattering according to one embodiment of the present invention.

ステップ101(S101)において、プロジェクタ(光源30)は、ユーザの顔に照射・非照射のパターン光を投影する。また、撮像機器20は、照射・非照射のパターン光が投影されているユーザの顔を撮影する。図6では、黒い部分(つまり、投影されていない部分)が非照射領域であり、その他の部分(つまり、投影されている部分)が照射領域である。 In step 101 (S101), the projector (light source 30) projects illuminated and non-illuminated pattern light onto the user's face. The imaging device 20 also captures the user's face onto which the illuminated and non-illuminated pattern light is projected. In FIG. 6, the black parts (i.e., the parts not projected) are the non-illuminated areas, and the other parts (i.e., the parts projected) are the illuminated areas.

ステップ102(S102)において、プロジェクタ(光源30)からの光が、肌の表面で反射する、あるいは、肌の表面を透過して肌の内部で散乱した後に肌の表面から外部に出る。図6の矢印1は、プロジェクタ(光源30)が照射する光を示す。図6の矢印2は、照射領域において鏡面反射された光を示す。図6の矢印3は、照射領域において拡散反射された光を示す。図6の矢印4は、照射領域および非照射領域において、肌の内部での散乱の後に肌の外部に放出された光を示す。図6の矢印5は、肌の内部において散乱している光を示す。 In step 102 (S102), light from the projector (light source 30) is reflected on the surface of the skin, or passes through the surface of the skin and is scattered inside the skin before exiting the surface of the skin. Arrow 1 in FIG. 6 indicates light emitted by the projector (light source 30). Arrow 2 in FIG. 6 indicates light that is specularly reflected in the illuminated area. Arrow 3 in FIG. 6 indicates light that is diffusely reflected in the illuminated area. Arrow 4 in FIG. 6 indicates light that is emitted to the outside of the skin after scattering inside the skin in the illuminated and non-illuminated areas. Arrow 5 in FIG. 6 indicates light that is scattered inside the skin.

ステップ103(S103)において、プロジェクタ(光源30)は、ユーザの顔に投影する照射・非照射のパターン光を移動させて、S101において照射領域であった領域を非照射領域(つまり、非照射領域であった領域を照射領域)にする。また、撮像機器20は、移動された照射・非照射のパターン光が投影されているユーザの顔を撮影する。 In step 103 (S103), the projector (light source 30) moves the irradiated and non-irradiated pattern light projected onto the user's face, and changes the area that was an irradiated area in S101 to a non-irradiated area (i.e., the area that was a non-irradiated area becomes an irradiated area). In addition, the imaging device 20 captures an image of the user's face onto which the moved irradiated and non-irradiated pattern light is projected.

S101およびS103により、顔全体の照射領域における光の成分および非照射領域における光の成分が得られる。肌評価装置10の算出部102は、S101およびS103の照射領域(つまり、肌の表面で反射された光と、肌の内部での散乱の後に肌の外部に放出された光と、の両方が存在する領域)における光の成分から、S101およびS103の非照射領域(つまり、肌の内部での散乱の後に肌の外部に放出された光のみが存在する領域)における光の成分を減算することによって、肌の表面で反射された光の成分を得ることができる。 By S101 and S103, the light components in the illuminated areas and the light components in the non-illuminated areas of the entire face are obtained. The calculation unit 102 of the skin evaluation device 10 can obtain the light components reflected on the skin surface by subtracting the light components in the non-illuminated areas of S101 and S103 (i.e., areas where only light that is scattered inside the skin and then emitted to the outside of the skin exists) from the light components in the illuminated areas of S101 and S103 (i.e., areas where both light reflected on the skin surface and light that is scattered inside the skin and then emitted to the outside of the skin exist).

<効果>
このように、本発明では、肌の光学特性を総合的に評価することができる。具体的には、本発明では、単一の撮像機器20および単一の光源30を用いて撮影された画像から、肌の物理特性(肌の形状)と肌の光学特性(肌で生じる全ての光)とを評価する。そのため、各光(つまり、鏡面反射、拡散反射、表面下散乱)の光量の比率を算出することでき、光のバランスに基づいて、肌の質感を総合的かつ定量的に評価することができる。
<Effects>
In this way, the present invention can comprehensively evaluate the optical characteristics of skin. Specifically, the present invention evaluates the physical characteristics of skin (skin shape) and the optical characteristics of skin (all light generated by skin) from an image captured using a single imaging device 20 and a single light source 30. Therefore, the ratio of the amount of light of each type of light (i.e., specular reflection, diffuse reflection, subsurface scattering) can be calculated, and the texture of skin can be comprehensively and quantitatively evaluated based on the balance of light.

<ハードウェア構成>
図7は、本発明の一実施形態に係る肌評価装置10のハードウェア構成の一例を示すブロック図である。
<Hardware Configuration>
FIG. 7 is a block diagram showing an example of the hardware configuration of the skin evaluation device 10 according to one embodiment of the present invention.

肌評価装置10は、CPU(Central Processing Unit)1001、ROM(Read Only Memory)1002、RAM(Random Access Memory)1003を有する。CPU1001、ROM1002、RAM1003は、いわゆるコンピュータを形成する。 The skin evaluation device 10 has a CPU (Central Processing Unit) 1001, a ROM (Read Only Memory) 1002, and a RAM (Random Access Memory) 1003. The CPU 1001, the ROM 1002, and the RAM 1003 form a so-called computer.

また、肌評価装置10は、補助記憶装置1004、表示装置1005、操作装置1006、I/F(Interface)装置1007、ドライブ装置1008を有することができる。なお、肌評価装置10の各ハードウェアは、バスBを介して相互に接続されている。 The skin evaluation device 10 may also have an auxiliary storage device 1004, a display device 1005, an operation device 1006, an I/F (Interface) device 1007, and a drive device 1008. Each piece of hardware in the skin evaluation device 10 is connected to each other via a bus B.

CPU1001は、補助記憶装置1004にインストールされている各種プログラムを実行する演算デバイスである。 The CPU 1001 is a computing device that executes various programs installed in the auxiliary storage device 1004.

ROM1002は、不揮発性メモリである。ROM1002は、補助記憶装置1004にインストールされている各種プログラムをCPU1001が実行するために必要な各種プログラム、データ等を格納する主記憶デバイスとして機能する。具体的には、ROM1002はBIOS(Basic Input/Output System)やEFI(Extensible Firmware Interface)等のブートプログラム等を格納する、主記憶デバイスとして機能する。 The ROM 1002 is a non-volatile memory. The ROM 1002 functions as a primary storage device that stores various programs, data, etc. required for the CPU 1001 to execute various programs installed in the auxiliary storage device 1004. Specifically, the ROM 1002 functions as a primary storage device that stores boot programs such as the Basic Input/Output System (BIOS) and the Extensible Firmware Interface (EFI).

RAM1003は、DRAM(Dynamic Random Access Memory)やSRAM(Static Random Access Memory)等の揮発性メモリである。RAM1003は、補助記憶装置1004にインストールされている各種プログラムがCPU1001によって実行される際に展開される作業領域を提供する、主記憶デバイスとして機能する。 RAM 1003 is a volatile memory such as a dynamic random access memory (DRAM) or a static random access memory (SRAM). RAM 1003 functions as a primary storage device that provides a working area in which various programs installed in the auxiliary storage device 1004 are expanded when they are executed by the CPU 1001.

補助記憶装置1004は、各種プログラムや、各種プログラムが実行される際に用いられる情報を格納する補助記憶デバイスである。 The auxiliary storage device 1004 is an auxiliary storage device that stores various programs and information used when the various programs are executed.

表示装置1005は、肌評価装置10の内部状態等を表示する表示デバイスである。 The display device 1005 is a display device that displays the internal state of the skin evaluation device 10, etc.

操作装置1006は、肌評価装置10の管理者が肌評価装置10に対して各種指示を入力する入力デバイスである。 The operation device 1006 is an input device through which the administrator of the skin evaluation device 10 inputs various instructions to the skin evaluation device 10.

I/F装置1007は、ネットワークに接続し、肌評価装置10と通信を行うための通信デバイスである。 The I/F device 1007 is a communication device that connects to a network and communicates with the skin evaluation device 10.

ドライブ装置1008は記憶媒体1009をセットするためのデバイスである。ここでいう記憶媒体1009には、CD-ROM、フレキシブルディスク、光磁気ディスク等のように情報を光学的、電気的あるいは磁気的に記録する媒体が含まれる。また、記憶媒体1009には、EPROM (Erasable Programmable Read Only Memory)、フラッシュメモリ等のように情報を電気的に記録する半導体メモリ等が含まれていてもよい。 The drive unit 1008 is a device for setting the storage medium 1009. The storage medium 1009 here includes media that record information optically, electrically, or magnetically, such as CD-ROMs, flexible disks, and magneto-optical disks. The storage medium 1009 may also include semiconductor memory that records information electrically, such as EPROM (Erasable Programmable Read Only Memory) and flash memory.

なお、補助記憶装置1004にインストールされる各種プログラムは、例えば、配布された記憶媒体1009がドライブ装置1008にセットされ、該記憶媒体1009に記録された各種プログラムがドライブ装置1008により読み出されることでインストールされる。あるいは、補助記憶装置1004にインストールされる各種プログラムは、I/F装置1007を介して、ネットワークよりダウンロードされることでインストールされてもよい。 The various programs to be installed in the auxiliary storage device 1004 are installed, for example, by setting the distributed storage medium 1009 in the drive device 1008 and reading the various programs recorded on the storage medium 1009 by the drive device 1008. Alternatively, the various programs to be installed in the auxiliary storage device 1004 may be installed by downloading them from a network via the I/F device 1007.

以上、本発明の実施例について詳述したが、本発明は上述した特定の実施形態に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形・変更が可能である。 Although the examples of the present invention have been described in detail above, the present invention is not limited to the specific embodiments described above, and various modifications and variations are possible within the scope of the gist of the present invention as described in the claims.

1 肌評価システム
10 肌評価装置
20 撮像機器
30 光源
101 画像取得部
102 算出部
103 評価部
1001 CPU
1002 ROM
1003 RAM
1004 補助記憶装置
1005 表示装置
1006 操作装置
1007 I/F装置
1008 ドライブ装置
1009 記憶媒体
REFERENCE SIGNS LIST 1 Skin evaluation system 10 Skin evaluation device 20 Imaging device 30 Light source 101 Image acquisition unit 102 Calculation unit 103 Evaluation unit 1001 CPU
1002 ROM
1003 RAM
1004 Auxiliary storage device 1005 Display device 1006 Operation device 1007 I/F device 1008 Drive device 1009 Storage medium

Claims (10)

光が照射された肌の形状情報および色情報を取得する取得部と、
前記形状情報および色情報を用いて、前記照射により前記肌の表面で鏡面反射された光の光量の前記肌からの光の全体に対する比率と、前記肌の表面で拡散反射された光の光量の前記肌からの光の全体に対する比率と、前記肌の内部での散乱の後に前記肌の外部に放出された光の光量の前記肌からの光の全体に対する比率と、を算出する算出部と
を備え
前記肌からの光の全体は、前記照射により前記肌の表面で鏡面反射された光の光量と、前記肌の表面で拡散反射された光の光量と、前記肌の内部での散乱の後に前記肌の外部に放出された光の光量と、の総和である、肌評価装置。
an acquisition unit that acquires shape information and color information of skin irradiated with light;
a calculation unit that uses the shape information and color information to calculate a ratio of an amount of light specularly reflected on the surface of the skin by the irradiation to the total amount of light from the skin, a ratio of an amount of light diffusely reflected on the surface of the skin to the total amount of light from the skin, and a ratio of an amount of light emitted to the outside of the skin after scattering inside the skin to the total amount of light from the skin ,
A skin evaluation device, wherein the total light from the skin is the sum of the amount of light specularly reflected from the surface of the skin due to the irradiation, the amount of light diffusely reflected from the surface of the skin, and the amount of light emitted to the outside of the skin after scattering inside the skin .
前記算出部は、前記照射により前記肌の表面で鏡面反射された光の光量と、前記肌の表面で拡散反射された光の光量と、前記肌の内部での散乱の後に前記肌の外部に放出された光の光量と、を算出する、請求項1に記載の肌評価装置。 The skin evaluation device according to claim 1, wherein the calculation unit calculates the amount of light specularly reflected by the surface of the skin due to the irradiation, the amount of light diffusely reflected by the surface of the skin, and the amount of light emitted to the outside of the skin after scattering inside the skin. 前記形状情報は、前記肌の3次元形状を示す、請求項1または2に記載の肌評価装置。 The skin evaluation device according to claim 1 or 2, wherein the shape information indicates a three-dimensional shape of the skin. 前記算出部は、
前記肌の表面で反射された光と、前記肌の内部での散乱の後に前記肌の外部に放出された光と、に分離し、
前記肌の表面で鏡面反射された光と、前記肌の表面で拡散反射された光と、に分離し、
前記肌の表面で反射された光は、前記肌の表面で鏡面反射された光と前記肌の表面で拡散反射された光とからなる、請求項1から3のいずれか一項に記載の肌評価装置。
The calculation unit is
The light is separated into light reflected on the surface of the skin and light emitted to the outside of the skin after scattering inside the skin;
Separating light into specularly reflected light from the surface of the skin and light diffusely reflected from the surface of the skin;
The skin evaluation device according to claim 1 , wherein the light reflected from the skin surface comprises light specularly reflected from the skin surface and light diffusely reflected from the skin surface.
前記算出された比率に基づいて、前記肌を評価する評価部、をさらに備えた請求項1から4のいずれか一項に記載の肌評価装置。 The skin evaluation device according to any one of claims 1 to 4, further comprising an evaluation unit that evaluates the skin based on the calculated ratio. 前記評価部は、前記算出された比率と所定の比率との差に基づいて、前記肌を評価する、請求項5に記載の肌評価装置。 The skin evaluation device according to claim 5, wherein the evaluation unit evaluates the skin based on the difference between the calculated ratio and a predetermined ratio. 前記評価部は、前記比率と肌の状態との対応関係に基づいて、前記肌を評価する、請求項5に記載の肌評価装置。 The skin evaluation device according to claim 5, wherein the evaluation unit evaluates the skin based on the correspondence between the ratio and the skin condition. 光が照射された肌の形状情報および色情報を取得するステップと、
前記形状情報および色情報を用いて、前記照射により前記肌の表面で鏡面反射された光の光量の前記肌からの光の全体に対する比率と、前記肌の表面で拡散反射された光の光量の前記肌からの光の全体に対する比率と、前記肌の内部での散乱の後に前記肌の外部に放出された光の光量の前記肌からの光の全体に対する比率と、を算出するステップと
を含み、
前記肌からの光の全体は、前記照射により前記肌の表面で鏡面反射された光の光量と、前記肌の表面で拡散反射された光の光量と、前記肌の内部での散乱の後に前記肌の外部に放出された光の光量と、の総和である、方法。
acquiring shape information and color information of the skin irradiated with light;
and using the shape information and color information, calculating a ratio of an amount of light specularly reflected on the surface of the skin by the irradiation to the total amount of light from the skin, a ratio of an amount of light diffusely reflected on the surface of the skin to the total amount of light from the skin, and a ratio of an amount of light emitted to the outside of the skin after scattering inside the skin to the total amount of light from the skin ,
A method in which the total light from the skin is the sum of the amount of light specularly reflected from the surface of the skin due to the irradiation, the amount of light diffusely reflected from the surface of the skin, and the amount of light emitted to the outside of the skin after scattering inside the skin .
コンピュータを
光が照射された肌の形状情報および色情報を取得する取得部、
前記形状情報および色情報を用いて、前記照射により前記肌の表面で鏡面反射された光の光量の前記肌からの光の全体に対する比率と、前記肌の表面で拡散反射された光の光量の前記肌からの光の全体に対する比率と、前記肌の内部での散乱の後に前記肌の外部に放出された光の光量の前記肌からの光の全体に対する比率と、を算出する算出部
として機能させ
前記肌からの光の全体は、前記照射により前記肌の表面で鏡面反射された光の光量と、前記肌の表面で拡散反射された光の光量と、前記肌の内部での散乱の後に前記肌の外部に放出された光の光量と、の総和である、プログラム。
An acquisition unit that acquires shape information and color information of the skin irradiated with light;
a calculation unit that calculates, using the shape information and color information, a ratio of the amount of light specularly reflected on the surface of the skin by the irradiation to the total amount of light from the skin, a ratio of the amount of light diffusely reflected on the surface of the skin to the total amount of light from the skin, and a ratio of the amount of light emitted to the outside of the skin after scattering inside the skin to the total amount of light from the skin ,
The total light from the skin is the sum of the amount of light specularly reflected from the surface of the skin due to the irradiation, the amount of light diffusely reflected from the surface of the skin, and the amount of light emitted to the outside of the skin after scattering inside the skin .
肌評価装置と、撮像機器と、光源と、を含む肌評価システムであって、
前記肌評価装置は、
前記撮像機器が撮影した画像から、前記光源からの光が照射された肌の形状情報および色情報を取得する取得部と、
前記形状情報および色情報を用いて、前記光源からの照射により前記肌の表面で鏡面反射された光の光量の前記肌からの光の全体に対する比率と、前記光源からの照射により前記肌の表面で拡散反射された光の光量の前記肌からの光の全体に対する比率と、前記光源からの照射により前記肌の内部での散乱の後に前記肌の外部に放出された光の光量の前記肌からの光の全体に対する比率と、を算出する算出部と
を備え
前記肌からの光の全体は、前記照射により前記肌の表面で鏡面反射された光の光量と、前記肌の表面で拡散反射された光の光量と、前記肌の内部での散乱の後に前記肌の外部に放出された光の光量と、の総和である、肌評価システム。
A skin evaluation system including a skin evaluation device, an imaging device, and a light source,
The skin evaluation device includes:
an acquisition unit that acquires shape information and color information of skin irradiated with light from the light source from the image captured by the imaging device;
a calculation unit that calculates, using the shape information and color information, a ratio of an amount of light specularly reflected on the surface of the skin by irradiation from the light source to the total amount of light from the skin, a ratio of an amount of light diffusely reflected on the surface of the skin by irradiation from the light source to the total amount of light from the skin, and a ratio of an amount of light emitted to the outside of the skin after scattering inside the skin by irradiation from the light source to the total amount of light from the skin ,
A skin evaluation system in which the total light from the skin is the sum of the amount of light specularly reflected from the surface of the skin due to the irradiation, the amount of light diffusely reflected from the surface of the skin, and the amount of light emitted to the outside of the skin after scattering inside the skin .
JP2020209359A 2020-12-17 2020-12-17 Skin evaluation device, method, program, and system Active JP7618905B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2020209359A JP7618905B2 (en) 2020-12-17 2020-12-17 Skin evaluation device, method, program, and system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020209359A JP7618905B2 (en) 2020-12-17 2020-12-17 Skin evaluation device, method, program, and system

Publications (2)

Publication Number Publication Date
JP2022096316A JP2022096316A (en) 2022-06-29
JP7618905B2 true JP7618905B2 (en) 2025-01-22

Family

ID=82163947

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020209359A Active JP7618905B2 (en) 2020-12-17 2020-12-17 Skin evaluation device, method, program, and system

Country Status (1)

Country Link
JP (1) JP7618905B2 (en)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005534366A (en) 2002-07-30 2005-11-17 アストロン クリニカ リミテッド Organization structure quantification method and apparatus
JP2015065982A (en) 2013-09-26 2015-04-13 日本電気株式会社 Biomedical measurement device, biomedical measurement method, and biomedical measurement program
JP2015223404A (en) 2014-05-29 2015-12-14 京セラ株式会社 Sensor and skin information detection method
JP2016189877A (en) 2015-03-31 2016-11-10 富士フイルム株式会社 Skin evaluation apparatus, method and program
JP2018073122A (en) 2016-10-28 2018-05-10 キヤノン株式会社 Image processing device and image processing method
JP2020073933A (en) 2014-11-10 2020-05-14 株式会社 資生堂 Skin gloss evaluation method, skin gloss improving agent search method, and skin gloss improving agent

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005534366A (en) 2002-07-30 2005-11-17 アストロン クリニカ リミテッド Organization structure quantification method and apparatus
JP2015065982A (en) 2013-09-26 2015-04-13 日本電気株式会社 Biomedical measurement device, biomedical measurement method, and biomedical measurement program
JP2015223404A (en) 2014-05-29 2015-12-14 京セラ株式会社 Sensor and skin information detection method
JP2020073933A (en) 2014-11-10 2020-05-14 株式会社 資生堂 Skin gloss evaluation method, skin gloss improving agent search method, and skin gloss improving agent
JP2016189877A (en) 2015-03-31 2016-11-10 富士フイルム株式会社 Skin evaluation apparatus, method and program
JP2018073122A (en) 2016-10-28 2018-05-10 キヤノン株式会社 Image processing device and image processing method

Also Published As

Publication number Publication date
JP2022096316A (en) 2022-06-29

Similar Documents

Publication Publication Date Title
Nielsen et al. On optimal, minimal BRDF sampling for reflectance acquisition
Sen et al. On filtering the noise from the random parameters in Monte Carlo rendering.
CN107358648B (en) Real-time fully automatic high-quality 3D face reconstruction method based on a single face image
EP3241151B1 (en) An image face processing method and apparatus
US10403036B2 (en) Rendering glasses shadows
WO2014125831A1 (en) Electronic mirror device
JP7758104B2 (en) Information processing device, information processing method, and information processing program
CN112840378A (en) Interacting Global Illumination Using Shared Lighting Contributions in Path Tracing
JP7608692B2 (en) Sagging evaluation method, device, program, and system
CN109272579B (en) Three-dimensional model-based makeup method and device, electronic equipment and storage medium
CN107507269A (en) Personalized three-dimensional model generation method, device and terminal equipment
CN107734267A (en) Image processing method and device
CN112639802B (en) Method, system and storage medium for generating pseudo-structured light to illuminate the face
Mecca et al. Realistic photometric stereo using partial differential irradiance equation ratios
WO2020183961A1 (en) Image processing device, image processign method, and program
Forsyth Variable-source shading analysis
CN107590828B (en) Blurring processing method and device for shot image
CN110012287B (en) The dirty self checking method of digital camera image sensor based on retina perception
JP6527765B2 (en) Wrinkle state analyzer and method
JP2024005485A5 (en) HEAD-MOUNTED DISPLAY DEVICE, IMAGE PROCESSING DEVICE, CONTROL METHOD FOR HEAD-MOUNTED DISPLAY DEVICE, AND PROGRAM
JP7618905B2 (en) Skin evaluation device, method, program, and system
CN102708586A (en) Rendering-based landmark localization from 3D range images
WO2020053984A1 (en) Biometric authentication device, counterfeit determination program and counterfeit determination method
WO2023058464A1 (en) Skin evaluation device, method, and program
WO2023219131A1 (en) Evaluation device, evaluation system, evaluation method, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20231017

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20240606

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240716

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240910

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20241210

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20241212

R150 Certificate of patent or registration of utility model

Ref document number: 7618905

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150