JP7626786B2 - 美容的皮膚特性を視覚化するための装置及び方法 - Google Patents
美容的皮膚特性を視覚化するための装置及び方法 Download PDFInfo
- Publication number
- JP7626786B2 JP7626786B2 JP2023003110A JP2023003110A JP7626786B2 JP 7626786 B2 JP7626786 B2 JP 7626786B2 JP 2023003110 A JP2023003110 A JP 2023003110A JP 2023003110 A JP2023003110 A JP 2023003110A JP 7626786 B2 JP7626786 B2 JP 7626786B2
- Authority
- JP
- Japan
- Prior art keywords
- skin
- cosmetic skin
- tiles
- cosmetic
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
- G16H20/70—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to mental therapies, e.g. psychological therapy or autogenous training
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
- A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/74—Details of notification to user or communication with user or patient; User input means
- A61B5/742—Details of notification to user or communication with user or patient; User input means using visual displays
- A61B5/7435—Displaying user selection data, e.g. icons in a graphical user interface
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/30—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for calculating health indices; for individual health risk assessment
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20081—Training; Learning
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20092—Interactive image processing based on input by user
- G06T2207/20104—Interactive definition of region of interest [ROI]
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30088—Skin; Dermal
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
- G06T2207/30201—Face
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Medical Informatics (AREA)
- Public Health (AREA)
- General Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- Primary Health Care (AREA)
- Epidemiology (AREA)
- Pathology (AREA)
- Life Sciences & Earth Sciences (AREA)
- Radiology & Medical Imaging (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- Veterinary Medicine (AREA)
- Heart & Thoracic Surgery (AREA)
- Biophysics (AREA)
- Quality & Reliability (AREA)
- Human Computer Interaction (AREA)
- Dermatology (AREA)
- Hospice & Palliative Care (AREA)
- Developmental Disabilities (AREA)
- Child & Adolescent Psychology (AREA)
- Psychiatry (AREA)
- Psychology (AREA)
- Social Psychology (AREA)
- Image Processing (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
- User Interface Of Digital Computer (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Image Analysis (AREA)
Description
a)被験者の顔部の少なくとも一部の第1のデジタル画像を取得する工程であって、第1のデジタル画像は、顔部の入力画像の少なくとも1つの領域から選択される工程と、
b)取得された第1のデジタル画像にわたって複数のタイルを定義する工程と、
c)少なくとも1つの美容的皮膚特性について、定義された複数のタイルのそれぞれについて第1のデジタル画像を解析する工程と、
d)タイルの分析された少なくとも1つの美容的皮膚特性に基づいて、定義された複数のタイルのそれぞれのタイルに対して一意的に単一度の印を割り当てる工程と、
e)それぞれが一意的に割り当てられた単一度の印を有する複数のタイルの少なくとも幾つかを表示して、少なくとも1つの美容的皮膚特性を視覚化させる工程と、を含み、
ここで、表示された複数のタイルの少なくとも幾つかは、タイルの分析された少なくとも1つの美容的皮膚特性に基づいて、複数のタイルの非表示のタイルの美容的皮膚特性状態と比較してより良好である美容的皮膚特性を表示する。
・角質層が乾燥している場合(冬/空気状態)、光が表面からより多く反射(表面反射)して、皮膚上の線を引き起こす皮膚の微細組織を促進させ得る。
・真皮が(UVで)損傷した場合、真皮では光の散乱(真皮散乱としても知られる)がより少なく、光は、皮膚を透過し得る(表面下反射がより少ない)。真皮散乱が少ない場合、結果として皮膚は、より暗く見える。
・皮膚が慢性的なUVにさらされると、皮膚は、より多くのメラニンを生成する。メラニンは、光を吸収して表面下反射を減少させ、したがって皮膚はより暗く見える。
a)被験者の顔部の少なくとも一部の第1のデジタル画像を取得する工程であって、第1のデジタル画像は、顔部の入力画像の少なくとも1つの領域から選択される工程と、
b)取得された第1のデジタル画像にわたって複数のタイルを定義する工程と、
c)少なくとも1つの美容的皮膚特性について、定義された複数のタイルのそれぞれについて第1のデジタル画像を解析する工程と、
d)タイルの分析された少なくとも1つの美容的皮膚特性に基づいて、定義された複数のタイルのそれぞれのタイルに対して一意的に単一度の印を割り当てる工程と、
e)それぞれが一意的に割り当てられた単一度の印を有する複数のタイルの少なくとも幾つかを表示して、少なくとも1つの美容的皮膚特性を視覚化させる工程と、を含み、
ここで、表示された複数のタイルの少なくとも幾つかは、タイルの分析された少なくとも1つの美容的皮膚特性に基づいて、複数のタイルの非表示のタイルの美容的皮膚特性状態と比較してより良好である美容的皮膚特性を表示する。
図1は、本発明による美容的皮膚特性を可視化するためのシステム10を示す概略図である。システム10は、ワイドエリアネットワーク(携帯電話網、公衆交換電話網、衛星ネットワーク、インターネットなど)、ローカルエリアネットワーク(ワイヤレスフィディリティ、Wi-Max、ZigBee(商標)、Bluetooth(商標)など)、及び/又は他の形態のネットワーク機能として具体化され得るネットワーク100を含んでもよい。ネットワーク100には、携帯電子機器12、及びディスプレイ上に表示を生成するための装置14、美容的皮膚特性を視覚化するためのグラフィカル・ユーザー・インターフェースが接続されている。装置104は遠隔に配置され、ネットワーク100を介して携帯電子機器に接続されている。
図4A及び図5を参照すると、プロセッサ14bが開始された場合に、プロセッサ14bは、例えば工程202で画像取得論理144aを介して、取得対象の顔部の少なくとも一部の第1のデジタル画像51を生成する。プロセッサ14bは、取得された画像データ20にわたって複数のタイル54を画定する(工程204)。複数のタイル54は、図4Bに示すようにタイルマップ55を画定するように隣接していてもよい。工程206では、プロセッサは、少なくとも1つの美容的皮膚特性について、定義された複数のタイル54のそれぞれについて、画像データのそれぞれについて画像データを解析する。工程208では、分析された少なくとも1つの美容的皮膚特性に基づいて、定義された複数のタイルのそれぞれのタイル54に対して一意的に単一度の印40を割り当てる。それぞれが一意的に割り当てられた単一度の印を有する複数のタイルの少なくとも一部が、図4Cに示されるような少なくとも1つの美容的皮膚特性を可視化するように、工程210で表示される。ユーザ(消費者)によって提供される入力デジタル画像の画像データを解析することにより、単一のスクリーンショットにおいて、定義された複数のタイルのそれぞれについて解析された画像データを整理して表示することで、本発明による方法200は、美容的皮膚特性を視覚化するために必要とされる異なる照明システムの下で、別個のウィンドウ内に情報を表示するユーザーインターフェースをナビゲートするという厄介なタスクを回避しながら、ユーザ/消費者が美容的皮膚特性を容易に特定することを可能にする。例えば、UV光などの特定の条件は、肉眼で知覚できない紫外線班を可視化するために必要とされる場合がある。
本発明による方法200によるデジタル画像を取得する工程202について、図6A、図6B及び図6Cを参照して説明するが、これは、第1のデジタル画像がどのように取得されるかを示す一連のプロセスフロー図であり、図7は、工程202に対応するデジタル画像を取得するプロセス300のフローチャートである。
図8は、第1のデジタル画像データ51上の複数のタイル54を示す写真である。図9は、第1のデジタル画像データ51上の複数のタイル54を定義するプロセス400を示すフローチャートである。図8を参照すると、第1のデジタル画像データ51は、図6Cを参照して上述したように、境界線52によって画定された顔部1の少なくとも一部を含む。プロセス400は、取得された第1のデジタル画像を取り囲む境界線52を包囲する外周53を画定することを含む(工程402)。取得された第1のデジタル画像51は、画素の総数によって形成され、例えば、取得された第1のデジタル画像51は、入力画像50aのトリミング後の画像サイズに応じて、工程304又は工程306で決定される画素数を有してもよい。したがって、取得された第1のデジタル画像51に基づく全体画像サイズは、工程404で定義されてもよい。例えば、タイルサイズが40×40画素~70×70画素に設定される場合、それに応じて、工程406において取得された第1のデジタル画像51にわたって複数のタイル54を形成するタイル54の数は、特定のタイルサイズで全体画像サイズを分割することによって取得される。
図10は、本発明による、定義された複数のタイルのそれぞれについて画像データを解析するプロセス500を示すフローチャートである。取得された第1のデジタル画像から少なくとも1つの色チャネルを抽出して、解析のために抽出された色チャネル画像を提供することにより、工程502でプロセス500を開始して、美容的皮膚特性を決定するためのエントロピー値を取得してもよい。以下の説明では、少なくとも1つの色チャネル画像は、RGB色空間からのL色チャネル画像、a-チャネル画像、b-チャネル画像、及びc-チャネル画像、及びこれらの組み合わせからなる群から選択されるL*a*b*色システムの画像であり、エントロピー値が、L-エントロピー値、a-エントロピー値、b-エントロピー値、c-エントロピー値、及びこれらの組み合わせからなる群から選択され、関数は、以下の式を有する。
皮膚特性指数=A+B×(L-エントロピー値)+C×(a-エントロピー値)+D×(b-エントロピー値)+E×(c-エントロピー)であり、
式中、A、B、C、D、及びEは定数であり、B、C、D、及びEのうちの少なくとも1つは、0ではない。
皮膚特性指数=A+B×(L-エントロピー値)+C×(a-エントロピー値)+D×(b-エントロピー値)+E×(c-エントロピー)であり、
式中、A、B、C、D、及びEは、定数であり、B、C、D、及びEのうちの少なくとも1つは、0ではない。
本発明による方法は、美容的皮膚状態を可視化するために上述した生成された皮膚特性指標に対応する画像記述を生成する工程を更に含んでもよい。画像記述は、(図16D、図25に示すような)ヒートマップと、美容的皮膚特性、図16Dの第4の領域194に示す皮膚年齢、図25の特徴934に示す皮膚純度スコアなどの美容的皮膚特性条件の、凝集スコア表示と、を含んでもよい。凝集スコアは、上述した生成された皮膚特性指数に基づいて計算されてもよい。
本発明はまた、少なくとも1つの美容的皮膚特性を処置するための製品推奨を提供するためのヒトマシンユーザーインターフェース(以下、「ユーザーインターフェース」)にも関する。ユーザーインターフェースは、入力装置及び画像取得機器を備えたタッチスクリーンディスプレイ/ディスプレイを含む携帯電子装置上のグラフィカル・ユーザー・インターフェースであってもよい。ユーザーインターフェースは、画像取得機器から取得された被験者の顔部の少なくとも一部の第1のデジタル画像を表示するタッチスクリーンディスプレイの第1の領域と、第1のデジタル画像上に挿入された第2のデジタル画像と、を含むことができ、第2のデジタル画像は、被験者の顔部の少なくとも一部を有し、表示された複数のタイルは、それぞれが一意的に割り当てられた単一度の印を有する。ユーザーインターフェースは、第1の領域とは異なるタッチスクリーンディスプレイの第2の領域を更に含んでもよく、第2の領域は、ユーザ入力を受信するための選択可能なアイコンを表示し、表示された美容的皮膚特性を処置するための少なくとも1つの製品推奨項目の画像が、ユーザが選択可能なアイコンをアクティブ化した場合にタッチスクリーンディスプレイ上に表示される。
A.被験者の少なくとも1つの視覚的に知覚不可能な美容的皮膚特性を可視化する方法であって、
a)被験者の顔部の少なくとも一部の第1のデジタル画像データを取得する工程と、 b)取得された画像データにわたって複数のタイルを定義する工程と、
c)少なくとも1つの視覚的に知覚不可能な美容的皮膚特性について、定義された複数のタイルのそれぞれについての画像データを解析する工程と、
d)タイルの分析された少なくとも1つの視覚的に知覚不可能な美容的皮膚特性に基づいて、定義された複数のタイルのそれぞれのタイルに対して一意的に単一度の印を割り当てる工程と、
e)それぞれが一意的に割り当てられた単一度の印を有する複数のタイルを表示して、少なくとも1つの視覚的に知覚不可能な美容的皮膚特性を視覚化させる工程と、を含む、方法。
i)取得されたデジタル画像から少なくとも1つの色チャネルを抽出して、抽出された色チャネル画像を提供することと、
ii)抽出された色チャネル画像をフィルタリングすることと、
iii)エントロピー統計を使用してフィルタリングされた色チャネル画像を解析して、少なくとも1つの視覚的に知覚不可能な美容的皮膚特性を決定することと、を含む、段落A~Jのいずれか一項に記載の方法。
赤の色チャネルはL*a*b*色空間内にあり、ここで、a-エントロピーは、フィルタリングされた赤の色チャネルのエントロピー値であり、
黄の色チャネルはL*a*b*カラーシステム内にあり、ここで、b-エントロピーは、フィルタリングされた黄の色チャネルのエントロピー値であり、
青の色チャネルはテクスチャチャネルに対応し、ここで、c-エントロピーは、青の色チャネルのエントロピー値である。
各タイルに一意的に単一度の印を割り当てることが、割り当てられた指標に基づいており、
それぞれ一意的に割り当てられた指標を有する複数のタイルを表示する、段落K、L、又はMのいずれか一項に記載の方法。
好ましくは、視覚的に知覚不可能な特性の美容的皮膚特性が、皮膚炎症である、段落K、L、M、N、O又はPのいずれか一項に記載の方法。
好ましくは、視覚的に知覚不可能な美容的皮膚特性が、皮膚色素沈着/くすみである、段落K、L、M、N、O、P又はQのいずれか一項に記載の方法。
好ましくは、視覚的に知覚不可能な美容的皮膚特性が、皮膚トポグラフィ、より好ましくは毛穴、小じわ、微細シワ、たるみ、皮膚弾性である、段落K、L、M、N、O、P、Q又はRのいずれか1つに記載の方法。
画像取得機器から取得された被験者の顔部の少なくとも一部の第1のデジタル画像データと、第1のデジタル画像データ上に挿入された第2のデジタル画像データと、を表示するタッチスクリーンディスプレイの第1の領域であって、第2のデジタル画像データは、被験者の顔部の少なくとも一部を有し、表示された複数のタイルは、それぞれが一意的に割り当てられた単一度の印を有する、第1の領域と、
第1の領域とは異なるタッチスクリーンディスプレイの第2の領域であって、ユーザ入力を受信するための選択可能なアイコンを表示する、第2の領域と、を含み、表示された視覚的に知覚不可能な美容的皮膚特性を処置するための少なくとも1つの製品推奨項目の画像が、ユーザが選択可能なアイコンをアクティブ化した場合にタッチスクリーンディスプレイ上に表示される、グラフィカル・ユーザー・インターフェース。
画像取得機器から取得された被験者の顔部の少なくとも一部の第1のデジタル画像データと、第1のデジタル画像データ上に挿入された第2のデジタル画像データと、を表示するディスプレイの第1の領域であって、第2のデジタル画像データは、被験者の顔部の少なくとも一部を有し、当該表示された複数のタイルは、それぞれが一意的に割り当てられた単一度の印を有する、第1の領域と、
第1の領域とは異なるディスプレイの第2の領域であって、ユーザ入力を受信するための音声入力構成要素を表示し、表示された視覚的に知覚不可能な美容的皮膚特性を処置するための少なくとも1つの製品推奨項目の画像が、ユーザが音声入力構成要素をアクティブ化した場合にタッチスクリーンディスプレイ上に表示される、第2の領域と、
第1の領域とは異なるタッチスクリーンディスプレイの第3の領域であって、表示された視覚的に知覚不可能な美容的皮膚特性を処理するための少なくとも1つの製品推奨項目の画像を表示する、第3の領域と、を含む、ヒューマンマシンインターフェース。
記憶媒体に連結されたプロセッサであって、コンピュータ実行可能命令に基づいて、
a)被験者の顔部の少なくとも一部の第1のデジタル画像データを取得し、
b)取得された画像データにわたって複数のタイルを定義し、
c)少なくとも1つの視覚的に知覚不可能な美容的皮膚特性について、定義された複数のタイルのそれぞれについての画像データを解析し、
d)タイルの分析された少なくとも1つの視覚的に知覚不可能な美容的皮膚特性に基づいて、定義された複数のタイルのそれぞれのタイルに対して一意的に単一度の印を割り当て、
e)それぞれが一意的に割り当てられた単一度の印を有する複数のタイルを表示して、少なくとも1つの視覚的に知覚不可能な美容的皮膚特性を視覚化させるように構成されたプロセッサと、を備える、装置。
a)被験者の顔部の少なくとも一部の第1のデジタル画像データを取得する工程であって、第1のデジタル画像データは、少なくとも顔部の入力画像領域から選択される工程と、
b)取得された第1のデジタル画像データにわたって複数のタイルを定義する工程と、
c)少なくとも1つの美容的皮膚特性について、定義された複数のタイルのそれぞれについての画像データを解析する工程と、
d)タイルの分析された少なくとも1つの美容的皮膚特性に基づいて、定義された複数のタイルのそれぞれのタイルに対して一意的に単一度の印を割り当てる工程と、
e)それぞれが一意的に割り当てられた単一度の印を有する複数のタイルの少なくとも幾つかを表示して、少なくとも1つの美容的皮膚特性を視覚化させる工程と、を含み、 f)表示された複数のタイルの少なくとも幾つかは、タイルの分析された少なくとも1つの美容的皮膚特性に基づいて、複数のタイルの非表示のタイルの美容的皮膚特性状態と比較してより良好である美容的皮膚特性を表示する、方法。
a)被験者の顔部の少なくとも一部の第1のデジタル画像を表示する工程と、
b)被験者の顔部の少なくとも一部の第2のデジタル画像と、それぞれが一意的に割り当てられた単一度の印を有する複数のタイルとを介在させる工程と、
c)第2のデジタル画像データ上に、それぞれが一意的に割り当てられた単一度の印を有する複数のタイルに基づいて、被験者の顔部の少なくとも一部の少なくとも1つの対象領域(ROI)を表示することであって、ROIは、眼の周囲の皮膚領域、頬の周囲の皮膚領域、口の周囲の皮膚領域、及びこれらの組み合わせからなる群から選択される、第2のデジタル画像データ上に、それぞれが一意的に割り当てられた単一度の印を有する複数のタイルに基づいて、被験者の顔部の少なくとも一部の少なくとも1つの対象領域(ROI)を表示する工程を含む、方法。
記憶媒体に連結されたプロセッサであって、コンピュータ実行可能命令に基づいて、
a)被験者の顔部の少なくとも一部の第1のデジタル画像を表示し、
b)被験者の顔部の少なくとも一部の第2のデジタル画像と、それぞれが一意的に割り当てられた単一度の印を有する複数のタイルとを介在させ、
c)第2のデジタル画像データ上に、それぞれが一意的に割り当てられた単一度の印を有する複数のタイルに基づいて、被験者の顔部の少なくとも一部の少なくとも1つの対象領域(ROI)を表示することであって、ROIは、眼の周囲の皮膚領域、頬の周囲の皮膚領域、口の周囲の皮膚領域、及びこれらの組み合わせからなる群から選択される、表示するように構成された、プロセッサと、を備える、装置。
Claims (2)
- 少なくとも1つの美容的皮膚特性を処置するための製品推奨を提供するためのグラフィカル・ユーザー・インターフェースであって、前記グラフィカル・ユーザー・インターフェースは、入力装置及び画像取得機器を有するタッチスクリーンディスプレイ/ディスプレイを含む携帯電子装置上にあり、前記グラフィカル・ユーザー・インターフェースは、
前記画像取得機器から取得された被験者の顔部の少なくとも一部の第1のデジタル画像と、前記第1のデジタル画像上に挿入された第2のデジタル画像と、を表示するタッチスクリーンディスプレイの第1の領域であって、前記第2のデジタル画像は、前記被験者の顔部の前記少なくとも一部と、複数のタイルの少なくとも幾つかを有し、前記複数のタイルのそれぞれが、前記複数のタイルについて分析された少なくとも1つの美容的皮膚特性に基づいて一意的に割り当てられた単一度の印を有する、第1の領域と、
前記第1の領域とは異なる前記タッチスクリーンディスプレイの第2の領域であって、ユーザ入力を受信するための選択可能なアイコンを表示する、第2の領域と、を含み、
前記複数のタイルの少なくとも幾つかは、前記タイルの前記分析された少なくとも1つの美容的皮膚属性に基づいて、前記複数のタイルの前記単一度の印として非表示が割り当てられたタイルの美容的皮膚特性状態と比較してより良好である美容的皮膚特性を表示し、
前記表示された美容的皮膚特性を処置するための少なくとも1つの製品推奨項目の画像が、ユーザが前記選択可能なアイコンをアクティブ化した場合に前記タッチスクリーンディスプレイ上に表示される、グラフィカル・ユーザー・インターフェース。 - 前記少なくとも1つの美容的皮膚特性が、視覚的に知覚不可能な美容的皮膚特性であり、前記視覚的に知覚不可能な美容的皮膚特性は、肉眼で検出可能ではない美容的皮膚特性である、又は消費者によって視覚的に検出可能な美容的皮膚特性であるが、前記消費者が前記美容的皮膚特性を理解しない、請求項1に記載のグラフィカル・ユーザー・インターフェース。
Applications Claiming Priority (4)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US201962837208P | 2019-04-23 | 2019-04-23 | |
| US62/837,208 | 2019-04-23 | ||
| PCT/US2020/029422 WO2020219612A1 (en) | 2019-04-23 | 2020-04-23 | Apparatus and method for visualizing cosmetic skin attributes |
| JP2021561969A JP7235895B2 (ja) | 2019-04-23 | 2020-04-23 | 美容的皮膚特性を視覚化するための装置及び方法 |
Related Parent Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2021561969A Division JP7235895B2 (ja) | 2019-04-23 | 2020-04-23 | 美容的皮膚特性を視覚化するための装置及び方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2023040229A JP2023040229A (ja) | 2023-03-22 |
| JP7626786B2 true JP7626786B2 (ja) | 2025-02-04 |
Family
ID=70614682
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2021561969A Active JP7235895B2 (ja) | 2019-04-23 | 2020-04-23 | 美容的皮膚特性を視覚化するための装置及び方法 |
| JP2023003110A Active JP7626786B2 (ja) | 2019-04-23 | 2023-01-12 | 美容的皮膚特性を視覚化するための装置及び方法 |
Family Applications Before (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2021561969A Active JP7235895B2 (ja) | 2019-04-23 | 2020-04-23 | 美容的皮膚特性を視覚化するための装置及び方法 |
Country Status (6)
| Country | Link |
|---|---|
| US (1) | US11416988B2 (ja) |
| EP (1) | EP3959724A1 (ja) |
| JP (2) | JP7235895B2 (ja) |
| KR (1) | KR102839023B1 (ja) |
| CN (1) | CN113767439A (ja) |
| WO (1) | WO2020219612A1 (ja) |
Families Citing this family (23)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| USD923043S1 (en) * | 2019-04-23 | 2021-06-22 | The Procter & Gamble Company | Display panel with graphical user interface for skin age determination |
| US11348366B2 (en) * | 2019-04-23 | 2022-05-31 | The Procter And Gamble Company | Apparatus and method for determining cosmetic skin attributes |
| USD944402S1 (en) * | 2019-04-23 | 2022-02-22 | The Procter & Gamble Company | Skin age identifier |
| CN112446832A (zh) * | 2019-08-31 | 2021-03-05 | 华为技术有限公司 | 一种图像处理方法及电子设备 |
| USD968441S1 (en) * | 2020-04-30 | 2022-11-01 | The Procter & Gamble Company | Display screen with graphical user interface |
| USD962256S1 (en) | 2020-05-14 | 2022-08-30 | The Procter & Gamble Company | Display screen with graphical user interface |
| KR102396376B1 (ko) * | 2020-07-16 | 2022-05-10 | (주) 코코리색채연구소 | 멜라닌 지수 및 헤모글로빈 지수를 기초로 한 화장품 추천 방법 및 그 디바이스 |
| US20220249397A1 (en) * | 2021-02-07 | 2022-08-11 | Function Better Inc. | Automated Dosing Protocol for Use of Cannabinoids or Other Psychoactive Substances |
| CN113191985B (zh) * | 2021-05-24 | 2024-05-28 | 北京美医医学技术研究院有限公司 | 一种基于红外激光的智能祛斑系统 |
| CN113450340B (zh) * | 2021-07-13 | 2024-03-19 | 北京美医医学技术研究院有限公司 | 一种皮肤纹理检测系统 |
| US12243223B2 (en) | 2021-12-16 | 2025-03-04 | The Gillette Company Llc | Digital imaging systems and methods of analyzing pixel data of an image of a skin area of a user for determining skin oiliness |
| US12299874B2 (en) | 2021-12-16 | 2025-05-13 | The Gillette Company Llc | Digital imaging systems and methods of analyzing pixel data of an image of a skin area of a user for determining skin dryness |
| US12230062B2 (en) | 2021-12-16 | 2025-02-18 | The Gillette Company Llc | Digital imaging systems and methods of analyzing pixel data of an image of a skin area of a user for determining dark eye circles |
| US12249064B2 (en) | 2021-12-16 | 2025-03-11 | The Gillette Company Llc | Digital imaging systems and methods of analyzing pixel data of an image of a skin area of a user for determining skin puffiness |
| US12322201B2 (en) * | 2021-12-16 | 2025-06-03 | The Gillette Company Llc | Digital imaging systems and methods of analyzing pixel data of an image of a skin area of a user for determining skin hyperpigmentation |
| US12524873B2 (en) | 2021-12-16 | 2026-01-13 | The Gillette Company Llc | Digital imaging systems and methods of analyzing pixel data of an image of a skin area of a user for determining body contour |
| CN114916918A (zh) * | 2022-06-07 | 2022-08-19 | 北京创盈光电医疗科技有限公司 | 一种基于皮肤毛细血管微循环水平的估测方法及装置 |
| CN115205261A (zh) * | 2022-07-19 | 2022-10-18 | 平安科技(深圳)有限公司 | 皮肤图片分类模型的训练方法、装置、设备及介质 |
| US12462395B2 (en) * | 2022-12-13 | 2025-11-04 | International Business Machines Corporation | Simulating progression of skin conditions based on machine learning |
| FR3144914A1 (fr) * | 2023-01-13 | 2024-07-19 | Abbi | procédé de formulation cosmétique personnalisée |
| WO2024249716A1 (en) * | 2023-05-31 | 2024-12-05 | The Procter & Gamble Company | Method and system for visualizing color gradient of human face or cosmetic skin attributes based on such color gradient |
| GB2632164A (en) * | 2023-07-27 | 2025-01-29 | Boots Co Plc | Radiance measurement method and system |
| WO2025233337A1 (en) * | 2024-05-06 | 2025-11-13 | Trinamix Gmbh | Monitoring of skin characteristics based on surface roughness measure(s) |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001000419A (ja) | 1999-06-14 | 2001-01-09 | Procter & Gamble Co:The | 肌のイメージング及び分析システムとその方法 |
| JP2003187251A (ja) | 2001-10-01 | 2003-07-04 | L'oreal Sa | 美容分析における特徴抽出 |
| JP2006142005A (ja) | 2004-10-22 | 2006-06-08 | Shiseido Co Ltd | 肌状態診断システムおよび美容のためのカウンセリングシステム |
| JP2007265396A (ja) | 2006-03-29 | 2007-10-11 | Mitsubishi Electric Research Laboratories Inc | 顔モデルを生成する方法およびシステム |
| WO2014208067A1 (ja) | 2013-06-28 | 2014-12-31 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 肌の官能評価装置および肌の評価方法 |
| WO2017181293A1 (en) | 2016-04-22 | 2017-10-26 | Fitskin Inc. | Systems and method for skin analysis using electronic devices |
| JP2018092351A (ja) | 2016-12-02 | 2018-06-14 | カシオ計算機株式会社 | 画像処理装置、画像処理方法及びプログラム |
Family Cites Families (25)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| AU5460299A (en) | 1998-07-24 | 2000-02-14 | Jarg Corporation | Distributed computer database system and method for performing object search |
| AU5233099A (en) | 1998-07-24 | 2000-02-14 | Jarg Corporation | Search system and method based on multiple ontologies |
| KR100408829B1 (ko) | 1998-12-29 | 2004-01-24 | 주식회사 대우일렉트로닉스 | 모델 기반 부호화 시스템에서의 얼굴 영상 세그멘테이션 방법 |
| US7039222B2 (en) | 2003-02-28 | 2006-05-02 | Eastman Kodak Company | Method and system for enhancing portrait images that are processed in a batch mode |
| EP1938274A2 (en) | 2005-09-12 | 2008-07-02 | D.V.P. Technologies Ltd. | Medical image processing |
| US7558416B2 (en) | 2006-10-02 | 2009-07-07 | Johnson & Johnson Consumer Companies, Inc. | Apparatus and method for measuring photodamage to skin |
| EP2042095A1 (en) | 2007-09-26 | 2009-04-01 | Astron Clinica Limited | Methods and apparatus for quantifying photo-damage |
| JP2009082338A (ja) | 2007-09-28 | 2009-04-23 | Masahiro Nakagawa | エントロピーを用いた肌の鑑別方法 |
| JP5290585B2 (ja) | 2008-01-17 | 2013-09-18 | 株式会社 資生堂 | 肌色評価方法、肌色評価装置、肌色評価プログラム、及び該プログラムが記録された記録媒体 |
| US8837832B2 (en) | 2010-05-18 | 2014-09-16 | Skin Of Mine Dot Com, Llc | Systems and methods for monitoring the condition of the skin |
| JP4831259B1 (ja) | 2011-03-10 | 2011-12-07 | オムロン株式会社 | 画像処理装置、画像処理方法、および制御プログラム |
| JP2013212177A (ja) * | 2012-03-30 | 2013-10-17 | Shiseido Co Ltd | 画像解析方法、画像解析装置、及び画像解析プログラム |
| JP6131732B2 (ja) * | 2013-06-18 | 2017-05-24 | 沖電気工業株式会社 | 人物属性提示装置及び人物属性提示方法 |
| CN105705654A (zh) | 2013-09-25 | 2016-06-22 | 宝洁公司 | 用于皮肤护理咨询的方法和系统 |
| CN104156947B (zh) | 2014-07-23 | 2018-03-16 | 小米科技有限责任公司 | 图像分割方法、装置及设备 |
| KR101701210B1 (ko) | 2014-10-02 | 2017-02-01 | 주식회사 엘지유플러스 | 피부 분석 결과 출력 방법, 이를 위한 장치 및 어플리케이션 |
| CN104299011A (zh) | 2014-10-13 | 2015-01-21 | 吴亮 | 一种基于人脸图像识别的肤质与皮肤问题识别检测方法 |
| KR20170062676A (ko) * | 2015-11-30 | 2017-06-08 | (주)아모레퍼시픽 | 피부 특성 시각화 방법 |
| US10667723B2 (en) * | 2016-02-19 | 2020-06-02 | Covidien Lp | Systems and methods for video-based monitoring of vital signs |
| CA3015492C (en) | 2016-03-21 | 2021-11-23 | The Procter & Gamble Company | Systems and methods for providing customized product recommendations |
| KR102297301B1 (ko) | 2017-05-31 | 2021-09-06 | 더 프록터 앤드 갬블 캄파니 | 겉보기 피부 나이를 결정하기 위한 시스템 및 방법 |
| CN109064438A (zh) * | 2017-06-09 | 2018-12-21 | 丽宝大数据股份有限公司 | 皮肤状态检测方法、电子装置与皮肤状态检测系统 |
| US10719729B2 (en) * | 2018-06-06 | 2020-07-21 | Perfect Corp. | Systems and methods for generating skin tone profiles |
| WO2020113326A1 (en) * | 2018-12-04 | 2020-06-11 | Jiang Ruowei | Automatic image-based skin diagnostics using deep learning |
| US11348366B2 (en) | 2019-04-23 | 2022-05-31 | The Procter And Gamble Company | Apparatus and method for determining cosmetic skin attributes |
-
2020
- 2020-04-23 CN CN202080029868.8A patent/CN113767439A/zh active Pending
- 2020-04-23 KR KR1020217031975A patent/KR102839023B1/ko active Active
- 2020-04-23 EP EP20724712.3A patent/EP3959724A1/en not_active Withdrawn
- 2020-04-23 JP JP2021561969A patent/JP7235895B2/ja active Active
- 2020-04-23 WO PCT/US2020/029422 patent/WO2020219612A1/en not_active Ceased
- 2020-04-23 US US16/856,305 patent/US11416988B2/en active Active
-
2023
- 2023-01-12 JP JP2023003110A patent/JP7626786B2/ja active Active
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001000419A (ja) | 1999-06-14 | 2001-01-09 | Procter & Gamble Co:The | 肌のイメージング及び分析システムとその方法 |
| JP2003187251A (ja) | 2001-10-01 | 2003-07-04 | L'oreal Sa | 美容分析における特徴抽出 |
| JP2006142005A (ja) | 2004-10-22 | 2006-06-08 | Shiseido Co Ltd | 肌状態診断システムおよび美容のためのカウンセリングシステム |
| JP2007265396A (ja) | 2006-03-29 | 2007-10-11 | Mitsubishi Electric Research Laboratories Inc | 顔モデルを生成する方法およびシステム |
| WO2014208067A1 (ja) | 2013-06-28 | 2014-12-31 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 肌の官能評価装置および肌の評価方法 |
| WO2017181293A1 (en) | 2016-04-22 | 2017-10-26 | Fitskin Inc. | Systems and method for skin analysis using electronic devices |
| JP2018092351A (ja) | 2016-12-02 | 2018-06-14 | カシオ計算機株式会社 | 画像処理装置、画像処理方法及びプログラム |
Also Published As
| Publication number | Publication date |
|---|---|
| KR102839023B1 (ko) | 2025-07-28 |
| JP7235895B2 (ja) | 2023-03-08 |
| US20200342594A1 (en) | 2020-10-29 |
| JP2023040229A (ja) | 2023-03-22 |
| WO2020219612A1 (en) | 2020-10-29 |
| JP2022529677A (ja) | 2022-06-23 |
| EP3959724A1 (en) | 2022-03-02 |
| CN113767439A (zh) | 2021-12-07 |
| US11416988B2 (en) | 2022-08-16 |
| KR20210139309A (ko) | 2021-11-22 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7626786B2 (ja) | 美容的皮膚特性を視覚化するための装置及び方法 | |
| JP7553621B2 (ja) | 美容的皮膚属性を決定するための機器及び方法 | |
| CA2751549C (en) | Method and apparatus for simulation of facial skin aging and de-aging | |
| JP5399874B2 (ja) | 画像処理装置および画像処理方法 | |
| CN119173904A (zh) | 使用热图检测皮肤迹象并将其可视化 | |
| HK40061351A (en) | Apparatus and method for visualizing cosmetic skin attributes | |
| HK40060373A (zh) | 用於确定美容皮肤属性的设备和方法 | |
| HK40060373B (zh) | 用於确定美容皮肤属性的设备和方法 | |
| US20240398097A1 (en) | Method and system for determining cosmetic skin attributes based on disorder value | |
| US20240398096A1 (en) | Method and system for visualizing color gradient of human face or cosmetic skin attributes based on such color gradient | |
| HK40128136A (zh) | 用於基於无序值来确定美容皮肤属性的方法和系统 | |
| HK40128411A (zh) | 用於将人脸面部的色彩梯度可视化或基於这种色彩梯度来将美容皮肤属性可视化的方法和系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230424 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20240226 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240402 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240510 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240806 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240913 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20241224 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20250123 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7626786 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |