JP3798385B2 - Simulation image generation system and apparatus - Google Patents
Simulation image generation system and apparatus Download PDFInfo
- Publication number
- JP3798385B2 JP3798385B2 JP2003112892A JP2003112892A JP3798385B2 JP 3798385 B2 JP3798385 B2 JP 3798385B2 JP 2003112892 A JP2003112892 A JP 2003112892A JP 2003112892 A JP2003112892 A JP 2003112892A JP 3798385 B2 JP3798385 B2 JP 3798385B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- transformation
- terminal device
- person
- person image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Editing Of Facsimile Originals (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Image Analysis (AREA)
- Processing Or Creating Images (AREA)
- Image Processing (AREA)
- Studio Circuits (AREA)
Description
【0001】
【発明の属する技術分野】
本発明は、カメラ付携帯電話のような撮像手段を備えた端末装置により撮像した顔部分を含む人物画像の髪の色や髪形、衣服、眼鏡などのアクセサリーなどを変えることが可能なシミュレーション画像生成システム及び装置に関する。
【0002】
【従来の技術】
従来、クライアントの撮像手段により人物の顔画像を撮像し、ネットワークを介してサーバに送信し、サーバにおいて、顔画像のヘアー部分をクライアントにより選択されたヘアーカラーやヘアースタイルに変更して、ヘアーが変更された顔画像をクライアントに返送し表示するシステムが提案されている(例えば、特許文献1参照。)。これらは、いずれも、顔画像のヘアーカラーやヘアースタイルを変更したり、関連するヘアー商品を広告するためのシステム構成に主眼をおいたものであった。
【0003】
【特許文献1】
特開2001−273457号公報(第2−3頁、第1図)
【0004】
【発明が解決しようとする課題】
従って、利用者が、自分の好みのヘアーを選択するためのユーザインタフェース機能については十分ではなく、利用者の使い勝手を考慮したものではなかった。特に、カメラ付携帯電話等を用い、自分の顔画像のヘアーを種々変えて、友人などにメールで送ってみたり、自分以外の人(友人など)の顔画像のヘアーをいろいろ変えてみるなど、遊び感覚で利用する場合には、だれにでも簡単に利用できるようなシステムにする必要があった。
【0005】
本発明は、上記課題を解決するため、撮像した人物画像のヘアー部分はもとより、衣服、眼鏡、イヤリングなどのアクセサリー等についても、誰でも簡単に変更することができる変身サービスを提供するためのシミュレーション画像生成システム及び装置を構築することを目的とする。
【0006】
【課題を解決するための手段】
前記課題を解決するため、本発明は、以下の手段を提案している。
請求項1に係る発明は、ネットワークを介して接続された複数の端末装置と、シミュレーション画像生成装置とを備えたシミュレーション画像生成システムであって、前記シミュレーション画像生成装置が、顔部分を含む人物画像の各部を変更した変身画像を合成するための情報を格納する合成用データベースと、変身画像に対応するモデルの人物画像を登録するモデル画像登録手段と、前記端末装置において撮像された顔部分を含む人物画像を受信し、各端末装置ごとに該受信した人物画像を登録するとともに、登録完了の通知を該端末装置に通知する人物画像登録手段と、該人物画像登録手段に登録された人物画像と、前記モデル画像登録手段に登録されたモデルの変身画像に基づき、変身の対象となる人物画像と変身の対象となる部分とその変身内容とを選択するための選択画面情報を生成し、該選択画面情報を前記端末装置に送信するとともに、選択結果を受信する変身対象選択手段と、該変身対象選択手段により選択された人物画像と変身部分とその変身内容とに基づいて、前記合成用データベースを用いて、人物画像を合成する変身画像合成手段と、該変身画像合成手段により合成された人物画像を各端末装置ごとに登録し、変身完了通知を前記端末装置に通知する変身結果登録手段と、前記端末装置からの要求により、合成された人物画像を前記変身結果登録手段から読み出し該端末装置に送信する変身結果送信手段とを少なくとも備え、前記端末装置が、顔部分を含む人物を撮像する撮像手段と、該撮像手段により撮像された人物の画像を前記シミュレーション画像生成装置に送信し、該撮像された人物の画像の登録を要求するとともに、登録完了通知を前記シミュレーション画像生成装置から受信する人物画像登録要求手段と、前記シミュレーション画像生成装置から、前記選択画面情報を受信して該選択画面情報を表示するとともに、変身対象の人物画像と変身部分、その変身内容を指定して前記シミュレーション画像生成装置へ変身処理要求を送信し、変更処理の完了通知を受信する変身処理要求手段と、前記シミュレーション画像生成装置に変身結果の送信要求を行い、変身結果の人物画像を受信し表示する変身結果取得手段とを少なくとも備えることを特徴とするシミュレーション画像生成システムを提案している。
【0007】
請求項2に係る発明は、請求項1記載のシミュレーション画像生成システムについて、前記変身部分が、人物画像のヘアー、衣服、眼鏡、帽子、髭やイアリング等のアクセサリーのうち少なくとも一つを含むことを特徴とするシミュレーション画像生成システムを提案している。
【0008】
請求項3に係る発明は、請求項1または2記載のシミュレーション画像生成システムについて、前記変身対象選択手段が、変身対象を選択する選択画面情報を、変身部分に関する情報提供者からの推奨情報、利用者からの変身要求の頻度情報、または、利用者の要望を性別や見た目の感じ等の情報により分類した分類項目情報に基づいて生成することを特徴とするシミュレーション画像生成システムを提案している。
【0009】
請求項4に係る発明は、請求項1乃至3のいずれかに記載のシミュレーション画像生成システムについて、前記端末装置が、撮像手段を有する携帯端末であることを特徴とするシミュレーション画像生成システムを提案している。
【0010】
請求項5に係る発明は、請求項1乃至4のいずれかに記載のシミュレーション画像生成システムについて、前記端末装置が、前記シミュレーション画像生成装置から前記人物画像登録手段に登録された人物画像または前記変身結果登録手段に登録された変身後の人物画像を受信して表示し、該表示された人物画像の中から削除したい人物画像を指定して削除要求を前記シミュレーション画像生成装置に送信するとともに、該指定された人物画像の削除が完了したときに、削除完了通知を前記シミュレーション画像生成装置から受信する人物画像削除要求手段をさらに備え、前記シミュレーション画像生成装置が、人物画像の削除要求を前記端末装置から受信し、該指定された人物画像を前記人物画像登録手段または前記変身結果登録手段から削除するとともに、該指定された人物画像の削除が完了したときに、削除完了通知を前記端末装置に送信する人物画像削除手段をさらに備えることを特徴とするシミュレーション画像生成システムを提案している。
【0011】
請求項6に係る発明は、請求項1乃至5のいずれかに記載のシミュレーション画像生成システムについて、前記端末装置が、前記変身結果取得手段により取得した変身後の人物画像の中から指定された人物画像を指定された前記端末装置に送信する画像送信手段をさらに備えることを特徴とするシミュレーション画像生成システムを提案している。
【0012】
請求項7に係る発明は、複数の端末装置とネットワークを介して接続されたシミュレーション画像生成装置であって、前記シミュレーション画像生成装置が、顔部分を含む人物画像の各部を変更した変身画像を合成するための情報を格納する合成用データベースと、変身画像に対応するモデルの人物画像を登録するモデル画像登録手段と、前記端末装置において撮像された顔部分を含む人物画像を受信し、各端末装置ごとに該受信した人物画像を登録するとともに、登録完了の通知を該端末装置に通知する人物画像登録手段と、該人物画像登録手段に登録された人物画像と、前記モデル画像登録手段に登録されたモデルの変身画像に基づき、変身の対象となる人物画像と変身の対象となる部分とその変身内容とを選択するための選択画面情報を生成し、該選択画面情報を前記端末装置に送信するとともに、選択結果を受信する変身対象選択手段と、該変身対象選択手段により選択された人物画像と変身部分とその変身内容とに基づいて、前記合成用データベースを用いて、人物画像を合成する変身画像合成手段と、該変身画像合成手段により合成された人物画像を各端末装置ごとに登録し、変身完了通知を前記端末装置に通知する変身結果登録手段と、前記端末装置からの要求により、合成された人物画像を前記変身結果登録手段から読み出し該端末装置に送信する変身結果送信手段とを少なくとも備えることを特徴とするシミュレーション画像生成装置を提案している。
【0013】
請求項8に係る発明は、請求項7記載のシミュレーション画像生成装置について、前記変身部分が、人物画像のヘアー、衣服、眼鏡、帽子、髭やイアリング等のアクセサリーのうち少なくとも一つを含むことを特徴とするシミュレーション画像生成装置を提案している。
【0014】
請求項9に係る発明は、請求項7または8記載のシミュレーション画像生成装置について、前記変身対象選択手段が、変身対象を選択する選択画面情報を、変身部分に関する情報提供者からの推奨情報、利用者からの変身要求の頻度情報、または、利用者の要望を性別や見た目の感じ等の情報により分類した分類項目情報に基づいて生成することを特徴とするシミュレーション画像生成装置を提案している。
【0015】
請求項10に係る発明は、請求項7乃至9のいずれかに記載のシミュレーション画像生成装置について、前記端末装置が、撮像手段を有する携帯端末であることを特徴とするシミュレーション画像生成装置を提案している。
【0016】
請求項11に係る発明は、請求項7乃至10のいずれかに記載のシミュレーション画像生成装置について、人物画像の削除要求を前記端末装置から受信し、該指定された人物画像を前記人物画像登録手段または前記変身結果登録手段から削除するとともに、該指定された人物画像の削除が完了したときに、削除完了通知を前記端末装置に送信する人物画像削除手段をさらに備えることを特徴とするシミュレーションを提案している。
【0017】
【発明の実施の形態】
以下、本発明の実施形態に係るシミュレーション画像生成システムについて図1から図3を参照して詳細に説明する。
本発明の実施形態に係るシミュレーション画像生成システムは、図1に示すように、シミュレーション画像生成装置100と、端末装置200と、これらを接続するネットワークとから構成されている。
【0018】
シミュレーション画像生成装置100は、撮像された人物の画像に対して、ヘアーカラー、ヘアースタイル、衣服、眼鏡、帽子、髭やイアリング等のアクセサリーなどを変更したシミュレーション画像の生成を行う装置であり、ネットワークを介して複数の端末装置200(端末装置1〜端末装置n)と接続されている。なお、端末装置200としては、利用者が手軽に持ち歩けるカメラ付携帯電話機をはじめ、撮像手段を有するもの、あるいは撮像手段を別個に備える端末装置であってもよい。
【0019】
シミュレーション画像生成装置100は、合成用データベース101と、モデル画像登録手段102と、人物画像登録手段103と、変身対象選択手段104と、変身画像合成手段105と、変身結果登録手段106と、変身結果送信手段107と、人物画像削除手段108と、商品販売手段109と、課金手段110とから構成されている。
【0020】
合成用データベース101は、顔部分を含む人物画像の各部を変更した変身画像を合成するのに必要な情報を格納するデータベースであり、例えば、ヘアーの場合には、ヘアーカラーやヘアースタイルの種別、衣服やアクセサリーの場合には、色や形状などの種別が予め設定されている。モデル画像登録手段102は、変身画像に対応するモデルの人物画像を登録するための手段であり、例えば、変身させたい部分ごと、あるいは、変身させたい部分の色や形状ごとにモデルの変身画像が登録されている。
【0021】
人物画像登録手段103は、端末装置200において撮像された顔部分を含む人物画像を登録するための手段であり、ネットワークを介して、端末装置から送信されてきた人物画像データを受信し、これを端末装置ごとに分類し、検索容易なように蓄積手段に登録する。変身対象選択手段104は、システムの利用者がどのような変身をするかを決定するための選択用の画面情報を生成し、この画面情報を端末装置200に送信するとともに、端末装置200により選択された選択結果を受信する。変身画像合成手段105は、変身対象選択手段104により選択された人物画像と変身部分、その変身内容とに基づいて、合成用データベース101を用いて、選択された人物画像の選択された変身部分が選択された変身内容になるように人物画像を合成する。
【0022】
変身結果登録手段106は、変身画像合成手段105により合成された人物画像を端末装置ごとに登録し、変身完了通知を端末装置200に通知する。変身結果送信手段107は、端末装置200からの要求により、合成された人物画像を変身結果登録手段106から読み出し端末装置200に送信する。人物画像削除手段108は、人物画像登録手段103または変更結果登録手段106に登録された人物画像を端末装置200からの要求により削除する。商品販売手段109は、変身部分の商品に関する広告情報を端末装置200に送信し、端末装置200から購入要求を受信して販売処理を行う。課金手段110は、本システムによる変身サービスを利用した利用者及び広告情報を掲載した提供者に対し、課金処理を行う。
【0023】
一方、端末装置200は、撮像手段201と、人物画像登録要求手段202と、変身処理要求手段203と、変身結果取得手段204と、人物画像削除要求手段205と、画像送信手段206と、商品購入要求手段207とから構成されている。
【0024】
撮像手段201は、顔部分を含む人物画像を撮像する。なお、撮像手段は、端末装置200に内蔵されたものであってもよいし、外付けの撮像手段であってもよい。人物画像登録要求手段202は、撮像手段201により撮像された人物画像をシミュレーション画像生成装置100に送信して登録の要求を行うとともに、登録完了通知をシミュレーション画像生成装置100から受信する。変身処理要求手段203は、シミュレーション画像生成装置100から、選択画面情報を受信し、選択画面情報に基づき選択画面を表示し、変身対象の人物画像と変身部分とその変身内容を指定し、シミュレーション画像生成装置100へ送信して変身処理要求を行い、変更処理の完了通知をシミュレーション画像生成装置100から受信する。
【0025】
変身結果取得手段204は、シミュレーション画像生成装置100に変身結果の送信要求を行い、シミュレーション画像生成装置100から、変身結果の人物画像を受信し表示する。人物画像削除要求手段205は、変更対象の人物画像または変身後の人物画像の削除要求を行う。画像送信手段206は、変身後の人物画像を他の端末装置を有する利用者に送信する。商品購入要求手段207は、変身部分の商品についての購入要求処理を行う。
【0026】
次に、図2を用いて、本発明の動作シーケンス例について説明する。
まず、シミュレーション画像生成装置100では、顔部分を含む人物画像の各部を変更した変身画像を合成するのに必要な情報を合成用データベース101に予め格納しておく(ステップ301)。合成用データベース101に格納される情報としては、例えば、変身部分がヘアーの場合には、本装置で提供可能なヘアーカラーやヘアースタイルの種別および各種別のヘアーカラーやヘアースタイルを人物画像と合成するのに必要な情報から構成される。また、衣服やアクセサリーについても同様に、本装置で提供可能な色や形状などの種別および各種別の衣服やアクセサリーを人物画像と合成するのに必要な情報から構成される。さらに、各変身部分が色や形状などの種別に応じて変更されたモデルの変身画像をモデル画像登録手段102に登録しておく(ステップ302)。
【0027】
利用者は、シミュレーション画像生成装置100による変身サービスを受ける前にシミュレーション画像生成装置100に対し、ユーザ登録を行い、ユーザIDとパスワードを取得する。以後、利用者は、ユーザIDとパスワードを設定し、シミュレーション画像生成装置100にアクセスする。次に、利用者は、端末装置200(例えばカメラ付携帯電話)の撮像手段201により、顔部分を含む自分の人物画像あるいは友人、恋人、家族などの顔部分を含む人物画像を撮影する(ステップ303)。
【0028】
端末装置200の人物画像登録要求手段202は、前述したユーザIDとパスワードを設定して、ネットワークを介してシミュレーション画像生成装置100に接続要求し、撮像手段201により得られた人物画像データを送信する。なお、シミュレーション画像生成装置100への人物画像データの送信方法としては、カメラ付携帯電話を用いた場合には、人物画像データを電子メールの添付ファイルとして、シミュレーション画像生成装置100へ電子メールを送るようにすればよい。このようにすることにより、カメラ付携帯電話機における既存の画像データ送信機能をそのまま利用することが可能となる。
【0029】
シミュレーション画像生成装置100の人物画像登録手段103は、ネットワークを介して端末装置200から人物画像データを受信し、各端末装置ごとに検索容易なようにこれらの人物画像データを蓄積手段に登録する(ステップ304)。なお、この場合、各端末装置当たりの登録可能な人物画像の上限値を設けるようにしてもよい。人物画像登録手段103による人物画像の登緑が完了すると、登録完了通知を電子メールなどにより、端末装置200に送信する。端末装置200の変身処理要求手段203は、シミュレーション画像生成装置100に対し、どのような変身をするかを選択するための選択画面の送信を要求する選択画面送信要求を送信する。
【0030】
シミュレーション画像生成装置100の変身対象選択手段104は、端末装置200から選択画面送信要求を受信すると、選択画面送信要求を送信した端末装置200に対応する人物画像を、人物画像登録手段103により登録された人物画像の中から検索して読み出し、変身対象の人物画像を選択するための選択画面情報を生成する(ステップ305)。なお、端末装置200に対応する人物画像が複数の場合は、順次表示や、人物画像を縮小して一覧表示して選択させるように、選択画面情報を構成するようにすればよい。
【0031】
また、変身部分をどのように変身させるかの変身内容を選択させるため、変身部分の色や形状などの種別を選択できる選択画面情報を生成する。この場合、変身部分の色や形状などの種別に対応するモデルの人物画像を、モデル画像登録手段102に登録された中から検索して読み出し、モデルの人物画像を選択画面に含めた選択画面情報を生成する。このように、変身種別に対応するモデルの人物画像を選択画面に含めることにより、システムの利用者は、選択しやすくなり、使い勝手が向上する。なお、選択画面の具体的な構成例については後述する。
【0032】
変身対象選択手段104は、選択画面情報の生成が完了すると、端末装置200に対し、生成した選択画面情報を送信する。端末装置200の変身処理要求手段203は、シミュレーション画像生成装置100から受信した選択画面情報に基づき選択画面を表示する。利用者は、選択画面に基づき、変身対象の人物画像と、変身する変身部分とその変身内容の種別とを選択し、選択結果をシミュレーション画像生成装置100に送信する(ステップ306)。
【0033】
以上のシミュレーション画像生成装置100における選択画面の生成動作と端末装置200における選択画面に基づく変身対象の選択動作は、通常、選択対象を絞り込むため、複数回繰り返して行われる。シミュレーション画像生成装置100の変身画像合成手段105は、端末装置200から変身対象の人物画像と、変身する変身部分とその変身内容の種別の選択結果を受信すると、人物画像登録手段103より、選択結果を受信した端末装置に対応する人物画像の中から選択された人物画像を取り出す。また、変身する変身部分とその変身内容の種別に対応する合成用情報を合成用データベース101より読み出す。合成用データベース101から読み出された合成用情報に基づき、人物画像登録手段103から取り出された人物画像に対し、変身対象の変更部分が選択された変身内容の種別になるように人物画像を合成する(ステップ307)。
【0034】
具体的には、例えば、選択された人物画像から、変身部分を抽出し、合成用データベース101から変身部分の合成用情報を読み出し、抽出した変身部分に貼り付けるなどして、人物画像の変身部分を合成する。モデル画像の顔部分のみを変えるような変身の場合には、モデル画像の顔部分が除かれたモデル画像を合成用データベース101から取得し、選択された人物画像から顔部分を抽出し、抽出した顔部分を、顔部分が除かれたモデル画像に貼り合わせるなどして合成する。
【0035】
変身結果登録手段106は、変身画像合成手段105により合成された変身後の人物画像を、各端末装置ごとに検索可能なように蓄積手段に登録する。なお、この場合、各端末装置当たりの登録可能な変身後の人物画像の上限値を設けるようにしてもよい。変身後の人物画像の登録が完了すると、変身処理完了通知を電子メールなどにより、端末装置200に送信する(ステップ308)。
【0036】
シミュレーション画像生成装置100の変身結果送信手段107は、端末装置200から変身後の人物画像の送信要求を受信すると、送信要求を送信した端末装置200に対応する変身画像を、変身結果登録手段106から読み出し、端末装置200へ表示可能な形態に変更して送信する。該当する変身後の人物画像が複数の場合は、順次表示や、人物画像を縮小して一覧表示により表示されるように構成してもよい(ステップ309)。端末装置200の変身結果取得手段204は、シミュレーション画像生成装置100から変身画像を受信し、これを表示する(ステップ310)。
【0037】
利用者が、表示された変身画像の中から、通信相手に送信したいものがある場合には、端末装置200の画像送信手段206は、相手先に指定された変身画像を送信する。カメラ付携帯電話を用いた場合には、変身画像データを電子メールの添付ファイルとして、通信相手へ電子メールを送るようにしてもよい。このようにすることにより、カメラ付携帯電話機の既存の画像データ送信機能をそのまま利用することが可能となる。したがって、利用者やその友人等の変身画像を任意の通信相手に簡単に送ることができるため、遊び感覚での利用範囲を拡大できる。
【0038】
また、利用者がすでに登録した人物画像や変更後の人物画像を削除したい場合には、端末装置200の人物画像削除要求手段205は、シミュレーション画像生成装置100に対し、削除したい人物画像を指定し、削除要求を行う。シミュレーション画像生成装置100の人物画像削除手段108は、削除要求により指定された人物画像を、人物画像登録手段103あるいは変身結果登録手段106から削除する。
【0039】
シミュレーション画像生成装置100の商品販売手段109は、変身部分に対応する商品に関する広告情報を端末装置200に送信し、端末装置200の商品購入要求手段207からの商品購入要求を受信することにより、商品の販売の仲介を行うこともできる。シミュレーション画像生成装置100の課金手段110は、利用者から変身サービスの利用料を、メーカーからは商品の広告料を徴収するために課金処理を行う。
【0040】
次に、変身部分がヘアーの場合の選択画面の構成例を図3を用いて説明する。
なお、図3のそれぞれの四角は選択画面に対応している。
選択画面としては、利用者がヘアー種別を選ぶ際に、選びやすくするように構成するのが好ましい。例えば、利用者の性別による分類、ヘアー情報の提供者の推奨による分類、利用者の利用頻度による分類、利用者の髪の長さや見た目の感じ等により作成した分類項目による分類などが有効である。
【0041】
利用者の性別による分類は、女性と男性ではヘアースタイルが異なることによる分類であり、図3上部の選択画面の中にある「女性編男性編」がこれに相当する。ヘアー情報の提供者の推奨による分類は、本システムの運用者と提携している、理容室、美容室、スタイリスト、雑誌社などのヘアー情報の提供者からの情報に基づき構成されるものであり、図3上部の選択画面の中にある「特集 秋モードはコレでキマリ!」がこれに相当する。利用者の利用頻度による分類は、変身結果登録手段106において、変身画像が登録される度に、ヘアー種別毎の利用頻度を計数し、その利用頻度に基づき構成されるものであり、図3上部の選択画面の中にある「今月の人気ヘアランキング!」がこれに相当する。利用者の髪の長さや見た目の感じ等により作成した分類項目による分類は、図3上部の選択画面の中にある「長さとイメージで選ぶ」や「こだわりで選ぶ」からリンクされているものがこれに相当する。
【0042】
また、図3の各選択画面に示すように、ヘアー種別との対応を、利用者がわかりやすく、興味をひく言葉で表現した選択画面を構成することにより、特に遊び感覚で利用する場合には利用しやすくなり効果的である。さらに、最終的に利用者にヘアー種別を選択させる画面には、モデル画像を表示するようにすることにより、利用者はより選択しやすくなる。利用者が変更後の人物画像を確認したり、変身後の人物画像の通信相手にこの人物画像を送信するためにシミュレーション画像生成装置100からダウンロードする場合には、端末装置200の変身結果取得手段204は、シミュレーション画像生成装置100に対し、変身後の人物画像の送信要求を行う。
【0043】
以上は、変身部分がヘアーの場合を述べたが、変身部分が衣服やアクセサリーの場合も同様に、変身部分に関する情報の提供者からの推奨情報、利用者からの変身要求の頻度情報、または、利用者の要望を性別や見た目の感じ等により分類した分類項目情報に基づいて選択画面を構成することにより、利用者にとって使いやすいシステムを提供することができる。また、最終的に利用者に変身部分を選択させる画面には、モデル画像を表示するようにすることにより、利用者にとってより利用しやすいシステムとすることができる。
【0044】
以上、図面を参照して本発明の実施形態について詳述してきたが、具体的な構成はこれらの実施の形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計変更等も含まれる。
【0045】
【発明の効果】
以上のように、この発明によれば、利用者が簡単な操作で、気に入った変身を行うことが可能になるだけでなく、カメラ付携帯電話等を使って、自分や友人などの変身画像を簡単に作成したり、変身画像をいろいろな人に送信することが簡単にできるため、遊び感覚での利用もしやすくなるという効果がある。
【図面の簡単な説明】
【図1】 本発明の実施形態に係るシミュレーション画像生成システムの構成図である。
【図2】 本発明の実施形態に係るシミュレーション画像生成システムの動作シーケンスを示す図である。
【図3】 本発明の実施形態に係る選択画面の構成例を示す図である。
【符号の説明】
100・・・シミュレーション画像生成装置、101・・・合成用データベース、102・・・モデル画像登録手段、103・・・人物画像登録手段、104・・・変身対象選択手段、105・・・変身画像合成手段、106・・・変身結果登録手段、107・・・変身結果送信手段、108・・・人物画像削除手段、109・・・商品販売手段、110・・・課金手段、200・・・端末装置、201・・・撮像手段、202・・・人物画像登録要求手段、203・・・変身処理要求手段、204・・・変身結果取得手段、205・・・人物画像削除要求手段、206・・・画像送信手段、207・・・商品購入要求手段、[0001]
BACKGROUND OF THE INVENTION
The present invention provides a simulation image generation capable of changing the hair color, hairstyle, clothing, glasses, and other accessories of a human image including a face image captured by a terminal device having an imaging means such as a camera-equipped mobile phone. The present invention relates to a system and an apparatus.
[0002]
[Prior art]
Conventionally, a client's imaging means captures a human face image and transmits it to a server via a network. In the server, the hair portion of the face image is changed to the hair color or hair style selected by the client, and the hair is A system that returns and displays a changed face image to a client has been proposed (for example, see Patent Document 1). All of these focused on the system configuration for changing the hair color and hair style of the face image and advertising related hair products.
[0003]
[Patent Document 1]
JP 2001-273457 A (page 2-3, FIG. 1)
[0004]
[Problems to be solved by the invention]
Therefore, the user interface function for the user to select his / her favorite hair is not sufficient, and the user's usability is not considered. In particular, use a mobile phone with a camera, etc., to change the hair of your face image and send it to a friend by e-mail, or to change the hair of someone else's face (such as a friend). In order to use it for play, it was necessary to make it a system that anyone could easily use.
[0005]
In order to solve the above problem, the present invention provides a simulation for providing a transformation service that anyone can easily change not only the hair portion of a captured human image but also accessories such as clothes, glasses, and earrings. An object is to construct an image generation system and apparatus.
[0006]
[Means for Solving the Problems]
In order to solve the above problems, the present invention proposes the following means.
The invention according to claim 1 is a simulation image generation system including a plurality of terminal devices connected via a network and a simulation image generation device, wherein the simulation image generation device includes a human image including a face portion. Including a synthesis database for storing information for synthesizing a transformed image obtained by changing each part of the above, a model image registration means for registering a person image of a model corresponding to the transformed image, and a face portion captured by the terminal device A person image is received, and the received person image is registered for each terminal device, and a person image registration means for notifying the terminal device of a registration completion notification; a person image registered in the person image registration means; , Based on the model transformation image registered in the model image registration means, the person image to be transformed and the portion to be transformed The selection screen information for selecting the transformation content is generated, the selection screen information is transmitted to the terminal device, and the transformation target selection means for receiving the selection result, and the person selected by the transformation target selection means Based on the image, the transformation part, and the contents of the transformation, using the synthesis database, the transformation image synthesis means for synthesizing the person image, and the person image synthesized by the transformation image synthesis means are registered for each terminal device. A transformation result registration unit for notifying the terminal device of a transformation completion notification, and a transformation result transmission unit for reading out the synthesized human image from the transformation result registration unit and transmitting to the terminal device in response to a request from the terminal device. At least, and the terminal device captures an image of a person including a face portion and an image of the person captured by the image capturing means A request for registration of the image of the captured person that is transmitted to the generation device, and a person image registration request means for receiving a registration completion notification from the simulation image generation device, and the selection screen information from the simulation image generation device. To display the selection screen information, specify the person image to be transformed, the transformation part, and the transformation content, send a transformation process request to the simulation image generation apparatus, and receive a change process completion notification Proposing a simulation image generation system comprising at least a transformation processing request means and a transformation result acquisition means for requesting transmission of a transformation result to the simulation image generation apparatus, and receiving and displaying a person image of the transformation result. ing.
[0007]
The invention according to claim 2 is the simulation image generation system according to claim 1, wherein the transformation part includes at least one of accessories such as hair, clothes, glasses, a hat, a bag and an earring of a person image. A featured simulation image generation system is proposed.
[0008]
The invention according to claim 3 is the simulation image generation system according to claim 1 or 2, wherein the transformation object selection means uses selection screen information for selecting a transformation object, recommended information from an information provider regarding the transformation part, use A simulation image generation system has been proposed in which it is generated based on frequency information of a transformation request from a user, or classification item information obtained by classifying a user's request based on information such as gender and appearance.
[0009]
The invention according to claim 4 proposes a simulation image generation system according to any one of claims 1 to 3, wherein the terminal device is a portable terminal having an imaging means. ing.
[0010]
The invention according to claim 5 is the simulation image generation system according to any one of claims 1 to 4, wherein the terminal device is a person image registered in the person image registration unit from the simulation image generation device or the transformation. The person image after transformation registered in the result registration means is received and displayed, a person image to be deleted is designated from the displayed person image, and a deletion request is transmitted to the simulation image generating device, and When deletion of the designated person image is completed, the image processing apparatus further comprises person image deletion request means for receiving a deletion completion notification from the simulation image generation apparatus, and the simulation image generation apparatus sends a person image deletion request to the terminal apparatus. From the person image registration means or the transformation result registration means. With dividing, when the deletion of the specified person image has been completed, it has proposed a simulation image generating system further comprising a person image deletion means for sending a deletion completion notification to the terminal device.
[0011]
The invention according to claim 6 is the simulation image generation system according to any one of claims 1 to 5, wherein the terminal device is designated from the person image after the transformation acquired by the transformation result acquisition unit A simulation image generation system is further proposed, further comprising image transmission means for transmitting an image to the designated terminal device.
[0012]
The invention according to claim 7 is a simulation image generation device connected to a plurality of terminal devices via a network, and the simulation image generation device synthesizes a transformed image obtained by changing each part of a human image including a face portion. A database for synthesis for storing information to be used, model image registration means for registering a person image of a model corresponding to a transformation image, and a person image including a face portion captured by the terminal device, and each terminal device The registered person image is registered for each time, the person image registration means for notifying the terminal device of a registration completion notification, the person image registered in the person image registration means, and the model image registration means are registered. Screen information for selecting the person image to be transformed, the part to be transformed and the contents of the transformation based on the transformed image of the model Generating and transmitting the selection screen information to the terminal device, and receiving a selection result, a transformation target selection unit, a person image selected by the transformation target selection unit, a transformation part, and a transformation content thereof, A transformation image synthesizing unit for synthesizing a person image using the synthesizing database, a person image synthesized by the transformation image synthesizing unit is registered for each terminal device, and transformation for notifying the terminal device of a transformation completion notification A simulation image generation apparatus comprising: a result registration unit; and a transformation result transmission unit that reads out a synthesized person image from the transformation result registration unit and transmits the result to the terminal device in response to a request from the terminal device. is suggesting.
[0013]
The invention according to claim 8 is the simulation image generation apparatus according to claim 7, wherein the transformation part includes at least one of accessories such as hair, clothes, glasses, a hat, a bag and an earring of a person image. A characteristic simulation image generation device has been proposed.
[0014]
The invention according to claim 9 is the simulation image generating apparatus according to claim 7 or 8, wherein the transformation object selection means selects selection screen information for selecting a transformation object, recommended information from an information provider regarding the transformation part, and utilization A simulation image generation device is proposed that generates information based on frequency information of a transformation request from a user or classification item information obtained by classifying a user's request based on information such as gender and appearance.
[0015]
A tenth aspect of the present invention proposes a simulation image generating apparatus according to any one of the seventh to ninth aspects, wherein the terminal device is a portable terminal having an imaging means. ing.
[0016]
According to an eleventh aspect of the present invention, in the simulation image generating apparatus according to any one of the seventh to tenth aspects, a person image deletion request is received from the terminal device, and the designated person image is stored in the person image registration means. Alternatively, a simulation is proposed, further comprising: a person image deletion unit that deletes from the transformation result registration unit and transmits a deletion completion notification to the terminal device when deletion of the designated person image is completed. is doing.
[0017]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, a simulation image generation system according to an embodiment of the present invention will be described in detail with reference to FIGS. 1 to 3.
As shown in FIG. 1, the simulation image generation system according to the embodiment of the present invention includes a simulation
[0018]
The simulation
[0019]
The simulation
[0020]
The
[0021]
The person
[0022]
The transformation
[0023]
On the other hand, the
[0024]
The
[0025]
The transformation
[0026]
Next, an operation sequence example of the present invention will be described with reference to FIG.
First, in the simulation
[0027]
The user performs user registration with the simulation
[0028]
The person image
[0029]
The person image registration means 103 of the simulation
[0030]
When receiving the selection screen transmission request from the
[0031]
In addition, selection screen information that can select a type such as a color and a shape of the transformation part is generated in order to select a transformation content of how to transform the transformation part. In this case, the selection screen information in which the model person image corresponding to the type such as the color or shape of the transformation part is retrieved and read out from those registered in the model
[0032]
When the generation of the selection screen information is completed, the transformation
[0033]
The selection screen generation operation in the simulation
[0034]
Specifically, for example, a transformation part of a person image is extracted by extracting a transformation part from the selected person image, reading out synthesis information of the transformation part from the
[0035]
The transformation
[0036]
When the transformation
[0037]
When the user wants to send the displayed transformation image to the communication partner, the
[0038]
When the user wants to delete a person image already registered or a person image after change, the person image deletion request unit 205 of the
[0039]
The
[0040]
Next, a configuration example of the selection screen when the transformation part is hair will be described with reference to FIG.
Each square in FIG. 3 corresponds to a selection screen.
The selection screen is preferably configured so that the user can easily select a hair type. For example, classification by user's gender, classification by the recommendation of the provider of hair information, classification by user's usage frequency, classification by classification items created based on the user's hair length and appearance, etc. are effective. .
[0041]
The classification according to the gender of the user is a classification based on different hair styles between women and men, and “female edition male edition” in the selection screen at the top of FIG. 3 corresponds to this. The hair information provider's recommended classification is based on information from hair information providers such as barbers, hair salons, stylists, and magazines that are affiliated with the operator of this system. In the selection screen at the top of FIG. 3, “Special Feature Autumn Mode is Kore-Kimamari!” Corresponds to this. The classification based on the usage frequency of the user is configured based on the usage frequency for each hair type each time a transformation image is registered in the transformation result registration means 106, and is configured based on the usage frequency. "This month's popular hair ranking!" In the selection screen corresponds to this. Classifications based on classification items created based on the user's hair length, appearance, etc. are linked from “Select by length and image” and “Select by preference” in the selection screen at the top of FIG. It corresponds to this.
[0042]
In addition, as shown in each selection screen of FIG. 3, the user can easily understand the correspondence with the hair type by constructing a selection screen that is easy to understand for the user and expresses it in an interesting language. It is easy to use and effective. Furthermore, by displaying the model image on the screen that finally allows the user to select the hair type, it becomes easier for the user to select. When the user checks the person image after the change or downloads the person image from the simulation
[0043]
The above describes the case where the transformation part is hair, but also when the transformation part is clothes or accessories, the recommended information from the information provider about the transformation part, the frequency information of the transformation request from the user, or By configuring the selection screen based on the classification item information that classifies the user's request according to gender, appearance, etc., a user-friendly system can be provided. In addition, by displaying a model image on the screen that finally allows the user to select a transformation part, it is possible to make the system easier to use for the user.
[0044]
As described above, the embodiments of the present invention have been described in detail with reference to the drawings, but the specific configuration is not limited to these embodiments, and includes design changes and the like within a scope not departing from the gist of the present invention. It is.
[0045]
【The invention's effect】
As described above, according to the present invention, not only can a user perform a favorite transformation with a simple operation, but also a transformation image of himself or his friend can be obtained using a camera-equipped mobile phone or the like. Since it is easy to create and send a transformation image to various people, it is easy to use it for play.
[Brief description of the drawings]
FIG. 1 is a configuration diagram of a simulation image generation system according to an embodiment of the present invention.
FIG. 2 is a diagram showing an operation sequence of the simulation image generation system according to the embodiment of the present invention.
FIG. 3 is a diagram showing a configuration example of a selection screen according to the embodiment of the present invention.
[Explanation of symbols]
DESCRIPTION OF
Claims (11)
前記シミュレーション画像生成装置が、顔部分を含む人物画像の各部を変更した変身画像を合成するための情報を格納する合成用データベースと、
変身画像に対応するモデルの人物画像を登録するモデル画像登録手段と、
前記端末装置において撮像された顔部分を含む人物画像を受信し、各端末装置ごとに該受信した人物画像を登録するとともに、登録完了の通知を該端末装置に通知する人物画像登録手段と、
該人物画像登録手段に登録された人物画像と、前記モデル画像登録手段に登録されたモデルの変身画像に基づき、変身の対象となる人物画像と変身の対象となる部分とその変身内容とを選択するための選択画面情報を生成し、該選択画面情報を前記端末装置に送信するとともに、選択結果を受信する変身対象選択手段と、
該変身対象選択手段により選択された人物画像と変身部分とその変身内容とに基づいて、前記合成用データベースを用いて、人物画像を合成する変身画像合成手段と、
該変身画像合成手段により合成された人物画像を各端末装置ごとに登録し、変身完了通知を前記端末装置に通知する変身結果登録手段と、
前記端末装置からの要求により、合成された人物画像を前記変身結果登録手段から読み出し該端末装置に送信する変身結果送信手段とを少なくとも備え、
前記端末装置が、顔部分を含む人物を撮像する撮像手段と、
該撮像手段により撮像された人物の画像を前記シミュレーション画像生成装置に送信し、該撮像された人物の画像の登録を要求するとともに、登録完了通知を前記シミュレーション画像生成装置から受信する人物画像登録要求手段と、
前記シミュレーション画像生成装置から、前記選択画面情報を受信して該選択画面情報を表示するとともに、変身対象の人物画像と変身部分、その変身内容を指定して前記シミュレーション画像生成装置へ変身処理要求を送信し、変更処理の完了通知を受信する変身処理要求手段と、
前記シミュレーション画像生成装置に変身結果の送信要求を行い、変身結果の人物画像を受信し表示する変身結果取得手段とを少なくとも備えること
を特徴とするシミュレーション画像生成システム。A simulation image generation system comprising a plurality of terminal devices connected via a network and a simulation image generation device,
A database for synthesis that stores information for synthesizing a transformed image in which each part of a human image including a face part is changed by the simulation image generating device;
Model image registration means for registering a person image of a model corresponding to the transformation image;
A person image registration means for receiving a person image including a face portion imaged in the terminal device, registering the received person image for each terminal device, and notifying the terminal device of a registration completion notification;
Based on the person image registered in the person image registration unit and the model transformation image registered in the model image registration unit, the person image to be transformed, the part to be transformed and the contents of the transformation are selected. Generating selection screen information for transmitting, transmitting the selection screen information to the terminal device, and receiving a selection result, a transformation target selection means;
A transformation image synthesizing unit that synthesizes a person image using the synthesis database based on the person image selected by the transformation target selection unit, the transformation part, and the transformation content;
A transformation result registration unit that registers the person image synthesized by the transformation image synthesis unit for each terminal device and notifies the terminal device of a transformation completion notification;
At least a transformation result transmission unit that reads out the synthesized person image from the transformation result registration unit and transmits it to the terminal device in response to a request from the terminal device,
An imaging means for imaging the person including the face part by the terminal device;
A person image registration request that transmits an image of a person imaged by the imaging means to the simulation image generation apparatus, requests registration of the image of the imaged person, and receives a registration completion notification from the simulation image generation apparatus Means,
Receives the selection screen information from the simulation image generation device and displays the selection screen information, and designates a person image to be transformed, a transformation part, and the transformation content, and sends a transformation processing request to the simulation image generation device. A transformation process request means for transmitting and receiving a notification of completion of the modification process;
A simulation image generation system comprising: at least a transformation result acquisition means for requesting transmission of a transformation result to the simulation image generation device, and receiving and displaying a person image of the transformation result.
前記シミュレーション画像生成装置が、人物画像の削除要求を前記端末装置から受信し、該指定された人物画像を前記人物画像登録手段または前記変身結果登録手段から削除するとともに、該指定された人物画像の削除が完了したときに、削除完了通知を前記端末装置に送信する人物画像削除手段をさらに備えることを特徴とする請求項1乃至4のいずれかに記載のシミュレーション画像生成システム。The terminal device receives and displays a person image registered in the person image registration unit or a person image after transformation registered in the transformation result registration unit from the simulation image generation device, and the displayed person image A deletion request is transmitted to the simulation image generation apparatus by specifying a person image to be deleted from the simulation image generation apparatus, and a deletion completion notification is received from the simulation image generation apparatus when the deletion of the specified person image is completed. A human image deletion request means;
The simulation image generation device receives a person image deletion request from the terminal device, deletes the designated person image from the person image registration unit or the transformation result registration unit, and The simulation image generation system according to claim 1, further comprising a person image deletion unit that transmits a deletion completion notification to the terminal device when the deletion is completed.
前記シミュレーション画像生成装置が、顔部分を含む人物画像の各部を変更した変身画像を合成するための情報を格納する合成用データベースと、
変身画像に対応するモデルの人物画像を登録するモデル画像登録手段と、
前記端末装置において撮像された顔部分を含む人物画像を受信し、各端末装置ごとに該受信した人物画像を登録するとともに、登録完了の通知を該端末装置に通知する人物画像登録手段と、
該人物画像登録手段に登録された人物画像と、前記モデル画像登録手段に登録されたモデルの変身画像に基づき、変身の対象となる人物画像と変身の対象となる部分とその変身内容とを選択するための選択画面情報を生成し、該選択画面情報を前記端末装置に送信するとともに、選択結果を受信する変身対象選択手段と、
該変身対象選択手段により選択された人物画像と変身部分とその変身内容とに基づいて、前記合成用データベースを用いて、人物画像を合成する変身画像合成手段と、
該変身画像合成手段により合成された人物画像を各端末装置ごとに登録し、変身完了通知を前記端末装置に通知する変身結果登録手段と、
前記端末装置からの要求により、合成された人物画像を前記変身結果登録手段から読み出し該端末装置に送信する変身結果送信手段とを少なくとも備えることを特徴とするシミュレーション画像生成装置。A simulation image generation device connected to a plurality of terminal devices via a network,
A database for synthesis that stores information for synthesizing a transformed image in which each part of a human image including a face part is changed by the simulation image generating device;
Model image registration means for registering a person image of a model corresponding to the transformation image;
A person image registration means for receiving a person image including a face portion imaged in the terminal device, registering the received person image for each terminal device, and notifying the terminal device of a registration completion notification;
Based on the person image registered in the person image registration unit and the model transformation image registered in the model image registration unit, the person image to be transformed, the part to be transformed and the contents of the transformation are selected. Generating selection screen information for transmitting, transmitting the selection screen information to the terminal device, and receiving a selection result, a transformation target selection means;
A transformation image synthesizing unit that synthesizes a person image using the synthesis database based on the person image selected by the transformation target selection unit, the transformation part, and the transformation content;
A transformation result registration unit that registers the person image synthesized by the transformation image synthesis unit for each terminal device and notifies the terminal device of a transformation completion notification;
A simulation image generation apparatus comprising at least a transformation result transmission unit that reads a synthesized person image from the transformation result registration unit and transmits the synthesized person image to the terminal device in response to a request from the terminal device.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003112892A JP3798385B2 (en) | 2003-04-17 | 2003-04-17 | Simulation image generation system and apparatus |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003112892A JP3798385B2 (en) | 2003-04-17 | 2003-04-17 | Simulation image generation system and apparatus |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2004318591A JP2004318591A (en) | 2004-11-11 |
| JP3798385B2 true JP3798385B2 (en) | 2006-07-19 |
Family
ID=33472980
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2003112892A Expired - Fee Related JP3798385B2 (en) | 2003-04-17 | 2003-04-17 | Simulation image generation system and apparatus |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3798385B2 (en) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP2009868B1 (en) * | 2007-06-29 | 2016-09-07 | Alcatel Lucent | Method and system for improving the appearance of a person on the RTP stream coming from a media terminal |
-
2003
- 2003-04-17 JP JP2003112892A patent/JP3798385B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2004318591A (en) | 2004-11-11 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5005107B1 (en) | Data storage system | |
| US20050251463A1 (en) | Hairstyle suggesting system, hairstyle suggesting method, and computer program product | |
| JP6120467B1 (en) | Server device, terminal device, information processing method, and program | |
| JP2011022939A (en) | Hair style counseling system | |
| JP2001330806A (en) | Eyeglass frame synthesis system and eyeglass frame sales method | |
| KR20000037042A (en) | Automatic character producing system | |
| JP2011018115A (en) | Coordinate system, coordinate method and program | |
| JP2002339135A (en) | Fashion coordination method, fashion coordination system, central device, terminal device, and computer program | |
| KR102615458B1 (en) | Method for providing hairstyling service | |
| JP2013037533A (en) | Product information acquisition system and product information provision server device | |
| JP6275086B2 (en) | Server, data providing method, and server program | |
| JP2009199438A (en) | Image acquisition system | |
| JP2005228185A (en) | Character provision system | |
| JP2003108593A (en) | Squeezing retrieval device | |
| JP3798385B2 (en) | Simulation image generation system and apparatus | |
| JP3862673B2 (en) | Hair style selection system | |
| JP2009163465A (en) | Caricature illustration data provision system | |
| JP2002197330A (en) | Design system and customer management appointment method for beauty parlor and barber | |
| JP4140511B2 (en) | Composite image providing system, composite image generation program, information processing apparatus, and data carrier | |
| KR20090001665A (en) | How to wear virtual clothing | |
| JP2017228278A (en) | Server device, terminal device, information processing method, and program | |
| JP2001283085A (en) | Beauty system | |
| JP2020087143A (en) | Terminal device and system | |
| JP2009140047A (en) | Method and device for making composite picture | |
| JP2005248393A (en) | Try-on system and server device, user terminal and portable communication terminal used therefor |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20060411 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20060419 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090428 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100428 Year of fee payment: 4 |
|
| LAPS | Cancellation because of no payment of annual fees |