JP5628023B2 - キーワード入力に基づき、雰囲気、特に照明雰囲気を自動的に形成するための方法、システム、及び、ユーザーインターフェース - Google Patents

Description

本発明は、ユーザーがタイプするか又はユーザーが話したキーワードのようなキーワード入力に基づき、雰囲気、特に照明雰囲気を自動的に形成することに関する。

照明システムは、次第に高度で、フレキシブルおよび統合的なものになりつつあり、カラー照明およびダイナミックスを含む新しい形態の照明を可能にし、これによって単一の照明システムを用いて種々の多数の雰囲気を形成することが可能となる。更に、この雰囲気形成システムは、照明の他に匂いの発生および雰囲気に関するオーディオ−ビジュアルコンテントのレンダリングも含むことができる。このことは特に小売業界のような専門性の高い業界に当てはまるが、この新しい照明システムまたは、より一般的な雰囲気形成システムは、家庭の領域でも導入されている。照明の場合、このような変化は、ＬＥＤ照明（または固体照明−ＳＳＬ）の出現から刺激を受けている。この新しいタイプの照明は、カラー光の使用を容易にしている。このカラー光は特に、例えば店舗または家庭においても、魅力的な環境を形成するのに使用できる。

これら複雑な新しい雰囲気形成システム、特に照明システムの１つの問題は、これらシステムの多数の特徴に起因し、より複雑となる雰囲気形成の制御、例えば最新の照明システムにより発生される周辺光のカラーまたはビーム幅の制御にある。従って、照明デザイナーおよび「シノグラフィックアーキテクト（scenographic architects）」のようなエキスパートによって、高品位の雰囲気シーンが構成される。更に雰囲気形成をカスタム設定するには、かかるエキスパートの支援を必要とすることが多い。最新の雰囲気形成システム、例えば複雑な照明システムでは、エキスパートでない者が雰囲気形成を制御できることが望ましい。米国特許第7,031,920B2号明細書は、音声制御または音声認識だけでなく、かかるシステムと共に使用するためのシンタックスによっても、カラーに基づく照明の管理をするためのシステムおよび方法を開示している。

本発明の目的は、雰囲気形成システム、特に照明システムにおいて雰囲気、特に照明の雰囲気を自動的に形成することにある。

この目的は、独立請求項に記載の発明によって達成され、従属項には更なる実施形態が示されている。

本発明の基本的なアイデアは、雰囲気形成システム、例えば照明システムのユーザーがシステムにキーワードを入力するだけで、特定の雰囲気を自動的に形成できるようにすることである。本発明の実施形態では、キーワード、例えば「食べる」、「読む」、「リラックス」、「陽光」、「クール」、「パーティ」、「クリスマス」、「浜辺」をユーザーが話すか、またはタイプ入力でき、相互対話かつ遊び感覚で、多数の雰囲気を見つけたり、探査することが可能となる。本発明の実施形態によれば、キーワードに関連する雰囲気要素を見つけることは、種々の方法で行うことができる。例として、キーワードを所定の雰囲気特性にマッピングする（所定の）知識ベースを探索すること、画像を探索すること、およびこれら画像における雰囲気特性を見つけること、またはウェブサーファーが特定のキーワードと特定のカラーの関係、例えば「森林−緑色」、「海−青色」、「パーティ−カラフル」の間の関係を見つけることができるようにするセマンティックウェブ技術を挙げることができる。本発明によって、エキスパートでない者でも雰囲気シーンを設計または形成する際に、雰囲気形成システムにおいて所望する雰囲気の形成を管理することが可能となる。本発明は、感覚を生じさせる知覚的刺激、例えば周辺光のカラーおよび強度、周辺温度、種々の香り、音および像を発生できる任意のタイプの雰囲気形成システムにも実施できると認識すべきである。

本発明の一実施形態によれば、雰囲気形成システムにより雰囲気を自動的に形成するためのシステムが提供され、このシステムは、次の特徴、すなわち
受信したキーワードを、この受信したキーワードを示すデジタル信号に変換するキーワード入力受信手段と、
前記デジタル信号をコンピュータプロセスで使用可能なキーワード表示に変換するキーワード解読器と、
前記コンピュータプロセスで使用可能なキーワード表示を自動的に処理することにより、前記コンピュータプロセスで使用可能なキーワード表示に関連する雰囲気要素を見つける雰囲気要素ファインダーと、
前記見つかった雰囲気要素に応じ、前記雰囲気形成システムの設定を調節する前記雰囲気形成システムのための制御信号を発生する雰囲気形成手段コントローラとを備える。

このシステムにより、エキスパートでない者でも雰囲気形成システムの所定の技術的パラメータ、例えば照明システムの所定の照明ユニットの強度およびカラーを調節する代わりにキーワードを使用するだけで、特定の雰囲気の形成の制御をすることが可能となる。

本発明の一実施形態では、前記キーワード入力受信手段は、キーワードを入力するためのキーボードおよびマイクと、前記マイク信号から前記デジタル信号を発生するためのアナログ−デジタルコンバータとを備えることができる。

本発明の別の実施形態によれば、前記キーワード解読器は、前記キーボードを介して入力され、前記デジタル信号によって表示されたキーワードのスペルをチェックすると共に、スペルを補正することができ、前記キーワード解読器は、前記マイクを通して受信され、前記デジタル信号によって示された、話されたキーワードを、前記デジタル信号の前記コンピュータプロセスで使用可能なキーワード表示に変換するための自動音声認識モジュールを備えることができる。したがって、ユーザーのタイプミスおよびスペルミスを補正することができ、音声入力を使用することにより、簡単な処理が可能となり、この音声入力は自動音声認識（ＡＳＲ）によって自動的にコンピュータプロセスで使用可能なキーワード表示に変換される。

本発明の別の実施形態によれば、このシステムは、前記コンピュータプロセスで使用可能なキーワード表示に関連する１つ以上の代替キーワードを発生するキーワードエンリッチ手段を更に備えることができる。これによって、キーワードの数を増やすことが可能となるので、雰囲気要素ファインダーへの入力も増やすことができる。例えばキーワード「太陽」に対する、「暑い」、「明るい」、「日中」のような特徴に関連する同義語および「休日」、「海岸」のような活動に関連する同義語を代替キーワードとして発生できる。これによってキーワードの数を増やすことが可能となるだけでなく、キーワードの種類も増やすことが可能となり、この結果、雰囲気要素ファインダーによって見つけることができる雰囲気要素の探索結果が、より豊富になり得る。本発明の一実施形態では、前記キーワードエンリッチ手段は、同義語のデータベース、言語モデルまたはマインドマッピング技術、および／または関連する雰囲気と関連する用語とを互いにマッピングするドメイン固有のモデルを使用することにより、代替キーワードを発生できる。

本発明の別の実施形態によれば、前記キーワード解読器は、更に、
前記見つかった雰囲気要素に関する情報を含む前記雰囲気要素ファインダーからのフィードバック信号を受信し、
前記受信したフィードバック信号に基づき、キーワードエンリッチメントが必要であるかどうかを判断し、
キーワードエンリッチメントのために前記コンピュータプロセスで使用可能なキーワード表示を前記キーワードエンリッチ手段へ送り、
前記キーワードエンリッチ手段から前記コンピュータプロセスで使用可能なキーワード表示に関連する１つ以上の代替キーワードを受信し、
前記１つ以上の受信した代替キーワードを前記雰囲気要素ファインダーへ送り、前記１つ以上の受信した代替キーワードに関連する雰囲気要素を見つけることができる。

本発明のいくつかの実施形態によれば、雰囲気要素ファインダーを次のようにすることができる。第１実施形態では、前記雰囲気要素ファインダーは、前記コンピュータプロセスで使用可能なキーワード表示を使って知識ベースを探索でき、前記知識ベースは、キーワードを所定の雰囲気特性にマッピングできる。前記雰囲気要素ファインダーは、前記コンピュータプロセスで使用可能なキーワード表示と所定の雰囲気特性との間の関係をウェブサーファーが見つけることができるようにするセマンティックウェブ技術を使用できる。前記雰囲気要素ファインダーは、所定の雰囲気特性として前記コンピュータプロセスで使用可能なキーワード表示に関連する音、音楽および雰囲気音を見つけることができる。

第４の実施形態では、前記雰囲気要素ファインダーは、前記コンピュータプロセスで使用可能なキーワード表示を使って画像を探索すると共に、見つけた画像を分析し、所定の雰囲気特性にマッピングできる特性を見つけることができる。別の実施形態では、前記雰囲気要素ファインダーは、前記画像の特定の特徴を抽出し、所定の雰囲気特性にマッピングするよう、前記見つけた画像を分析できる。本発明の実施形態では、前記雰囲気要素ファインダーは、次のステップ、すなわち
どのオブジェクトが画像内の前方にあるか、更に前記画像のどの部分がバックグラウンドの一部であるかを検出することにより、画像をフォアグラウンドおよびバックグラウンド内の画像にセグメント化するステップと、
前記水平線が、前記画像内のバックグラウンド内のどこにあるかを検出し、前記検出された水平線に応じて前記バックグラウンドを上部領域と底部領域とに分割するステップと、
前のステップにおいて決定された各領域内のカラーの特徴を決定するステップと、
各領域の前記決定されたカラーの特徴を所定の雰囲気特性にマッピングするステップとを実行することにより、前記画像の特定の特徴を抽出できる。

別の実施形態によれば、本発明は、
デジタル画像データを受信する受信手段と、
前記受信手段から受信したデジタル画像データの特徴を抽出する画像の特徴抽出手段と、
前記抽出した特徴に応じ、前記雰囲気を自動的に形成するための信号を発生する、雰囲気制御信号発生手段とを備える、雰囲気を自動的に形成するための、特に上記本発明のシステムにおいて特に使用するための、雰囲気を自動的に形成するための制御デバイスに関する。

本発明の別の実施形態によれば、前記画像の特徴抽出手段は、
画像内のどのオブジェクトが前方にあるか、更に前記画像のどの部分がバックグラウンドの一部であるかを検出することにより、フォアグラウンドおよびバックグラウンド内の画像をセグメント化するステップと、
前記水平線が、前記画像内のバックグラウンド内のどこにあるかを検出し、前記検出された水平線に応じて前記バックグラウンドを上部領域と底部領域とに分割するステップと、
前のステップにおいて決定された各領域内のカラーの特徴を決定するステップと、
各領域の前記決定されたカラーの特徴を所定の雰囲気特性にマッピングするステップとを実行できる。

受信手段は、本発明の一実施形態に係わるカラースキャニングデバイスを含むことができる。このカラースキャニングデバイスを用いることにより、カラー画像を制御デバイスによって更に処理できるよう、デジタル画像データに変換することができる。

別の実施形態によれば、本発明は、画像捕捉信号の受信時に前記ディスプレイデバイスによってディスプレイされている画像を捕捉するための画像捕捉手段と、
前記画像捕捉信号を受信するための受信手段と、
デジタル画像データとして捕捉された画像を、上記本発明の制御デバイスへ送るための送信手段とを備える、画像ディスプレイデバイスに関する。

画像ディスプレイデバイスは、例えば液晶またはプラズマパネルテレビのようなテレビ、またはデジタルピクチャーフレームとすることができる。この画像ディスプレイデバイスは、本発明によれば、送信機として働くことができ、一方、本発明に係わる制御デバイスは、画像ディスプレイデバイスからの信号に対する受信機として働くことができる。従って、自動雰囲気形成のためのベースとしてユーザーが使用したいピクチャーを画像ディスプレイデバイスが示すときに、画像捕捉信号をスタートさせるだけで、雰囲気形成システムによる雰囲気の自動形成を容易に制御することができる。

本発明の一実施形態によれば、制御デバイスを画像ディスプレイデバイス内に一体化できる。例えばテレビまたはデジタルピクチャーフレームは、制御デバイスを具現化する電子回路、例えば制御デバイスの機能を実施するコンピュータプログラムを含むマイクロコントローラを備えることができる。

画像ディスプレイデバイスは、ボタンを押したときに、前記画像捕捉信号を発生するためのボタンを備えることができる。例えばテレビ内にこのボタン、例えばアンビエンス制御ボタンを組み込むことができる。テレビにあるこのアンビエンス制御ボタンを押すことにより、ユーザーはボタンを押しているときにディスプレイされている画像を捕捉し、この画像を雰囲気の自動形成に使用できる。

本発明の別の実施形態では、画像ディスプレイデバイスは、本発明のシステムと通信するためのインターフェースを含むことができる。このインターフェースは、例えば本システムの対応するインターフェースに接続するよう、有線または無線通信インターフェース、例えばＬＡＮ（ローカルエリアネットワーク）、ＵＳＢ（ユニバーサルシリアルバス）、ＩＥＥＥ１３９４またはＷＬＡＮ（無線ＬＡＮ）とすることができる。

本発明は、ボタンを押したときに、前記画像捕捉信号を発生し、これを送り出す前記ボタンを備える、上記本発明の画像ディスプレイデバイスのためのリモコンにも関する。例えばこのリモコンデバイスは、別の特徴的部品として、ボタンおよび画像捕捉信号を発生し、送り出すための回路を含むテレビまたはデジタルピクチャーフレームのための標準的リモコンとすることができる。このリモコンは、赤外線通信接続または無線高周波送信により、テレビまたはデジタルピクチャーフレームへ、発生した画像捕捉信号を送信できる。

本発明は、更に
受信したキーワードを、この受信したキーワードを示すデジタル信号に変換するステップと、
前記デジタル信号をコンピュータプロセスで使用可能なキーワード表示に変換するステップと、
前記コンピュータプロセスで使用可能なキーワード表示を自動的に処理することにより、前記コンピュータプロセスで使用可能なキーワード表示に関連する雰囲気要素を見つけるステップと、
前記見つかった雰囲気要素に応じ、前記雰囲気形成システムの設定を調節する前記雰囲気形成システムのための制御信号を発生するステップとを備える、雰囲気を自動的に形成するためのシステムにも関する。

本発明の別の実施形態によれば、コンピュータプログラムが提供される。このコンピュータプログラムは、コンピュータによって実行される際に本発明に係わる方法を実行するようにイネーブルできる。

本発明の一実施形態によれば、本発明に係わるコンピュータプログラムを記憶するための記録支持体、例えばＣＤ−ＲＯＭ、ＤＶＤ、メモリカード、フロッピー（登録商標）ディスク、または類似する記憶メディアを提供できる。

以下説明する実施形態を参照すれば、本発明の上記およびそれ以外の特徴が明らかとなり、細部について知ることができよう。

以下、実施形態を参照し、本発明についてより詳細に説明する。しかしながら、本発明はこれら実施形態だけに限定されるものではない。

図１は、本発明に係わる雰囲気形成システムにより、雰囲気を自動的に形成するためのシステムの一実施形態を示す。 図１のシステムのキーワード解読器によって実行される、キーワードエンリッチメントプロセスのフローチャートを示す。 図１の雰囲気要素ファインダーの抽出手段によって実行される画像の固有の特徴を抽出するためのプロセスのフローチャートを示す。 本発明の一実施形態に係わるシステムにおけるピクチャーの処理を示す。 本発明の一実施形態に係わるシステムにおけるピクチャーの処理を示す。 本発明の一実施形態に係わるシステムにおけるピクチャーの処理を示す。

次の説明では、雰囲気なる用語は、知覚を生じさせる感覚的刺激、例えば周辺光のカラーおよび強度、周辺温度、種々のシーン、音および像の任意の組み合わせを意味する。次の説明では、図面内の（機能的に）同様または同一な要素は、同一の参照番号で表示する。

図１は、キーワードにマッチする特定の雰囲気、例えば照明雰囲気を形成するためのキーワードをユーザーが使用できるようにするシステムを示す。かかるシステムは、ユーザーがキーワードを使用するだけで、特定のロケーションにおいて雰囲気を変えることができるようにする。例えばユーザーは、
・特定のユーザーの活動、「読む」、「食べる」、「テレビを観る」、「リラックス」；
・特定の季節またはイベント、例えば「クリスマス」、「パーティ」、．．．；
・社会的背景の種類、例えば家族、パーティ；
・地理的ロケーションまたは景色、例えばシベリア、トスカーナ、サハラ、海岸、森林、日没；
などについて述べることができる。

このシステムは、雰囲気の探索も可能にする。例えばユーザーが、相互対話および遊び感覚で多数の雰囲気を見つけたり、探査できるようにする。システムの実現例では、このシステムは、キーワード入力受信手段１２、キーワード解読器１４、雰囲気要素ファインダー１８、ファインダー形成手段コントローラ２２、キーワードエンリッチ手段２６およびデジタル画像データ３４のための受信手段３２を含む。

話されたキーワードまたはタイプ入力されたキーワードを受信し、受信されたキーワードを示すデジタル信号１３を発生するようになっている，キーワード入力受信手段１３、例えばデジタル−アナログコンバータ付きマイクおよびキーボードが設けられている。このキーワード入力受信手段１２は、テレビセット１８の無線リモコン５０内に一体化されている。従って、ユーザーはテレビセット３８および雰囲気形成システム１０に対して１つのリモコン５０しか有しない。キーワード解読器１４に対する無線接続を介し、例えば赤外線リンクまたは無線リンクを介してデジタル信号１３を送信できる。

キーワード解読器１４は、デジタル信号１３を受信し、表示されたキーワードがコンピュータプロセスで使用可能なキーワード表示１６となるように受信信号を処理する。このキーワード解読器１４は、コンピュータによって実行されるコンピュータプログラムとして構成することが好ましい。キーワード解読器１４はテキスト入力システムのためにキーワードのスペルをチェックし、補正することができ、話されたキーワードのための自動音声認識モジュールを含む。この解読器は、雰囲気要素ファインダー１８からのフィードバック信号２８に基づき、キーワードエンリッチメント（豊富化）が必要であるかどうかの判断も行う。例えば特定のキーワードに対する雰囲気特性または要素が見つからない場合、キーワード解読器１４はキーワード１６をキーワードエンリッチ（豊富化）手段２６へ送る。

図２にはキーワード解読器１４によって実行されるキーワードエンリッチメントのためのプロセスが示されている。ステップＳ１０では、キーワード解読器１４は、見つかった雰囲気要素２０に関する情報を含む雰囲気要素ファインダー１８からのフィードバック信号２８を受信する。次にステップＳ１２では、キーワード解読器１４は受信したフィードバック信号２８に基づき、キーワードエンリッチメントが必要であるかどうかを判断する。例えば所望する雰囲気を形成するために十分な雰囲気要素が見つからないことをフィードバック信号２８が示したとき、キーワード解読器１４は、キーワードエンリッチメントが必要であると判断できる。次のステップＳ１４では、キーワード解読器１４は、コンピュータプロセスによって可能なキーワード表示１６をキーワードエンリッチメントのためのキーワードエンリッチ手段２６へ送る。次のステップＳ１６では、キーワード解読器１４は、キーワードエンリッチ手段２６からのコンピュータプロセス可能なキーワード表示１６に関連する１つ以上の代替キーワードを受信する。最後のステップＳ１８では、キーワード解読器１４は受信した１つ以上の代替キーワードを雰囲気要素ファインダー１８へ送り、受信した１つ以上の代替キーワードに関連する雰囲気要素２０を見つける。

キーワードエンリッチ手段２６は、所定のキーワード１６に基づき、１つ以上の別個の関連するキーワードを発生できるサブシステムとなっている。このキーワードの発生は、種々の方法で行うことができる。例えばキーワードエンリッチ手段２６は、同義語のデータベース（シソーラス）、言語モデルまたはマインドマッピング技術もしくは関連する雰囲気に関連した用語を互いにマッピングするドメイン固有のモデルを使用できる。例えばキーワードである「雪」は、関連するワード、例えば白色、冬、氷などを発生できる。キーワードエンリッチ手段２６は、コンピュータによって実行されるコンピュータプログラムとして実現することが好ましく、インターネット接続５４を通してインターネット５２にアクセスできる。ここで使用する「インターネット」とは、ワールドワイドウェブ（ｗｗｗ）を意味することが好ましいが、他の任意のタイプのコンピュータネットワーク、例えばイントラネットでもよい。

雰囲気要素ファインダー１８は、テキストキーワード、すなわちファインダー１８がキーワード解読器１４から受信したコンピュータプロセスで可能なキーワード１６を使用し、キーワードにマッチする雰囲気要素２０を見つける。これら要素２０は、所望する雰囲気、例えば所望する照明雰囲気（例えばカラー、明るさ、ダイナミックス、プロミネンスなど）の特性でもよいし、または雰囲気形成システムによってレンダリングされるようにダウンロードできるコンテント部分（例えばデジタル画像、音楽または音）のいずれかでよい。雰囲気要素ファインダー１８は、コンピュータによって実行されるコンピュータプログラムとして実現することが好ましく、インターネット接続５４を介してインターネット５２にアクセスできる。

雰囲気の要素を見つけることは、次のような種々の方法で実行できる。

・キーワードを所定の雰囲気特性にマッピングでき、例えばインターネット５２を通してアクセスできる「所定の」知識ベースを検索するのにキーワードを使用できる。

・（例えばインターネット５２内でアクセスできる画像用探索エンジンを使って）画像の検索し、画像を分析し、画像内の（一般的な）特性、例えば顕著な画像セグメントのカラーおよび明るさを見つけるためにキーワードを使用できる。この画像の特性は、画像のスタイルおよび「ムード」にマッチする雰囲気が形成されるように、照明システムの設定にマッピングされる。

・インターネット５２を通して特性のキーワードと特性のカラーとの間の関係をウェブサーファーが見つけることができるようにするセマンティックウェブ技術を使用することも可能である。例えば「森」なる用語は、カラー名「緑」も含むウェブドキュメントまたは顕著なカラーとして緑を有する画像を含むウェブドキュメント上で見つけられることが多いと認めることができる。

・キーワードを使ってローカルデータベース内またはウェブ上の音またはいわゆる「サウンドスケープ」（雰囲気音）を見つけることができる。

雰囲気要素ファインダー１８は、受信されたデジタル画像データ３４の特性を抽出するようになっている画像特性抽出手段３６を含む。以下、この抽出手段３６の機能について説明する。更に、雰囲気要素ファインダー１８は、インターネット接続５４を通してインターネット５２にもアクセスでき、インターネット５２を通して、またはデジタル画像データ３４を受信するようになっている受信手段３２からデジタル画像データ３４を受信できる。

雰囲気形成システム１０を制御するように雰囲気形成手段コントローラ２２が設けられており、このコントローラ２２は、雰囲気形成システム１０のための制御信号２４を発生する。制御信号２４は、雰囲気要素ファインダー２８によって発見され、雰囲気形成手段コントローラ２２へ送信された雰囲気要素２０に応じ、雰囲気形成システム１０の設定を調節する。雰囲気形成システム１０は、種々のサブシステム、例えば照明システムと、匂い発生システムと、電子ディスプレイレンダリングシステムと、オーディオシステムとの統合システムとすることができる。この雰囲気形成システムは、雰囲気を容易に形成する必要を満たすための種々の領域、例えばリビングルーム、寝室、浴室、ハイエンドな店舗、ホテル客室などにおいて使用できる。

本発明は、雰囲気形成システム、例えば照明システムを制御するための相互作用機構にも関連する。より詳細に説明すれば、本発明は、次に説明するように、雰囲気形成システムを制御するのにユーザーが画像を選択する解決方法を開示するものである。雰囲気要素ファインダー１８の画像特性抽出手段３６により、特定の特徴が抽出できるよう、選択されたピクチャーを自動的に分析できる。次に、これら特性は、この照明システムによって適当なアンビエンス（周辺環境）を実現できるよう、雰囲気形成システムのうちの雰囲気の範囲、例えば照明システム内のライトの範囲にマッピングされる。人はピクチャーまたは画像を所定のアンビエンスに関連付けることが多い。従って、本発明はアンビエンスを設定するのにピクチャーを使用する可能性をユーザーに提供するものである。ユーザーは、記憶されている組のピクチャーからピクチャー１００（図４Ａ）を選択できるが、ユーザーは例えばデジタルカメラからの新しい画像を挿入することもできる。

画像特徴抽出手段３６は、選択されたピクチャー１００のうちのデジタル画像データ３４を受信し、所定の雰囲気、例えば特定の光のアンビエンスを実現するための基礎として画像を使用できるよう、選択されたピクチャー１００を特定の態様で分析する。光のアンビエンスでは、全体のバックグラウンド照明においてどのカラーを使用するかを知ることが重要であり、より詳細には、ある種の水平線を作成することが多く、部屋の上部部分は部屋の下部部分と異なるように照明される。更にアンビエンス内で、より深い深みを生じさせるためにアクセント照明が追加される。従って、選択された画像１００内でフォアグラウンド（前景）領域１０２およびバックグラウンド（背景）領域１０４が決定され、次にこれら領域は照明システムにマッピングするための特徴を見つけるように分析される（図４Ｂおよび４Ｃ参照）。このことは、フローチャートが図３に示されている自動プロセスによって実行され、このプロセスは画像特徴抽出手段３６によって実行される。このプロセスは、対の基本的なステップを含む。

ステップＳ２０：フォアグラウンド／バックグラウンドのセグメント化
このシステムは、前方にどのオブジェクト１０２が存在し、ピクチャーのどの部分がバックグラウンド１０４の一部となっているかを検出する。この技術は、例えばピクチャー１００内の領域のサイズおよび領域のシャープさを使用できる。このステップの結果、フォアグラウンド１０２となっている領域（すなわち、合焦している領域）およびバックグラウンド１０４となっている画像の領域が定義される。フォアグラウンドが検出されない場合もあり得る。

ステップ２２および２４：水平線の検出およびバックグラウンドの分割
このシステムは、水平線１０６がバックグラウンド１０４内のどこにあるかを判断する。次に、バックグラウンド１０４を上部領域１０８と、底部領域１１０とに分割する。水平線が検出されない場合もあり得る。この場合、バックグラウンドは単一領域のままである。

ステップ２６：カラー分析
前の２つのステップにおいて決定された各領域１０２、１０８、１１０を別々に分析する。これら領域では、色合い、明るさおよび飽和度を決定する。このことは、平均値またはドメイン値に基づいて行うことができる。

ステップ２８：マッピング
領域１０２、１０８、１１０の決定された特徴を、照明システム内のライトにマッピングされる。画像内のバックグラウンドの上部部分１０８は、部屋の上部部分を照明する全体の照明にマッピングされる。この目的のために、ウォールウォッシャーまたはコーブライトを使用できる。画像内のこの領域内のカラーは、カラー変換マトリックスを使って、使用されるランプのカラーに変換される。画像内のバックグラウンドの下部部分１１０は、部屋の下部部分を照明する全体の照明にマッピングされる。この目的のために、ウォールウォッシャーまたはコーブライトを使用できる。画像内のこの領域内のカラーは、カラー変換マトリックスを使って、部屋の下部部分を照明するために使用されるランプのカラーに変換できる。水平線が検出されない場合、全体のすべての照明は同じカラーおよび明るさを有することになる。最後に、部屋内の照明にアクセントをつけるために、画像１００内のフォアグラウンド１０２がマッピングされる。この目的のために、スポットライトまたはライトオブジェクトを使用できる。画像１００内のフォアグラウンド領域１０８、１１０内のカラーも、カラー変換マトリックスを使ってアクセント照明として使用されるランプのカラーに変換できる。

種々の経路を介し、システムからデジタル画像データ３４を発生したり受信したりできる。特にユーザーインターフェース、例えばデジタル写真フレームのような小型スクリーンに基づくデバイス、またはテレビセット３８のような大型スクリーンに基づくデバイスにより、分析のためにピクチャー１００を選択できる。ユーザーインターフェースは、ＵＳＢのような簡単なものでもよいし、またはデジタルカメラ用のビデオ接続でもよい。ユーザーは、ＵＳＢ接続によりアンビエンスを形成するためにすべての画像を選択するのに使用されるユーザーインターフェース上で、カメラから画像を選択できる（ＵＳＢ接続を介してＰＣからカメラにアクセスすることに、より類似する）。ユーザーはカメラから画像の記憶された組に画像を追加することもできる。これとは異なり、ユーザーはカメラ自体で画像を選択することもできる（複合ビデオ接続部を有するテレビで、カメラからの画像を見ることに類似する）。このデジタル画像データ３４は、ビデオ接続を介して、システムのデジタル画像データ３４のための受信手段３２へ直接ビデオ接続を介して送ることができる。更に別の実施形態として、ユーザーが入力としてプリントされた画像または写真を使用できるよう、例えば壁またはフラットベッドスキャナー内に組み込まれたカラースキャナーとして、受信手段２３を実現することもできる。

本発明によれば、ユーザーに便利になるように、雰囲気形成システムを制御するための容易な相互対話機構を設けることができる。より詳細には、本発明によれば、画像ディスプレイデバイス、例えばテレビスクリーンまたはデジタルフォトフレーム、またはその他の任意の画像ディスプレイスクリーンを使って、１回の動作で雰囲気形成システム、例えば照明システムを制御できる。画像ディスプレイデバイスは、雰囲気またはアンビエンスの形成を即座に制御するための「アンビエンス」ボタンを備える。このボタンを押すと、部屋内の照明システムを使って雰囲気またはアンビエンスをレンダリングするために、ピクチャーディスプレイデバイスによってそのときに示されている画像を使用する。かかるユーザーインターフェース制御要素によってユーザーは、例えば照明システムの照明アンビエンスを容易に調節することが可能となる。

図１では、ピクチャーディスプレイデバイスとしてテレビセット３８が設けられている。テレビセット３８は、「アンビエンス」ボタン４８を備える。更にテレビセット３８のリモコン５０も「アンビエンス」ボタン４８を備える。テレビセット３８上のボタン４８を押すと、そのときにテレビセット３８のスクリーンに示されている画像が、送信手段４６によりデジタル画像データ３４として、デジタル画像データのための受信手段３２へ送信される。受信手段３２は、受信されたデジタル画像データをテレビセット３８から画像特徴抽出手段３６へ転送し、図３および４Ａ〜Ｃを参照してこれまで説明したように、更に処理することが可能となる。リモコン５０上のボタン４８を押すと、画像キャプチャー信号４２が、受信手段４４、例えばリモコン５０からの制御コマンドを受信するためのテレビセットの赤外線受信手段へ送信される。この受信手段４４は、テレビセット３８のスクリーン上にそのときにディスプレイされているピクチャーの捕捉を開始し、捕捉した画像のデジタル画像データ３４を送信するための信号を、送信手段４６へ送る。

図３を参照して説明したように、捕捉されたピクチャーの分析をテレビセット３８内で局部的に実行することもできると認識すべきである。従って、テレビセット３８が、例えば雰囲気要素ファインダー１８の画像特徴抽出手段３６を含んでもよいし、または図３に示されるような画像特徴抽出プロセスを実行するようにしてもよい。ちなみに、任意のタイプのデジタルピクチャーデバイスは、ディスプレイされ、捕捉されたピクチャーの特徴を抽出するための機能、例えばデジタルフォトフレーム、デジタル写真カメラまたはピクチャーをディスプレイし、画像特徴抽出機能を奏するプログラムを実行するパソコンを含むことができる。更にこれらピクチャーディスプレイデバイスは、デジタル画像データ３４を送信するか、または画像特徴抽出の結果を送信するための送信手段４６を含むことができる。

選択された画像が照明システム全体（例えば１つの部屋）に影響するという点で、ピクチャーディスプレイデバイスと雰囲気形成システムの間のリンクを、固定された接続にすることができる。他方、選択された画像は、ピクチャーディスプレイの直接の周辺、例えばテレビセット３８のアンビエンスに直接影響するという点で、ピクチャーディスプレイデバイスと雰囲気形成システムとの間のリンクをよりフレキシブルにすることもできる。

本発明の機能の少なくとも一部、例えばキーワード解読器１４、キーワードエンリッチ手段２６、雰囲気要素ファインダー１８、画像の特徴抽出手段３６および雰囲気形成手段コントローラ２２の機能は、ハードウェアまたはソフトウェアで実行できる。ソフトウェアで実行する場合、単一または多数の標準的なマイクロプロセッサまたはマイクロコントローラコンフィギュレーションを使用できる。本発明は、単一のアルゴリズムでも、または多数のアルゴリズムでも実施できる。

「含む」、「備える」なる単語は、他の要素またはステップが存在することを排除するものではなく、更に「１つの」または「ある」なる単語は、複数存在することを排除するものでないと理解すべきである。更に請求項における参照符号が本発明の範囲を限定すると見なすべきでない。

１０ 雰囲気形成システム
１２ キーワード入力受信手段
１３ デジタル信号
１４ キーワード解読器
１６ キーワード表示
１８ 雰囲気要素ファインダー
２０ 雰囲気要素
２２ 雰囲気形成手段コントローラ
２４ 制御信号
２６ キーワードエンリッチ手段
２８ フィードバック信号
３４ デジタル画像データ
３８ 画像ディスプレイデバイス
４０ 画像捕捉手段
４２ 画像捕捉信号
４４ 受信手段
４６ 送信手段
４８ ボタン
５０ リモコン
１００ 画像
１０２ フォアグラウンド
１０４ バックグラウンド
１０６ 水平線

Claims (10)

1. 雰囲気形成システムにより雰囲気を自動的に形成するためのシステムであって、
   受信したキーワードを、この受信したキーワードを示すデジタル信号に変換するキーワード入力受信手段と、
   前記デジタル信号をコンピュータプロセスで使用可能なキーワード表現に変換するキーワード解読器と、
   前記コンピュータプロセスで使用可能なキーワード表現を自動的に処理することにより、前記コンピュータプロセスで使用可能なキーワード表現に関連する雰囲気要素を見つける雰囲気要素ファインダーと、
   前記見つかった雰囲気要素に応じ、前記雰囲気形成システムの設定を調節する前記雰囲気形成システムのための制御信号を発生する雰囲気形成手段コントローラと、
   前記コンピュータプロセスで使用可能なキーワード表現に関連する１つ以上の代替キーワードを生成するキーワードエンリッチ手段と、を備え、
   前記キーワード解読器は、
   前記見つかった雰囲気要素に関する情報を含む、前記雰囲気要素ファインダーからのフィードバック信号を受信し、
   前記受信したフィードバック信号に基づき、キーワードエンリッチメントが必要であるかどうかを判断し、
   キーワードエンリッチメントのために前記コンピュータプロセスで使用可能なキーワード表現を前記キーワードエンリッチ手段へ送信し、
   前記キーワードエンリッチ手段から前記コンピュータプロセスで使用可能なキーワード表現に関連する１つ以上の代替キーワードを受信し、
   前記１つ以上の受信した代替キーワードを前記雰囲気要素ファインダーへ送信し、前記１つ以上の受信した代替キーワードに関連する雰囲気要素を見つけるように構成されている、
   雰囲気を自動的に形成するためのシステム。
2. 前記キーワード入力受信手段は、キーワードを入力するためのキーボードおよびマイクと、前記マイク信号から前記デジタル信号を発生するためのアナログ−デジタルコンバータとを備え、
   前記キーワード解読器は、前記キーボードを介して入力され、前記デジタル信号によって表現されたキーワードのスペルをチェックすると共に、スペルを補正し、前記キーワード解読器は、前記マイクを通して受信され、前記デジタル信号によって示された話されたキーワードを、前記デジタル信号の前記コンピュータプロセスで使用可能なキーワード表現に変換するための自動音声認識モジュールを備える、請求項１に記載のシステム。
3. 前記キーワードエンリッチ手段は、同義語のデータベース、言語モデルまたはマインドマッピング技術、および／または関連する雰囲気と関連する用語とを互いにマッピングするドメイン固有のモデルを使用することにより、代替キーワードを発生する、請求項１又は２に記載のシステム。
4. 前記雰囲気要素ファインダーは、前記コンピュータプロセスで使用可能なキーワード表現を使って知識ベースを探索し、前記知識ベースは、キーワードを所定の雰囲気特性にマッピングする、請求項１乃至３の何れか１項に記載のシステム。
5. 前記雰囲気要素ファインダーは、
   前記コンピュータプロセスで使用可能なキーワード表現と所定の雰囲気特性との間の関係をウェブサーファーが見つけることができるようにするセマンティックウェブ技術を使用し、
   所定の雰囲気特性として前記コンピュータプロセスで使用可能なキーワード表現に関連する音、音楽および雰囲気音を見つけ、
   前記コンピュータプロセスで使用可能なキーワード表現を使って画像を探索すると共に、見つけた画像を分析し、所定の雰囲気特性にマッピングできる特性を見つけ、
   前記画像の特定の特徴を抽出し、所定の雰囲気特性にマッピングするよう、前記見つけた画像を分析することの１つ以上を実行するように構成されている、請求項１乃至４の何れか１項に記載のシステム。
6. 前記雰囲気要素ファインダーは、
   どのオブジェクトが画像内の前方にあるか、更に前記画像のどの部分がバックグラウンドの一部であるかを検出することにより、画像をフォアグラウンドおよびバックグラウンド内の画像をセグメント化するステップと、
   前記水平線が、前記画像内のバックグラウンド内のどこにあるかを検出し、前記検出された水平線に応じて前記バックグラウンドを上部領域と底部領域とに分割するステップと、
   前のステップにおいて決定された各領域内のカラーの特徴を決定するステップと、
   各領域の前記決定されたカラーの特徴を所定の雰囲気特性にマッピングするステップとを実行することにより、前記画像の特定の特徴を抽出するように構成されている、請求項５に記載のシステム。
7. 前記請求項１乃至６の何れか１項に記載のシステムにおいて特に使用するための、雰囲気を自動的に形成するための制御デバイスにおいて、
   デジタル画像データを受信する受信手段と、
   前記受信手段から受信したデジタル画像データの特徴を抽出する画像の特徴抽出手段と、
   前記抽出した特徴に応じ、前記雰囲気を自動的に形成するための信号を発生する、雰囲気制御信号発生手段とを備え、
   前記画像の特徴抽出手段は、
   画像内のどのオブジェクトが前方にあるか、更に前記画像のどの部分がバックグラウンドの一部であるかを検出することにより、フォアグラウンドおよびバックグラウンド内の画像をセグメント化するステップと、
   前記水平線が、前記画像内のバックグラウンド内のどこにあるかを検出し、前記検出された水平線に応じて前記バックグラウンドを上部領域と底部領域とに分割するステップと、
   前のステップにおいて決定された各領域内のカラーの特徴を決定するステップと、
   各領域の前記決定されたカラーの特徴を所定の雰囲気特性にマッピングするステップとを実行する、
   雰囲気を自動的に形成するための制御デバイス。
8. 雰囲気形成システムにより雰囲気を自動的に形成するための方法であって、
   受信したキーワードを、この受信したキーワードを示すデジタル信号に変換するステップと、
   前記デジタル信号をコンピュータプロセスで使用可能なキーワード表現に変換するステップと、
   前記コンピュータプロセスで使用可能なキーワード表現を自動的に処理することにより、前記コンピュータプロセスで使用可能なキーワード表現に関連する雰囲気要素を見つけるステップと、
   前記見つかった雰囲気要素に応じ、前記雰囲気形成システムの設定を調節する前記雰囲気形成システムのための制御信号を発生するステップとを備え、
   見つかった雰囲気要素に関する情報を含む、雰囲気要素ファインダーからのフィードバック信号に応答して、キーワードエンリッチメントのために前記コンピュータプロセスで使用可能なキーワード表現に関する１つ以上の代替キーワードを生成し、前記１つ以上の代替キーワードに関連する雰囲気要素を見つけるようにした、
   方法。
9. コンピュータにより実行される際に請求項８記載の方法を実行するようイネーブルされるコンピュータプログラム。
10. 請求項９記載のコンピュータプログラムを記憶する記録支持体。

Images