JP6521864B2 - 携帯電子デバイスを用いた方法、携帯電子デバイス、およびコンピュータ・プログラム - Google Patents

Description

関連出願の相互参照
本出願は、２０１２年１１月２７日に出願された「ＭＥＴＨＯＤ ＡＮＤ ＡＰＰＡＲＡＴＵＳ ＦＯＲ ＴＡＧＧＩＮＧ ＭＥＤＩＡ ＷＩＴＨ ＩＤＥＮＴＩＴＹ ＯＦ ＣＲＥＡＴＯＲ ＯＲ ＳＣＥＮＥ」という名称の米国特許出願第１３／６８６，４３３号に基づき、優先権を主張するものであり、その開示は、参照により全体が本明細書に組み込まれる。

本発明は、一般に、少なくとも１つのカメラを含む電子デバイス、および画像処理を行う電子デバイスに関し、より詳細には、画像を処理する電子デバイスであって、少なくとも１つのカメラを有する電子デバイスが前方画像および後方画像を取得し処理する、電子デバイスに関する。

スマートフォンはしばしば、反対方向に向いた２つのカメラを有する。初期のスマートフォンは、主に、携帯情報端末（ＰＤＡ）と移動電話またはカメラフォンとの機能を組み合わせていた。今日のモデルは、携帯メディア・プレイヤ、低性能コンパクト・デジタル・カメラ、ポケット・ビデオ・カメラ、および全地球測位システム（ＧＰＳ）ナビゲーション・ユニットの機能も組み合わせる役割をする。また、最新のモデルは、典型的には、高解像度タッチ・スクリーン、モバイルに最適化されたサイトだけでなく標準的ウェブ・ページにアクセスし適切に表示することができるウェブ・ブラウザ、およびＷｉ−Ｆｉおよびモバイル・ブロードバンドを介する高速データ・アクセスを含む。このような機能の統合によって、現在では莫大な数の能力および機能が開発および実装の対象となっている。

米国特許出願第１３／６８６，４３３号

本発明は、携帯電子デバイスを用いた方法、携帯電子デバイス、およびコンピュータ・プログラムを提供する。

一実施形態では、電子デバイスを用いた方法が開示される。この方法は、メモリに結合されたプロセッサを有する電子デバイスを用いて、電子デバイスの前面カメラからの前方画像、および電子デバイスの後面カメラからの後方画像を同時期に（contemporaneously）取得するステップを含む。随意に、同時期に取得するステップは、単一のトリガ（たとえば、単一トリガ・イベント）に応答する。この方法はさらに前方画像内に後方画像を、または後方画像内に前方画像を埋め込み、それにより合成画像を作成するステップを含む。

別の実施形態では、携帯電子デバイスが、前面カメラと、後面カメラと、コンピュータ命令を記憶するメモリと、メモリ、前面カメラ、および後面カメラに通信可能に結合されたプロセッサとを含み、プロセッサは、コンピュータ命令を実行することに応じて動作を行う。動作は、前面カメラからの前方画像および後面カメラからの後方画像を同時期に取得することと、前方画像内に後方画像を埋め込み、または後方画像内に前方画像を埋め込み、それにより合成画像を作成することとを含むことができる。

さらに別の実施形態では、コンピュータ可読記憶媒体が、コンピュータ命令を含み、コンピュータ命令は、プロセッサによって実行されることに応じて、携帯電子デバイスの前面カメラからの前方画像および後面カメラからの後方画像を同時期に取得することと、前方画像内に後方画像を埋め込み、または後方画像内に前方画像を埋め込み、それにより合成画像を作成することとを含む動作を、プロセッサに行わせる。

添付の図面では、個々の図面にわたって同様の参照番号は同一または機能的に同様の要素を示し、添付の図面は、以下の詳細な説明とともに本明細書に組み込まれその一部を形成し、さらに種々の実施形態を例示し、すべて本発明による種々の原理および利点を説明する役割をする。

本発明の一実施形態による携帯電子デバイスの一例を示すブロック図である。 本発明の一実施形態による別の携帯電子デバイスの一例を示す図である。 本発明による種々の方法実施形態を示す動作フロー図である。 本発明の種々の実施形態による、後面カメラ、前面カメラ、または両方に関連付けられた情報を表示する携帯電子デバイスに関連付けられたディスプレイの一例を示す図である。 本発明の種々の実施形態による、後面カメラ、前面カメラ、または両方に関連付けられた情報を表示する携帯電子デバイスに関連付けられたディスプレイの一例を示す図である。 本発明の種々の実施形態による、後面カメラ、前面カメラ、または両方に関連付けられた情報を表示する携帯電子デバイスに関連付けられたディスプレイの一例を示す図である。 本発明の種々の実施形態による、後面カメラ、前面カメラ、または両方に関連付けられた情報を表示する携帯電子デバイスに関連付けられたディスプレイの一例を示す図である。 本発明の一実施形態によるワイヤレス・デバイスの詳細を示すブロック図である。

図１は、本発明の種々の実施形態に適用可能な動作環境１００の一例を示す。図１は、通信デバイス１００のような携帯電子デバイスの説明のための例を示す。通信デバイス１００は、送信器部分および受信器部分を有する有線またはワイヤレスあるいはその両方のトランシーバ１０２（本明細書ではトランシーバ１０２）、ユーザ・インターフェース（ＵＩ）１０４、電源１１４、位置受信器１１６、後面カメラ１１８、前面カメラ１２０、メモリ１２２、ならびに、通信デバイス１００の動作を管理するためのコントローラ１０６を含むことができる。カメラ１１８または１２０は、電荷結合素子（ＣＣＤ）またはスマートフォンで一般に使用される他の撮像素子のうちの１つまたは複数を含むことができる。カメラは、反対方向に向くことができ、または異なるように位置合わせまたは配向されてもよいが、一般的には、一方のカメラが撮影者の画像を取得し、他方の１つまたは複数のカメラはビューまたはシーンを取得し、ビューまたはシーンは、ディスプレイまたはファインダを通して直接または間接的に外向きに撮影者に可視とすることができる。トランシーバ１０２は、短距離または長距離ワイヤレス・アクセス技術、少数の例として、ブルートゥース、ＺｉｇＢｅｅ、ＷｉＦｉ、デジタル強化コードレス通信（Digital Enhanced Cordless Telecommunications：ＤＥＣＴ）、またはセルラ通信技術などをサポートすることができる。セルラ技術は、たとえば、符号分割多重アクセス１Ｘ（code division multiple access-1X：ＣＤＭＡ−１Ｘ）、ユニバーサル移動電話システム／高速ダウンリンク・パケット・アクセス（Universal Mobile Telephone System/High Speed Downlink Packet Access：ＵＭＴＳ／ＨＳＤＰＡ）移動通信用グローバル・システム／汎用パケット無線システム（Global System for Mobile/General Packet Radio System：ＧＳＭ／ＧＰＲＳ）、時分割多重アクセス／ＧＳＭ環境拡張データ（time division multiple access/Enhanced Data GSM Environment：ＴＤＭＡ／ＥＤＧＥ）、エボリューション・データ最適化（Evolution Data Optimized：ＥＶ／ＤＯ）、マイクロ波アクセスのための世界的相互運用（Worldwide Interoperability for Microwave Access：ＷｉＭＡＸ）、ソフトウェア定義無線（Software Defined Radio：ＳＤＲ）、ロング・ターム・エボリューション（Long Term Evolution：ＬＴＥ）、ならびに将来生じる他の次世代ワイヤレス通信技術を含むことができる。トランシーバ１０２はまた、回線交換有線アクセス技術（公衆交換電話網（ＰＳＴＮ）など）、パケット交換有線アクセス技術（伝送制御プロトコル／インターネット・プロトコル（ＴＣＰ／ＩＰ）、ボイス・オーバ・インターネット・プロトコル（ＶｏＩＰ）など）、およびこれらの組み合わせをサポートするようにも適合され得る。

ＵＩ１０４は、通信デバイス１００の動作を操作するためのローラ・ボール、光学ナビゲーション・モジュール（すなわちトラックパッド）、ジョイスティック、マウス、またはナビゲーション・ディスクなどのナビゲーション機構を有する、押下可能、タッチセンサ式、または仮想のキーパッド１０８を含むことができる。キーパッド１０８は、通信デバイス１００のハウジング組立体の一体部分であってよく、あるいは、接続された有線インターフェース（ユニバーサル・シリアル・バス（ＵＳＢ）ケーブルなど）、またはたとえばブルートゥースをサポートするワイヤレス・インターフェースにより、通信デバイス１００に動作可能に結合された独立したデバイスであってもよい。キーパッド１０８は、電話で一般に使用される数字キーパッドまたは英数字キーを有するＱＷＥＲＴＹキーパッドあるいはその両方を表すことができる。キーパッド１０８はまた、単一のボタンまたはスイッチ（単一のトリガ）のアクティブ化のとき、後面カメラ１１８および前面カメラ１２０から画像を同時期に取得する（たとえば、単一のボタンまたはスイッチの作動を検出することを含む単一のトリガに応答して取得する）ためにプロセッサによって使用され得る単一のボタンまたはスイッチを表すこともできる。ＵＩ１０４は、画像を通信デバイス１００のエンド・ユーザに伝達するための単色もしくはカラーの液晶ディスプレイ（ＬＣＤ）、有機発光ダイオード（ＯＬＥＤ）、または他の適切な表示技術などのディスプレイ１１０をさらに含むことができる。ディスプレイ１１０がタッチセンサ式である実施形態では、キーパッド１０８の一部またはすべてが、ナビゲーション機構を有するディスプレイ１１０によって提示され得る。

ディスプレイ１１０は、タッチ・スクリーン技術を使用して、ユーザ入力（たとえば、ユーザの指の接触）を検出するためのユーザ・インターフェースの役割をすることもできる。タッチ・スクリーン・ディスプレイとして、通信デバイス１００は、指の接触を用いてユーザによって選択され得るグラフィカル・ユーザ・インターフェース（ＧＵＩ）要素を備えるユーザ・インターフェースを提示するように適合され得る。タッチ・スクリーン・ディスプレイ１１０は、ユーザの指のどれだけの表面積がタッチ・スクリーン・ディスプレイの部分に配置されているかを検出するための容量性、抵抗性、または他の形態の感知技術を備えることができる。この感知情報は、ＧＵＩ要素の操作を制御するために使用することができる。ディスプレイ１１０は、通信デバイス１００のハウジング組立体の一体部分であってよく、あるいは、接続された有線インターフェース（ケーブルなど）またはワイヤレス・インターフェースにより、通信デバイス１００に通信可能に結合された独立したデバイスであってもよい。ディスプレイ１１０は、代替または追加として、カメラ用のファインダの一部分であってもよい。

ＵＩ１０４はまた、加速度計、ジャイロスコープ、ＧＰＳセンサ、傾斜計、光センサ、オーディオ・スペクトラム・センサ、超音波送信器およびセンサ、赤外線または他の近接センサ、あるいは配向または動きを検出することができる別のセンサが含まれ得る、環境センサ１１３を含むことができる。環境センサ１１３には、温度計、圧力計、または他の環境センサも含まれ得る。ＵＩ１０４は、（人間の耳に近接して聴かれる音声などの）低ボリューム・オーディオ、および（ハンズフリー操作のためのスピーカフォンなどの）高ボリューム・オーディオを伝達するためのオーディオ技術を利用するオーディオ・システム１１２をさらに含むことができる。オーディオ・システム１１２は、エンド・ユーザのオーディオ信号を受け取るためのマイクロフォンをさらに含むことができる。オーディオ・システム１１２は、音声認識アプリケーションのために使用することもできる。ＵＩ１０４内の環境センサ１１３は、静止画像または動画像を取り込むため、または単に環境光条件を取り込むための電荷結合素子（ＣＣＤ）カメラとすることもできる。

電源１１４は、長距離または短距離の携帯用途を促進するためにエネルギーを通信デバイス１００の構成要素に供給するための交換可能および再充電可能なバッテリなどの一般的電力管理技術、供給調整技術、または充電システム技術、あるいはその一部または全部を利用することができる。代替としてまたは組み合わせで、充電システムは、ＵＳＢポートまたは他の適切なテザリング技術などの物理インターフェースを介して供給されるＤＣ電力などの外部電源を利用することができる。

位置受信器１１６は、ナビゲーションなどの位置サービスを促進するために使用できる、ＧＰＳ衛星の配置により生成される信号に基づいて通信デバイス１００の位置を識別するための補助ＧＰＳの能力を有する全地球測位システム（ＧＰＳ）受信器などの一般的位置特定技術を利用することができる。

動作環境は、これらの実施形態による通信デバイス１００に限定されないことに留意されたい。動作環境は、単に前面カメラおよび後面カメラなどを有する任意の電子デバイスであり得る。本明細書に説明されるような通信デバイス１００は、ハッシュ線（hash lines）で例示的に示された図１に示す回路構成要素の大部分とともに動作することができる。これらの変形実施形態は、本明細書に示し説明されるように企図される。

明確にするため、本明細書で一般的に使用される用語「前面カメラ」は、前面画像またはピクチャ（picture）またはシーンもしくはビューを撮る撮影者から離れるように外側に向いているカメラを指す。本明細書で一般的に使用される用語「後面カメラ」は、自身のピクチャを撮る撮影者の方へ内側に向いているカメラを指す。カメラ・デバイスは一般にこの用語を使用する。スマートフォンなど一部の例では、用語が逆にされ、「前面カメラ」は、撮影者のピクチャを取り込むカメラを指し、「後面カメラ」は、撮影者から離れるように向いているシーンまたはビューのピクチャを取り込むカメラを指す。本開示は、一般に上記の第１の定義を使用するが、それらは交換可能であり、本明細書で両方の解釈が企図されることに留意されたい。

図２を参照すると、種々の実施形態による携帯電子デバイス２００は、後面カメラ２０４および前面カメラ（図示せず）を含む。携帯電子デバイスは、前面画像２０６および後面画像２０８の組み合わせである合成画像を表示するためのディスプレイ２０２をさらに含む。合成画像は、同時または同時期に取り込まれた前面カメラおよび後面カメラからの二重画像であり得る。スマートフォン画面またはカメラ・ファインダ上で、両方の画像は、次のように合成することができる。すなわち、前面画像がフルメイン画面上、後面画像がメイン画面ピクチャ・イン・ピクチャ（ＰＩＰ）上にあって、ピクチャ・イン・ピクチャが、前面画像構成に対して干渉しないまたは妨げにならないように自動的に配置される。両方の画像をアクティブ・ファインダに保持することで、ユーザは、二重画像を合成するために、前面画像および後面画像に対して別個に、設定、カメラ・アングル、または焦点を調節することができる。他の調節の中でも特に、自動照明補償が、プロセッサを用いて、画像が同時期に取り込まれる前に各カメラで別個に行われてもよい。たとえば、プロセッサは、前方画像および後方画像を同時期に取得する前に、前方画像および後方画像を互いに位置合わせするように自動的に調節を行うことができる。次いで、プロセッサは、単一のトリガ・イベントに応答して、前方画像および後方画像を取得することができる。図２に示すように、携帯電子デバイスおよび対応する後面カメラおよび前面カメラは、同時期の後面画像および前面画像の取得の前に、ディスプレイ２０２またはファインダ上で適切に位置合わせ（および他の形式の調整）がされ得る

いくつかの実施形態では、前面画像および後面画像は、図４〜図７の説明でさらに詳細を示すように、各画像内に存在する個人、表情、またはオブジェクト／風景、あるいはその一部または全部に関する情報に対する画像分析、機械学習、および他の自動アルゴリズムによって分析され得る。そして、両方の画像のこの同時または同時期の分析は、画像に関する関係情報を識別するための手段を提供することができる。そして、この関係情報、たとえば、２つの画像の個人間の社会的関係などは、別の文脈、たとえば、両方の個人のソーシャル・ネットワークのメンバへのアラートまたはメッセージの投稿および送信、カレンダの予約の設定、ならびに商取引の促進などで使用することができる。関係情報は、識別された場合、ユーザ体験とセキュリティおよび写真管理など他のアプリケーションとの両面で、個々の画像の情報よりも価値が高くなり得る。セキュリティに関して、前面画像は、そのコンテンツを決定するために分析することができ、後面画像は、撮影者（たとえば、電子デバイスのユーザ）が撮影を行うのを許可されるかどうかを決定するために分析することができる。写真管理に関して、撮影者は、前面画像および後面画像の分析に基づいて、写真の所有者でないと決定されることがあり、その場合、写真は、許可された第三者（または前面画像内の被写体）のみがアクセスし得る場所で保護され得る。

種々の例の態様がシステム、方法、またはコンピュータ・プログラム製品として実施され得ることは、当業者には理解されよう。したがって、本明細書における例は、完全にハードウェアの実施形態、（ファームウェア、常駐ソフトウェア、マイクロコードなどを含む）完全にソフトウェアの実施形態、または、本明細書では「回路」、「モジュール」もしくは「システム」としてすべて総称され得るソフトウェア態様とハードウェア態様を組み合わせる実施形態の形態をとり得る。さらに、本明細書における態様は、コンピュータ可読プログラム・コードを具現化する１つまたは複数のコンピュータ可読媒体として実施されるコンピュータ・プログラム製品の形態をとり得る。

１つまたは複数のコンピュータ可読媒体の任意の組み合わせが利用され得る。コンピュータ可読媒体は、コンピュータ可読信号媒体またはコンピュータ可読記憶媒体とすることができる。コンピュータ可読記憶媒体は、以下に限定されないが、たとえば、電子、磁気、光、電磁気、赤外線、または半導体のシステム、装置、またはデバイス、あるいはこれらの任意の適切な組み合わせとすることができる。コンピュータ可読記憶媒体のさらに具体的な例（非包括的リスト）には、１つまたは複数の配線を有する電気接続、携帯コンピュータ・ディスケット、ハード・ディスク、ランダム・アクセス・メモリ（ＲＡＭ）、読み取り専用メモリ（ＲＯＭ）、消去可能プログラム可能読み取り専用メモリ（ＥＰＲＯＭまたはフラッシュ・メモリ）、光ファイバ、携帯コンパクト・ディスク読み取り専用メモリ（ＣＤ−ＲＯＭ）、光ストレージ・デバイス、磁気ストレージ・デバイス、あるいは上記の任意の適切な組み合わせが含まれる。本明細書の文脈では、コンピュータ可読記憶媒体は、命令実行システム、装置、もしくはデバイスによってまたはこれらに関連して使用するためのプログラムを含むまたは記憶することができる任意の有形媒体とすることができる。

コンピュータ可読信号媒体は、たとえばベースバンド中にまたは搬送波の一部として具現化されたコンピュータ可読プログラム・コードを有する、伝播データ信号を含むことができる。そのような伝播信号は、電磁気、光、またはこれらの任意の適切な組み合わせを含むがこれらに限定されない、種々の形態のいずれかをとり得る。コンピュータ可読信号媒体は、コンピュータ可読記憶媒体ではなく、命令実行システム、装置、もしくはデバイスによってまたはこれらに関連して使用するためのプログラムを通信、伝播、または伝送することができる、任意のコンピュータ可読媒体とすることができる。

コンピュータ可読媒体上に具現化されたプログラム・コードは、以下に限定されないが、ワイヤレス、有線、光ファイバ・ケーブル、ＲＦなど、または上記の任意の適切な組み合わせを含む、任意の適切な媒体を使用して送信され得る。

本発明の態様の動作を実行するためのコンピュータ・プログラム・コードは、Ｊａｖａ（Ｒ）、Ｓｍａｌｌｔａｌｋ（Ｒ）、またはＣ＋＋などのオブジェクト指向プログラミング言語、および「Ｃ」プログラミング言語または類似のプログラミング言語などの従来の手続き型プログラミング言語を含む、１つまたは複数のプログラミング言語の任意の組み合わせで記述することができる。プログラム・コードは、完全にユーザのコンピュータ上で実行する、スタンドアロン・ソフトウェア・パッケージとして部分的にユーザのコンピュータ上で実行する、部分的にユーザのコンピュータ上かつ部分的に遠隔コンピュータ上で実行する、または完全に遠隔コンピュータまたはサーバ上で実行することができる。後者のシナリオでは、ローカル・エリア・ネットワーク（ＬＡＮ）または広域ネットワーク（ＷＡＮ）を含む任意のタイプのネットワークを介して、遠隔コンピュータがユーザのコンピュータに接続されてもよく、あるいは（たとえば、インターネット・サービス・プロバイダを使用してインターネットを介して）外部のコンピュータへの接続が行われてもよい。

本発明の態様は、本発明の実施形態による方法、装置（システム）およびコンピュータ・プログラム製品のフローチャート図またはブロック図あるいはその両方を参照して以下で説明される。フローチャート図またはブロック図あるいはその両方の各ブロック、およびフローチャート図またはブロック図あるいはその両方におけるブロックの組み合わせは、コンピュータ・プログラム命令によって実装することができることは理解されよう。これらのコンピュータ・プログラム命令は、コンピュータまたは他のプログラム可能データ処理装置のプロセッサを介して実行するこれらの命令が、フローチャートまたはブロック図あるいはその両方の１つまたは複数のブロックで指定された機能／動作を実装するための手段を作成するように、汎用コンピュータ、専用コンピュータ、または他のプログラム可能データ処理装置のプロセッサに提供されてマシンを形成するものであってよい。

また、これらのコンピュータ・プログラム命令は、コンピュータ可読媒体に格納された命令が、フローチャートまたはブロック図あるいはその両方の１つまたは複数のブロックで指定された機能／動作を実装する命令を含む製品を生成するように、コンピュータ可読媒体に格納され、コンピュータ、他のプログラム可能データ処理装置、または他のデバイスに特定の様式で機能するよう指示するものであってよい。

また、コンピュータ・プログラム命令は、コンピュータまたは他のプログラム可能装置上で実行する命令が、フローチャートまたはブロック図あるいはその両方の１つまたは複数のブロックで指定された機能／動作を実装するためのプロセスを提供するように、コンピュータ実装プロセスを生成するべく、コンピュータ、他のプログラム可能データ処理装置、または他のデバイスにロードされ、そのコンピュータ、他のプログラム可能装置、または他のデバイス上で一連の動作ステップを実行させるものであってよい。

図３を参照すると、フロー図３００は、本明細書の種々の実施形態によるシステム、方法、およびコンピュータ・プログラム製品の可能な実装のアーキテクチャ、機能性、および動作を示している。これに関連して、フロー図３００の各ブロックは、指定された論理機能を実装するための１つまたは複数の実行可能命令を含む、モジュール、セグメント、またはコードの部分を表し得る。また、一部の代替実装においてブロック内に記載された機能は、図面に記載された順序から外れて行われ得ることに留意されたい。たとえば、連続して示される２つのブロックは、実際には、関係する機能によっては、実質的に並行に（または同時期に）実行されることがあり、あるいは時として逆の順序でブロックが実行されることがある。また、フロー図の例示の各ブロック、およびフロー図内のブロックの組み合わせは、指定された機能または動作を実行する専用ハードウェア・ベースのシステム、または専用ハードウェアとコンピュータ命令の組み合わせによって実装され得ることに留意されたい。

図３は、通信デバイスなどの携帯電子デバイスによって同時期に取り込まれる前面画像および後面画像を利用する一例を示す動作フロー図である。図３の動作フロー図３００は、ステップ３０２で、携帯通信デバイスなどの電子デバイスの前面カメラからの前方画像および後面カメラからの後面画像を同時期または同時に取得することにより開始する。次いで、この方法はステップ３０４に進み、ステップ３０４では、（たとえば、合成画像を作成するように、）後面画像が前面画像に埋め込まれ、または代わりに前面画像が後面画像に埋め込まれる。「埋め込み」は、多くの形態をとり得る。たとえば、埋め込みは、可視またはビューから隠された透かし（watermark）またはデジタル透かしとすることができる。埋め込まれた情報は、暗号化されるとともに人間の視覚で感知されない（たとえば隠される）ことが可能な、ステガノグラフィ情報（秘密情報）とすることもできる。限定ではなく、たとえば、後方画像から導出された秘密情報を、合成画像内にステガノグラフィで埋め込むことができる。図３に示されるステップは特定の順序で実行される必要がなく、１つまたは複数のステップが並列に実行され得ることに留意されたい。さらに、例示されるステップの多くが、ハッシュ線で例示的に示されるように任意であると考えられ得ることに留意されたい。これらの変形実施形態は、本明細書に示し説明されるように企図される。

透かしの１つの用途は、デジタル媒体の不正なコピーを防止または抑止することを意図する著作権保護システムである。この用途では、コピー・デバイスは、コピーを作成する前に信号から透かしを読み出し、透かしのコンテンツに応じて、コピーすべきか否かを決定する。もう１つの用途は、ソース追跡である。透かしは、配布の各ポイントでデジタル信号に埋め込まれる。後で著作物のコピーが発見された場合、コピーから透かしを読み出すことができ、配布のソースが分かる。この技法は、違法にコピーされた映画のソースを検出するために使用されていると報告されている。デジタル写真に説明情報の注釈を付けることが、不可視の透かしのもう１つの用途である。デジタル媒体用のいくつかのファイル・フォーマットは、メタデータと呼ばれる追加の情報を含むことができるが、デジタル透かしは、データがまさに信号内で搬送されることに特徴がある。

ステップ３０８で、動作フローはさらに、後面画像または前面画像に対するオブジェクトまたは顔認識分析などの取得画像に対する認識分析を行って、認識情報を生成することができる。たとえば、後面画像を表情に関して分析して、合成画像に適用するタグを決定することができる（図７参照）。代替的に、前面画像を使用可能な場合に表情に関して分析し、またはより広い意味で分析して、オブジェクトまたはシーンまたは前面ビューに対する適切なタグを決定することができる（図５および図６参照）。前面画像は、必ずしも顔または表情だけではなく、オブジェクトを認識するために分析することもできることに留意されたい。一実施形態では、ステップ３１０で、撮影者を識別するために後面画像に関連してメタデータが作成され得る。前述のように、アイデンティティは、セキュリティもしくはアクセス用途またはソーシャル・ネットワーキング用途、あるいは両方のために使用され得る。前面画像における個人の識別も、同様の用途のために認識され使用され得る。一実施形態では、ステップ３１２で、後面画像から撮影者を識別するメタデータを、前面画像内に埋め込むことができる。代替的に、前面画像内のシーンまたはビューを識別するメタデータを、後面画像からの撮影者のピクチャ内に埋め込むことができる。ステップ３１４で、タイムスタンプを透かしに追加することができる（図７参照）。

判定ブロック３１６で、先行ステップから分析および認識された１つまたは複数の画像を、データベースまたは許可されたリストに記憶された情報と比較して（たとえば、許可されたユーザ・リストに記憶されたユーザ情報と比較して）、合致が存在するかどうかを決定することができる。合致が存在する場合、セキュリティ機能またはソーシャル・ネットワーキング機能が遂行され得る。一実施形態では、ステップ３１８で、認識情報と、許可されたリストまたはデータベース（たとえば、許可されたユーザ・リスト）内のアイテム（ユーザ情報）との間に合致が発見されるまたは存在する場合、前面画像に関連付けられた認識情報をメモリに記憶することができる。

他の実施形態では、ステップ３２０で、後面画像が、前面画像内で認識された１つまたは複数のオブジェクトの妨げにならないように、前方画像内に配置され得る。ステップ３２２で、携帯電子デバイスはファインダを含むことができ、後面画像と前面画像の合成画像が、携帯電子デバイスのファインダ上で合成され得る。前述のように、前面画像は、ステップ３２４で、顔認識分析またはオブジェクト認識分析または両方によって分析することができる。

図４は、携帯電子デバイス４００のディスプレイもしくは画面４０２、または別のデバイスもしくは処理システムのディスプレイ上に、合成画像４０４として表示するために、後面画像４０８を取り込む後面カメラ４１０、および前面画像４０６を取り込む前面カメラ（図示せず）を有する、携帯電子デバイス４００を示す。少数の追加の例示的実施形態が、そのようなデバイスに対するディスプレイまたは画面が示される図５〜図７に例示されている。たとえば、携帯電子デバイス５００は、可視メタデータ５０２が後面画像内に埋め込まれ、他のメタデータ５０４が前面画像内に埋め込まれた、前面画像４０６および後面画像を含むことができる。この特定の事例では、後面画像の顔認識分析が、データベースまたはリスト内の「ジェニー（Jenny）」と合致を発見しており、このデータベースまたはリストは、携帯電子デバイス５００内にローカルに記憶可能であり、またはサーバもしくは他の遠隔デバイスに記憶される遠隔データベースもしくはリストからネットワークを介して記憶可能でありアクセス可能であり得る。前面画像の認識分析は、タグ「走る、オリンピック、およびレース（running, Olympics, and race）」の合致を可能にした。他のタグが、画像に関連して認識、読出し、および記憶され得るが、必ずしも表示されない。さらに、メタデータは、前面画像または後面画像のいずれかに埋め込み可能である、あるいは後面画像と前面画像の合成画像に埋め込み可能であることに留意されたい。

図６において、携帯電子デバイス６００は、前面画像４０６がデジタル透かしとして後面画像４０８内に埋め込まれる事例を示している。したがって、撮影者の認識された後面画像４０８は、より目立つ画像であり、前面画像４０６は、合成画像の一部としての透かしの役割をすることができる。前面画像の認識分析はまた、前面画像または合成画像に対するメタデータ６０２を供給することができる。この例では、認識分析が、情報「２０１２年オリンピックでの受け渡し（Handoff at 2012 Olympics）」を提供する。図７では、携帯電子デバイス７００は、前面画像４０６および後面画像４０８、ならびに図５と同様の（ジェニーを認識する）顔認識情報７０２を含むことができるが、さらに、画像が取り込まれた時のタイムスタンプ７０４を含むことができる。さらに、後面画像４０８の顔表情認識をタグ７０６の形態で提供することができる。この場合、「２０１２年１１月６日午後４時２７分（4:27pm Nov.6, 2012）」に取り込まれた「ジェニー」の認識されたピクチャが、おそらく前面画像４０６を彼女が見たことにより、彼女の「ポートレート（portrait）」ピクチャから「ジェニー」が「幸せ（happy）」で「笑顔（smiling）」であることが見込まれることをさらに示す。

図８は、コンピュータ・システム８００の形態のマシンの例示的概略図を示し、コンピュータ・システム８００において、命令のセットが、実行されたとき、マシンに上述の方法のいずれか１つまたは複数を実行させることができる。マシンの１つまたは複数の実例は、たとえば、図１、図２、図４、図５、図６、または図７に示されるように通信デバイス１００、２００、４００、５００、６００、または７００として動作することができる。いくつかの実施形態では、マシンは他のマシンに（たとえばネットワークを使用して）接続することができる。ネットワーク化された配置では、マシンは、サーバ−クライアント・ユーザ・ネットワーク環境におけるサーバまたはクライアント・ユーザ・マシンの資格で、またはピアツーピア（または分散）ネットワーク環境におけるピア・マシンとして動作することができる。

マシンには、サーバ・コンピュータ、クライアント・ユーザ・コンピュータ、パーソナル・コンピュータ（ＰＣ）、タブレットＰＣ、スマートフォン、ラップトップ・コンピュータ、デスクトップ・コンピュータ、制御システム、ネットワーク・ルータ、スイッチまたはブリッジ、あるいは、そのマシンによって取り込まれる動作を指定する（順次または他の形式の）命令のセットを実行できる任意のマシンが含まれ得る。本明細書におけるデバイスは、画像取り込み、または音声、ビデオ、もしくはデータ通信を提供する任意の電子デバイスを広く含むことは理解されよう。さらに、単一のマシンが例示されているが、用語「マシン」は、本明細書に論じられた方法の任意の１つまたは複数を実施するための命令のセット（または複数のセット）を個別または一緒に実行する任意の集合のマシンを含むものとしても捉えられるべきである。

コンピュータ・システム８００は、プロセッサ（またはコントローラ）８０２（たとえば、中央処理装置（ＣＰＵ）、グラフィックス・プロセッシング・ユニット（ＧＰＵ）、または両方）、メイン・メモリ８０４、およびスタティック・メモリ８０６を含むことができ、それらは、バス８０８を介して互いに通信する。コンピュータ・システム８００は、ビデオ・ディスプレイ・ユニット８１０（たとえば、液晶ディスプレイ（ＬＣＤ）、フラット・パネル・ディスプレイ、または固体ディスプレイ、あるいは組み合わせ）をさらに含むことができる。コンピュータ・システム８００は、動きまたは方位センサ８１１、入力デバイス８１２（たとえば、キーボード）、カーソル制御デバイス８１４（たとえば、マウスまたはトラックパッド）、ディスク・ドライブ・ユニットまたは固体メモリなどのメモリ・デバイス８１６、信号生成デバイス８１８（たとえば、スピーカまたはリモート・コントロール）、およびネットワーク・インターフェース・デバイス８２０を含むことができる。

ディスク・ドライブ・ユニット８１６は、上記に例示されたそれらの方法を含む本明細書に説明された方法または機能の任意の１つまたは複数を実施する命令の１つまたは複数のセット（たとえばソフトウェア８２４）が記憶された、有形のコンピュータ可読記憶媒体８２２を含むことができる。命令８２４は、コンピュータ・システム８００によるその実行中に、メイン・メモリ８０４、スタティック・メモリ８０６、またはプロセッサ８０２内、あるいはその一部または全部に完全にまたは少なくとも部分的に存在することができる。メイン・メモリ８０４およびプロセッサ８０２はまた、非一時的有形コンピュータ可読記憶媒体を構成することができる。

同様に、特定用途向け集積回路、プログラム可能論理アレイ、および他のハードウェア・デバイスを含むがこれらに限定されない専用ハードウェア実装が、本明細書に説明された方法を実装するように構築され得る。種々の実施形態の装置およびシステムを含むことができるアプリケーションは、種々の電子およびコンピュータ・システムを広く含むことができる。いくつかの実施形態では、モジュール間およびモジュールを介して伝達される関係する制御およびデータ信号を用いて、２つ以上の特定の相互接続されたハードウェア・モジュールまたはデバイスにおいて、あるいは特定用途向け集積回路の部分として、機能を実装する。したがって、例示的システムは、ソフトウェア、ファームウェア、およびハードウェアの実装に適用可能である。

種々の実施形態によれば、本明細書に説明された方法は、コンピュータ・プロセッサ上で実行されているソフトウェア・プログラムとしての動作を意図されている。さらに、ソフトウェア実装は、以下に限定されないが、分散処理もしくはコンポーネント／オブジェクト分散処理、並列処理、または仮想マシン処理を含むことができ、また、本明細書に説明された方法を実装するように構築することができる。

有形コンピュータ可読記憶媒体８２２は、単一の媒体として例示的実施形態で示されているが、用語「有形コンピュータ可読記憶媒体」は、１つまたは複数のセットの命令を記憶する単一の媒体または複数の媒体（たとえば、集中もしくは分散データベース、または関連したキャッシュおよびサーバ、あるいはその両方）を含むものとして捉えられるべきである。また、用語「有形コンピュータ可読記憶媒体」は、本開示の方法のいずれか１つまたは複数をマシンに実行させる、マシンによって実行するための命令のセットを記憶または符号化することができる、任意の非一時的媒体を含むものとしても捉えられるべきである。

したがって、用語「有形コンピュータ可読記憶媒体」は、以下に限定されないが、１つまたは複数の読み取り専用（不揮発性）メモリを収容するメモリ・カードまたは他のパッケージなどの固体メモリ、ランダム・アクセス・メモリまたは他の書き換え可能（揮発性）メモリ、ディスクまたはテープなどの光磁気または光媒体、あるいは情報を記憶するために使用できる他の有形媒体を含むものとして捉えられるべきである。したがって、本開示は、本明細書に列挙されるような有形コンピュータ可読記憶媒体の任意の１つまたは複数を含み、また、本明細書におけるソフトウェア実装が記憶される当技術分野で認められる均等物および後継媒体を含むものとして捉えられる。

本明細書では、特定の規格およびプロトコルを参照して実施形態で実装される構成要素および機能を説明しているが、本開示は、そのような規格およびプロトコルに限定されない。インターネットおよび他のパケット交換ネットワーク伝送のための各規格（たとえば、ＴＣＰ／ＩＰ、ＵＤＰ／ＩＰ、ＨＴＭＬ、およびＨＴＴＰ）は、技術水準の例を表す。そのような規格は、本質的に同じ機能を有するより速いまたはより効率的な均等物によって随時取って代わられる。デバイス検出（たとえば、ＲＦＩＤ）、短距離通信（たとえば、ブルートゥース、ＷｉＦｉ、ＺＩＧＢＥＥ）、および長短距離通信（たとえば、ＷｉＭＡＸ、ＧＳＭ、ＣＤＭＡ、ＬＴＥ）のためのワイヤレス規格が、コンピュータ・システム８００によって使用されることが企図される。

本明細書に説明された例の例示は、種々の実施形態の構造の全体的な理解を与えることを意図しており、本明細書に説明される構造を利用し得る装置およびシステムのすべての要素および特徴の完全な説明を果たすことを意図していない。上記の説明を検討すれば、当業者には他の多くの実施形態が明らかとなろう。そこから他の実施形態を利用し導き出すことが可能であり、それにより、本開示の範囲から逸脱せずに構造的および論理的置換および変更がなされ得る。また、図面は単に描写であり、原寸に比例しないことがある。そのいくつかの大きさは誇張されることがあり、他の大きさが最小限に抑えられることもある。したがって、本明細書および図面は、限定的ではなく例示的意味で考えられるべきである。

特定の実施形態が本明細書に例示され説明されているが、同じ目的を達成するように計算された任意の構成が、示された特定の実施形態の代わりに用いられてもよいことは理解されたい。本明細書における例は、種々の実施形態の任意のすべての適合または変形を包含するように意図される。上記の実施形態の組み合わせ、および本明細書に具体的に説明されていない他の実施形態が、本明細書において企図される。

要約書には、それが特許請求の範囲または意義を解釈または限定するために使用されることが意図されていないという理解が与えられる。また、上述の発明を実施するための形態では、本開示を効率的にするために種々の特徴が単一の実施形態で一緒にグループ化されている。この開示の方法は、主張される実施形態が各請求項に明示的に列挙される特徴より多くの特徴を必要とするという意図を反映するものとして解釈されるべきでない。むしろ、添付の特許請求の範囲が反映するように、発明の主題は、単一の開示された実施形態のすべての特徴より少ない特徴にある。したがって、添付の特許請求の範囲は、本明細書で発明を実施するための形態に組み込まれ、各請求項は、それ自体で個々に主張される主題として自立する。

コンピュータ８００に対して単一のＣＰＵ８０２が示されているが、複数のＣＰＵを有するコンピュータ・システムが同様に効果的に使用され得る。本発明の実施形態は、ＣＰＵ８０２から処理をオフロードするために使用される別個の完全にプログラムされたマイクロプロセッサを各々が含むインターフェースをさらに組み込む。メイン・メモリに含まれるオペレーティング・システム（図示せず）は、Ｌｉｎｕｘ、ＵＮＩＸ（Ｒ）、Ｗｉｎｄｏｗｓ（Ｒ）、およびＷｉｎｄｏｗｓ（Ｒ） Ｓｅｒｖｅｒベースのオペレーティング・システムのいずれかのような適切なマルチタスク・オペレーティング・システムである。本発明の実施形態は、任意の他の適切なオペレーティング・システムを使用することができる。本発明のいくつかの実施形態は、オペレーティング・システム（図示せず）の構成要素の命令を、情報処理システム内に配置された任意のプロセッサ上で実行できるようにする、オブジェクト指向フレームワーク機構などのアーキテクチャを利用する。ネットワーク・アダプタ・ハードウェア８２０が、図示のようにネットワーク８２６に対するインターフェースを提供するために使用される。本発明の実施形態は、現在のアナログもしくはデジタルまたはその両方の技術を含む、あるいは将来のネットワーキング機構を介する任意のデータ通信接続とともに動作するように適合されることができる。

本発明の例示的実施形態は、完全に機能的なコンピュータ・システムの文脈で説明されているが、種々の実施形態は、ＣＤまたはＤＶＤ、たとえば、ＣＤ、ＣＤ−ＲＯＭ、または他の形態の記録可能媒体、あるいは任意のタイプの電子的伝送機構を介して、プログラム製品として配布されることが可能であることは、当業者には理解されよう。

本明細書で使用される用語は、単に特定の実施形態を説明するためのものであり、本発明を限定することを意図していない。本明細書で使用される場合、単数形「ａ」、「ａｎ」、および「ｔｈｅ」は、文脈で明確に別段の指示がない限り、複数形も含むことが意図されている。さらに、用語「備える（comprise）」または「備えている（comprising）」あるいはその両方は、本明細書内で使用されるとき、記載される特徴、整数、ステップ、動作、要素、または構成要素、あるいはその一部または全部が存在することを指定するが、１つまたは複数の他の特徴、整数、ステップ、動作、要素、構成要素、またはそれらの群、あるいはその一部または全部の存在または付加を排除しないことは理解されよう。用語「別の」は、本明細書で使用される場合、少なくとも第２またはそれ以降のものとして定義される。用語「含む」および「有する」は、本明細書で使用される場合、備える（すなわち非限定語）として定義される。用語「結合された」は、本明細書で使用される場合、「接続された」として定義されるが、必ずしも直接的である必要がなく、また必ずしも機械的である必要がない。「通信可能に結合された」は、構成要素の結合であって、これらの結合が、たとえば、有線、ワイヤレス、または他の通信媒体を介して、互いに通信することができるような構成要素の結合を指す。用語「通信可能に結合された」または「通信可能に結合されている」は、ある要素が別の要素を指示または制御し得る電子制御信号を伝達することを含むが、これに限定されない。用語「するように構成された」は、設定、配置、構築、組み立て、構成、もしくは設計されるように適合された、または所与の機能を実行するためのこれらの特性の任意の組み合わせを有する、ハードウェア、ソフトウェア、またはハードウェアとソフトウェアとの組み合わせを表す。用語「するように適合された」は、能力を有する、対応することができる、もしくは作ることができる、または所与の機能を実行するために適切な、ハードウェア、ソフトウェア、またはハードウェアとソフトウェアとの組み合わせを表す。

用語「コントローラ」、「コンピュータ」、「プロセッサ」、「サーバ」、「クライアント」、「コンピュータ・システム」、「コンピューティング・システム」、「パーソナル・コンピューティング・システム」、または「処理システム」は、本明細書における１つまたは複数の実施形態を実装するように適合された適切に構成された処理システムの例を表す。任意の適切に構成された処理システムは、同様に本明細書における実施形態によって使用されることが可能であり、限定ではなく、たとえば、パーソナル・コンピュータ、ラップトップ・コンピュータ、タブレット・コンピュータ、スマートフォン、携帯情報端末、またはワークステーションなどである。処理システムは、１つまたは複数の処理システムまたはプロセッサを含むことができる。処理システムは、１つの処理システムにおける集中様式で、または異なる要素がいくつかの相互接続された処理システムにわたって分散される分散様式で実現され得る。

用語「コンピューティング・システム」、「コンピュータ・システム」、および「パーソナル・コンピューティング・システム」は、ユーザ・インターフェースを含み、本開示の１つまたは複数の実施形態を実装するように適切に構成および適合された、処理システムを表す。用語「ネットワーク」、「コンピュータ・ネットワーク」、「コンピューティング・ネットワーク」、および「通信ネットワーク」は、ユーザの間の通信を促進し、ユーザがリソースを共有することを可能にする、通信チャネルによって相互接続されたコンピュータおよびデバイスの集合の例を表す。同様に、用語「ワイヤレス・ネットワーク」、「ワイヤレス通信ネットワーク」、および「ワイヤレス通信システム」は、ワイヤレス通信媒体によって主にまたは全体的にコンピュータおよびデバイスを通信可能に結合するネットワークおよびシステムを表す。同様に、用語「有線ネットワーク」および「有線通信ネットワーク」は、有線通信媒体によって主にまたは全体的にコンピュータおよびデバイスを通信可能に結合するネットワークを表す。

用語「電子デバイス」は、人間によって使用される多くの異なるタイプのコンピューティング・システムおよび処理システムを広く包含することが意図される。用語「通信デバイス」は、人間によって使用される多くの異なるタイプの電子デバイスであって、他のデバイスまたは処理システムから送信された信号を受け取ることができ、随意に、他のデバイスまたは処理システムにより受信されるように他のデバイスまたは処理システムに信号を送信することができ、他のデバイスまたは処理システムと通信し、また通信システムにおいて動作し得る、電子デバイスを広く包含することが意図される。用語「ワイヤレス・デバイス」および「ワイヤレス通信デバイス」は、信号をワイヤレスで受け取ることができ、随意に信号をワイヤレスで送信することができ、またワイヤレス通信システムにおいて動作し得る、多くの異なるタイプの通信デバイスを広く包含することが意図される。限定ではなく、たとえば、ワイヤレス通信デバイスは、双方向無線、セルラ電話、移動電話、スマートフォン、双方向ページャ、ワイヤレス・メッセージング・デバイス、パーソナル・コンピュータ、ラップトップ・パーソナル・コンピュータ、タブレット・コンピュータ、携帯情報端末、および他の同様の通信デバイスの任意の１つまたは組み合わせを含むことができる。

用語「携帯電子デバイス」は、携帯型である、またはユーザによって位置間を移動され得る、多くの異なるタイプの電子デバイスを広く包含することが意図される。限定ではなく、たとえば、携帯電子デバイスは、ワイヤレス通信デバイス、ラップトップ・パーソナル・コンピュータ、ノートブック・コンピュータ、デスクトップ・コンピュータ、パーソナル・コンピュータ、スマートフォン、携帯情報端末、タブレット・コンピュータ、ゲーミング・ユニット、リモート・コントローラ・ユニット、および持ち主の人間によって運搬することができる他のハンドヘルド電子デバイスの任意の１つまたは組み合わせを含むことができる。

対応する構造、材料、動作、および添付特許請求の範囲におけるすべてのミーンズまたはステップ・プラス・ファンクション要素の均等物は、具体的に主張されるような他の主張された要素と組み合わせて機能を実施するための任意の構造、材料、または動作を含むことが意図される。本明細書の記載は、例示および説明のために提示されているが、網羅的であることまたは開示された形態の例に限定されることは意図されていない。多くの変更および変形が、提示されまたは主張された例の範囲および趣旨から逸脱することなく、当業者には明らかであろう。開示された実施形態は、実施形態の原理および実際的用途を最も良く説明するため、また、企図される特定の使用に適した様々な変更を有する種々の実施形態を当業者が理解できるようにするために選択され説明された。添付の特許請求の範囲は、実施形態の範囲内の任意のすべてのそのような用途、変更、および変形を包含することが意図される。

Claims (25)

1. メモリに結合されたプロセッサを備え、前面カメラ及び後面カメラを有する携帯電子デバイスを用いた方法であって、
   前記携帯電子デバイスを用いて、前記前面カメラからの前方画像、および撮影者の画像を含む前記後面カメラからの後方画像を同時期に取得するステップと、
   前記プロセッサを用いて、前記前方画像内に前記後方画像を、または前記後方画像内に前記前方画像を埋め込むステップであって、それにより合成画像を作成する、前記埋め込むステップと、
   前記プロセッサを用いて、前記後方画像に対して顔認識分析を行って、前記撮影者の認識情報を生成するステップと、
   前記プロセッサを用いて、前記認識情報が前記携帯電子デバイスの許可されたユーザのリストに存在しないことに応じて、前記撮影者が許可されたユーザではない、と判断するステップと、
   前記判断に応じて、前記許可されたユーザのみがアクセス可能な前記メモリ中の保護される場所に、前記前方画像又は前記合成画像に関連づけられた前記認識情報を記憶するステップと、
   を含む方法。
2. 前記取得するステップは、前記前方画像、および前記後方画像を、単一のトリガに応答して同時期に取得し、
   更に、前記プロセッサを用いて、前記合成画像を形成する前記前方画像の部分内の透かしとして前記後方画像を前記メモリに記憶するステップを含む、請求項１に記載の方法。
3. 更に、前記プロセッサを用いて、前記後方画像から導出される秘密情報を前記合成画像内にステガノグラフィで挿入するステップを含む、請求項１又は２に記載の方法。
4. 更に、前記プロセッサを用いて、撮影者を識別するために前記後方画像においてメタデータを作成するステップを含む、請求項１乃至３のいずれかに記載の方法。
5. 更に、前記プロセッサを用いて、前記撮影者を識別するメタデータを前記前方画像内に埋め込むステップを含む、請求項４に記載の方法。
6. 更に、前記プロセッサを用いて、前記前方画像のシーンを識別するメタデータを、前記後方画像における前記撮影者のピクチャ内に埋め込むステップを含む、請求項４に記載の方法。
7. 前記取得するステップは、前記前方画像、および前記後方画像を、単一のトリガに応答して同時期に取得し、
   更に、前記プロセッサを用いて、前記合成画像を形成する前記前方画像の部分内の透かしとして前記後方画像を前記メモリに記憶するステップと、
   前記透かしにタイムスタンプを追加するステップとを含む、請求項１乃至６のいずれかに記載の方法。
8. 更に、前記プロセッサを用いて、前記合成画像に適用するためのタグを決定するために、前記後方画像上の表情を分析することにより、前記後方画像に対して顔認識分析を行って、認識情報を生成するステップを含む、請求項１乃至７のいずれかに記載の方法。
9. 更に、前記プロセッサを用いて、前記前方画像内のオブジェクトの妨げにならないように、前記後方画像を前記前方画像内に配置することを行うステップを含む、請求項１乃至８のいずれかに記載の方法。
10. 更に、前記プロセッサを用いて、前記携帯電子デバイスのファインダにおいて、前記後方画像と前記前方画像との前記合成画像を合成するステップを含む、請求項１乃至９のいずれかに記載の方法。
11. 更に、前記携帯電子デバイスの前記プロセッサを用いて、顔認識分析またはオブジェクト認識分析によって前記前方画像を分析するステップを含む、請求項１乃至１０のいずれかに記載の方法。
12. 携帯電子デバイスであって、
    前面カメラと、
    後面カメラと、
    コンピュータ命令を記憶するメモリと、
    前記メモリ、前記前面カメラ、および前記後面カメラに通信可能に結合されたプロセッサと
    を備え、
    前記プロセッサは、
    前記前面カメラからの前方画像、および撮影者の画像を含む前記後面カメラからの後方画像を同時期に取得することと、
    前記プロセッサを用いて、前記前方画像内に前記後方画像を、または前記後方画像内に前記前方画像を埋め込むステップであって、それにより合成画像を作成する、前記埋め込むことと、
    前記後方画像に対して顔認識分析を行って、前記撮影者の認識情報を生成するステップと、
    前記認識情報が前記携帯電子デバイスの許可されたユーザのリストに存在しないことに応じて、前記撮影者が許可されたユーザではない、と判断することと、
    前記判断に応じて、前記許可されたユーザのみがアクセス可能な前記メモリ中の保護される場所に、前記前方画像又は前記合成画像に関連づけられた前記認識情報を記憶することと、
    を含む動作を行う携帯電子デバイス。
13. 前記取得することは、前記前方画像、および前記後方画像を、単一のトリガに応答して同時期に取得し、
    更に、前記プロセッサは、前記合成画像を形成する前記前方画像の部分内の透かしとして前記後方画像を前記メモリに記憶することを含む動作を行う、請求項１２に記載の携帯電子デバイス。
14. 更に、前記プロセッサは、前記後方画像から導出される秘密情報を前記合成画像内にステガノグラフィで挿入することを含む動作を行う、請求項１２又は１３に記載の方法。
15. 更に、前記プロセッサは、撮影者を識別するために前記後方画像においてメタデータを作成することを含む動作を行う、請求項１２乃至１４のいずれかに記載の携帯電子デバイス。
16. 更に、前記プロセッサは、前記撮影者を識別するメタデータを前記前方画像内に埋め込むことを含む動作を行う、請求項１５に記載の携帯電子デバイス。
17. 更に、前記プロセッサは、前記前方画像のシーンを識別するメタデータを、前記後方画像における前記撮影者のピクチャ内に埋め込むことを含む動作を行う、請求項１５に記載の携帯電子デバイス。
18. 前記取得することは、前記前方画像、および前記後方画像を、単一のトリガに応答して同時期に取得することであり、
    更に、前記プロセッサは、前記合成画像を形成する前記前方画像の部分内の透かしとして前記後方画像を前記メモリに記憶することと、
    前記透かしにタイムスタンプを追加することを含む動作を行う、請求項１２乃至１７のいずれかに記載の携帯電子デバイス。
19. 更に、前記プロセッサは、前記合成画像に適用するためのタグを決定するために、前記後方画像上の表情を分析することにより、前記後方画像に対して顔認識分析を行って、認識情報を生成することを含む動作を行う、請求項１２乃至１８のいずれかに記載の携帯電子デバイス。
20. 更に、前記プロセッサは、前記前方画像内のオブジェクトの妨げにならないように、前記後方画像を前記前方画像内に配置することを行うことを含む動作を行う、請求項１２乃至１９のいずれかに記載の携帯電子デバイス。
21. 更に、前記プロセッサは、前記携帯電子デバイスのファインダにおいて、前記後方画像と前記前方画像との前記合成画像を合成することを含む動作を行う、請求項１２乃至２０のいずれかに記載の携帯電子デバイス。
22. 更に、前記プロセッサは、顔認識分析またはオブジェクト認識分析によって前記前方画像を分析することを含む動作を行う、請求項１２乃至２１のいずれかに記載の携帯電子デバイス。
23. 携帯電子デバイスであって、
    前面カメラと、
    後面カメラと、
    コンピュータ命令を記憶するメモリと、
    前記メモリ、前記前面カメラ、および前記後面カメラに通信可能に結合されたプロセッサとを備え、
    前記プロセッサは、前記コンピュータ命令を実行することに応じて、
    前記前面カメラからの前方画像および前記後面カメラからの後方画像を取得することと、
    前記前方画像内に前記後方画像を、または前記後方画像内に前記前方画像を埋め込み、それにより合成画像を作成することと、
    顔認識分析を行って、認識情報を生成することと、
    撮影者のソーシャル・ネットワークのメンバまたは前記前方画像内の認識された被写体のためのソーシャル・ネットワークのメンバあるいは両方のメンバにアラートを出すために使用される前記前方画像および前記後方画像に関する関係情報を識別することを含む動作を行う、携帯電子デバイス。
24. 前記プロセッサは、前記コンピュータ命令を実行することに応じて、前記前方画像もしくは前記後方画像のいずれかの取り込みを可能にするようにセキュリティ・アクセスを決定するために、または記憶された合成画像へのセキュリティ・アクセスを決定するために使用される前記前方画像または前記後方画像の少なくとも一方からアイデンティティ情報を抽出することを含む動作を行う、請求項２３に記載の携帯電子デバイス。
25. コンピュータ・プログラムであり、メモリに結合されたプロセッサを備え、前面カメラ及び後面カメラを有する携帯電子デバイスにより実行されることにより、前記携帯電子デバイスに請求項１乃至１１のいずれかに記載の方法の各ステップを実行させるコンピュータ・プログラム。
    
    

Images