JP7815331B2 - 情報処理装置、情報処理装置の制御方法、及びプログラム - Google Patents

Description

本発明は、情報処理装置、情報処理装置の制御方法、及びプログラムに関する。

カメラの撮影で記録された画像に対して各種処理を施すＰＣ等の情報処理装置が知られている。情報処理装置では、例えば、カメラの撮影で記録された実写画像上に周辺光量落ちや歪曲収差といったレンズ収差を持たない画像、例えば、ＣＧ画像を付加する画像処理が行われる。当該画像処理では、まず、実写画像からレンズ収差を除去する第１の処理が行われ、レンズ収差が除去された実写画像上にＣＧ画像を付加する第２の処理が行われ、第２の処理で得られた合成画像に対し、第１の処理で除去されたレンズ収差が適用される。このようにすることで、実写画像と同様のレンズ収差が、実写画像上に付加されたＣＧ画像にも適用され、ＣＧ画像に実写の雰囲気を与えつつ違和感の無い合成画像を生成することができる。

また、情報処理装置では、カメラの撮影で記録された動画に、別の動画等を時系列的に結合する処理が行われる。例えば、異なる２つの動画を時系列的に結合する場合、これらの動画がそれぞれ持つメタデータが比較される。比較した結果、これらメタデータに含まれる撮影モードの情報が同じである場合、２つの動画を結合して得られた結合クリップにメタデータが引き継がれる（例えば、特許文献１を参照）。このメタデータに含まれるレンズ収差の情報を用いて、例えば、結合した２つの動画の一方の動画のレンズ収差を他方の動画に適用して２つの動画の切り替わり目の不連続感が軽減された結合クリップを生成することができる。

特開２０１７－０９２５８３号公報

しかしながら、上述した特許文献１の技術では、カメラの撮影で記録された動画と同じ撮影モードで撮影された動画以外のデータ、例えば、ＣＧ画像で構成されたＣＧクリップを時系列的に結合する場合、結合クリップにメタデータが引き継がれない。このため、カメラの撮影で記録された動画で構成されたカメラ素材クリップ部のレンズ収差の情報を取得することができない。その結果、カメラ素材クリップ部からレンズ収差を除去する処理や、結合クリップ全体にレンズ収差を適用する処理といった、ＣＧクリップ部に実写の雰囲気を与えつつ、カメラ素材クリップ部とＣＧクリップ部との切り替わり目の不連続感を軽減するための処理を行うことができない。また、仮に、カメラ素材クリップ部を構成する動画のメタデータが引き継がれても、このメタデータにはカメラ素材クリップ部のレンズ収差の情報しか含まれていないため、ＣＧクリップ部に対し、カメラ素材クリップ部との切り替わりで不連続感が生じないようにレンズ収差を適用することができない。すなわち、従来では、ＣＧクリップ部に実写の雰囲気を与えつつ、カメラ素材クリップ部とＣＧクリップ部との切り替わり目の不連続感を軽減することができない。

本発明は、撮影装置による撮影で生成された動画からレンズ収差を除去して得られた第１のクリップに、レンズ収差を持たない画像で構成された第２のクリップを結合して得られた結合クリップにおいて、第２のクリップ部に実写の雰囲気を与えつつ、第１のクリップ部と第２のクリップ部との切り替わり目の不連続感を軽減することができる情報処理装置、情報処理装置の制御方法、及びプログラムを提供することを目的とする。

上記目的を達成するために、本発明の情報処理装置は、撮影装置による撮影で生成された動画からレンズ収差を除去して得られた第１のクリップと、レンズ収差を持たない画像で構成された第２のクリップを時系列的に配置して結合した結合クリップを生成する情報処理装置であって、前記第１のクリップを構成する複数のフレーム画像に夫々対応する複数のレンズメタデータであってレンズ収差の補正量を示す複数のレンズメタデータを前記撮影で使用された撮影設定値に対応付けて記録した前記第１のクリップのメタデータを読み込む手段と、前記結合クリップを構成する複数のフレーム画像の中からレンズ収差を未適用のフレーム画像を取得し、前記結合クリップにおける当該フレーム画像のフレーム番号を取得する手段と、前記取得したフレーム番号に対応付けて予め設定された第１の撮影設定値を取得する手段と、前記第１のクリップのメタデータから、前記取得した第１の撮影設定値に最も近しい第２の撮影設定値に対応するレンズメタデータを取得し、当該レンズメタデータを用いて、前記取得したフレーム画像にレンズ収差を適用する処理を行う手段とを備えることを特徴とする。

本発明によれば、撮影装置による撮影で生成された動画からレンズ収差を除去して得られた第１のクリップに、レンズ収差を持たない画像で構成された第２のクリップを結合して得られた結合クリップにおいて、第２のクリップ部に実写の雰囲気を与えつつ、第１のクリップ部と第２のクリップ部との切り替わり目の不連続感を軽減することができる。

本発明の実施の形態に係る情報処理装置の構成を概略的に示すブロック図である。 図１の情報処理装置による動画の編集処理を説明するための図である。 図２のカメラ素材クリップのレンズ収差メタデータの一例を示す図である。 第１の実施の形態における情報処理装置によって実行されるレンズ収差適用処理の手順を示すフローチャートである。 図４のレンズ収差適用処理で用いられる結合クリップの構成と仮想カメラ情報の構成を説明するための図である。 図４のレンズ収差適用処理で出力されるレンズ収差適用済みの結合クリップを説明するための図である。 第２の実施の形態における情報処理装置によって実行されるレンズ収差適用処理の手順を示すフローチャートである。 図７のレンズ収差適用処理で用いられる結合クリップの構成を説明するための図である。 図７のレンズ収差適用処理で出力されるレンズ収差適用済みの結合クリップを説明するための図である。 第３の実施の形態における情報処理装置によって実行されるレンズ収差適用処理の手順を示すフローチャートである。

以下、本発明に係る実施例を、図面を参照して詳細に説明する。なお、本実施の形態では、情報処理装置の一例として、動画ファイルを扱うパーソナルコンピュータ（以下、「ＰＣ」という）について説明する。

まず、本発明の第１の実施の形態に係る情報処理装置及びその制御方法について説明する。

図１は、本発明の実施の形態に係る情報処理装置１００の構成を概略的に示すブロック図である。図１において、情報処理装置１００は、制御部１０１、ＲＯＭ１０２、ＲＡＭ１０３、記憶装置１０４、操作部１０５、及び表示部１０６を備える。これらはバス１０７を介して互いに接続されている。なお、ＲＯＭはRead Only Memoryの略である。ＲＡＭはRandom Access Memoryの略である。

制御部１０１は、例えば、ＣＰＵ（Central Processing Unit）であり、情報処理装置１００全体を制御する。ＲＯＭ１０２は、変更を必要としないプログラムやパラメータを格納する。例えば、ＲＯＭ１０２は、画像編集を行うためのアプリケーション（以下、「画像編集アプリ」という。）のプログラムを格納する。ＲＡＭ１０３は、外部装置等から取得したプログラムやデータを一時記憶する。記憶装置１０４は、例えば、ハードディスクやフラッシュメモリである。若しくは、記憶装置１０４は、情報処理装置１００から着脱可能なフロッピーディスク（ＦＤ）やＣＤ（Compact Disk）等の光ディスク、磁気や光カード、ＩＣカード、メモリーカード等といった外部記憶装置であっても良い。操作部１０５は、データを入力するボタンやタッチパネルで構成され、ユーザの操作を受け付ける。表示部１０６は、情報処理装置１００が保持するデータや、外部装置から取得したデータ等を表示する。

ＰＣ１００では、ユーザが、デジタルカメラ（不図示）（撮影装置）の撮影で記録された動画を画像編集アプリに読み込ませ、画像編集アプリによってこの動画の編集処理を行う。編集処理では、ユーザは、例えば、画像編集アプリ上のタイムラインに、図２（ａ）に示すように、ＣＧ画像で構成されたＣＧ素材クリップ２０１と、上記動画で構成されたカメラ素材クリップ２０２とをこの順に並べて配置する。なお、カメラ素材クリップ２０２には、レンズ収差が生じている。例えば、カメラ素材クリップ２０２には、イメージ２０４に示すように、歪曲収差が生じている。なお、本実施の形態では、レンズ収差の一例として、歪曲収差が生じた場合について説明するが、レンズ収差は歪曲収差に限られない。レンズ収差として、例えば、周辺光量落ち等も挙げられる。一方、ＣＧ素材クリップ２０１は、レンズを備える撮影装置で撮影されていないためレンズ収差が生じていない（例えば、イメージ２０３を参照。）。

次いで、ＰＣ１００は、レンズ収差除去処理を行う。レンズ収差除去処理では、ＰＣ１００は、カメラ素材クリップ２０２を構成する動画の撮影で用いられた撮影設定値等を含む図３のレンズ収差メタデータ３００を用いて、カメラ素材クリップ２０２からレンズ収差を除去する。これにより、図２（ｂ）に示すように、カメラ素材クリップ２０２及びＣＧ素材クリップ２０１は何れも、レンズ収差が生じていない状態となる。

図３は、図２のカメラ素材クリップ２０２のレンズ収差メタデータ３００の一例を示す図である。レンズ収差メタデータ３００は、共通情報部３０１、付加情報部３０２、フレーム単位情報部３０３で構成される。レンズ収差メタデータ３００は、テキスト形式で、フレーム毎のデータがフレーム番号と共にカンマ区切りで記録された構成とする。共通情報部３０１には、動画ファイル名、撮影を行ったカメラの名称、撮影時に使用されたレンズの名称、撮影時に設定されたフレームレート、動画の画像サイズが含まれる。付加情報部３０２には、後述するタイムドメタのオフセットフレーム数が記録されている。フレーム単位情報部３０３には、各フレームのフレーム番号に対応付けて、Ｆ値、焦点距離、レンズメタデータが記録されている。レンズメタデータは、画像の中心位置からの距離に対してどの程度の補正を適用するかを示す補正量である。本実施の形態では、カメラ素材クリップ２０２を構成する複数のフレーム画像に対して夫々最適な補正量を示す複数のレンズメタデータがフレーム単位情報部３０３に記録されている。

上記レンズ収差除去処理を完了すると、ＰＣ１００は、ＣＧ素材クリップ２０１と、レンズ収差を除去したカメラ素材クリップ２０２とを時系列的に結合して図２（ｃ）の結合クリップ２０５を作成する。結合クリップ２０５は、図２（ｃ）に示すように、ＣＧ素材クリップ２０１に相当するＣＧ素材クリップ部２０５ａと、カメラ素材クリップ２０２に相当するカメラ素材クリップ部２０５ｂとで構成される。結合クリップ２０５は、レンズ収差が生じていない状態（例えば、歪曲収差が無い状態（図２（ｃ）のイメージ２０６を参照。））である。

次いで、ＰＣ１００は、結合クリップ２０５に対し、レンジ収差適用処理を行う。この時、ＰＣ１００は、従来通り、レンズ収差メタデータ３００のみを用いると、レンズ収差メタデータ３００にはカメラ素材クリップ２０２のレンズメタデータしか含まれていないため、ＣＧ素材クリップ部２０５ａにレンズ収差を適用することができない。つまり、結合クリップ２０５では、図２（ｄ）に示すように、カメラ素材クリップ部２０５ｂにのみレンズ収差が適用された状態となる。その結果、ＣＧ素材クリップ部２０５ａに実写の雰囲気を与えることができず、また、ＣＧ素材クリップ部２０５ａとカメラ素材クリップ部２０５ｂとの切り替わり目で不連続感が生じてしまう。

これに対し、第１の実施の形態では、レンズ収差を未適用のフレーム画像が結合クリップ２０５から取得され、当該フレーム画像のフレーム番号が取得され、このフレーム番号に対応付けて予め設定された焦点距離の値が仮想カメラ情報５０１から取得される。また、カメラ素材クリップ部２０５ｂのレンズ収差メタデータ３００から、上記焦点距離の値に最も近しい焦点距離の値に対応するレンズメタデータが取得され、当該レンズメタデータを用いて、このフレーム画像にレンズ収差が適用される。

図４は、第１の実施の形態における情報処理装置１００によって実行されるレンズ収差適用処理の手順を示すフローチャートである。図４のレンズ収差適用処理は、制御部１０１がＲＯＭ１０２等に格納されたプログラムをＲＡＭ１０３に展開して実行することによって実現される。なお、本実施の形態では、一例として、結合クリップ２０５に対してレンズ収差適用処理を実行することとする。結合クリップ２０５は、上述した通り、ＣＧ素材クリップ部２０５ａ及びカメラ素材クリップ部２０５ｂで構成され、カメラ素材クリップ部２０５ｂはレンズ収差を除去されたカメラ素材クリップ２０２である。また、結合クリップ２０５では、図５（ａ）に示すように、ＣＧ素材クリップ部２０５ａは、結合クリップ２０５の０フレーム目から９フレーム目までの１０フレームで構成されていることとする。また、結合クリップ２０５のカメラ素材クリップ部２０５ｂは、結合クリップ２０５の１０フレーム目から１９フレーム目までの１０フレームで構成されていることとする。図４のレンズ収差適用処理は、ユーザが操作部１０５を操作して結合クリップ２０５に対応するレンズ収差メタデータ３００を指定した際に実行される。なお、レンズ収差メタデータ３００は、結合クリップ２０５におけるカメラ素材クリップ部２０５ｂを構成するカメラ素材クリップ２０２のレンズ収差メタデータである。

図４において、まず、制御部１０１は、ユーザに指定されたレンズ収差メタデータ３００を読み込む（Ｓ４０１）。次いで、制御部１０１は、読み込んだレンズ収差メタデータ３００を解析する（Ｓ４０２）。

次いで、制御部１０１は、結合クリップ２０５の図５（ｂ）の仮想カメラ情報５０１を取得する（Ｓ４０３）。仮想カメラ情報５０１は、結合クリップ２０５における各フレームの撮影設定値を記録したテーブルであり、レンズ収差の適用において結合クリップ２０５の各フレームにどのレンズメタデータを使用するかを決定するために用いられる。本実施の形態では、本処理を開始する前に、ユーザが操作部１０５を操作して、仮想カメラ情報５０１に記録される結合クリップ２０５における各フレームの撮影設定値を設定する。ユーザによって設定された各フレームの撮影設定値を含む仮想カメラ情報５０１は、記憶装置１０４等に格納される。図５（ｂ）では、撮影設定値の一例として焦点距離が記録され、全てのフレームに対し焦点距離が「５０」で設定されている。なお、本実施の形態では、仮想カメラ情報５０１の焦点距離について、全てのフレームに対して同じ値を設定する構成について説明するが、フレーム毎に異なる値を設定しても良い。ただし、仮想カメラ情報５０１の焦点距離について隣り合うフレーム間でその値の差が非常に大きい場合、このフレーム間において、歪み具合や周辺光量の落ち具合いに大きな違いが生じ、違和感のある動画になってしまう懸念がある。このため、仮想カメラ情報５０１の焦点距離についてフレーム毎に異なる値を設定する場合には、隣り合うフレーム間で焦点距離の値の差が大きくなり過ぎないように設定する必要がある。

次いで、制御部１０１は、結合クリップ２０５から、レンズ収差を未適用のフレーム番号と、このフレーム番号に対応するフレーム画像とを取得する（Ｓ４０４）。

次いで、制御部１０１は、仮想カメラ情報５０１から、Ｓ４０４で取得したフレーム番号に対応する焦点距離を取得する（Ｓ４０５）。例えば、Ｓ４０４で取得したフレーム番号が「０」である場合、仮想カメラ情報５０１から、フレーム番号が「０」に対応する焦点距離である「５０」を取得する。

次いで、制御部１０１は、Ｓ４０５で取得した焦点距離の値に最も近しい焦点距離の値に対応するフレーム番号をレンズ収差メタデータ３００から特定する（Ｓ４０６）。例えば、Ｓ４０５で取得した焦点距離の値が「５０」である場合、図３のレンズ収差メタデータ３００のフレーム単位情報部３０３において、この値に最も近しい焦点距離の値は「５０」であり、この値に対応するフレーム番号は「１」である。このようにＳ４０５で取得した焦点距離の値が「５０」である場合、Ｓ４０６では、制御部１０１は、Ｓ４０５で取得した焦点距離の値に最も近しい焦点距離の値に対応するフレーム番号を「１」と特定する。

次いで、制御部１０１は、Ｓ４０６で特定したフレーム番号に対応するレンズメタデータをレンズ収差メタデータ３００のフレーム単位情報部３０３から取得する（Ｓ４０７）。例えば、Ｓ４０６で特定したフレーム番号が「１」である場合、制御部１０１は、レンズ収差メタデータ３００のフレーム単位情報部３０３から、フレーム番号「１」に対応するレンズメタデータを取得する。

次いで、制御部１０１は、Ｓ４０４で取得したフレーム画像に対し、Ｓ４０７で取得したレンズメタデータを用いてレンズ収差を適用する（Ｓ４０８）。次いで、制御部１０１は、結合クリップ２０５の全てのフレームにレンズ収差を適用したか否かを判定する（Ｓ４０９）。

Ｓ４０９にて、結合クリップ２０５の何れかのフレームにレンズ収差を適用しないと判定された場合、本処理はＳ４０４へ戻り、結合クリップ２０５から、レンズ収差を未適用のフレーム番号と、このフレーム番号に対応するフレーム画像が取得される。このようにして、結合クリップ２０５の全てのフレームに対してレンズ収差が適用される。本実施の形態では、一例として、仮想カメラ情報５０１において全てのフレームに対し焦点距離の値を「５０」に設定しているので、結合クリップ２０５の各フレームに対し、この焦点距離の値に最も近しい焦点距離の値に対応するフレーム番号「１」のレンズメタデータを用いて、レンズ収差が適用される（例えば、図５（ｃ）を参照。）。これにより、結合クリップ２０５では、図６に示すように、ＣＧ素材クリップ部２０５ａ及びカメラ素材クリップ部２０５ｂの両方にレンズ収差が適用された状態となる。

Ｓ４０９にて、結合クリップ２０５の全てのフレームにレンズ収差を適用したと判定された場合、本処理は終了する。

上述した第１の実施の形態によれば、レンズ収差を未適用のフレーム画像が結合クリップ２０５から取得され、当該フレーム画像のフレーム番号が取得され、このフレーム番号に対応付けて予め設定された焦点距離の値が仮想カメラ情報５０１から取得される。また、カメラ素材クリップ部２０５ｂのレンズ収差メタデータ３００から、上記焦点距離の値に最も近しい焦点距離の値に対応するレンズメタデータが取得され、当該レンズメタデータを用いて、このフレーム画像にレンズ収差が適用される。すなわち、カメラ素材クリップ部２０５ｂだけでなく、ＣＧ素材クリップ部２０５ａにも、レンズ収差が適用される。これにより、結合クリップ２０５において、ＣＧ素材クリップ部２０５ａに実写の雰囲気を与えることができる。また、レンズ収差の適用では、カメラ素材クリップ部２０５ｂのレンズ収差メタデータ３００に含まれるレンズメタデータが使用されるので、ＣＧ素材クリップ部２０５ａに対してカメラ素材クリップ部２０５ｂと同じ具合いでレンズ収差が適用される。これにより、ＣＧ素材クリップ部２０５ａとカメラ素材クリップ部２０５ｂとの切り替わり目の不連続感を軽減することができる。従って、上述した第１の実施の形態では、結合クリップ２０５において、ＣＧ素材クリップ部２０５ａに実写の雰囲気を与えつつ、ＣＧ素材クリップ部２０５ａとカメラ素材クリップ部２０５ｂとの切り替わり目の不連続感を軽減することができる。

また、上述した第１の実施の形態では、仮想カメラ情報５０１は、ユーザによって設定される。これにより、結合クリップ２０５に付加させる歪み具合いや周辺光量の落ち具合いについて、ユーザの意図を反映させることができる。

なお、上述した第１の実施の形態では、仮想カメラ情報５０１に撮影設定値として焦点距離の値を設定する構成について説明したが、仮想カメラ情報５０１の構成はこれに限られない。例えば、仮想カメラ情報５０１は、撮影設定値として、焦点距離以外の値を含む構成であっても良い。焦点距離以外の値として、例えば、Ｆ値やＴ値等といったカメラが撮影した映像に影響を与える被写体距離情報や、光学系に影響を与える撮影設定値が挙げられる。

また、本実施の形態では、仮想カメラ情報５０１は、撮影設定値として、複数の種別の値、例えば、焦点距離の値とＦ値の両方を含む構成であっても良い。

また、本実施の形態では、仮想カメラ情報５０１に撮影設定値として含める項目（焦点距離やＦ値）をユーザに選択させる構成であっても良い。

また、本実施の形態では、レンズ収差メタデータ３００のファイル構造は、上述した図３に示す構造に限られず、ＪＳＯＮ形式等の構造であっても良い。

また、レンズ収差メタデータ３００は、デジタルカメラが動画撮影時に動画ファイルに記録していてもよく、情報処理装置１００がフレーム毎のメタデータが記録されている動画ファイルから作成してもよい。

上述した実施の形態では、レンズ収差メタデータ３００が記録されたファイルを情報処理装置１００が読み込む構成としたが、この構成に限られない。例えば、フレーム毎に変化するタイムドメタデータとしてレンズ収差メタデータ３００が動画ファイル自体に埋め込まれており、情報処理装置１００が動画ファイルからレンズ収差メタデータ３００を取得する構成であってもよい。

また、本実施の形態では、適用するレンズ収差をユーザに選択させる構成であっても良く、また、適用するレンズ収差に合わせて、仮想カメラ情報５０１に撮影設定値として含める項目（焦点距離やＦ値）を決定しても良い。

次に、本発明の第２の実施の形態に係る情報処理装置及びその制御方法について説明する。

第２の実施の形態は、その構成や作用が上述した第１の実施の形態と基本的に同じであり、仮想カメラ情報を用いずに、結合クリップを構成する全てのフレーム画像に対してレンズ収差を適用する点で上述した第１の実施の形態と異なる。したがって、重複した構成、作用については説明を省略し、以下に異なる構成、作用についての説明を行う。

図７は、第２の実施の形態における情報処理装置１００によって実行されるレンズ収差適用処理の手順を示すフローチャートである。なお、図７のレンズ収差適用処理は、上述した図４のレンズ収差適用処理に類似する処理であり、以下では特に、上述した図４のレンズ収差適用処理と異なる内容について説明する。図７のレンズ収差適用処理も、上述した図４のレンズ収差適用処理と同様に、制御部１０１がＲＯＭ１０２等に格納されたプログラムをＲＡＭ１０３に展開して実行することによって実現される。なお、本実施の形態では、一例として、図８の結合クリップ８０１に対してレンズ収差適用処理を実行することとする。結合クリップ８０１は、ＣＧ素材クリップ部８０１ａ、カメラ素材クリップ部８０１ｂ、ＣＧ素材クリップ部８０１ｃで構成され、カメラ素材クリップ部８０１ｂはレンズ収差を除去されたカメラ素材クリップ２０２である。ＣＧ素材クリップ部８０１ａは、結合クリップ８０１の０フレーム目から９フレーム目までの１０フレームで構成されている。カメラ素材クリップ部８０１ｂは、結合クリップ８０１の１０フレーム目から１９フレーム目までの１０フレームで構成されている。ＣＧ素材クリップ部８０１ｃは、結合クリップ８０１の２０フレーム目から２９フレーム目までの１０フレームで構成されている。図７のレンズ収差適用処理は、ユーザが操作部１０５を操作して結合クリップ８０１に対応するレンズ収差メタデータ３００を指定した際に実行される。なお、レンズ収差メタデータ３００は、結合クリップ８０１におけるカメラ素材クリップ部８０１ｂを構成するカメラ素材クリップ２０２のレンズ収差メタデータである。

図７において、上述したＳ４０１、Ｓ４０２と同様の処理であるＳ７０１、Ｓ７０２が行われる。次いで、制御部１０１は、レンズ収差メタデータ３００の付加情報部３０２から、タイムドメタのオフセットフレーム数を取得する（Ｓ７０３）。このオフセットフレーム数は、結合クリップ８０１におけるカメラ素材クリップ部８０１ｂの開始フレーム位置を示す値である。本実施の形態では、カメラ素材クリップ部８０１ｂの先頭フレームより前に、１０フレームで構成されたＣＧ素材クリップ部８０１ａが配置されているので、付加情報部３０２には、タイムドメタのオフセットフレーム数として「１０」が設定されている。

次いで、制御部１０１は、結合クリップ８０１から、レンズ収差を未適用のフレーム番号と、このフレーム番号に対応するフレーム画像とを取得する（Ｓ７０４）。次いで、制御部１０１は、Ｓ７０４で取得したフレーム番号がカメラ素材クリップ部８０１ｂに到達したか否かを判定する（Ｓ７０５）。具体的に、制御部１０１は、Ｓ７０４で取得したフレーム番号が、Ｓ７０３で取得したオフセットフレーム数である「１０」に到達したか否かを判定する。

Ｓ７０５では、Ｓ７０４で取得したフレーム番号が、Ｓ７０３で取得したオフセットフレーム数である「１０」に到達しない場合、Ｓ７０４で取得したフレーム番号がカメラ素材クリップ部８０１ｂに到達しないと判定される。この場合、本処理はＳ７０６へ進む。

Ｓ７０６では、制御部１０１は、レンズ収差メタデータ３００のフレーム単位情報部３０３から、先頭フレームに対応するレンズメタデータを取得する。このように、本実施の形態では、Ｓ７０４で取得したフレーム番号がカメラ素材クリップ部８０１ｂに相当するフレーム番号でない場合であってカメラ素材クリップ部８０１ｂにおける先頭のフレーム番号より前のフレーム番号である場合、レンズ収差メタデータ３００からカメラ素材クリップ部８０１ｂにおける先頭フレームに対応するレンズメタデータが取得される。次いで、本処理は後述するＳ７１１へ進む。

Ｓ７０５では、Ｓ７０４で取得したフレーム番号が、Ｓ７０３で取得したオフセットフレーム数である「１０」に到達した場合、Ｓ７０４で取得したフレーム番号がカメラ素材クリップ部８０１ｂに到達したと判定される。この場合、本処理はＳ７０７へ進む。

Ｓ７０７では、制御部１０１は、Ｓ７０４で取得したフレーム番号を、レンズ収差メタデータ３００に対応するフレーム番号に変換する。具体的には、制御部１０１は、Ｓ７０４で取得したフレーム番号から、Ｓ７０３で取得したタイムドメタのオフセットフレーム数分を減算する。例えば、Ｓ７０４で取得したフレーム番号である「１０」から、Ｓ７０３で取得したタイムドメタのオフセットフレーム数である「１０」を減算して「０」が得られる。「０」は、レンズ収差メタデータ３００において、カメラ素材クリップ部８０１ｂの先頭のフレーム番号に相当する。このようにＳ７０７では、Ｓ７０４で取得したフレーム番号が、レンズ収差メタデータ３００に対応するフレーム番号に変換される。

次いで、制御部１０１は、変換したフレーム番号がカメラ素材クリップ部８０１ｂの終端を超えたか否かを判定する（Ｓ７０８）。具体的に、制御部１０１は、変換したフレーム番号がカメラ素材クリップ部８０１ｂの最終フレームのフレーム番号である「９」を超えたか否かを判定する。

Ｓ７０８では、変換したフレーム番号がカメラ素材クリップ部８０１ｂの最終フレームのフレーム番号である「９」を超えない場合、変換したフレーム番号がカメラ素材クリップ部８０１ｂの終端を超えないと判定される。この場合、本処理はＳ７０９へ進む。

Ｓ７０９では、制御部１０１は、レンズ収差メタデータ３００のフレーム単位情報部３０３から、変換したフレーム番号に対応するレンズメタデータを取得する。このように、本実施の形態では、Ｓ７０４で取得したフレーム番号がカメラ素材クリップ部８０１ｂに相当するフレーム番号である場合、レンズ収差メタデータ３００からＳ７０４で取得したフレーム画像のレンズ収差の補正量を示すレンズメタデータが取得される。次いで、本処理は後述するＳ７１１へ進む。

Ｓ７０８では、変換したフレーム番号がカメラ素材クリップ部８０１ｂの最終フレームのフレーム番号である「９」を超えた場合、変換したフレーム番号がカメラ素材クリップ部８０１ｂの終端を超えたと判定される。この場合、本処理はＳ７１０へ進む。

Ｓ７１０では、制御部１０１は、レンズ収差メタデータ３００のフレーム単位情報部３０３から、最終フレームに対応するレンズメタデータを取得する。このように、本実施の形態では、Ｓ７０４で取得したフレーム番号がカメラ素材クリップ部８０１ｂに相当するフレーム番号でない場合であってカメラ素材クリップ部８０１ｂにおける最終のフレーム番号より後のフレーム番号である場合、レンズ収差メタデータ３００からカメラ素材クリップ部８０１ｂにおける最終フレームに対応するレンズメタデータが取得される。

次いで、制御部１０１は、Ｓ７０４で取得したフレーム画像に対し、Ｓ７０６、Ｓ７０９、又はＳ７１０で取得したレンズメタデータを用いてレンズ収差を適用する。

例えば、カメラ素材クリップ部８０１ｂの先頭フレームより前に配置されたＣＧ素材クリップ部８０１ａに対し、Ｓ７０６で取得したレンズメタデータ、つまりカメラ素材クリップ部８０１ｂの先頭フレームのレンズメタデータを用いてレンズ収差が適用される（例えば、図８（ｂ）の８０３を参照。）。なお、図８（ｂ）の８０２は、レンズ収差メタデータ３００のフレーム単位情報部３０３に含まれる各フレーム番号に対応するレンズメタデータを示す。

また、カメラ素材クリップ部８０１ｂに対し、Ｓ７０９で取得したレンズメタデータ、つまり、カメラ素材クリップ部８０１ｂの各フレーム番号に対応するレンズメタデータを用いてレンズ収差が適用される（例えば、図８（ｂ）の８０４を参照。）。

また、カメラ素材クリップ部８０１ｂの最終フレームより後に配置されたＣＧ素材クリップ部８０１ｃに対し、Ｓ７１０で取得したレンズメタデータ、つまり、カメラ素材クリップ部８０１ｂの最終フレームのレンズメタデータを用いてレンズ収差が適用される（例えば、図８（ｂ）の８０５を参照。）。

次いで、制御部１０１は、結合クリップ８０１の全てのフレームに対してレンズ収差を適用したか否かを判定する（Ｓ７１２）。

Ｓ７１２にて、結合クリップ８０１の何れかのフレームにレンズ収差を適用しないと判定された場合、本処理はＳ７０４へ戻り、結合クリップ８０１から、レンズ収差を未適用のフレーム番号と、このフレーム番号に対応するフレーム画像が取得される。このようにして、結合クリップ８０１の全てのフレームに対してレンズ収差が適用される。これにより、結合クリップ８０１では、図９に示すように、ＣＧ素材クリップ部８０１ａ、カメラ素材クリップ部８０１ｂ、ＣＧ素材クリップ部８０１ｃの全てに、レンズ収差が適用された状態となる。

Ｓ７１２にて、結合クリップ８０１の全てのフレームにレンズ収差を適用したと判定された場合、本処理は終了する。

上述した第２の実施の形態では、レンズ収差を未適用のフレーム画像が結合クリップ８０１から取得され、当該フレーム画像のフレーム番号が取得される。このフレーム番号がカメラ素材クリップ部８０１ｂに相当するフレーム番号である場合、カメラ素材クリップ部８０１ｂのレンズ収差メタデータ３００から、このフレーム画像のレンズ収差の補正量を示すレンズメタデータが取得され、当該レンズメタデータを用いて、このフレーム画像にレンズ収差が適用される。また、このフレーム番号がカメラ素材クリップ部８０１ｂに相当するフレーム番号でない場合であってカメラ素材クリップ部８０１ｂにおける先頭のフレーム番号より前のフレーム番号である場合、カメラ素材クリップ部８０１ｂのレンズ収差メタデータ３００からカメラ素材クリップ部８０１ｂにおける先頭のフレーム画像のレンズ収差の補正量を示すレンズメタデータが取得され、当該レンズメタデータを用いて、このフレーム画像にレンズ収差が適用される。また、このフレーム番号がカメラ素材クリップ部８０１ｂに相当するフレーム番号でない場合であってカメラ素材クリップ部８０１ｂにおける最終のフレーム番号より後のフレーム番号である場合、カメラ素材クリップ部８０１ｂのレンズ収差メタデータ３００からカメラ素材クリップ部８０１ｂにおける最終のフレーム画像のレンズ収差の補正量を示すレンズメタデータが取得され、当該レンズメタデータを用いて、このフレーム画像にレンズ収差が適用される。すなわち、カメラ素材クリップ部８０１ｂだけでなく、ＣＧ素材クリップ部８０１ａやＣＧ素材クリップ部８０１ｃにも、レンズ収差が適用される。これにより、結合クリップ８０１において、ＣＧ素材クリップ部８０１ａやＣＧ素材クリップ部８０１ｃに実写の雰囲気を与えることができる。また、ＣＧ素材クリップ部８０１ａ及びＣＧ素材クリップ部８０１ｃには夫々、隣接するカメラ素材クリップ部２０５ｂのフレーム画像のレンズ収差の補正量を示すレンズメタデータを用いてレンズ収差が適用される。これにより、カメラ素材クリップ部８０１ｂとの切り替わり目の不連続感を軽減することができる。従って、上述した第２の実施の形態では、結合クリップ８０１において、ＣＧ素材クリップ部に実写の雰囲気を与えつつ、ＣＧ素材クリップ部とカメラ素材クリップ部との切り替わり目の不連続感を軽減することができる。

また、上述した第２の実施の形態では、結合クリップ８０１においてカメラ素材クリップ部８０１ｂの開始フレームを特定するためのタイムドメタのオフセットフレーム数を用いて、取得したフレーム番号がカメラ素材クリップ部８０１ｂに相当するフレーム番号であるか否かが判定される。これにより、取得したフレーム番号がカメラ素材クリップ部８０１ｂに相当するフレーム番号であるか否かを確実に判定することができる。

なお、上述した第２の実施の形態では、レンズ収差メタデータ３００がタイムドメタのオフセットフレーム数を含む構成について説明したが、この構成に限られない。例えば、画像編集アプリの設定画面において、タイムドメタのオフセットフレーム数をユーザに設定させる構成であっても良い。

次に、本発明の第３の実施の形態に係る情報処理装置及びその制御方法について説明する。

第３の実施の形態は、その構成や作用が上述した第１、第２の実施の形態と基本的に同じであり、仮想カメラ情報５０１を取得した否かに基づいてレンズ収差を適用する制御を切り替える点で上述した第１、第２の実施の形態と異なる。したがって、重複した構成、作用については説明を省略し、以下に異なる構成、作用についての説明を行う。

図１０は、第３の実施の形態における情報処理装置１００によって実行されるレンズ収差適用処理の手順を示すフローチャートである。なお、図１０のレンズ収差適用処理は、上述した図４、図７のレンズ収差適用処理に類似する処理であり、以下では特に、上述した図４、図７のレンズ収差適用処理と異なる内容について説明する。図１０のレンズ収差適用処理も、上述した図４、図７のレンズ収差適用処理と同様に、制御部１０１がＲＯＭ１０２等に格納されたプログラムをＲＡＭ１０３に展開して実行することによって実現される。なお、本実施の形態では、一例として、結合クリップ２０５に対してレンズ収差適用処理を実行することとする。図１０のレンズ収差適用処理は、ユーザが操作部１０５を操作して結合クリップ２０５に対応するレンズ収差メタデータ３００を指定した際に実行される。なお、レンズ収差メタデータ３００は、結合クリップ２０５におけるカメラ素材クリップ部２０５ｂを構成するカメラ素材クリップ２０２のレンズ収差メタデータである。

図１０において、まず、上述したＳ４０１、Ｓ４０２と同様の処理であるＳ１００１、Ｓ１００２が行われる。次いで、制御部１０１は、仮想カメラ情報５０１の取得を試み、仮想カメラ情報５０１を取得したか否かを判定する（Ｓ１００３）。

Ｓ１００３にて、仮想カメラ情報５０１を取得したと判定された場合、制御部１０１は、第１の制御処理を行う。第１の制御処理では、上述したＳ４０４～Ｓ４０９が行われる。その後、本処理は終了する。

Ｓ１００３にて、仮想カメラ情報５０１を取得しないと判定された場合、制御部１０１は、第２の制御処理を行う。第２の制御処理では、上述したＳ７０３～Ｓ７１２が行われる。その後、本処理は終了する。

このように、仮想カメラ情報５０１を取得した否かに基づいてレンズ収差を適用する制御を切り替える構成においても、上述した実施の形態と同様の効果を奏することができる。

なお、本実施の形態では、本発明を情報処理装置１００の一例であるＰＣに適用した場合について説明したが、スマートフォンやタブレット端末にも本発明を適用可能である。

また、本実施の形態では、レンズ収差を持たない画像で構成された素材クリップとして、ＣＧ画像で構成されたＣＧ素材クリップを用いる場合を例に説明したが、これに限られない。本発明は、例えば、スキャン装置で読み取った画像等のようにＣＧ画像以外の画像であってレンズ収差を持たない画像で構成された素材クリップを用いる場合にも適用可能である。また、このような素材クリップを取り込んでいるデジタルカメラにおいても本発明を適用することができる。

以上、本発明をその好適な実施形態に基づいて詳述してきたが、本発明はこれら特定の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。上述の実施形態の一部を適宜組み合わせてもよい。また、上述の実施形態の機能を実現するソフトウェアのプログラムを、記録媒体から直接、或いは有線／無線通信を用いてプログラムを実行可能なコンピュータを有するシステム又は装置に供給し、そのプログラムを実行する場合も本発明に含む。従って、本発明の機能処理をコンピュータで実現するために、該コンピュータに供給、インストールされるプログラムコード自体も本発明を実現するものである。つまり、本発明の機能処理を実現するためのコンピュータプログラム自体も本発明に含まれる。その場合、プログラムの機能を有していれば、オブジェクトコード、インタプリタにより実行されるプログラム、ＯＳに供給するスクリプトデータ等、プログラムの形態を問わない。プログラムを供給するための記録媒体としては、例えば、ハードディスク、磁気テープ等の磁気記録媒体、光／光磁気記憶媒体、不揮発性の半導体メモリでもよい。また、プログラムの供給方法としては、コンピュータネットワーク上のサーバに本発明を形成するコンピュータプログラムを記憶し、接続のあったクラアントコンピュータがコンピュータプログラムをダウンロードしてプログラムするような方法も考えられる。

なお、本実施形態の開示は、以下の構成および方法を含む。
（構成１）撮影装置による撮影で生成された動画からレンズ収差を除去して得られた第１のクリップに、レンズ収差を持たない画像で構成された第２のクリップを結合した結合クリップを生成する情報処理装置であって、前記第１のクリップを構成する複数のフレーム画像に夫々対応する複数のレンズメタデータであってレンズ収差の補正量を示す複数のレンズメタデータを前記撮影で使用された撮影設定値に対応付けて記録した前記第１のクリップのメタデータを読み込む手段と、前記結合クリップを構成する複数のフレーム画像の中からレンズ収差を未適用のフレーム画像を取得し、前記結合クリップにおける当該フレーム画像のフレーム番号を取得する手段と、前記取得したフレーム番号に対応付けて予め設定された第１の撮影設定値を取得する手段と、前記第１のクリップのメタデータから、前記取得した第１の撮影設定値に最も近しい第２の撮影設定値に対応するレンズメタデータを取得し、当該レンズメタデータを用いて、前記取得したフレーム画像にレンズ収差を適用する処理を行う手段とを備えることを特徴とする情報処理装置。
（構成２）前記第１の撮影設定値は、ユーザによって設定されることを特徴とする構成１に記載の情報処理装置。
（構成３）前記第１の撮影設定値は、焦点距離の値、Ｆ値の少なくとも一方であることを特徴とする構成１又は２に記載の情報処理装置。
（構成４）前記第１の撮影設定値を取得したか否かを判定する手段を更に備え、前記第１の撮影設定値を取得しないと判定された場合、前記適用する処理を行う手段は、前記第１の撮影設定値を用いずにレンズ収差を適用する処理を行い、前記第１の撮影設定値を用いずにレンズ収差を適用する処理では、前記取得したフレーム番号が前記第１のクリップに相当するフレーム番号である場合、前記適用する処理を行う手段は、前記第１のクリップのメタデータから前記取得したフレーム画像のレンズ収差の補正量を示すレンズメタデータを取得し、当該レンズメタデータを用いて、前記取得したフレーム画像にレンズ収差を適用する処理を行い、前記取得したフレーム番号が前記第１のクリップに相当するフレーム番号でない場合であって前記第１のクリップにおける先頭のフレーム番号より前のフレーム番号である場合、前記適用する処理を行う手段は、前記第１のクリップのメタデータから前記第１のクリップにおける先頭のフレーム画像のレンズ収差の補正量を示すレンズメタデータを取得し、当該レンズメタデータを用いて、前記取得したフレーム画像にレンズ収差を適用する処理を行い、前記取得したフレーム番号が前記第１のクリップに相当するフレーム番号でない場合であって前記第１のクリップにおける最終のフレーム番号より後のフレーム番号である場合、前記適用する処理を行う手段は、前記第１のクリップのメタデータから前記第１のクリップにおける最終のフレーム画像のレンズ収差の補正量を示すレンズメタデータを取得し、当該レンズメタデータを用いて、前記取得したフレーム画像にレンズ収差を適用する処理を行うことを特徴とする構成１乃至３の何れか１つに記載の情報処理装置。
（構成５）撮影装置による撮影で生成された動画からレンズ収差を除去して得られた第１のクリップに、レンズ収差を持たない画像で構成された第２のクリップを結合した結合クリップを生成する情報処理装置であって、前記第１のクリップを構成する複数のフレーム画像に夫々対応する複数のレンズメタデータであってレンズ収差の補正量を示す複数のレンズメタデータを記録した前記第１のクリップのメタデータを読み込む手段と、前記結合クリップを構成する複数のフレーム画像の中からレンズ収差を未適用のフレーム画像を取得し、前記結合クリップにおける当該フレーム画像のフレーム番号を取得する手段と、前記取得したフレーム画像にレンズ収差を適用する処理を行う手段とを備え、前記取得したフレーム番号が前記第１のクリップに相当するフレーム番号である場合、前記適用する処理を行う手段は、前記第１のクリップのメタデータから前記取得したフレーム画像のレンズ収差の補正量を示すレンズメタデータを取得し、当該レンズメタデータを用いて、前記取得したフレーム画像にレンズ収差を適用する処理を行い、前記取得したフレーム番号が前記第１のクリップに相当するフレーム番号でない場合であって前記第１のクリップにおける先頭のフレーム番号より前のフレーム番号である場合、前記適用する処理を行う手段は、前記第１のクリップのメタデータから前記第１のクリップにおける先頭のフレーム画像のレンズ収差の補正量を示すレンズメタデータを取得し、当該レンズメタデータを用いて、前記取得したフレーム画像にレンズ収差を適用する処理を行い、前記取得したフレーム番号が前記第１のクリップに相当するフレーム番号でない場合であって前記第１のクリップにおける最終のフレーム番号より後のフレーム番号である場合、前記適用する処理を行う手段は、前記第１のクリップのメタデータから前記第１のクリップにおける最終のフレーム画像のレンズ収差の補正量を示すレンズメタデータを取得し、当該レンズメタデータを用いて、前記取得したフレーム画像にレンズ収差を適用する処理を行うことを特徴とする情報処理装置。
（構成６）前記取得したフレーム番号が前記第１のクリップに相当するフレーム番号であるか否かを判定する手段を更に備え、前記判定する手段は、前記結合クリップにおいて前記第１のクリップの開始フレームを特定する情報を用いて、前記取得したフレーム番号が前記第１のクリップに相当するフレーム番号であるか否かを判定することを特徴とする構成５に記載の情報処理装置。
（構成７）前記レンズ収差は、周辺光量落ち、及び歪曲収差の少なくとも一方であることを特徴とする構成１乃至６の何れか１つに記載の情報処理装置。
（構成８）前記レンズ収差を持たない画像は、ＣＧ画像であることを特徴とする構成１乃至７の何れか１つに記載の情報処理装置。

１００ 情報処理装置
１０１ 制御部
２０５、８０１ 結合クリップ
２０５ａ、８０１ａ、８０１ｃ ＣＧ素材クリップ部
２０５ｂ、８０１ｂ カメラ素材クリップ部
３００ レンズ収差メタデータ
５０１ 仮想カメラ情報

Claims (12)

1. 撮影装置による撮影で生成された動画からレンズ収差を除去して得られた第１のクリップと、レンズ収差を持たない画像で構成された第２のクリップを時系列的に配置して結合した結合クリップを生成する情報処理装置であって、
   前記第１のクリップを構成する複数のフレーム画像に夫々対応する複数のレンズメタデータであってレンズ収差の補正量を示す複数のレンズメタデータを前記撮影で使用された撮影設定値に対応付けて記録した前記第１のクリップのメタデータを読み込む手段と、
   前記結合クリップを構成する複数のフレーム画像の中からレンズ収差を未適用のフレーム画像を取得し、前記結合クリップにおける当該フレーム画像のフレーム番号を取得する手段と、
   前記取得したフレーム番号に対応付けて予め設定された第１の撮影設定値を取得する手段と、
   前記第１のクリップのメタデータから、前記取得した第１の撮影設定値に最も近しい第２の撮影設定値に対応するレンズメタデータを取得し、当該レンズメタデータを用いて、前記取得したフレーム画像にレンズ収差を適用する処理を行う手段とを備えることを特徴とする情報処理装置。
2. 前記第１の撮影設定値は、ユーザによって設定されることを特徴とする請求項１に記載の情報処理装置。
3. 前記第１の撮影設定値は、焦点距離の値、Ｆ値の少なくとも一方であることを特徴とする請求項１に記載の情報処理装置。
4. 前記第１の撮影設定値を取得したか否かを判定する手段を更に備え、
   前記第１の撮影設定値を取得しないと判定された場合、前記適用する処理を行う手段は、前記第１の撮影設定値を用いずにレンズ収差を適用する処理を行い、
   前記第１の撮影設定値を用いずにレンズ収差を適用する処理では、
   前記取得したフレーム番号が前記第１のクリップに相当するフレーム番号である場合、前記適用する処理を行う手段は、前記第１のクリップのメタデータから前記取得したフレーム画像のレンズ収差の補正量を示すレンズメタデータを取得し、当該レンズメタデータを用いて、前記取得したフレーム画像にレンズ収差を適用する処理を行い、
   前記取得したフレーム番号が前記第１のクリップに相当するフレーム番号でない場合であって前記第１のクリップにおける先頭のフレーム番号より前のフレーム番号である場合、前記適用する処理を行う手段は、前記第１のクリップのメタデータから前記第１のクリップにおける先頭のフレーム画像のレンズ収差の補正量を示すレンズメタデータを取得し、当該レンズメタデータを用いて、前記取得したフレーム画像にレンズ収差を適用する処理を行い、
   前記取得したフレーム番号が前記第１のクリップに相当するフレーム番号でない場合であって前記第１のクリップにおける最終のフレーム番号より後のフレーム番号である場合、前記適用する処理を行う手段は、前記第１のクリップのメタデータから前記第１のクリップにおける最終のフレーム画像のレンズ収差の補正量を示すレンズメタデータを取得し、当該レンズメタデータを用いて、前記取得したフレーム画像にレンズ収差を適用する処理を行うことを特徴とする請求項１に記載の情報処理装置。
5. 撮影装置による撮影で生成された動画からレンズ収差を除去して得られた第１のクリップと、レンズ収差を持たない画像で構成された第２のクリップを時系列的に配置して結合した結合クリップを生成する情報処理装置であって、
   前記第１のクリップを構成する複数のフレーム画像に夫々対応する複数のレンズメタデータであってレンズ収差の補正量を示す複数のレンズメタデータを記録した前記第１のクリップのメタデータを読み込む手段と、
   前記結合クリップを構成する複数のフレーム画像の中からレンズ収差を未適用のフレーム画像を取得し、前記結合クリップにおける当該フレーム画像のフレーム番号を取得する手段と、
   前記取得したフレーム画像にレンズ収差を適用する処理を行う手段とを備え、
   前記取得したフレーム番号が前記第１のクリップに相当するフレーム番号である場合、前記適用する処理を行う手段は、前記第１のクリップのメタデータから前記取得したフレーム画像のレンズ収差の補正量を示すレンズメタデータを取得し、当該レンズメタデータを用いて、前記取得したフレーム画像にレンズ収差を適用する処理を行い、
   前記取得したフレーム番号が前記第１のクリップに相当するフレーム番号でない場合であって前記第１のクリップにおける先頭のフレーム番号より前のフレーム番号である場合、前記適用する処理を行う手段は、前記第１のクリップのメタデータから前記第１のクリップにおける先頭のフレーム画像のレンズ収差の補正量を示すレンズメタデータを取得し、当該レンズメタデータを用いて、前記取得したフレーム画像にレンズ収差を適用する処理を行い、
   前記取得したフレーム番号が前記第１のクリップに相当するフレーム番号でない場合であって前記第１のクリップにおける最終のフレーム番号より後のフレーム番号である場合、前記適用する処理を行う手段は、前記第１のクリップのメタデータから前記第１のクリップにおける最終のフレーム画像のレンズ収差の補正量を示すレンズメタデータを取得し、当該レンズメタデータを用いて、前記取得したフレーム画像にレンズ収差を適用する処理を行うことを特徴とする情報処理装置。
6. 前記取得したフレーム番号が前記第１のクリップに相当するフレーム番号であるか否かを判定する手段を更に備え、
   前記判定する手段は、前記結合クリップにおいて前記第１のクリップの開始フレームを特定する情報を用いて、前記取得したフレーム番号が前記第１のクリップに相当するフレーム番号であるか否かを判定することを特徴とする請求項５に記載の情報処理装置。
7. 前記レンズ収差は、周辺光量落ち、及び歪曲収差の少なくとも一方であることを特徴とする請求項１又は５に記載の情報処理装置。
8. 前記レンズ収差を持たない画像は、ＣＧ画像であることを特徴とする請求項１又は５に記載の情報処理装置。
9. 撮影装置による撮影で生成された動画からレンズ収差を除去して得られた第１のクリップと、レンズ収差を持たない画像で構成された第２のクリップを時系列的に配置して結合した結合クリップを生成する情報処理装置の制御方法であって、
   前記第１のクリップを構成する複数のフレーム画像に夫々対応する複数のレンズメタデータであってレンズ収差の補正量を示す複数のレンズメタデータを前記撮影で使用された撮影設定値に対応付けて記録した前記第１のクリップのメタデータを読み込む工程と、
   前記結合クリップを構成する複数のフレーム画像の中からレンズ収差を未適用のフレーム画像を取得し、前記結合クリップにおける当該フレーム画像のフレーム番号を取得する工程と、
   前記取得したフレーム番号に対応付けて予め設定された第１の撮影設定値を取得する工程と、
   前記第１のクリップのメタデータから、前記取得した第１の撮影設定値に最も近しい第２の撮影設定値に対応するレンズメタデータを取得し、当該レンズメタデータを用いて、前記取得したフレーム画像にレンズ収差を適用する処理を行う工程とを有することを特徴とする情報処理装置の制御方法。
10. 撮影装置による撮影で生成された動画からレンズ収差を除去して得られた第１のクリップと、レンズ収差を持たない画像で構成された第２のクリップを時系列的に配置して結合した結合クリップを生成する情報処理装置の制御方法であって、
    前記第１のクリップを構成する複数のフレーム画像に夫々対応する複数のレンズメタデータであってレンズ収差の補正量を示す複数のレンズメタデータを記録した前記第１のクリップのメタデータを読み込む工程と、
    前記結合クリップを構成する複数のフレーム画像の中からレンズ収差を未適用のフレーム画像を取得し、前記結合クリップにおける当該フレーム画像のフレーム番号を取得する工程と、
    前記取得したフレーム画像にレンズ収差を適用する処理を行う工程とを有し、
    前記取得したフレーム番号が前記第１のクリップに相当するフレーム番号である場合、前記適用する処理を行う工程は、前記第１のクリップのメタデータから前記取得したフレーム画像のレンズ収差の補正量を示すレンズメタデータを取得し、当該レンズメタデータを用いて、前記取得したフレーム画像にレンズ収差を適用する処理を行い、
    前記取得したフレーム番号が前記第１のクリップに相当するフレーム番号でない場合であって前記第１のクリップにおける先頭のフレーム番号より前のフレーム番号である場合、前記適用する処理を行う工程は、前記第１のクリップのメタデータから前記第１のクリップにおける先頭のフレーム画像のレンズ収差の補正量を示すレンズメタデータを取得し、当該レンズメタデータを用いて、前記取得したフレーム画像にレンズ収差を適用する処理を行い、
    前記取得したフレーム番号が前記第１のクリップに相当するフレーム番号でない場合であって前記第１のクリップにおける最終のフレーム番号より後のフレーム番号である場合、前記適用する処理を行う工程は、前記第１のクリップのメタデータから前記第１のクリップにおける最終のフレーム画像のレンズ収差の補正量を示すレンズメタデータを取得し、当該レンズメタデータを用いて、前記取得したフレーム画像にレンズ収差を適用する処理を行うことを特徴とする情報処理装置の制御方法。
11. 撮影装置による撮影で生成された動画からレンズ収差を除去して得られた第１のクリップと、レンズ収差を持たない画像で構成された第２のクリップを時系列的に配置して結合した結合クリップを生成する情報処理装置の制御方法をコンピュータに実行させるためのプログラムであって、
    前記情報処理装置の制御方法は、
    前記第１のクリップを構成する複数のフレーム画像に夫々対応する複数のレンズメタデータであってレンズ収差の補正量を示す複数のレンズメタデータを前記撮影で使用された撮影設定値に対応付けて記録した前記第１のクリップのメタデータを読み込む工程と、
    前記結合クリップを構成する複数のフレーム画像の中からレンズ収差を未適用のフレーム画像を取得し、前記結合クリップにおける当該フレーム画像のフレーム番号を取得する工程と、
    前記取得したフレーム番号に対応付けて予め設定された第１の撮影設定値を取得する工程と、
    前記第１のクリップのメタデータから、前記取得した第１の撮影設定値に最も近しい第２の撮影設定値に対応するレンズメタデータを取得し、当該レンズメタデータを用いて、前記取得したフレーム画像にレンズ収差を適用する処理を行う工程とを有することを特徴とするプログラム。
12. 撮影装置による撮影で生成された動画からレンズ収差を除去して得られた第１のクリップと、レンズ収差を持たない画像で構成された第２のクリップを時系列的に配置して結合した結合クリップを生成する情報処理装置の制御方法をコンピュータに実行させるためのプログラムであって、
    前記情報処理装置の制御方法は、
    前記第１のクリップを構成する複数のフレーム画像に夫々対応する複数のレンズメタデータであってレンズ収差の補正量を示す複数のレンズメタデータを記録した前記第１のクリップのメタデータを読み込む工程と、
    前記結合クリップを構成する複数のフレーム画像の中からレンズ収差を未適用のフレーム画像を取得し、前記結合クリップにおける当該フレーム画像のフレーム番号を取得する工程と、
    前記取得したフレーム画像にレンズ収差を適用する処理を行う工程とを有し、
    前記取得したフレーム番号が前記第１のクリップに相当するフレーム番号である場合、前記適用する処理を行う工程は、前記第１のクリップのメタデータから前記取得したフレーム画像のレンズ収差の補正量を示すレンズメタデータを取得し、当該レンズメタデータを用いて、前記取得したフレーム画像にレンズ収差を適用する処理を行い、
    前記取得したフレーム番号が前記第１のクリップに相当するフレーム番号でない場合であって前記第１のクリップにおける先頭のフレーム番号より前のフレーム番号である場合、前記適用する処理を行う工程は、前記第１のクリップのメタデータから前記第１のクリップにおける先頭のフレーム画像のレンズ収差の補正量を示すレンズメタデータを取得し、当該レンズメタデータを用いて、前記取得したフレーム画像にレンズ収差を適用する処理を行い、
    前記取得したフレーム番号が前記第１のクリップに相当するフレーム番号でない場合であって前記第１のクリップにおける最終のフレーム番号より後のフレーム番号である場合、前記適用する処理を行う工程は、前記第１のクリップのメタデータから前記第１のクリップにおける最終のフレーム画像のレンズ収差の補正量を示すレンズメタデータを取得し、当該レンズメタデータを用いて、前記取得したフレーム画像にレンズ収差を適用する処理を行うことを特徴とするプログラム。