JP4247701B2

JP4247701B2 - Movie recording apparatus and movie recording method

Info

Publication number: JP4247701B2
Application number: JP2001213300A
Authority: JP
Inventors: 成明富田
Original assignee: Casio Computer Co Ltd
Current assignee: Casio Computer Co Ltd
Priority date: 2001-07-13
Filing date: 2001-07-13
Publication date: 2009-04-02
Anticipated expiration: 2021-07-13
Also published as: JP2003032608A

Description

【０００１】
【発明の属する技術分野】
本発明は、動画記録装置及び動画記録方法に関し、詳しくは、撮像手段により順次撮像される静止画像を利用して動画像を生成記録する動画記録装置及び動画記録方法に関する。
【０００２】
【従来の技術】
ディジタルカメラに代表される電子スチルカメラは、ＣＣＤ（Charge Coupled Device）などの固体撮像デバイスで構成された二次元イメージセンサを用いて被写体の静止画信号を生成し、その静止画信号を記憶デバイスに書き込んで電子的に記録するものであり、フィルムカメラに比べて、画像の即時再生、不要画像の消去、画像データの転送容易性などの点で格別の利便性を持っているが、今日、かかる静止画記録に加え、上記のイメージセンサの特性を利用して動画ファイルの生成を可能にした電子スチルカメラが一部で普及している。
【０００３】
【発明が解決しようとする課題】
しかしながら、かかる動画像記録機能を備えた従来の電子スチルカメラにあっては、ストロボを用いなければならないような低光量下での動画撮影（以下「暗所撮影」という。）を行うことができないという問題点があった。
【０００４】
その理由は、静止画撮影用のストロボの照射光は、その発光時間が数ミリ秒程度と短い瞬間的な放電光であるうえ、しかも充電に要する時間が動画像記録を行う際の静止画記録周期よりも遙かに長いからである。
【０００５】
もちろん、ストロボの代わりに、スポットライトのような常時点灯光源を用いることによって上記の不都合を解消できるが、常時点灯光源は電力消費が相当大きく、大型のバッテリを搭載しなければならないため、電子スチルカメラ用の補助光源としては不適当であるから、現実的でない。
【０００６】
以上の点より、本発明が解決しようとする課題は、間欠的に発光するストロボを用いた動画記録であっても、非ストロボ撮影による動画像と同様に動画再生を行なうことができる動画記録装置及び動画記録方法を提供することにある。
【０００７】
【課題を解決するための手段】
本発明は、撮像手段により順次撮像される静止画像を利用して動画像を構成する複数の単位画像を記録する動画記録装置において、前記動画像の記録中において、補助光を間欠的に発光させる補助光制御手段と、前記補助光の発光タイミングに対応する単位画像を記録する場合には、前記補助光の発光時に前記撮像手段により撮像された静止画像を該単位画像として記録する第１記録手段と、前記補助光の非発光タイミングに対応する単位画像を記録する場合には、前記補助光発光時に前記撮像手段により撮像された静止画像を利用して該単位画像を記録する第２記録手段と、を備えたことを特徴とする。
また、上記動画記録装置において、ストロボを間欠的に発光させるストロボ制御手段と、前記ストロボ発光時に前記撮像手段により撮像された静止画像を、前記動画像を構成する単位画像の一つとして記録する第１記録手段と、前記ストロボ非発光時に前記撮像手段により撮像されるべき静止画像の代わりに直前又は直後のストロボ発光時に前記撮像手段により撮像された静止画像を、前記動画像を構成する単位画像の一つとして記録する第２記録手段と、を備えたことを特徴とする。
【０００８】
【発明の実施の形態】
以下、本発明の実施の形態を、ディジタルカメラ等の電子スチルカメラを例にして、図面を参照しながら説明する。
【０００９】
まず、構成を説明する。図１は、電子スチルカメラの外観図である。図において、電子スチルカメラ１０（動画記録装置）は、カメラボディ１１の前面に、レンズ鏡筒部１２、ファインダ窓１３及びストロボ窓１４などを備えるとともに、上面に、シャッターキー１５、ストロボオンオフキー１６及びセルフタイマーキー１７などを備え、さらに、背面に、電源スイッチ１８、ズームボタン１９、記録／再生モード切り替えスイッチ２０、ファインダ接眼窓２１、液晶ディスプレイ２２及び複数の機能キー２３〜２５などを備える。
【００１０】
ここで、本実施の形態では、第１から第３までの３個の機能キー２３〜２５を備えるものとし、且つ、第１の機能キー２３を後述のメニュー処理起動キー（以下「メニューキー２３」という。）に割り当て、また、第２の機能キー２４をカーソルの上下左右移動キー（以下「カーソルキー２４」という。）に割り当て、さらに、第３の機能キー２５を選択実行キー（以下「エンターキー２５」という。）に割り当てることにする。
【００１１】
レンズ鏡筒部１２は、光学ズーム機能付きの撮影レンズ群やメカニカルシャッタ機構などを収めたものであり、レンズ鏡筒部１２の後端に配置された不図示のイメージセンサの受光面に被写体の像を結像させるものである。ファインダ窓１３は、カメラボディ１１の背面側のファインダ接眼窓２１と一体をなしており、目視で構図確認を行う際に用いられるものである。ストロボ窓１４は、後述のストロボ発光を通すための透過窓であり、多くの場合、撮影レンズ群の画角に合わせてストロボ発光の光束の広がりを調節するための小さなレンズが全面に並べられている。
【００１２】
シャッターキー１５は、撮影時に２段階で押し下げ操作されるものである。１段目で露出等を設定し、２段目で静止画像をキャプチャ（記録）する。このシャッターキー１５は、動画像の撮影開始キーとしても用いられるようになっており、動画モードで２段目まで押し下げると、それ以降の所定の記録時間の間、静止画像を所定周期でキャプチャーして、複数枚のキャプチャー画像からなる動画ファイルを生成記録するようになっている。
【００１３】
ストロボオンオフキー１６は、ストロボ発光を許容するか禁止するかを設定するものである。発光許容に設定されている場合、静止画撮影モードや動画撮影モードに関わらず、シャッターキー１５の１段目押し下げ操作時に露出不足が判定されると、画像キャプチャーの際に、後述するストロボ部３４を駆動してストロボ光を発射し、発光禁止に設定されている場合は、同ストロボ部３４の駆動を強制禁止する。
【００１４】
また、セルフタイマーキー１７はセルフタイマーのオンオフを切り替えるものであり、電源スイッチ１８は、電子スチルカメラ１０の電源を入れたり切ったりするものである。ズームボタン１９は光学レンズの画角（すなわちズーム比）を変更するものである。「＋」側を押すと画角が小さくなり、「−」側を押すと逆に大きくなる。記録／再生モード切り替えスイッチ２０は、電子スチルカメラ１０の動作モードを記録モードと再生モードに切り替えるものである。
【００１５】
液晶ディスプレイ２２は高解像度のカラー液晶ディスプレイである。この液晶ディスプレイ２２を用いて、記録済みの画像をいつでも自由に再生確認できるとともに、記録モードにおいては、スルー画像を表示させてファインダ代わりに用いることができ、さらに、逆光撮影などの際の自動露出が不適切であるときはスルー画像を見ながら手動で適正露出に設定したり、あるいは、ホワイトバランスの自動設定値が不適切であるときは同様にスルー画像を見ながら撮影光源に応じたホワイトバランス設定値を手動で選択したりすることができるようになっている。
【００１６】
図２は、電子スチルカメラ１０の概念的な機能ブロック図である。このブロック図では、便宜的に、撮像部３２（撮像手段）、画像処理部３３（撮像手段）、ストロボ部３４（ストロボ）、操作部３５、制御部３６（ストロボ制御手段、第１記録手段、第２記録手段、撮像制御手段、第３記録手段）、表示制御部３７、表示部３８（図１の液晶ディスプレイ２２に相当）、画像記憶部３９などの各機能ブロックに分けられている。
【００１７】
撮像部３２は、撮影レンズ群やメカニカルシャッタ機構などを含むとともに、被写体３１の像を撮像して毎秒数十フレームのカラー画像信号を生成するＣＣＤ等のカラーイメージセンサを含む。このカラーイメージセンサは、タイミング回路やサンプリングホールド回路及びアナログディジタル変換回路などの付帯回路を備え、制御部３６からの制御信号に基づいてシャッター速度や露出値などを可変的に設定するとともに、その設定値に対応した毎秒数十フレーム周期のカラー画像信号（以下、単に画像信号という。）を生成し、アナログディジタル変換回路でディジタル信号に変換して画像処理部３３に出力する。
【００１８】
画像処理部３３は、入力された画像信号を輝度成分（Ｙ）と色成分（Ｃｒ、Ｃｂ）に分離し、制御部３６からの制御信号に基づいてホワイトバランス補正を施した後、そのホワイトバランス補正後のＹＣｒＣｂ信号を制御部３６に出力する。ストロボ部３４は、制御部３６からの駆動信号に従って被写体３１を照明するための補助光（ストロボ光）３４ａを発射する。操作部３５は、カメラボディ１１に設けられた各種操作キー、すなわち、前述のシャッターキー１５、ストロボオンオフキー１６、セルフタイマーキー１７、メニューキー２３、カーソルキー２４及びエンターキー２５などの操作に応答したキー信号を生成して制御部３６に出力する。
【００１９】
制御部３６は、図３にそのブロック図を示すように、ＣＰＵ（Central Processing Unit）３６ａを備えるとともに、このＣＰＵ３６ａに、バス３６ｂを介して、プログラムメモリ３６ｃ、ワークメモリ３６ｄ、入力部３６ｅ及び出力部３６ｆなどを接続して構成されている。ＣＰＵ３６ａはプログラムメモリ３６ｃに格納された所定の制御プログラムをワークメモリ３６ｄにロードして実行することにより、入力部３６ｅからのデータ（画像処理部３３からの画像信号、操作部３５からの各種キー信号、画像記憶部３９からの画像信号など）の取り込みや出力部３６ｆへのデータ（撮像部３２へのシャッター速度や露出設定値の制御信号、画像処理部３３へのホワイトバランス補正制御信号、表示制御部３７への表示用信号、画像記憶部３９への記録用画像信号、ストロボ部３４へのストロボ駆動信号など）の書き出しを行いつつ、電子スチルカメラ１０の全体動作を制御する。なお、ワークメモリ３６ｄの一部は、後述の画像バッファ（図９の画像バッファ４３参照）として利用される。
【００２０】
表示制御部３７は、制御部３６から出力されたスルー画像やプレビュー画像又は各種設定画面などの表示信号を表示部３８の表示形式に変換して当該表示部３８に出力するもので、これらの表示制御部３７及び表示部３８は一体として表示手段を構成する。画像記憶部３９は、撮影画像（キャプチャ画像ともいう。）を不揮発的（電源をオフにしても情報を失わないこと）に記録するための記録媒体で構成されており、たとえば、フラッシュメモリ等の半導体記憶デバイスや磁気メモリデバイスなどをその記録媒体に用いることができる。なお、画像記憶部３９は取り外し可能な状態で電子スチルカメラに実装されていてもよい。
【００２１】
次に、作用を説明する。図４は、制御部３６のＣＰＵ３６ａで実行される制御プログラムの全体的な概略を示すフローチャートである。このプログラムは、電源を投入したとき（図１の電源スイッチ１８をオンにしたとき）に実行を開始し、まず、ステップＳ１で動作チェックなどの初期設定を行った後、ステップＳ２で、メニューキー２３が押されているか否かを判定し、押されていればステップＳ３に分岐して後述の「メニュー処理」を実行してからステップＳ４のモード判定に進む一方、押されていなければそのままステップＳ４のモード判定に進み、ステップＳ４で、記録／再生モード切り替えスイッチ２０の現在の切り替え状態から記録モードであるか再生モードであるかを判定して、その判定結果に応じた分岐処理（ステップＳ５の「再生モード処理」やステップＳ６の「記録モード処理」）を実行するという動作を繰り返す。
【００２２】
以下、上記各処理のうち本発明に関係する「記録モード処理」と「メニュー処理」について詳しく説明する。
【００２３】
図５は、図４のステップＳ３で実行される「メニュー処理」の概略的な流れ図であり、液晶ディスプレイ２２の画面表示の遷移状態を示す図である。この図において、メニュー画面４１は、図４のステップＳ２の判定結果が“ＹＥＳ”となったとき、すなわち、図４のループ実行中にユーザによってメニューキー２３が押し下げ操作されたときに、最初に液晶ディスプレイ２２に表示される画面である。このメニュー画面４１には、記録モードを静止画記録モードにするか動画記録モードにするかを選択するためのメニュー項目４１ａ（以下「記録モード設定４１ａ」という。）をはじめとした様々なメニュー項目がリスト状に表示されるようになっており、リストの最後にはメニュー画面４１を閉じて図４のループに復帰するためのメニュー項目４１ｂ（以下「閉じる４１ｂ」という。）が設けられている。
【００２４】
ユーザがカーソルキー２４を操作して、記録モード設定４１ａを選択し、エンターキー２５を押すと、メニュー画面４１の代わりに記録モード設定画面４２が表示される。この記録モード設定画面４２には、「静止画モード」ボタン４２ａと「動画モード」ボタン４２ｂが設けられており、「静止画モード」ボタン４２ａを選択すると、記録モードを静止画記録モードに設定した後、記録モード設定画面４２を閉じ、再びメニュー画面４１を表示する。また、「動画モード」ボタン４２ｂを選択すると、記録モードを動画モードに設定した後、記録モード設定画面４２を閉じ、再びメニュー画面４１を表示する。
【００２５】
図６は、図４のステップＳ６で実行される記録モード処理プログラムのフローチャートを示す図である。このフローチャートを開始すると、まず、ステップＳ１１で画像処理部３３からの画像信号を読み込み、ステップＳ１２でその画像信号を表示制御部３７に出力するという動作をシャッターキー１５が半押し（１段目の押し下げ操作）されるまで繰り返し実行する。これにより、表示部３８（液晶ディスプレイ２２）に構図調整のためのスルー画像が所定周期で更新されつつ表示される。
【００２６】
しかる後、ステップＳ１３で、シャッターキー１５の半押しを検出すると、ステップＳ１４で露出やホワイトバランス等の撮影条件を自動的に設定する。そして、ステップＳ１５でシャッターキー１５の全押し（２段目の押し下げ操作）を検出すると、ステップＳ１６で撮影モードが動画モードであるか否かを判定し、動画モードでない場合、すなわち、撮影モードが静止画モードである場合は、次に、ストロボオンオフキー１６の操作により発光許容に設定されているものとすると、ステップＳ１７で補助光を必要とする程度の暗所撮影であるか否かを判定して、暗所撮影でなければ、ステップＳ１８で撮像部３２を駆動させることにより被写体３１の像を撮像し、そのときの画像信号を静止画像として画像記憶部３９に記録し、暗所撮影であれば、ステップＳ１９でストロボ部３４を駆動して、ステップＳ１８に進み、そのストロボ部３４の駆動に同期させて撮像部３２を駆動させることにより被写体３１の像を撮像し、その補助光（ストロボ光３４ａ）により露出不足を補った画像信号を静止画像として画像記憶部３９に記録する。
【００２７】
ステップＳ１６で動画モードであることを判定した場合はステップＳ２０の動画モード処理を実行する。
【００２８】
図７は、動画モード処理プログラムのフローチャートを示す図である。このフローチャートを開始すると、まず、ストロボオンオフキー１６の操作により発光許容に設定されているものとすると、ステップＳ２０ａで補助光を必要とする程度の暗所撮影であるか否かを判定する。暗所撮影でない場合は、ステップＳ２０ｂで撮像部３２を駆動させることにより被写体３１の像を撮像し、そのときの画像信号（画像処理部３３からの静止画像）を取得して、それを動画ファイルの単位画像とし、ステップＳ２０ｃでその動画ファイルを画像記憶部３９に保存記録した後、ステップＳ２０ｄで動画記録周期到来を判定する。そして、周期到来であれば再びステップＳ２０ｂに復帰し、一方、周期到来でなければ、ステップＳ２０ｅで動画撮影時間経過を判定して、動画撮影時間が経過していない場合はステップＳ２０ｄの動画記録周期到来判定を繰り返し、動画撮影時間が経過している場合は本フローチャートを終了する。
【００２９】
したがって、このステップＳ２０ｂ〜ステップＳ２０ｅの処理によれば、充分な明るさが得られる環境下での動画撮影時において、所定の動画撮影時間の間、所定周期で撮像部３２を駆動させることにより被写体３１の像を撮像し、画像処理部３３から所定周期で出力される静止画像を取り込み、それらの静止画像を単位画像（フレーム画像）とする動画ファイルを生成し、画像記憶部３９に保存記録することができる。
【００３０】
一方、ステップＳ２０ａで補助光を必要とする程度の暗所撮影であることが判定された場合は、まず、ステップＳ２０ｆでストロボ部３４を駆動してストロボ光３４ａを発射すると共に、ステップＳ２０ｇで撮像部３２を駆動させることにより被写体３１の像を撮像し、そのときの画像信号（画像処理部３３からの静止画像）を取得する。そして、ステップＳ２０ｈでストロボ部３４の充電を開始し、ステップＳ２０ｉで上記の取得画像を動画ファイルの単位画像として画像記憶部３９に保存記録すると共に、その取得画像を所定の画像バッファ（図９の画像バッファ４３参照）に格納する。
【００３１】
次に、ステップＳ２０ｊでストロボ部３４の充電完了を判定し、その判定結果（ＹＥＳ／ＮＯ）に応じて以下の処理を実行する。
【００３２】
＜ＹＥＳ判定：充電完了判定時＞
ＹＥＳ判定時には、まず、ステップＳ２０ｋで動画記録周期到来を判定する。そして、周期到来であれば再びステップＳ２０ｆに復帰し、周期到来でなければ、ステップＳ２０ｍで動画撮影時間経過を判定して、動画撮影時間が経過していない場合はステップＳ２０ｋの動画記録周期到来判定を繰り返し、動画撮影時間が経過している場合は本フローチャートを終了する。
【００３３】
したがって、このＹＥＳ判定時の処理においては、撮像部３２の駆動（撮影）タイミングに合わせてストロボ部３４を駆動し、画像処理部３３からの、補助光（ストロボ光３４ａ）により露出不足が補われている静止画像を取り込み、その静止画像を動画ファイルの単位画像として画像記憶部３９に保存記録すると共に、その取得画像を所定の画像バッファ（図９の画像バッファ４３参照）に格納することができる。
【００３４】
＜ＮＯ判定：充電非完了判定時＞
ＮＯ判定時には、まず、ステップＳ２０ｎで動画記録周期到来を判定する。そして、周期到来でなければ、ステップＳ２０ｒで動画撮影時間経過を判定して、動画撮影時間が経過していない場合はステップＳ２０ｊの充電完了判定を繰り返し、動画撮影時間が経過している場合は本フローチャートを終了する一方、周期到来であれば、ステップＳ２０ｐに進み、撮像部３２を駆動させることにより被写体３１の像を撮像し、そのときの画像信号（画像処理部３３からの静止画像）を取得する。そして、ステップＳ２０ｑに進み、ステップＳ２０ｐで取得された露出不足の静止画像を破棄（キャンセル）するとともに、所定の画像バッファに格納（ステップＳ２０ｉ参照）されていた静止画像を取り出し、それを動画ファイルの単位画像として画像記憶部３９に保存記録した後、ステップＳ２０ｒで動画撮影時間経過を判定して、動画撮影時間が経過していない場合はステップＳ２０ｊの充電完了判定を繰り返し、動画撮影時間が経過している場合は本フローチャートを終了する。
【００３５】
したがって、このＮＯ判定時の処理においては、ストロボ部３４の駆動（ストロボ光３４ａの発射）が間に合わない期間（ストロボ非発光期間）、撮像部３２により撮像され、画像処理部３３から出力される露出不足の静止画像の代替画像として、画像バッファに格納（ステップＳ２０ｉ参照）されていた、補助光（ストロボ光３４ａ）により露出不足が補われている静止画像を使用し、その代替画像を動画ファイルの単位画像として画像記憶部３９に保存記録することができる。
【００３６】
図８は、上記動画モード処理で実行される暗所撮影時の記録用動画像ファイル生成（図７のステップＳ２０ｆ〜ステップＳ２０ｒ参照）の実際を示す概念図である。図８において、Ｇ０、Ｇ１、Ｇ２、Ｇ３、Ｇ４、Ｇ５、Ｇ６、Ｇ７、‥‥は、画像処理部３３を介して取り込まれる周期的な画像信号であり、各画像の上に模式的に示された二種類の図形ａ、ｂはそれぞれストロボ部３４の発光と非発光を表している。すなわち、図示の例の場合、画像Ｇ０、Ｇ３、Ｇ６はストロボ光３４ａによって適正露出に設定されたストロボ発光時の画像（以下「ストロボ発光画像」という。）であり、それ以外の画像Ｇ１、Ｇ２、Ｇ４、Ｇ５、Ｇ７は露出不足のストロボ非発光時の画像（以下「ストロボ非発光画像」という。）である。
【００３７】
図８から直感的に理解されるように、本実施の形態における記録用動画像ファイル生成の実際においては、ストロボ非発光画像（Ｇ１、Ｇ２、Ｇ４、Ｇ５、Ｇ７）の代わりに、その直前のストロボ発光画像（Ｇ０、Ｇ３、Ｇ６）を用いて記録用動画像ファイルを生成する。すなわち、図中下段の記録用動画像ファイルに示すように、ストロボ非発光画像（Ｇ１、Ｇ２）の代わりに、その直前のストロボ発光画像（Ｇ０）を用い、また、ストロボ非発光画像（Ｇ４、Ｇ５）の代わりに、その直前のストロボ発光画像（Ｇ３）を用い、さらに、ストロボ非発光画像（Ｇ７）の代わりに、その直前のストロボ発光画像（Ｇ６）を用いることにより、すべてをストロボ発光画像（Ｇ０、Ｇ０、Ｇ０、Ｇ３、Ｇ３、Ｇ３、Ｇ６、Ｇ６）で構成した記録用動画像ファイルを生成している。したがって、この例の場合は、Ｇ１とＧ２の代替画像はＧ０、Ｇ４とＧ５の代替画像はＧ３、且つ、Ｇ７の代替画像はＧ６となる。
【００３８】
このような記録用動画像ファイルの生成に必要な構成は、たとえば、図９（ａ）に示すように、直前のストロボ発光画像（Ｇｉ）を保持する画像バッファ４３と、ストロボ発光期間ではそのときの画像信号（Ｇｉ）をスルーで取り出す一方、ストロボ非発光期間では画像バッファ４３に保持された直前のストロボ発光画像（Ｇｉ）をそのストロボ非発光画像（Ｇｊ）の代わりに取り出すスイッチ要素４４とを備えればよい。画像バッファ４３及びスイッチ要素４４には、たとえば、ＣＰＵ３６ａからのストロボ発光期間と非発光期間を示す制御信号（ＣＯＮＴ）が入力されており、画像バッファ４３はストロボ発光期間の画像（Ｇｉ）のみを保持し、スイッチ要素４４はストロボ発光期間と非発光期間でその接点を図示のように切り替える。
【００３９】
これによれば、ストロボ非発光画像（Ｇｊ＝Ｇ１、Ｇ２、Ｇ４、Ｇ５、Ｇ７）をそれぞれの直前のストロボ発光画像（Ｇｉ＝Ｇ０、Ｇ３、Ｇ６）で置き換えた動画像ファイルを生成することができ、ストロボの発光周期に関わらず、所定周期の静止画像で構成した動画像ファイルを自在に得ることができる。
【００４０】
また、この場合、暗所撮影であっても、暗所撮影ではない通常の動画撮影と同様の撮影（記録）周期をもつ動画像ファイルを生成するようにしたので、通常の動画像ファイルと同様の動画再生プログラムを用いて暗所撮影された動画像ファイルを再生することが可能であるとともに、時間軸方向に対して実際の撮影時間と時間的なずれなくリアルタイム再生することが可能である。
【００４１】
なお、上記の実施の形態では、ストロボ発光期間、非発光期間に関係なく所定周期で撮像部３２を駆動して被写体３１の像を撮像する構成にしたが、ストロボ発光期間のみ撮像するように構成にしてもよい。つまり、図７のフローチャート中のステップＳ２０ｐを省いた構成にしてもよい。
【００４２】
この場合、動画撮影時間中の撮像回数を大幅に減らすことができるので、撮像処理や画像処理を実行する回数を減らすことができ、消費電力を減らして電池の長寿命化を図ることができる。
但し、撮像部３２の駆動制御に関しては、動画撮影時間中、単に所定周期で撮像部３２を駆動すればいい上記の実施の形態と比べて多少面倒になる。
【００４３】
また、上記の実施の形態では、ストロボ非発光画像をそれぞれの直前のストロボ発光画像で置き換えた動画像ファイルを生成するようにしたが、ストロボ非発光画像をそれぞれの直後のストロボ発光画像で置き換えた動画像ファイルを生成するようにしてもよい。
【００４４】
また、静止画用のストロボの代わりにスポットライトのような常時点灯光源を用い、間欠的に点灯させるものにも本発明を適用することができる。
この場合、スポットライトを常時点灯させて動画撮影する場合に比べて電力消費を大幅に減らすことができるという効果を得ることができる。
【００４５】
また、上記の実施の形態では、ストロボ非発光画像（Ｇｊ）を直前のストロボ発光画像（Ｇｉ）で置き換えているが、置き換えを行わずに、ストロボ発光画像（Ｇｉ）のみで動画像ファイルを生成することも考えられる。すなわち、図１０に示すように、ストロボ発光画像（Ｇｉ＝Ｇ０、Ｇ３、Ｇ６）のみの動画ファイルとすることも考えられる。そのためには、たとえば、図９（ｂ）に示すように、ストロボ発光期間ではそのときの画像信号（Ｇｉ）をスルーで取り出す一方、ストロボ非発光期間では接点を開放（図示の破線位置）するような構造のスイッチ要素４５を備えればよい。この場合、画像バッファは必要ない。
【００４６】
図１１は、前記動画モード処理（図７）の変形例を示すフローチャートであり、ストロボ発光画像（Ｇｉ）のみで動画像ファイルを生成する場合に適合させたものである。このフローチャートにおいて、前記動画モード処理との相違点は、ステップＳ２０ｉで動画バッファへの静止画保存を行わない点（すなわち、動画用静止画の保存記録のみを行うようにした点）、及び、充電完了判定時までの間、同判定（ステップＳ２０ｊ）を継続させるようにした点、並びに、動画像ファイル中の各ストロボ発光画像に関連付けて該画像の重複再生回数を示す情報「ｉ」を記憶（ステップＳ２０ｓ、ステップＳ２０ｔ、ステップＳ２０ｕ）するようにした点にある。
【００４７】
これによれば、ストロボ部３４の駆動（ストロボ光３４ａの発射）タイミングに合わせて、画像処理部３３からの静止画像を取り込み、その静止画像を動画ファイルの単位画像として画像記憶部３９に保存記録することができ、且つ、ストロボ非発光期間においては、動画ファイルの生成を行わないようにすることができる。したがって、図１０に示すようなストロボ発光画像（Ｇｉ＝Ｇ０、Ｇ３、Ｇ６）のみの動画ファイルを生成することができる。
【００４８】
よって、動画像ファイルのデータサイズを大幅に小さくすることができ、画像記憶部３９の記憶容量を有効に利用することができる。
【００４９】
また、動画像ファイル中の各ストロボ発光画像に関連付けて該画像の重複再生回数を示す情報「ｉ」を記憶するようにしたので、上記の実施の形態と同様に、時間軸方向に対して実際の撮影時間と時間的なずれなくリアルタイム再生することが可能である。
【００５０】
なお、上記の変形例では、ストロボ発光期間、非発光（充電）期間に関係なく所定周期で撮像部３２を駆動して被写体３１の像を撮像する構成にしたが、ストロボ発光期間のみ撮像するように構成にしてもよい。つまり、図１１のフローチャート中のステップＳｐを省いた構成にしてもよい。
この場合、動画撮影時間中の撮像回数を大幅に減らすことができるので、撮像処理や画像処理を実行する回数を減らすことができ、消費電力を減らして電池の長寿命化を図ることができる。
【００５１】
また、上記の変形例では、動画像ファイル中の各ストロボ発光画像に関連付けて該画像の重複再生回数を示す情報「ｉ」を記憶するようにしたが、各充電時間を計測するようにして、各ストロボ発光画像に関連付けて該画像の再生時間を示す情報を記憶するようにしてもよい。
また、上記の変形例では、動画像ファイル中の各ストロボ発光画像に関連付けて該画像の再生情報（重複再生回数、再生時間等）を記憶するようにしたが、再生情報を記憶しないようにしてもよい。
【００５２】
ところで、上記実施の形態のうち、特に、ストロボ非発光画像（Ｇｊ）を直前のストロボ発光画像（Ｇｉ）で置き換えるようにした例にあっては、置換画像に一定の類似性がある（たとえば、図８下段のＧ０、Ｇ０、Ｇ０は同一の画像であり類似画像である）。以下に示す例は、ストロボ発光画像を非予測符号化画像、置換画像を予測符号化画像とすることにより、動画像の圧縮率を高めようとするものである。
【００５３】
予測符号化画像の生成手法の一つとして、ＭＰＥＧ（Moving Picture Experts Group）標準の符号化方式（以下、単に「ＭＰＥＧ」という。）が知られている。ＭＰＥＧは、蓄積メディア系や通信メディア系への動画像適用を目的としてＣＣＩＴＴＨ．２６１（テレビ電話、テレビ会議用符号化）から発展した符号化標準である。ＭＰＥＧは、ＭＣ（Motion Compensation；動き補償）やＤＣＴ（Discrete Cosine Transform；離散コサイン変換）などの符号化ツールを持つ点で基本的にＨ．２６１と共通するが、早送り、巻戻し、途中再生及び逆転再生などのトリックモードを実現するための特殊な構造、すなわち、ＧＯＰ（Group Of Pictures）構造を持つ点で相違する。
【００５４】
図１２は、ＭＰＥＧのシンタクス（構文；ビット・ストリームの満たすべき順序と内容）を示す模式図である。このシンタクスは、シーケンスヘッダとシーケンスエンドの間に幾つかのＧＯＰを持つシーケンス層と、その下位のＧＯＰ層からなり、ＧＯＰ層はＧＯＰヘッダの後にＮ個のピクチャフレーム（符号化された画面データ）を持つ構造になっている。一つのＧＯＰがランダムアクセスの１単位であり、この単位で上述のトリックモードを可能にする。Ｎ個のピクチャフレームのタイプ（ピクチャタイプ）は、Ｉピクチャ（略号：Ｉ）、Ｐピクチャ（略号：Ｐ）又はＢピクチャ（略号：Ｂ）の何れかであり、各ピクチャタイプの内容は、以下のとおりである。
【００５５】
（１）Ｉピクチャ‥‥非予測符号化画像
フレーム内符号化画像（Intra-Coded Picture）の略。画面の全てをイントラ符号化する画像である。ＧＯＰ内の独立性（参照画像を必要としない）を持つ点で他のピクチャタイプと異なる。
（２）Ｐピクチャ‥‥予測符号化画像
フレーム間順方向予測符号化画像（Predictive-Coded Picture）の略。前のＩピクチャ又はＰピクチャから順方向予測される画像である。
（３）Ｂピクチャ‥‥予測符号化画像
フレーム内挿双方向予測符号化画像（Bidirectionally Predictive-Coded Picture）の略。前後のＩピクチャ又はＰピクチャから双方向予測される画像である。
【００５６】
図１３は、ＧＯＰ構造の一例を示す図であり、ＧＯＰのピクチャ数（いわゆるＮパラメータ）を“１５”とするとともに、ＩピクチャとＰピクチャの周期（いわゆるＭパラメータ）を“３”とした場合の例である。すなわち、１ＧＯＰが１５枚のフレームで構成されており、且つ、Ｉピクチャ（又はＰピクチャ）から次のＰピクチャまでのフレーム数が３枚の場合の例を示している。図において、Ｉピクチャは参照画像を必要としないイントラ符号化画像（非予測符号化画像）である。また、ＰピクチャとＢピクチャは、それぞれ順方向と双方向の予測符号化画像であり、図に示すように、Ｐピクチャは既に符号化済みのＩピクチャ又はＰピクチャを参照画像とし、Ｂピクチャは前後のＩピクチャ又はＰピクチャを参照画像として、それぞれ順方向予測及び双方向予測された予測符号化画像である。
【００５７】
図１４は、原画像の画面順（Ｂ０、Ｂ１、Ｉ２、Ｂ３、Ｂ４、Ｐ５、……）が符号化処理の段階で一部入れ替わり、再生画像の段階で元の並び順に復帰する様子を表す図である。符号化処理段階におけるＢピクチャの挿入は、その前後のＩピクチャ（又はＰピクチャ）とＰピクチャの符号化後に行われる。例えば、原画像のＢ３、Ｂ４に着目すると、Ｉ２とＰ５の符号化後、これらのＩ２とＰ５を参照画像にしてＢ３、Ｂ４が符号化され、Ｉ２とＰ５の後に挿入される結果、原画像の段階で「Ｉ２、Ｂ３、Ｂ４、Ｐ５」であった並び順が、「Ｉ２、……、Ｐ５、Ｂ３、Ｂ４」と入れ替わることになる。
【００５８】
ここで、ＧＯＰ構造の重要なパラメータは、上述の“Ｎパラメータ”と“Ｍパラメータ”、すなわち、ＧＯＰ内のピクチャ数（Ｎ）と、Ｉ又はＰピクチャの現れる周期（Ｍ）である。これらのパラメータに使用上の制限はない。▲１▼ビットストリーム上でＧＯＰの最初がＩピクチャであることと、▲２▼原画像の並び順でＧＯＰの最後がＩ又はＰピクチャであるという条件を満たしている限り、値の選択は自由であるが、実際には画質や動画像の動きなどから最適と思われる値が設定されている。例えば、Ｍは２〜３程度の値に選ばれることが多く、また、Ｎはランダムアクセス単位が０．４秒〜１秒程度になるような値に選ばれることが多い。ちなみに、Ｍの最適値は動画像の動き（激しい動きは小さなＭ、穏やかな動きは大きなＭ）で決まるが、Ｎの最適値は画質とランダムアクセス単位の妥協で決まる。これは、Ｎを小さくするとランダムアクセス単位がきめ細かくなって、トリックモードの利便性向上を図ることができる点で好ましい反面、符号化効率が低下して画質の劣化を招くからである。
【００５９】
図１５は、上記実施の形態の改良例におけるＭＰＥＧ圧縮処理（特にＧＯＰ層生成処理）の原理的な動作フローチャートである。このフローチャートにおいて、“ＣＮ”、“ＣＭ”、“ｉ”及び“ｉΣ”は変数であり、その用途は次のとおりである。
【００６０】
ＣＮ：Ｎパラメータ（ＧＯＰ内のピクチャ数）の格納用変数
ＣＭ：Ｍパラメータ（Ｉ又はＰピクチャの現れる周期）の格納用変数
ｉ：Ｉ又はＰピクチャの現れる周期を数えるためのカウンタ変数
ｉΣ：ＧＯＰ内のピクチャ数を数えるためのカウンタ変数
【００６１】
このフローチャートでは、まず、変数ＣＮとＣＭにＮパラメータとＭパラメータをセットし（ステップＳ３１）、変数ｉとｉΣに初期値（０）をセット（ステップＳ３２、Ｓ３３）して初期化処理を実行した後、以降のピクチャ生成処理（ステップＳ３４〜ステップＳ４４）を実行する。
【００６２】
このピクチャ生成処理では、まず、原画像の画面ＧｉΣを読み込み（ステップＳ３４）、次いで（ステップＳ３５は後述）、ｉΣ＝０であるか否かを判定し（ステップＳ３６）、その判定結果がＹＥＳであれば画面ＧｉΣのフレーム内符号化画像（Ｉピクチャ）を生成し（ステップＳ３７）、ＮＯであればｉ＜ＣＭであるか否かを判定して（ステップＳ３９）、その判定結果がＹＥＳであれば画面ＧｉΣのフレーム内挿双方向予測符号化画像（Ｂピクチャ）を生成し（ステップＳ４０）、ＮＯであれば画面ＧｉΣのフレーム間順方向予測符号化画像（Ｐピクチャ）を生成する（ステップＳ３４１）。
【００６３】
そして、ＩピクチャとＢピクチャを生成した場合は変数ｉとｉΣの両方をカウントアップし（ステップＳ３８、ステップＳ４３）、Ｐピクチャを生成した場合は変数ｉの初期化（ステップＳ４２）と変数ｉΣのカウントアップ（ステップＳ４３）を行い、何れの場合も、ｉΣ＝ＣＮであるか否かを判定して（ステップＳ４４）、その判定結果がＮＯの場合にＧｉΣの読み込み処理（ステップＳ３４）以降を繰り返すという処理を実行する。
【００６４】
ここで、図示のフローチャートにあっては、原画像の画面ＧｉΣを読み込んだ（ステップＳ３４）後に、ストロボ発光であるか否かを判定し（ステップＳ３５ａ）、ストロボ発光の場合に、変数ｉの初期化（ステップＳ３５ｂ）と変数ｉΣの初期化（ステップＳ３５ｃ）を行うための処理（ステップＳ３５）を実行する点に特徴がある。すなわち、ストロボ発光の場合は、ステップＳ３５ｂで変数ｉΣを初期化することにより、次のｉΣ＝０であるか否かの判定結果（ステップＳ３６）を強制的に“ＹＥＳ”とし、ステップＳ３７を実行してＩピクチャ（非予測符号化画像）を生成する一方、ストロボ発光でない場合は、そのときの変数ｉの値に応じて、ステップＳ４０またはステップＳ４１を実行し、ストロボ非発光期間の画像として、ＢピクチャまたはＰピクチャ（いずれも予測符号化画像）を生成する点に特徴がある。
【００６５】
図１６と図１７は、Ｎパラメータをそれぞれ“２１”及び“１０”とした場合（何れもＭ＝３）のＧＯＰ構造図であり、図１６はストロボを発光しない場合（ステップＳ３５ａの判定結果が“ＮＯ”の場合）のもの、図１７はストロボを発光した場合（ステップＳ３５ａの判定結果が“ＹＥＳ”の場合）のものである。
【００６６】
図１６のＧＯＰ構造ではＩピクチャの出現間隔がＮパラメータで設定された２１画面ごとになっているが、図１７のＧＯＰ構造ではＩピクチャの出現間隔がＮパラメータ以下の、たとえば、１０画面ごとになっている。図１７におけるＩピクチャの出現間隔（図では１０画面ごと）はストロボの発光間隔に対応し、ＧＯＰ内のストロボ非発光画像の置換画像はＢピクチャまたはＰピクチャ、すなわち、いずれも参照画像を必要とする予測符号化画像であるから、ストロボ非発光画像を単に直前のストロボ発光画像で置換する上記実施の形態に比べて、置換画像の類似性をなくすことができ、動画再生時のギクシャク感を改善することができる。
【００６７】
なお、直前のストロボ発光画像をストロボ非発光画像の置換画像としたので、置換画像を予測符号化画像であるＢピクチャまたはＰピクチャとしたが、直後のストロボ発光画像をストロボ非発光画像の置換画像とする場合は、先頭の置換画像が非予測符号化画像であるＩピクチャとし、続く置換画像及びストロボ発光画像を予測符号化画像であるＢピクチャまたはＰピクチャとする。
【００６８】
【発明の効果】
本発明によれば、ストロボ非発光時の画像の代わりに、直前のストロボ発光時の画像が代替的に用いられた動画像が生成される。したがって、ストロボ使用の暗所撮影であっても、ストロボの発光周期に関わらず、所定周期の静止画像で構成した動画像ファイルを自在に得ることができる。
または、前記静止画像がストロボ非発光時の画像である場合は、当該ストロボ非発光時の画像の代わりに、前記ストロボ発光時の画像を用いて生成された予測符号化画像を、前記動画像を構成する単位画像の一つとすることにより、代替画像の類似性を少なくすることができ、動画再生時のギクシャク感を改善することができる。
【図面の簡単な説明】
【図１】電子スチルカメラの外観図である。
【図２】電子スチルカメラの概念的な機能ブロック図である。
【図３】制御部のブロック図である。
【図４】制御プログラムの全体的な概略を示すフローチャートである。
【図５】メニュー処理の概略的な流れ図である。
【図６】記録モード処理プログラムのフローチャートを示す図である。
【図７】動画モード処理プログラムのフローチャートを示す図である。
【図８】暗所撮影時の記録用動画像ファイル生成の実際を示す概念図である。
【図９】記録用動画像ファイルの生成に必要な構成図である。
【図１０】ストロボ非発光画像のみで動画像ファイルを生成した場合の概念図である。
【図１１】動画モード処理の変形例を示すフローチャートである。
【図１２】ＭＰＥＧのシンタクスを示す模式図である。
【図１３】ＧＯＰ構造の一例を示す図である。
【図１４】画像の配列を表す図である。
【図１５】実施の形態の改良例におけるＭＰＥＧ圧縮処理（特にＧＯＰ層生成処理）の原理的な動作フローチャートである。
【図１６】ストロボを発光しない場合のＧＯＰ構造図である。
【図１７】ストロボを発光した場合のＧＯＰ構造図である。
【符号の説明】
１０電子スチルカメラ（動画記録装置）
３２撮像部（撮像手段）
３３画像処理部（撮像手段）
３４ストロボ部（ストロボ）
３６制御部（ストロボ制御手段、第１記録手段、第２記録手段、撮像制御手段、第３記録手段）[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a moving image recording apparatus and a moving image recording method, and more particularly to a moving image recording apparatus and a moving image recording method for generating and recording a moving image using still images sequentially captured by an imaging unit.
[0002]
[Prior art]
An electronic still camera typified by a digital camera generates a still image signal of a subject using a two-dimensional image sensor composed of a solid-state imaging device such as a CCD (Charge Coupled Device), and uses the still image signal as a storage device. It is written and recorded electronically, and it has exceptional convenience compared to film cameras in terms of immediate playback of images, erasing unnecessary images, and ease of image data transfer. In addition to still image recording, an electronic still camera that enables generation of a moving image file by using the characteristics of the above-described image sensor has been widely used.
[0003]
[Problems to be solved by the invention]
However, in a conventional electronic still camera having such a moving image recording function, it is not possible to perform moving image shooting (hereinafter referred to as “dark place shooting”) under a low light amount that requires use of a strobe. There was a problem.
[0004]
The reason for this is that the light emitted from the strobe for taking a still image is an instantaneous discharge light whose emission time is as short as several milliseconds, and the time required for charging is still image recording when recording a moving image. This is because it is much longer than the period.
[0005]
Of course, the above inconvenience can be solved by using a constantly lit light source such as a spotlight instead of a strobe. However, the constantly lit light source consumes a large amount of power and must be equipped with a large battery. Since it is inappropriate as an auxiliary light source for a camera, it is not realistic.
[0006]
In view of the above, the problem to be solved by the present invention is that a moving image recording apparatus capable of reproducing moving images in the same manner as moving images obtained by non-strobe shooting even when recording moving images using a strobe that emits light intermittently. And providing a moving image recording method.
[0007]
[Means for Solving the Problems]
According to the present invention, in a moving image recording apparatus that records a plurality of unit images constituting a moving image using still images sequentially captured by an imaging unit, auxiliary light is intermittently emitted during recording of the moving image. Auxiliary light control means and a first recording means for recording a still image captured by the imaging means when the auxiliary light is emitted as the unit image when recording a unit image corresponding to the emission timing of the auxiliary light. And when recording a unit image corresponding to the non-light emission timing of the auxiliary light, a second recording unit that records the unit image by using a still image captured by the imaging unit when the auxiliary light is emitted. , Provided.
In the moving image recording apparatus, Strobe control means for intermittently emitting strobe light, first recording means for recording a still image captured by the imaging means when the strobe light is emitted as one of unit images constituting the moving image, and non-strobe Second recording for recording, as one of unit images constituting the moving image, a still image captured by the imaging unit at the time of flash emission immediately before or immediately after strobe light emission instead of a still image to be captured by the imaging unit at the time of light emission Means and It is characterized by that.
[0008]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to the drawings, taking an electronic still camera such as a digital camera as an example.
[0009]
First, the configuration will be described. FIG. 1 is an external view of an electronic still camera. In the figure, an electronic still camera 10 (moving image recording apparatus) includes a lens barrel 12, a finder window 13, a strobe window 14, and the like on the front surface of a camera body 11, and a shutter key 15 and a strobe on / off key 16 on the top surface. And a self-timer key 17 and the like, and further, a power switch 18, a zoom button 19, a recording / playback mode switch 20, a viewfinder eyepiece window 21, a liquid crystal display 22, and a plurality of function keys 23 to 25 are provided on the back.
[0010]
Here, in this embodiment, it is assumed that the first to third function keys 23 to 25 are provided, and the first function key 23 is a menu processing activation key (hereinafter referred to as “menu key 23”). ), The second function key 24 is assigned to the cursor up / down / left / right movement key (hereinafter referred to as “cursor key 24”), and the third function key 25 is selected as a selection execution key (hereinafter referred to as “cursor key”). Enter key 25 ").
[0011]
The lens barrel 12 contains a photographic lens group with an optical zoom function, a mechanical shutter mechanism, and the like. The lens barrel 12 receives a subject on a light receiving surface of an image sensor (not shown) disposed at the rear end of the lens barrel 12. An image is formed. The finder window 13 is integrated with the finder eyepiece window 21 on the back side of the camera body 11 and is used when checking the composition visually. The strobe window 14 is a transmission window for allowing strobe light emission, which will be described later, and in many cases, small lenses for adjusting the spread of strobe light flux are arranged on the entire surface in accordance with the angle of view of the photographing lens group. Yes.
[0012]
The shutter key 15 is pressed down in two stages during shooting. Exposure etc. are set at the first stage, and a still image is captured (recorded) at the second stage. The shutter key 15 is also used as a moving image shooting start key. When the shutter key 15 is pushed down to the second level in the moving image mode, a still image is captured at a predetermined cycle for a predetermined recording time thereafter. Thus, a moving image file composed of a plurality of captured images is generated and recorded.
[0013]
The strobe on / off key 16 is used to set whether to permit or prohibit strobe light emission. When light emission is set to be allowed, regardless of the still image shooting mode or the movie shooting mode, if underexposure is determined when the shutter key 15 is pressed down to the first step, a flash unit 34 described later is used during image capture. Is driven to emit strobe light, and when the light emission is set to be prohibited, the driving of the strobe unit 34 is forcibly prohibited.
[0014]
The self-timer key 17 is for switching on and off the self-timer, and the power switch 18 is for turning on / off the power of the electronic still camera 10. The zoom button 19 is for changing the angle of view of the optical lens (that is, the zoom ratio). Pressing the “+” side decreases the angle of view, and pressing the “−” side increases it. The recording / playback mode switch 20 switches the operation mode of the electronic still camera 10 between the recording mode and the playback mode.
[0015]
The liquid crystal display 22 is a high-resolution color liquid crystal display. Using this liquid crystal display 22, the recorded image can be freely reproduced at any time, and in the recording mode, a through image can be displayed and used instead of the finder, and further, automatic exposure at the time of backlight photography etc. If it is inappropriate, set the appropriate exposure manually while viewing the through-image, or if the automatic white balance setting is inappropriate, see the through-image and adjust the white balance according to the shooting light source. The set value can be selected manually.
[0016]
FIG. 2 is a conceptual functional block diagram of the electronic still camera 10. In this block diagram, for convenience, the imaging unit 32 (imaging unit), the image processing unit 33 (imaging unit), the strobe unit 34 (strobe), the operation unit 35, the control unit 36 (strobe control unit, first recording unit, (Second recording means, imaging control means, third recording means), display control section 37, display section 38 (corresponding to the liquid crystal display 22 in FIG. 1), image storage section 39, and the like.
[0017]
The imaging unit 32 includes a photographing lens group, a mechanical shutter mechanism, and the like, and also includes a color image sensor such as a CCD that captures an image of the subject 31 and generates a color image signal of several tens of frames per second. This color image sensor includes auxiliary circuits such as a timing circuit, a sampling hold circuit, and an analog-digital conversion circuit, and variably sets the shutter speed, exposure value, and the like based on a control signal from the control unit 36, and sets the setting. A color image signal having a period of several tens of frames per second corresponding to the value (hereinafter simply referred to as an image signal) is generated, converted into a digital signal by an analog-digital conversion circuit, and output to the image processing unit 33.
[0018]
The image processing unit 33 separates the input image signal into a luminance component (Y) and color components (Cr, Cb), performs white balance correction based on a control signal from the control unit 36, and then performs the white balance. The corrected YCrCb signal is output to the control unit 36. The strobe unit 34 emits auxiliary light (strobe light) 34 a for illuminating the subject 31 in accordance with a drive signal from the control unit 36. The operation unit 35 responds to operations of various operation keys provided on the camera body 11, such as the shutter key 15, the strobe on / off key 16, the self-timer key 17, the menu key 23, the cursor key 24, and the enter key 25. The generated key signal is generated and output to the control unit 36.
[0019]
As shown in the block diagram of FIG. 3, the control unit 36 includes a CPU (Central Processing Unit) 36a, and a program memory 36c, a work memory 36d, an input unit 36e, and an output are connected to the CPU 36a via a bus 36b. The unit 36f and the like are connected. The CPU 36a loads a predetermined control program stored in the program memory 36c into the work memory 36d and executes it, thereby executing data from the input unit 36e (image signal from the image processing unit 33, various key signals from the operation unit 35). Image signal from the image storage unit 39) and data to the output unit 36f (control signal of shutter speed and exposure setting value to the image pickup unit 32, white balance correction control signal to the image processing unit 33, display control) The overall operation of the electronic still camera 10 is controlled while writing out a display signal to the unit 37, a recording image signal to the image storage unit 39, a strobe drive signal to the strobe unit 34, and the like. A part of the work memory 36d is used as an image buffer described later (see the image buffer 43 in FIG. 9).
[0020]
The display control unit 37 converts a display signal such as a through image, a preview image, or various setting screens output from the control unit 36 into a display format of the display unit 38 and outputs the display format to the display unit 38. The control unit 37 and the display unit 38 together constitute a display unit. The image storage unit 39 is configured by a recording medium for recording a captured image (also referred to as a capture image) in a nonvolatile manner (no information is lost even when the power is turned off). A semiconductor storage device, a magnetic memory device, or the like can be used as the recording medium. The image storage unit 39 may be mounted on the electronic still camera in a removable state.
[0021]
Next, the operation will be described. FIG. 4 is a flowchart showing an overall outline of a control program executed by the CPU 36 a of the control unit 36. This program starts executing when the power is turned on (when the power switch 18 of FIG. 1 is turned on). First, after initial setting such as operation check in step S1, the menu key is pressed in step S2. It is determined whether or not the button 23 has been pressed. If the button has been pressed, the process branches to step S3 to execute “menu processing” described later, and then proceeds to mode determination in step S4. Proceeding to the mode determination in S4, in step S4, it is determined from the current switching state of the recording / reproduction mode changeover switch 20 whether the recording mode or the reproduction mode is selected, and branch processing (step S5) according to the determination result. The “playback mode process” and the “recording mode process” in step S6) are repeated.
[0022]
Hereinafter, the “recording mode process” and the “menu process” related to the present invention will be described in detail.
[0023]
FIG. 5 is a schematic flowchart of the “menu process” executed in step S3 of FIG. 4 and shows a transition state of the screen display of the liquid crystal display 22. In this figure, the menu screen 41 is first displayed when the determination result in step S2 of FIG. 4 is “YES”, that is, when the user presses the menu key 23 during the loop execution of FIG. It is a screen displayed on the liquid crystal display 22. The menu screen 41 includes various menu items including a menu item 41a (hereinafter referred to as “recording mode setting 41a”) for selecting whether the recording mode is the still image recording mode or the moving image recording mode. Are displayed in a list form, and at the end of the list, a menu item 41b (hereinafter referred to as “close 41b”) for closing the menu screen 41 and returning to the loop of FIG. 4 is provided. .
[0024]
When the user operates the cursor key 24 to select the recording mode setting 41 a and presses the enter key 25, a recording mode setting screen 42 is displayed instead of the menu screen 41. The recording mode setting screen 42 includes a “still image mode” button 42a and a “moving image mode” button 42b. When the “still image mode” button 42a is selected, the recording mode is set to the still image recording mode. Thereafter, the recording mode setting screen 42 is closed and the menu screen 41 is displayed again. When the “moving image mode” button 42b is selected, the recording mode is set to the moving image mode, the recording mode setting screen 42 is closed, and the menu screen 41 is displayed again.
[0025]
FIG. 6 is a diagram showing a flowchart of the recording mode processing program executed in step S6 of FIG. When this flowchart is started, first, the shutter key 15 is half-pressed (step 111) in which the image signal from the image processing unit 33 is read and the image signal is output to the display control unit 37 in step S12 (first step). Repeatedly until it is pressed down. Thereby, a through image for composition adjustment is displayed on the display unit 38 (liquid crystal display 22) while being updated at a predetermined cycle.
[0026]
Thereafter, when half-press of the shutter key 15 is detected in step S13, photographing conditions such as exposure and white balance are automatically set in step S14. In step S15, when the full press of the shutter key 15 (second-step pressing operation) is detected, it is determined in step S16 whether or not the shooting mode is the moving image mode. In the still image mode, if it is assumed that light emission is permitted by operating the strobe on / off key 16, it is determined in step S17 whether or not the shooting is in a dark place that requires auxiliary light. If it is not dark place shooting, the image of the subject 31 is picked up by driving the image pickup section 32 in step S18, and the image signal at that time is recorded in the image storage section 39 as a still image. If there is, the strobe unit 34 is driven in step S19, and the process proceeds to step S18, where the image pickup unit 32 is driven in synchronization with the driving of the strobe unit 34. Ri captures an image of a subject 31 is recorded in the image storage unit 39 the image signals supplemented with underexposure by its auxiliary light (strobe light 34a) as a still picture.
[0027]
If it is determined in step S16 that the movie mode is selected, the movie mode process in step S20 is executed.
[0028]
FIG. 7 is a diagram showing a flowchart of the moving image mode processing program. When this flowchart is started, if it is assumed that light emission is permitted by operating the strobe on / off key 16, it is determined in step S20a whether or not the photographing is in a dark place that requires auxiliary light. If it is not dark place shooting, the image of the subject 31 is picked up by driving the image pickup unit 32 in step S20b, the image signal (still image from the image processing unit 33) at that time is acquired, and this is converted into a moving image file. After the moving image file is saved and recorded in the image storage unit 39 in step S20c, the arrival of the moving image recording cycle is determined in step S20d. If the period has arrived, the process returns to step S20b again. On the other hand, if the period has not arrived, the elapse of the moving image shooting time is determined in step S20e, and if the moving image shooting time has not elapsed, the moving image recording period of step S20d The arrival determination is repeated, and when the moving image shooting time has elapsed, this flowchart is ended.
[0029]
Therefore, according to the processing of step S20b to step S20e, when shooting a moving image in an environment where sufficient brightness can be obtained, the imaging unit 32 is driven at a predetermined cycle for a predetermined moving image shooting time, thereby subjecting the subject. 31 images are captured, still images output from the image processing unit 33 in a predetermined cycle, a moving image file using the still images as unit images (frame images) is generated, and stored in the image storage unit 39. be able to.
[0030]
On the other hand, if it is determined in step S20a that the shooting is in a dark place that requires auxiliary light, first, in step S20f, the strobe unit 34 is driven to emit the strobe light 34a, and in step S20g, the image is captured. The image of the subject 31 is picked up by driving the unit 32, and an image signal at that time (a still image from the image processing unit 33) is acquired. In step S20h, charging of the flash unit 34 is started. In step S20i, the acquired image is stored and recorded in the image storage unit 39 as a unit image of a moving image file, and the acquired image is stored in a predetermined image buffer (FIG. 9). (See image buffer 43).
[0031]
Next, it is determined in step S20j that charging of the flash unit 34 has been completed, and the following processing is executed according to the determination result (YES / NO).
[0032]
<YES determination: At the time of charging completion determination>
When the determination is YES, it is first determined in step S20k that the moving image recording period has arrived. If the period has arrived, the process returns to step S20f again. If the period has not arrived, the elapse of the moving image recording time is determined in step S20m. If the moving image shooting time has not elapsed, the elapse of the moving image recording period is determined in step S20k. Is repeated, and when the moving image shooting time has elapsed, this flowchart ends.
[0033]
Therefore, in this processing at the time of YES determination, the strobe unit 34 is driven in accordance with the drive (shooting) timing of the image pickup unit 32, and the underexposure is compensated by the auxiliary light (strobe light 34a) from the image processing unit 33. The still image can be captured, and the still image can be stored and recorded in the image storage unit 39 as a unit image of the moving image file, and the acquired image can be stored in a predetermined image buffer (see the image buffer 43 in FIG. 9). .
[0034]
<NO determination: When charging is not completed>
When the determination is NO, first, at step S20n, the arrival of the moving image recording cycle is determined. If the period has not come, the elapse of the moving image shooting time is determined in step S20r. If the moving image shooting time has not elapsed, the charging completion determination in step S20j is repeated. On the other hand, if the cycle comes to an end, if the period has come, the process proceeds to step S20p, where the image pickup unit 32 is driven to pick up an image of the subject 31, and an image signal at that time (a still image from the image processing unit 33) is acquired. To do. In step S20q, the underexposed still image acquired in step S20p is discarded (cancelled), the still image stored in the predetermined image buffer (see step S20i) is taken out, and it is stored in the movie file. After saving and recording as a unit image in the image storage unit 39, it is determined in step S20r that the movie shooting time has elapsed. If the movie shooting time has not elapsed, the charging completion determination in step S20j is repeated, and the movie shooting time has elapsed. If yes, this flowchart ends.
[0035]
Therefore, in the processing at the time of this NO determination, the exposure that is imaged by the imaging unit 32 and output from the image processing unit 33 during the period (strobe non-emission period) in which the driving of the strobe unit 34 (fire of the strobe light 34a) is not in time. As a substitute image for the insufficient still image, a still image that has been stored in the image buffer (see step S20i) and compensated for the underexposure by the auxiliary light (strobe light 34a) is used. It can be stored and recorded in the image storage unit 39 as a unit image.
[0036]
FIG. 8 is a conceptual diagram showing the actual recording moving image file generation (see step S20f to step S20r in FIG. 7) performed in the dark place shooting performed in the moving image mode process. In FIG. 8, G0, G1, G2, G3, G4, G5, G6, G7,... Are periodic image signals taken in via the image processing unit 33, and are schematically shown on each image. The two types of figures a and b represent the light emission and non-light emission of the flash unit 34, respectively. That is, in the illustrated example, the images G0, G3, and G6 are images at the time of strobe light emission set to appropriate exposure by the strobe light 34a (hereinafter referred to as “strobe light emission images”), and other images G1, G2 are used. , G4, G5, and G7 are underexposure non-flash images (hereinafter referred to as “flash non-flash images”).
[0037]
As can be intuitively understood from FIG. 8, in the actual recording moving image file generation in the present embodiment, instead of the strobe non-emission image (G1, G2, G4, G5, G7), A recording moving image file is generated using the strobe light emission images (G0, G3, G6). That is, as shown in the recording moving image file in the lower part of the figure, instead of the strobe non-emission image (G1, G2), the immediately preceding strobe emission image (G0) is used, and the strobe non-emission image (G4, G2) is used. By using the previous flash emission image (G3) instead of G5), and using the previous flash emission image (G6) instead of the non-flash emission image (G7), all the flash emission images A moving image file for recording composed of (G0, G0, G0, G3, G3, G3, G6, G6) is generated. Therefore, in this example, the substitute images of G1 and G2 are G0, the substitute images of G4 and G5 are G3, and the substitute image of G7 is G6.
[0038]
For example, as shown in FIG. 9A, the configuration necessary for generating such a recording moving image file includes an image buffer 43 that holds the previous strobe light emission image (Gi), and a strobe light emission period at that time. A switch element 44 for taking out the previous flash emission image (Gi) held in the image buffer 43 in place of the flash non-emission image (Gj). You should prepare. For example, a control signal (CONT) indicating a strobe light emission period and a non-light emission period from the CPU 36a is input to the image buffer 43 and the switch element 44, and the image buffer 43 holds only an image (Gi) of the strobe light emission period. The switch element 44 switches the contact between the strobe light emission period and the non-light emission period as shown in the figure.
[0039]
According to this, it is possible to generate a moving image file in which the strobe non-emission image (Gj = G1, G2, G4, G5, G7) is replaced with the immediately preceding strobe emission image (Gi = G0, G3, G6). In addition, a moving image file composed of still images having a predetermined cycle can be freely obtained regardless of the light emission cycle of the strobe.
[0040]
In this case, a moving image file having a shooting (recording) cycle similar to that of normal moving image shooting that is not dark shooting is generated even in dark shooting, so that it is the same as a normal moving image file. The moving image file shot in the dark place can be reproduced using the moving image reproduction program, and real-time reproduction can be performed with no time lag from the actual photographing time in the time axis direction.
[0041]
In the above-described embodiment, the image capturing unit 32 is driven to capture an image of the subject 31 at a predetermined period regardless of the strobe light emission period and the non-light emission period. It may be. That is, the configuration may be such that step S20p in the flowchart of FIG. 7 is omitted.
[0042]
In this case, since the number of times of imaging during the moving image shooting time can be greatly reduced, the number of times of performing imaging processing and image processing can be reduced, and power consumption can be reduced to extend the battery life.
However, the drive control of the image pickup unit 32 is somewhat troublesome as compared with the above-described embodiment as long as the image pickup unit 32 is simply driven at a predetermined cycle during the moving image shooting time.
[0043]
In the above embodiment, the moving image file is generated by replacing the non-flash image with the immediately preceding flash image. However, the non-flash image is replaced with the immediately following flash image. A moving image file may be generated.
[0044]
Further, the present invention can also be applied to an apparatus that uses a constantly lit light source such as a spotlight instead of a strobe for a still image and that is lit intermittently.
In this case, it is possible to obtain an effect that the power consumption can be greatly reduced as compared with the case where the spotlight is always turned on to shoot a moving image.
[0045]
In the above embodiment, the non-flash image (Gj) is replaced with the previous flash image (Gi), but a moving image file is generated with only the flash image (Gi) without replacement. It is also possible to do. That is, as shown in FIG. 10, it is also possible to consider a moving image file containing only the strobe light emission image (Gi = G0, G3, G6). For this purpose, for example, as shown in FIG. 9B, the image signal (Gi) at that time is taken out in the strobe light emission period, while the contact is opened (the position of the broken line in the figure) in the strobe non-light emission period. A switch element 45 having a simple structure may be provided. In this case, an image buffer is not necessary.
[0046]
FIG. 11 is a flowchart showing a modified example of the moving image mode process (FIG. 7), which is adapted to a case where a moving image file is generated only with a strobe light emission image (Gi). In this flowchart, the difference from the moving image mode processing is that the still image is not stored in the moving image buffer in step S20i (that is, only the moving image still image is stored and recorded), and charging. The point that the determination (step S20j) is continued until the completion determination time, and information “i” indicating the number of repeated reproductions of the image are stored in association with each strobe light emission image in the moving image file ( Step S20s, Step S20t, Step S20u).
[0047]
According to this, the still image from the image processing unit 33 is fetched in accordance with the drive timing of the strobe unit 34 (the emission of the strobe light 34a), and the still image is stored and recorded in the image storage unit 39 as a unit image of the moving image file. In addition, it is possible to prevent the generation of the moving image file during the strobe non-emission period. Therefore, it is possible to generate a moving image file of only the strobe light emission image (Gi = G0, G3, G6) as shown in FIG.
[0048]
Therefore, the data size of the moving image file can be greatly reduced, and the storage capacity of the image storage unit 39 can be used effectively.
[0049]
In addition, since information “i” indicating the number of repeated reproductions of the image is stored in association with each strobe light image in the moving image file, as in the above-described embodiment, the information is actually displayed in the time axis direction. It is possible to reproduce in real time without any time lag from the shooting time.
[0050]
In the above modification, the imaging unit 32 is driven to capture an image of the subject 31 at a predetermined period regardless of the strobe light emission period and the non-light emission (charge) period. However, only the strobe light emission period is captured. You may make it into a structure. That is, the configuration may be such that step Sp in the flowchart of FIG. 11 is omitted.
In this case, since the number of times of imaging during the moving image shooting time can be greatly reduced, the number of times of performing imaging processing and image processing can be reduced, and power consumption can be reduced to extend the battery life.
[0051]
In the above modification, the information “i” indicating the number of repeated reproductions of the image is stored in association with each strobe light image in the moving image file, but each charging time is measured, Information indicating the reproduction time of the image may be stored in association with each strobe light emission image.
In the above modification, the reproduction information (number of duplicate reproductions, reproduction time, etc.) of the image is stored in association with each strobe light image in the moving image file. However, the reproduction information is not stored. Also good.
[0052]
By the way, in the example in which the strobe non-emission image (Gj) is replaced with the immediately preceding strobe emission image (Gi) in the above embodiment, the replacement image has a certain similarity (for example, G0, G0, and G0 in the lower part of FIG. 8 are the same image and similar images). In the example shown below, the compression rate of a moving image is increased by using a strobe emission image as a non-predictive encoded image and a replacement image as a predictive encoded image.
[0053]
As one method for generating a predicted encoded image, an MPEG (Moving Picture Experts Group) standard encoding method (hereinafter simply referred to as “MPEG”) is known. MPEG is CCITT H.264 for the purpose of applying moving images to storage media and communication media. It is a coding standard developed from H.261 (video phone, video conference coding). MPEG is basically H.264 in that it has coding tools such as MC (Motion Compensation) and DCT (Discrete Cosine Transform). Although it is common to H.261, it is different in that it has a special structure for realizing trick modes such as fast forward, rewind, halfway reproduction, and reverse reproduction, that is, a GOP (Group Of Pictures) structure.
[0054]
FIG. 12 is a schematic diagram showing MPEG syntax (syntax; order and contents to be satisfied by bit stream). This syntax is composed of a sequence layer having several GOPs between the sequence header and the sequence end, and a GOP layer below it. The GOP layer includes N picture frames (encoded screen data) after the GOP header. It has a structure with One GOP is one unit of random access, and this unit enables the above trick mode. The type (picture type) of the N picture frames is any of an I picture (abbreviation: I), a P picture (abbreviation: P), or a B picture (abbreviation: B). The contents of each picture type are as follows: It is as follows.
[0055]
(1) I picture: Non-predictive coded image
Abbreviation for intra-coded picture. This is an image for intra-coding all of the screen. It differs from other picture types in that it has independence within GOP (no reference image is required).
(2) P picture: Predictive coded image
An abbreviation for Predictive-Coded Picture. This is an image predicted in the forward direction from the previous I picture or P picture.
(3) B picture: Predictive coded image
Abbreviation for Bidirectionally Predictive-Coded Picture. It is an image that is bidirectionally predicted from the preceding and following I-pictures or P-pictures.
[0056]
FIG. 13 is a diagram showing an example of the GOP structure when the number of GOP pictures (so-called N parameter) is “15” and the period of I and P pictures (so-called M parameter) is “3”. It is an example. That is, an example is shown in which one GOP is composed of 15 frames, and the number of frames from an I picture (or P picture) to the next P picture is three. In the figure, an I picture is an intra-coded image (non-predicted coded image) that does not require a reference image. The P picture and the B picture are forward and bidirectional predictive encoded images, respectively. As shown in the figure, the P picture uses an already encoded I picture or P picture as a reference image, and the B picture These are predictive coded images that are forward-predicted and bi-directionally predicted using the preceding and following I-pictures or P-pictures as reference images.
[0057]
FIG. 14 shows a state in which the screen order (B0, B1, I2, B3, B4, P5,...) Of the original image is partially replaced at the encoding process stage and is restored to the original arrangement order at the playback image stage. FIG. The insertion of the B picture in the encoding process stage is performed after encoding the I picture (or P picture) and the P picture before and after that. For example, focusing on B3 and B4 of the original image, after encoding I2 and P5, B3 and B4 are encoded using these I2 and P5 as reference images, and inserted after I2 and P5. In this stage, the arrangement order of “I2, B3, B4, P5” is replaced with “I2,..., P5, B3, B4”.
[0058]
Here, the important parameters of the GOP structure are the above-mentioned “N parameter” and “M parameter”, that is, the number of pictures (N) in the GOP and the period (M) in which the I or P picture appears. There are no usage restrictions on these parameters. (1) The value can be freely selected as long as the condition that the first GOP is an I picture on the bitstream and (2) the last GOP is an I or P picture in the original image arrangement order is satisfied. However, in practice, values that are considered to be optimal are set based on the image quality and the motion of moving images. For example, M is often selected to have a value of about 2 to 3, and N is often selected to have a random access unit of about 0.4 seconds to 1 second. By the way, the optimum value of M is determined by the motion of the moving image (small motion is intense motion and large M is gentle motion), but the optimal value of N is determined by the compromise between image quality and random access unit. This is because, if N is made small, the random access unit becomes fine and the convenience of the trick mode can be improved. On the other hand, the coding efficiency is lowered and the image quality is deteriorated.
[0059]
FIG. 15 is a principle operation flowchart of MPEG compression processing (particularly GOP layer generation processing) in an improved example of the above embodiment. In this flowchart, “CN”, “CM”, “i”, and “iΣ” are variables, and their uses are as follows.
[0060]
CN: Variable for storing N parameter (number of pictures in GOP)
CM: Variable for storing M parameter (cycle in which I or P picture appears)
i: Counter variable for counting the period in which an I or P picture appears
iΣ: Counter variable for counting the number of pictures in the GOP
[0061]
In this flowchart, first, an N parameter and an M parameter are set in variables CN and CM (step S31), and an initial value (0) is set in variables i and iΣ (steps S32 and S33), and an initialization process is executed. Thereafter, subsequent picture generation processing (steps S34 to S44) is executed.
[0062]
In this picture generation process, first, the screen GiΣ of the original image is read (step S34), then (step S35 will be described later), it is determined whether iΣ = 0 (step S36), and the determination result is YES. If there is, an intra-frame encoded image (I picture) of the screen GiΣ is generated (step S37). If NO, it is determined whether i <CM (step S39), and the determination result is YES. For example, a frame-interpolated bidirectional predictive encoded image (B picture) of the screen GiΣ is generated (step S40), and if NO, an interframe forward predictive encoded image (P picture) of the screen GiΣ is generated (step S341). ).
[0063]
If an I picture and a B picture are generated, both the variables i and iΣ are counted up (steps S38 and S43). If a P picture is generated, the variable i is initialized (step S42) and the variable iΣ is changed. Counting up (step S43) is performed, and in any case, it is determined whether iΣ = CN (step S44). If the determination result is NO, the GiΣ reading process (step S34) and subsequent steps are repeated. The process is executed.
[0064]
Here, in the flowchart shown in the figure, after reading the screen GiΣ of the original image (step S34), it is determined whether or not strobe light is emitted (step S35a). (Step S35b) and a process (step S35) for initializing the variable iΣ (step S35c) is performed. That is, in the case of strobe light emission, by initializing the variable iΣ in step S35b, the determination result (step S36) whether or not the next iΣ = 0 is forcibly set to “YES”, and step S37 is executed. In the case where the I picture (non-predictive coded image) is generated and the flash light is not emitted, step S40 or step S41 is executed according to the value of the variable i at that time, A feature is that a B picture or a P picture (both are predictive coded pictures) is generated.
[0065]
FIGS. 16 and 17 are GOP structure diagrams when the N parameter is “21” and “10” (both M = 3), respectively, and FIG. 16 shows the case where the strobe is not emitted (the determination result of step S35a is FIG. 17 shows the case where the strobe is emitted (when the determination result in step S35a is “YES”).
[0066]
In the GOP structure of FIG. 16, the appearance interval of the I picture is every 21 screens set with the N parameter, but in the GOP structure of FIG. 17, the appearance interval of the I picture is less than the N parameter, for example, every 10 screens. It has become. The appearance interval of I pictures in FIG. 17 (every 10 screens in the figure) corresponds to the flash emission interval, and the replacement image of the non-flash image in the GOP requires a B picture or a P picture, that is, both require a reference image. Compared to the previous embodiment in which the strobe non-emission image is simply replaced with the previous strobe emission image, the similarity of the replacement image can be eliminated, and the jerky feeling during video playback is improved. can do.
[0067]
Since the previous strobe light emission image is a replacement image of the strobe non-light emission image, the replacement image is a B picture or a P picture that is a predictive encoded image, but the next strobe light emission image is a replacement image of the strobe non-light emission image. In this case, the first replacement image is an I picture that is a non-predictive encoded image, and the subsequent replacement image and strobe emission image are B pictures or P pictures that are predictive encoded images.
[0068]
【The invention's effect】
According to the present invention, a moving image is generated in which an image at the time of the previous flash emission is used instead of an image at the time of no flash emission. Therefore, even in a dark place shooting using a strobe, a moving image file composed of still images having a predetermined period can be freely obtained regardless of the light emission period of the strobe.
Alternatively, when the still image is an image when no strobe light is emitted, instead of the image when the strobe light is not emitted, a predicted encoded image generated using the image when the strobe light is emitted is used as the moving image. By making one of the unit images to be configured, the similarity of the substitute images can be reduced, and the jerky feeling at the time of moving image reproduction can be improved.
[Brief description of the drawings]
FIG. 1 is an external view of an electronic still camera.
FIG. 2 is a conceptual functional block diagram of an electronic still camera.
FIG. 3 is a block diagram of a control unit.
FIG. 4 is a flowchart showing an overall outline of a control program.
FIG. 5 is a schematic flowchart of menu processing.
FIG. 6 is a flowchart of a recording mode processing program.
FIG. 7 is a flowchart of a moving image mode processing program.
FIG. 8 is a conceptual diagram showing an actual generation of a recording moving image file at the time of shooting in a dark place.
FIG. 9 is a configuration diagram necessary for generating a recording moving image file.
FIG. 10 is a conceptual diagram when a moving image file is generated using only a strobe non-light emitting image.
FIG. 11 is a flowchart illustrating a modification of the moving image mode process.
FIG. 12 is a schematic diagram showing the syntax of MPEG.
FIG. 13 is a diagram illustrating an example of a GOP structure.
FIG. 14 is a diagram illustrating an arrangement of images.
FIG. 15 is a principle operation flowchart of MPEG compression processing (particularly GOP layer generation processing) in an improved example of the embodiment;
FIG. 16 is a GOP structure diagram when no strobe light is emitted.
FIG. 17 is a GOP structure diagram when a strobe light is emitted.
[Explanation of symbols]
10 Electronic still camera (video recording device)
32 Imaging unit (imaging means)
33 Image processing unit (imaging means)
34 Strobe section (strobe)
36 control unit (strobe control means, first recording means, second recording means, imaging control means, third recording means)

Claims

In a moving image recording apparatus that records a plurality of unit images constituting a moving image using still images sequentially captured by an imaging unit,
Auxiliary light control means for intermittently emitting auxiliary light during recording of the moving image;
When recording a unit image corresponding to the emission timing of the auxiliary light, a first recording unit that records a still image captured by the imaging unit as the unit image when the auxiliary light is emitted;
When recording a unit image corresponding to the non-light emission timing of the auxiliary light, a second recording unit that records the unit image using a still image captured by the imaging unit when the auxiliary light is emitted;
A moving picture recording apparatus comprising:

The second recording unit records a unit image corresponding to a non-light emission timing of the auxiliary light by duplicating a still image captured by the imaging unit when the auxiliary light is emitted. The moving picture recording apparatus described.

The second recording means records a unit image corresponding to the non-light emission timing of the auxiliary light by storing the number of repeated reproductions of still images taken by the imaging means when the auxiliary light is emitted. The moving image recording apparatus according to claim 1.

The first recording unit records a non-predictive encoded image generated based on a still image captured by the imaging unit when the auxiliary light is emitted as a unit image corresponding to the emission timing of the auxiliary light,
The second recording unit records a predictive encoded image predicted from the non-predictive encoded image recorded by the first recording unit as a unit image corresponding to a non-emission timing of the auxiliary light. The moving image recording apparatus according to claim 1.

In a moving image recording apparatus that generates and records a moving image using still images sequentially captured by an imaging unit,
Strobe control means for intermittently emitting the strobe,
A first recording unit that records a still image captured by the imaging unit at the time of the strobe light emission as one of unit images constituting the moving image;
Instead of the still image to be captured by the imaging unit when the strobe is not emitting light, the still image captured by the imaging unit when the strobe is emitted immediately before or immediately after is recorded as one of the unit images constituting the moving image. A second recording means;
Video recording apparatus comprising the.

The second recording unit includes an imaging control unit that periodically images the imaging unit, and the second recording unit is configured to emit light immediately before or immediately after the strobe emission instead of the still image captured by the imaging unit when the strobe is not emitting light. 6. The moving image recording apparatus according to claim 5 , wherein the captured still image is recorded as one of unit images constituting the moving image .

6. The moving image recording apparatus according to claim 5, further comprising an imaging control unit that images the imaging unit only when the strobe light is emitted .

Among a plurality of consecutive same unit images recorded in the moving image recorded by the first and second recording means, a predetermined unit image is recorded as a non-predictive encoded image, and other unit images are predicted encoded. 8. The moving image recording apparatus according to claim 5, further comprising third recording means for recording as an image .

The first recording unit includes an imaging control unit configured to periodically capture the imaging unit, and the first recording unit discards the moving image by discarding an image at the time of non-flash emission among the still images periodically captured by the imaging unit. 6. The moving picture recording apparatus according to claim 5 , wherein the moving picture recording apparatus is generated and recorded.

The first recording means, in place of the still image to be imaged and recorded by the imaging means when the strobe is not lighted, is overlapped with the still image captured by the imaging means at the time of the previous strobe light emission. 6. The moving image recording apparatus according to claim 5, wherein the number of reproductions or reproduction time is recorded .

6. The moving image recording apparatus according to claim 5 , wherein the strobe is a strobe for taking a still image .

12. The moving picture recording apparatus according to claim 11 , wherein the strobe control means is means for repeatedly charging and emitting the strobe, and the strobe is being charged when the strobe is not emitting light .

When generating and recording a moving image using still images sequentially captured by the imaging unit, the moving image is generated using the still image captured by the imaging unit at the time of strobe light emission while intermittently emitting the strobe light. A video recording method for generating and recording
When the flash is fired, the still image captured by the imaging unit is recorded as one of the unit images constituting the moving image, while when the strobe is not flashed, instead of the still image to be captured by the imaging unit. A moving image recording method comprising: recording a still image captured by the imaging unit at the time of flash emission immediately before or immediately after as one of unit images constituting the moving image.