Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP3765503B2 - Electronic imaging device - Google Patents
[go: Go Back, main page]

JP3765503B2 - Electronic imaging device - Google Patents

Electronic imaging device Download PDF

Info

Publication number
JP3765503B2
JP3765503B2 JP31118895A JP31118895A JP3765503B2 JP 3765503 B2 JP3765503 B2 JP 3765503B2 JP 31118895 A JP31118895 A JP 31118895A JP 31118895 A JP31118895 A JP 31118895A JP 3765503 B2 JP3765503 B2 JP 3765503B2
Authority
JP
Japan
Prior art keywords
image
image signal
display
signal
processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP31118895A
Other languages
Japanese (ja)
Other versions
JPH08214258A (en
Inventor
俊彦 吉田
悦郎 川上
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Priority to JP31118895A priority Critical patent/JP3765503B2/en
Publication of JPH08214258A publication Critical patent/JPH08214258A/en
Application granted granted Critical
Publication of JP3765503B2 publication Critical patent/JP3765503B2/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00Registering or indicating the working of vehicles
    • G07C5/08Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0841Registering performance data
    • G07C5/0875Registering performance data using magnetic data carriers
    • G07C5/0891Video recorder in combination with video camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Television Signal Processing For Recording (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、撮影レンズを有するカメラ部とファインダーおよびモニター兼用の液晶などの表示装置を有する本体部とからなる電子撮像装置に関する。
【0002】
【従来の技術】
電子撮像装置の一つとして、撮影レンズおよびCCD(Charge Coupled Device:固体撮像素子)を備え、さらに、画像記録時におけるビューファインダーおよび画像再生時におけるモニター兼用の液晶表示装置(Liquid Crystal Display、以下、LCDモニターと呼ぶ)を備えたLCD付デジタルスチルカメラが知られている。
【0003】
そして、このようなLCD付デジタルスチルカメラでは、CCDからの信号をビデオ信号に変換するCCDカラープロセス処理が実行され、LCDモニターにビューファインダとしてビデオ画面をモニターするためのビデオスルー表示とともに、フラッシュメモリなどを用いた記憶部への画像記録を可能にしている。なお、ここでCCDで撮像した画像をLCDモニターにてビューファインダモニターすることを「ビデオスルー表示」という。
【0004】
ところで、LCDモニターでビデオスルー表示するような場合、表示画面上でのビデオスルー表示の動きをスムーズに見せるため、例えば1秒間に数コマ以上の画面をリフレッシュすることが望まれ、また、同時に画像記録を行うフラッシュメモリなどの記憶部では、撮影した画像を高画質で記録することも望まれている。
【0005】
【発明が解決しようとする課題】
ところが、このような要求をハードウェアにより実現しようとすると、回路構成が極めて複雑でコスト的にも高価なものになってしまう。
そこで、これらのカラープロセス処理をソフトウェアにより実現することが試みられているが、このようなソフトウェアによる処理は、ハードウェアと比較すると、時間的な制約が大きく、通常のカラープロセスでは、処理に時間がかかる。このため、例えば、表示画面でのビデオスルー表示の動きをスムーズにしようとして、1秒間に数コマ以上の画面のリフレッシュを実現すると、その分高速の処理が要求されることから、撮影画像を高画質に記録するのが難しくなり、また、撮影画像を高画質で記憶部に記録することを実現しようとすると、処理の手順が増えることから、表示画面でのビデオスルー表示の動きをスムーズにできなくなるという問題点があった。
【0006】
本発明は、上記事情に鑑みてなされたもので、スムーズなビデオスルー表示と高画質の画像記録を同時に満足できる電子撮像装置を提供することを目的とする。
【0007】
【発明が解決するための手段】
請求項1記載の発明は、撮像素子と表示手段と圧縮手段と記憶手段と記録キーとを有し、上記撮像素子から出力された撮像信号に対して、上記表示手段へのビデオスルー表示のための高速モードの画像処理及び上記記憶手段への記録のための高精細モードの画像処理を択一的に実行して画像信号を生成する画像信号生成手段と、この画像信号生成手段により生成された画像信号を上記表示手段、圧縮手段及び記憶手段へ転送する画像信号転送手段と、上記記録キーが押下されたか否かを判断する判断手段とを具備し、上記画像信号生成手段は、上記判断手段により記録キーが押下されたと判断されるまで上記撮像信号に対して上記表示手段へのビデオスルー表示のための高速モードの画像処理を実行して表示画像信号を生成し、上記判断手段により上記記録キーが押下されたと判断された時点で上記記憶手段への記録のための高精細モードの画像処理に切り換えて記録画像信号を生成する画像処理切換手段を含み、上記画像信号転送手段は、上記判断手段により記録キーが押下されたと判断されるまで上記画像信号生成手段により生成された表示画像信号を上記表示手段へ転送するとともに、上記判断手段により上記記録キーが押下されたと判断された時点で上記画像信号生成手段により生成された記録画像信号を上記圧縮手段へ転送して圧縮した後に圧縮画像信号を上記記憶手段へ転送し、上記高速モードの画像処理は、少なくとも上記撮像信号に対する画素間引処理を含むように構成されている。
【0008】
また、請求項2記載の発明は、請求項1記載の発明において、上記画像信号生成手段により生成され上記圧縮手段により圧縮され上記記憶手段に記録された圧縮画像信号を読み出して伸長する伸張手段と、この伸長手段により伸長された記録画像信号を上記表示手段に表示する表示制御手段とを備えるようにしている。
【0009】
また、請求項3記載の発明は、請求項1又は2記載の発明において、上記高精細モードの画像処理は、上記撮像信号に対するモアレバランス処理、ローパスフィルタ処理、又はエッジ強調処理を含むようにしている。
また、請求項4記載の発明は、請求項1乃至3のいずれかに記載の発明において、上記撮像素子から出力された撮像信号を一時記憶する一時記憶手段を具備し、上記画像信号生成手段は、上記一時記憶手段に一時記憶された撮像信号に対して画像処理を実行して画像信号を生成するようにしている。
【0011】
【発明の実施の形態】
以下、本発明に係る電子撮像装置の実施の形態を図面に従い説明する。
先ず、図1は本発明を適用した電子撮像装置の一例としてのLCD付デジタルスチルカメラを示すもので、図2と図3はその背面図と正面図を、図4(a)および(b)は平面図と底面図を、図5(a)および(b)は一方の側面図と他方の側面図をそれぞれ示している。
【0012】
図示のように、電子カメラ装置であるLCD付デジタルスチルカメラ1は、本体部2とカメラ部3とに分割された2つのブロックから構成したものである。
即ち、本体部2のケース4内には、LCD6が設けられており、このLCD6は、ケース4の後面側に向けられている。
【0013】
また、カメラ部3のケース5内の上部には、撮影レンズ7が設けられており、この撮影レンズ7は、ケース5の前面側に向けられている。
そして、本体部2は、ケース4の上面に、電源スイッチ8、シャッターボタン9、デリートキー10、プラスキー11、マイナスキー12、モードキー13、ディスプレーキー14、ズームキー15、セルフタイマーキー16を備えるとともに、開閉蓋17内に、図示しない外部電源端子、ビデオ出力端子、デジタル入出力端子を備えている。
【0014】
さらに、ケース4の前面に、ファンクション切替キー18を備え、また、ケース4の下面には、三脚用穴19を備えている。
以上の本体部2のケース4は、撮影者による右手操作側が手で握りやすいよう膨出形状としたグリップ形状部によるグリップ部20となっていて、このグリップ部20に対応する下面に開閉式の電池蓋21が設けられている。また、このグリップ部20の上面に前記シャッターボタン9が位置している。
【0015】
また、カメラ部3は、ケース5の側面に、ピント切替スイッチ22を備えている。
そして、このカメラ部3は、本体部2に対して撮影者による左手操作側の側面に配置されて、図6および図7に示すように、本体部2に対して前方に90°、後方に180°回動可能に組み付けられている。
【0016】
即ち、図8に示すように、本体部2のケース4の左側面に穴23が開けられて、カメラ部3のケース5の右側面にも穴24が開けられており、これらの穴23,24において、図示しない軸部材を通して本体部2とカメラ部3とが、互いに軸部材の廻りに回動可能に組み付けられている。
【0017】
また、図8に示すように、本体部2のケース4のグリップ部20の内部は、電池収納部である電池室25となっており、即ち、この電池室25内には、4本の電池26,26,26,26が収納されている。
【0018】
これら4本の電池26,26,26,26の上方に、図9に示すように、それぞれの電池接片27,27,27,27が配設されており、これらの電池接片27,27,27,27は、電源スイッチおよびボタンスイッチ用回路基板である各種スイッチ用回路基板28の電池室25内まで張り出した突出部29の下面に、直にハンダ付けにより取り付けられている。
【0019】
この各種スイッチ用回路基板28には、前記電源スイッチ8、シャッターボタン9、デリートキー10、プラスキー11、マイナスキー12、モードキー13、ディスプレーキー14、ズームキー15、セルフタイマーキー16が実装されるとともに、プリントパターンによる配線が施されている。
【0020】
そして、図8に示すように、LCD6は、LCDパネル6pをシールドケース30に収容して、このシールドケース30の裏側に隣接するようにして、ケース4内にバックライト31を配置してなる。
【0021】
さらに、このバックライト31の裏側に隣接するようにして、ケース4内にLCD周辺回路基板32が配設されていて、このLCD周辺回路基板32には、LCDパネル6pから延びたフレキシブルプリント基板33が接続されるとともに、バックライト31も接続される。
【0022】
また、ケース4内には、図8に示すように、LCD6と反対側にメイン回路基板34が配設されていて、このメイン回路基板34には、CPU35と、LSI等の他の各種電子部品36,37,38,39が集中して実装されている。
【0023】
そして、カメラ部3のケース5内には、前記撮影レンズ7の他に、図8および図9に示すように、CCD40と、このCCD40を実装したCCD周辺回路基板41が収納されている。
【0024】
このCCD周辺回路基板41からは図示しないフレキシブルプリント基板が延びており、そのフレキシブルプリント基板は、カメラ部3の回動中心となる前記軸部材内を通り本体部2のケース4内において、前記メイン回路基板34に接続されている。
【0025】
図10は、このように構成したLCD付デジタルスチルカメラの回路構成を示すもので、映像信号を電気信号に変換するCCD40、アナログ信号をデジタル信号に変換するA/D変換器52、CCD40を駆動する駆動回路54を制御するタイミング信号を発生するタイミングジェネレータ53、デジタル画像信号を符号化/復号化により圧縮/伸長処理する圧縮/伸長回路55、取り込んだデジタル画像信号を一時記録するDRAM56、圧縮された画像信号を格納するフラッシュメモリ57、ROM58に記録されたプログラムに基づいて動作するとともに、RAM59をワークRAMとして使用しキー入力部60からの入力に基づいて動作するCPU61、デジタル画像信号に同期信号を付加してデジタルビデオ信号を生成するシグナル・ジェネレータ62、デジタルビデオ信号を記録するVRAM63、シグナル・ジェネレータ62から出力されたデジタルビデオ信号をアナログ信号に変換するD/A変換器64、アンプ65を介して入力されたアナログビデオ信号に基づいて液晶を駆動して映像を表示するLCD6、CPU61でシリアル信号に変換された画像信号などを入出力するインターフェース67からなっている。
【0026】
次に、以上のように構成した実施の形態の動作を説明する。
いま、所定周期でタイミングジェネレータ53からタイミング信号を出力して駆動回路54を制御し、CCD40より結像した被写体像の対応する撮像信号を取り込み、A/D変換器52でアナログ信号をデジタル信号に変換してデジタル画像信号としてDRAM56に一時記憶する。この場合、DRAM56に記憶されたCCD40からの撮像信号は、CCD40のカラーフィルタを通ってきたもので、例えばYe、Cy、Grといった色成分を持っている。
【0027】
そして、CPU61によりDRAM56に記憶された撮像信号に基づいて、図11に示すフローチャートを実行し、高速モードの画像処理によるモニターのビデオスルー表示用の画像信号および高画質モードの画像処理による画像記録のための画像信号を生成する。
【0028】
まず、ステップ201で、情報量を落とした輝度信号生成処理を実行する。この場合、輝度信号の生成は、DRAM56より読み出された信号のYe、Cy、Gr成分の内、例えばYe成分のみを用いて生成するものとし、図12に示すように、ステップ301で、DRAM56に記憶されている撮像信号の一部を選択し、ステップ302に進んで、該当信号と該当信号両側からの合計3画素のYe成分データに対してLPFからなるプリフィルタをかけ、ステップ303で、γ補正(輝度とLDCの特性がリニアでないため、予め輝度とLCDの特性と逆の補正を行っておき、LCDに表示するときにリニアになるようにする。)をかけて輝度信号を生成する。
【0029】
そして、図11に戻って、ステップ202に進み、情報量を落とした輝度信号に対応した色信号生成処理を実行する。この場合、色信号の生成は、図6に示すように、ステップ402で、DRAM56から読み出されたYe、Cy、G成分の信号について、該当信号とこの該当信号両側からの連続した合計5画素のデータを生成してプリフィルタをかける。そして、ここでプリフィルタをかけたYe、Cy、Gr成分の信号について、ステップ403で、ホワイトバランス(色フィルタのバラツキによる色信号のバラツキを補正するものであり、白色が白色になるように補正する。)をかけ、ステップ404で色演算を行いR−Y、B−Yという色信号を生成する。
【0030】
次に、図11に戻って、ステップ203に進み、ステップ201、202で生成した輝度信号と色信号がシグナル・ジェネレータに転送され、ビデオ信号に変換され、LCD6にモニターのビデオスルー表示が行われる。
【0031】
次に、図11において、ステップ204に進み、キー入力部60の記録キー(シャッタボタン)が押下されたか判断する。ここで、記録キーが押下されていない場合は、ステップ201に戻って、上述した動作が繰り返される。
【0032】
これにより、LCD6のビデオスルー表示が継続されるが、この時のビデオスルー表示は、DRAM56より読み出された画像信号を合成して処理すべき画素数を少なくするとともに、処理手順も少なくしているので、高速なビデオスルー表示が可能になり、これにより、モニター画面の動きをスムーズにするため、例えば1秒間に数コマ以上のモニタ画面をリフレッシュすることが実現できるようになる。
【0033】
次に、図11に示すステップ204で、キー入力部60の記録キーが押下されたと判断した場合は、ステップ205に進み、高画質の輝度信号生成処理を実行する。この場合、輝度信号の生成は、DRAM56から読み出された信号について、まず、図14に示すように、ステップ501で、該当信号と該当信号両側からの合計7画素の連続したデータを生成してプリフィルタをかけ、ステップ502で、γ補正をかけ、ステップ503でモアレバランスをとる。このモアレバランスによって色フィルタのバラツキによる輝度信号のバラツキが補正される。
【0034】
そして、ステップ504で、LPFをかけることにより高域成分のノイズを低減したのち、ステップ505で、エンハンサ処理を施し輝度信号を生成する。この場合のエンハンサ処理は、LPFをかけることで高域成分が鈍り解像度が低下するため、エッジ部を強調して解像度を上げるためである。
【0035】
そして、図11に戻って、ステップ206に進み、高画質の輝度信号に対応する色信号生成処理を実行する。この場合、色信号の生成は、図15に示すように、ステップ601で、DRAM56より読み出されたYe、Cy、Gr成分の信号について、該当信号とこの該当信号両側からの連続した合計11画素のデータに対してプリフィルタをかける。そして、ここでプリフィルタをかけたYe、Cy、G成分の信号について、ステップ602で、ホワイトバランスをかけ、ステップ603で色演算を行いR−Y、B−Yという色信号を生成する。
【0036】
次に、図11に戻って、ステップ207に進み、ステップ205、206で生成した輝度信号と色信号が圧縮/伸長回路55に転送され、この圧縮/伸長回路55で輝度信号と色信号を符号化することにより圧縮し、この圧縮画像信号(輝度信号および色信号)をフラッシュメモリ57に転送して記録する。
【0037】
そして、再び、ステップ201に戻って、上述した動作が繰り返される。
これにより、フラッシュメモリ57での画像記録は、画素のまびきを行うことなく、微細な信号処理を施しているので、高画質の画像を記録できることになる。 一方、画像信号の再生時は、キー入力部60で再生キーを操作すると、フラッシュメモリ57より所定の圧縮画像信号(圧縮輝度信号と色信号)を読み出し、圧縮/伸長回路55に転送する。そして、これら輝度信号と色信号を伸長し、シグナル・ジェネレータ62で同期信号を付加してデジタルビデオ信号を生成し、D/A変換器64、アンプ65を介してLCD6に表示することになる。
【0038】
従って、このようにすれば、LCD6を有する本体部2とカメラ部3を有するLCD付デジタルスチルカメラ1において、カメラ部3より取り込んだ画像信号をDRAM56に記憶し、このDRAM56に記憶された撮像信号に基づいて、CPU61により高速モードの画像処理によるLCD6へのビデオスルー表示用の画像信号と高精細モードの画像処理による画像記録のための画像信号をそれぞれ生成するようにしたので、高速モードによるLCD6へのビデオスルー表示と高精細モードによるフラッシュメモリ57への画像記録を簡単な指示により選択的に得られ、さらに、フラッシュメモリ57に高精細モードで記録された画像を読み出しLCD6に表示可能にすることで、高精細の画像をLCD6に再生表示でき、この再生画像を楽しむことも可能になる。
【0039】
また、高速モードによる画像信号の生成は、少なくとも画素まびきを行う輝度信号生成プロセスと色信号生成プロセスにより構成されるので、処理すべき画素数を少なくして処理手順も少なくした画像処理が実現できる。
【0040】
図16は、このようなソフトウェアによるカラープロセス処理をさらに具体的に説明するための図である。
図において、71はCCDで、このCCD71は、例えば、1/5 インチ27万画素フレームトランスファ型CCDからなっていて、フィルタとしてYe(イエロー)Cy(シアン)G(グリーン)のストライプフィルタを用いている。
【0041】
ここで、フレームトランスファ型CCDを採用するのは、かかるCCDは、露光部と蓄積部が分かれているため、データを読み出す際に外光の影響を受けにくいからである。
【0042】
CCD71には、コアIC72を接続している。このコアIC72は、アナログ処理部721、アンプ722、A/D コンバータ723、CCD駆動信号発生器724を有するもので、CCD71からの信号を、アナログ処理部721でCDS(相関2重サンプリング)した後、アンプ722を介してA/D コンバータ723にて8bit でA/D 変換し、デジタル出力するものである。
【0043】
そして、このコアIC72には、データバス73を接続し、このデータバス73にCPU74およびDRAM75を接続している。CPU74は、MPU741の他にDMAC742、DRAMコントローラ743、バスコントローラ744を有し、コアIC72からのデジタルデータの転送は、DMAコントローラ743によりDRAM75に書き込むようにしている。
【0044】
ここで、CCD71は、3クロックで1データ出力するので、DRAM75に書き込む際には、DMAC742を3ステートに設定している。また、CCD71は1ライン分のデータを連続して読み出さないとS/N 比が劣化する。1ライン分を読み出すのは約120μs かかるので、DRAM75のリフレッシュをCASビフォアRASリフレッシュに設定する場合、この時間が問題となるが、読み出す前に何回かまとめてリフレッシュを行うことで解決した。
【0045】
このようにして、CCD71で露光したデータをDRAM75上にYe,Cy,Gの順に展開するようにしている。
しかして、このような構成において、ソフトウェアによりカラープロセスを行うようになるが、この場合、記録画像信号作成用のカラープロセスの他に、ビデオスルー表示用の高速なカラープロセスの2種類のカラープロセスを採用している。
【0046】
まず、ビデオスルー表示用のカラープロセスモードでは、画像の出力先として、それほど解像力を必要としないLCDを採用し、演算に用いる画素数を極力減らすことでDRAM75にアクセスする回数及び演算回数を少なくし、できるだけ速く画像データを生成するようにしている。
【0047】
図17は、ビデオスルー表示用のYプロセス(輝度信号生成プロセス)のフローチャートを示している。この場合、ステップ1601で、CCD71の出力データYe、Cy、Grのうち、もっとも感度の良いYeのみを輝度原信号とし、ステップ1602で、ガンマ処理をかけたものをそのまま輝度信号とするようにしている。
【0048】
つまり、ここでは、CCD71の水平有効画素数を480とすると、このうち160画素に処理を行い、また、垂直方向に関しては、CCDデータの有効ライン数240ラインのうち112ラインにのみ処理を行う。すなわちこの処理によるデータ数は160×112となる。このYプロセスでは、高速化を念頭に置いているのでローパスフィルタやエッジ強調といった特殊処理は行わない。
【0049】
図18は、ビデオスルー表示用のCプロセス(色信号生成プロセス)のフローチャートを示している。まず、ステップ1701で、ローパスフィルタによる処理を行う。この場合、CCD71の出力データのうち、あるYeとその前後2画素(Cy(-1),Gr(-1),Ye (0),Cy(1),Gr(1))の合計5画素に対して1、2、3、2、1の係数を割り当てて、次のような色信号計算用のデータYec、Cyc、Grcを作る。
【0050】
Yec=(3×Ye(0))/3
Cyc=(Cy(−1)+2×Cy(1))/3
Grc=(2×Gr(−1)+Gr(1))/3
このローパスフィルタは処理時間を抑えつつクロマノイズ及びエッジノイズを抑える必要最低限のものであると考える。次に、ステップ1702で、クロマ演算を実行する。ここでのクロマデータR−Y・B−Yは、Yec、Cyc、Grcに対し、次の演算を施して生成する。
【0051】
R−Y=KY1×Yec+KC1×Cyc+KG1×Grc・・・(1)
B−Y=KY2×Yec+KC2×Cyc+KG2×Grc・・・(2)
なお、係数KY1,KC1,KG1,KY2,KC2,KG2,については、AWB(オートホワイトバランス)のところで述べる。
【0052】
そして、このデータに対しステップ1703で、高輝度Gr除去及びエッジ偽色除去の処理を行い最終的な色差信号を得るようになる。この処理は水平80画素、垂直56画素のYe及びその前後2画素に対して行う。つまりビデオスルーモード(ビューファインダーモード)におけるクロマのデータ数は80×56である。
【0053】
次に、記録画像信号作成用のカラープロセスモードでは、PC(パーソナル・コンピュータ)転送用及びビデオ出力用の高精細画像データを生成する。
図19は、記録画像信号作成用Yプロセス(輝度信号生成プロセス)のフローチャートを示している。この場合、輝度信号を生成する際に問題となるのは、CCDのカラーフィルタYe、Cy、Grの感度差である。CCDのデータをそのままでプロセスすると、画像が暗く見えたり被写体が縞に見えたりする。この現象を抑えるため本システムでは以下の様な方法を用いている。
【0054】
先ず、ステップ1801で、輝度信号の計算に用いるCCDのデータYe、Cy、Grのうち、Cy・Grをそれぞれ1.2 倍、1.5 倍してCy´・Gr´を作り(モアレバランス)、次に、ステップ1802で、そのデータに水平7タップのローパスフィルタ(係数−1、0、4、6、4、0、−1)をかけて、画素間の感度差を吸収する。
【0055】
そして、最終的な輝度信号は、ステップ1803、ステップ1804で、上述の処理によりできたデータにガンマ処理・エッジ強調処理を施して生成する。以上の処理は、CCD有効画素480×240全てに対し行うので輝度信号のデータ数は480×240となる。
【0056】
図20は、記録画像信号作成用Cプロセス(色信号生成プロセス)のフローチャートを示している。まず、ステップ1901で、ローパスフィルタによる処理を行う。この場合、CCDの出力データのうち、あるYeとその前後5画素(Cy(-2),Gr(-2),Ye(-1),Cy(-1),Gr(-1),Ye(0),Cy(1),Gr(1),Ye(2),Cy(2),Gr(2)) の合計11画素に対して1、2、3、4、5、6、5、4、3、2、1の係数を割り当てて、ビデオスルーモードと同じように色信号計算用のデータYec、Cyc、Grcを作る。
【0057】
Yec=(3×Ye(-1)+6×Ye(0)+3×Ye(1))/12
Cyc=(Cy(-2)+4×Cy(-1)+5×Cy(1)+2×Cy(1))/12
Grc=(2×Gr(-2)+5×Gr(-1)+4×Gr(1)+Gr(2))/12
このデータに、ステップ1902で、式(1)(2)と同様の計算を施した後、ステップ1903で、高輝度Gr除去・エッジ偽色除去の処理を行い色差信号を得る。
【0058】
この処理は水平160画素、垂直120画素のYe及びその前後5画素に対して行う。つまり最終的なクロマのデータ数は160×120となる。
ところで、上述のCプロセス(色信号生成プロセス)で触れたAWB(オートホワイトバランス)について説明すると、ホワイトバランスがとれている状態は、色の3原色R,G,Bの間に次の関係が成り立っている。
【0059】
R=G=B・・・・・・・(3)
本装置で扱われる画素データはYe、Cy、Grの3色であり、R,G,Bはそれぞれ
R=rky×Ye+rkc×Cy+rkg×Gr・・・(4)
B=bky×Ye+bkc×Cy+bkg×Gr・・・(5)
G=gky×Ye+gkc×Cy+gkg×Gr・・・(6)
と表すことができる。
【0060】
ここでrky・・gkgはそれぞれ独立した係数、Ye、Cy、Grは時間毎に変化する互いに独立した変数であるとすると、(3)が成り立つようにするにはR、G、Bそれぞれに係数をかける必要がある。そのR、G、Bに対する係数をそれぞれRAMP、GAMP、BAMPとし、その係数によりホワイトバランスが取れている状態のR,G,BをRw、Gw、Bwとすると、(4)(5)(6)式は次のように表すことができる。
【0061】
Rw=(rky×Ye+rkc×Cy+rkg×Gr)×RAMP・・(7)
Bw=(bky×Ye+bkc×Cy+bkg×Gr)×BAMP・・(8)
Gw=(gky×Ye+gkc×Cy+gkg×Gr)×GAMP・・(9)
そして、この状態における色差信号R−Y、B−Yを(R−Y)(w)、(B−Y)(w)とすると、
(R−Y)(w)=Ir×(Rw−Gw)+Jb×(Bw−Gw)・・(10)
(B−Y)(w)=Ib×(Bw−Gw)+Jr×(Rw−Gw)・・(11)
となり、条件より
(R−Y)(w)=0、(B−Y)(w)=0
すなわち、
Ir×(Rw−Gw)+Jb×(Bw−Gw)=0・・・(12)
Ib×(Rw−Gw)+Jr×(Rw−Gw)=0・・・(13)
となる。ここで、(R−Y)(w)、(B−Y)(w)をYe、Cy、Grの関数とすると、
(R−Y)(w)=KY1×Ye+KC1×Cy+KG1×Gr・・(14)
(B−Y)(w)=KY2×Ye+KC2×Cy+KG2×Gr・・(15)
と表すと、(7)(8)(9)(12)(13)(14)(15)式より、
KY1=Ir×rky×RAMP+Jb×bky×BAMP−(Ir+Jb)×gky×GAMP
KC1=Ir×rkc×RAMP+Jb×bkc×BAMP−(Ir+Jb)×gkc×GAMP
KG1=Ir×rkg×RAMP+Jb×bkg×BAMP−(Ir+Jb)×gkg×GAMP
KY2=Ib×bky×BAMP+Jr×rky×RAMP−(Ib+Jr)×gky×GAMP
KC2=Ib×bkc×BAMP+Jr×rkc×BAMP−(Ib+Jr)×gkc×GAMP
KG2=Ib×bkg×BAMP+Jr×rkg×BAMP−(Ib+Jr)×gkg×GAMP
となって、
GAMP=”定数”
RAMP=Gw×GAMP/Rw
BAMP=Gw×GAMP/Bw
となる。
【0062】
これにより、Cプロセスで色差信号を計算するときは、式(1)(2)の計算だけで済むので演算回数を減らすことができ計算時間の短縮が図れる。
ところで、このようなAWBを実現しようとするとき、上記のようなホワイトバランスの計算を時間軸方向の相関無しに行うと、極端に言えばファインダーモード1画面毎に同一被写体の色が変わってしまうというような現象が起こる。ホワイトバランスの計算には画面全体のYe、Cy、Grの積分値INTEG-Ye,INTEG-Cy,INTEG-Grを使うものとすると、例えば白い背景の中に赤い物体がある被写体(A)と白い背景の中に青い物体がある被写体(B)があり、カメラを(A)から(B)に急に振ったとき、画面全体の情報が変化するために実際は同じ色であるはずの背景の白が青→赤のように変化してしまう。そこで、このような現象を防ぐために、本システムではn画面目のWBの計算にINTEG-Ye,INTEG-Cy,INTEG-Grを使わずに
INTEG-Yen=(Σ INTEG-Ye(k))/16
INTEG-Cyn=(Σ INTEG-Cy(k))/16
INTEG-Grn=(Σ INTEG-Gr(k))/16
を用いるようにしている。
【0063】
すなわち、WBの演算に前15画面分のYe、Cy、Grのデータも用いることで見た目の色が大きく変わることを防いでいる。
従って、このようにしても、ビデオスルー表示のためのカラープロセスと記録画像信号作成のためのカラープロセスの2種類のカラープロセスを採用することで、これらの処理を時間的に制約の大きいソフトウェアによって実現することが可能になって、装置の大幅な小型化と低価格化を実現でき、また、これらのカラープロセスの実行により高速なビデオスルー表示とともに、高画質の画像の記録再生を実現することもできる。
【0064】
【発明の効果】
以上述べたように、本発明によれば、高速モードによるビデオスルー表示と高精細モードによる画像記録を簡単な指示により選択的に得られ、さらに、ビデオスルー表示時における処理すべき画素数を少なくして処理手順も少なくした画像処理が実現できる。
【0065】
また、記憶手段に高精細モードで記録された画像を読み出し表示手段に表示することもできるので、高精細で表示手段に再生された画像を楽しむことも可能になる。
【図面の簡単な説明】
【図1】本発明を適用した電子撮像装置の一例としてのLCD付デジタルスチルカメラを示す斜視図。
【図2】図1のLCD付デジタルスチルカメラのLCD側から見た背面図。
【図3】図1のLCD付デジタルスチルカメラのLCDと反対側から見た正面図。
【図4】図1のLCD付デジタルスチルカメラの上面と下面を示すもので、(a)は平面図、(b)は底面図。
【図5】図1のLCD付デジタルスチルカメラの両側面を示すもので、(a)は一方の側面図、(b)は他方の側面図。
【図6】図1のLCD付デジタルスチルカメラにおいて、カメラ部を前方に90°回動した状態で本体部をLCD側から見た背面図。
【図7】図1のLCD付デジタルスチルカメラにおいて、カメラ部を前方に90°回動した状態で本体部を上面側から見た平面図。
【図8】図1のLCD付デジタルスチルカメラの内部の配置構成例を示す横断平面図。
【図9】図1のLCD付デジタルスチルカメラの内部の配置構成例を示すLCD側から見た背面透視図。
【図10】図1のLCD付デジタルスチルカメラの回路構成を示す図。
【図11】図1のLCD付デジタルスチルカメラの動作を説明するためのフローチャート。
【図12】図1のLCD付デジタルスチルカメラの動作を説明するためのフローチャート。
【図13】図1のLCD付デジタルスチルカメラの動作を説明するためのフローチャート。
【図14】図1のLCD付デジタルスチルカメラの動作を説明するためのフローチャート。
【図15】図1のLCD付デジタルスチルカメラの動作を説明するためのフローチャート。
【図16】図1のLCD付デジタルスチルカメラのさらに具体的な回路構成を示す図。
【図17】図1のLCD付デジタルスチルカメラのさらに具体的なものの動作を説明するためのフローチャート。
【図18】図1のLCD付デジタルスチルカメラのさらに具体的なものの動作を説明するためのフローチャート。
【図19】図1のLCD付デジタルスチルカメラのさらに具体的なものの動作を説明するためのフローチャート。
【図20】図1のLCD付デジタルスチルカメラのさらに具体的なものの動作を説明するためのフローチャート。
【符号の説明】
1…電子カメラ装置
2…本体部
3…カメラ部
4,5…ケース
6…LCD
6p…LCDパネル
7…撮影レンズ
8…電源スイッチ
9…シャッターボタン
20…グリップ部
21…電池蓋
25…電池収納部(電池室)
26…電池
27…電池接片
28…各種スイッチ用回路基板
29…突出部
30…シールドケース
31…バックライト
32…LCD周辺回路基板
33…フレキシブルプリント基板
34…メイン回路基板
35…CPU
36,37,38,39…電子部品
40…CCD
41…CCD周辺回路基板
52…A/D変換器
53…タイミングジェネレータ
54…駆動回路
55…圧縮/伸長回路
56…DRAM
57…フラッシュメモリ
58…ROM
59…RAM
60…キー入力部
61…CPU
62…シグナルジェネレータ
63…VRAM
64…D/A変換器
65…アンプ
67…I/Oポート
71…CCD
72…コアIC
73…データバス
74…CPU
75…DRAM
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an electronic imaging apparatus including a camera unit having a photographing lens and a main body unit having a display device such as a finder and a liquid crystal serving as a monitor.
[0002]
[Prior art]
As one of the electronic imaging devices, a photographing lens and a CCD (Charge Coupled Device) are provided. Further, a liquid crystal display device (Liquid Crystal Display, hereinafter referred to as a viewfinder at the time of image recording and a monitor at the time of image reproduction) There is known a digital still camera with an LCD provided with an LCD monitor).
[0003]
In such a digital still camera with an LCD, a CCD color process for converting a signal from the CCD into a video signal is executed, and a video memory is displayed on the LCD monitor as a view finder, along with a flash memory. It is possible to record an image in a storage unit using the above. Here, the viewfinder monitoring of the image captured by the CCD with the LCD monitor is called “video through display”.
[0004]
By the way, when video through display is performed on an LCD monitor, it is desirable to refresh a screen of several frames or more per second, for example, in order to show the motion of the video through display on the display screen smoothly. In a storage unit such as a flash memory that performs recording, it is also desired to record a captured image with high image quality.
[0005]
[Problems to be solved by the invention]
However, if such a request is to be realized by hardware, the circuit configuration becomes extremely complicated and expensive in terms of cost.
Therefore, attempts have been made to implement these color process processing by software. However, such software processing has a greater time limit than hardware, and the normal color process requires time. It takes. For this reason, for example, if a screen refresh of several frames or more per second is realized in an attempt to smooth the movement of the video through display on the display screen, the high-speed processing is required, so that the captured image is increased. It is difficult to record the picture quality, also shooting when you try to realize recording in the storage unit the shadow image with high image quality, since the procedure of the process is increased, smooth video through display motion on the display screen There was a problem that it was impossible.
[0006]
The present invention has been made in view of the above circumstances, and an object thereof is to provide an electronic imaging device that can smooth video through display and high quality image recording simultaneously satisfied.
[0007]
[Means for Solving the Invention]
The invention described in claim 1 includes an image pickup device , a display means, a compression means, a storage means, and a recording key, and for video-through display on the display means for an image pickup signal output from the image pickup element. Image signal generating means for generating image signals by selectively executing high-speed mode image processing and high-definition mode image processing for recording in the storage means, and the image signal generating means Image signal transfer means for transferring an image signal to the display means , compression means and storage means; and judgment means for judging whether or not the recording key is pressed, wherein the image signal generation means comprises the judgment means Until the recording key is determined to have been pressed, the high-speed mode image processing for video-through display on the display means is performed on the imaging signal to generate a display image signal, and the determination means Image processing switching means for generating a recorded image signal by switching to high-definition mode image processing for recording in the storage means when it is determined that the recording key is further pressed; The display image signal generated by the image signal generation unit is transferred to the display unit until the determination unit determines that the recording key is pressed, and the determination unit determines that the recording key is pressed. The recording image signal generated by the image signal generation unit at the time is transferred to the compression unit and compressed, and then the compressed image signal is transferred to the storage unit. The image processing in the high-speed mode includes at least pixels for the imaging signal. It is configured to include a thinning process.
[0008]
According to a second aspect of the present invention, in the first aspect of the present invention, the expansion means for reading and expanding the compressed image signal generated by the image signal generation means, compressed by the compression means, and recorded in the storage means. And a display control means for displaying the recorded image signal expanded by the expansion means on the display means .
[0009]
According to a third aspect of the present invention, in the first or second aspect of the invention, the high-definition mode image processing includes moire balance processing, low-pass filter processing, or edge enhancement processing for the imaging signal.
According to a fourth aspect of the present invention, in the invention according to any one of the first to third aspects, the image signal generating unit includes a temporary storage unit that temporarily stores an imaging signal output from the imaging element. The image signal is generated by executing image processing on the image pickup signal temporarily stored in the temporary storage means .
[0011]
DETAILED DESCRIPTION OF THE INVENTION
Embodiments of an electronic imaging apparatus according to the present invention will be described below with reference to the drawings.
First, FIG. 1 shows a digital still camera with an LCD as an example of an electronic imaging apparatus to which the present invention is applied. FIGS. 2 and 3 are a rear view and a front view thereof, and FIGS. 4 (a) and 4 (b). Are a plan view and a bottom view, and FIGS. 5 (a) and 5 (b) show one side view and the other side view, respectively.
[0012]
As shown in the figure, the digital still camera with LCD 1 which is an electronic camera device is composed of two blocks divided into a main body 2 and a camera 3.
That is, an LCD 6 is provided in the case 4 of the main body 2, and the LCD 6 is directed to the rear side of the case 4.
[0013]
In addition, a photographic lens 7 is provided at an upper portion in the case 5 of the camera unit 3, and the photographic lens 7 is directed to the front side of the case 5.
The main body 2 includes a power switch 8, a shutter button 9, a delete key 10, a plus key 11, a minus key 12, a mode key 13, a display key 14, a zoom key 15, and a self-timer key 16 on the upper surface of the case 4. In addition, the open / close lid 17 includes an external power supply terminal, a video output terminal, and a digital input / output terminal (not shown).
[0014]
Further, a function switching key 18 is provided on the front surface of the case 4, and a tripod hole 19 is provided on the lower surface of the case 4.
The case 4 of the main body 2 described above is a grip portion 20 having a bulge-shaped grip portion so that the right-hand operation side by the photographer can be easily gripped by the hand, and an open / close type lower surface corresponding to the grip portion 20. A battery lid 21 is provided. The shutter button 9 is located on the upper surface of the grip portion 20.
[0015]
The camera unit 3 includes a focus changeover switch 22 on the side surface of the case 5.
And this camera part 3 is arrange | positioned with respect to the main-body part 2 at the side by the side of the left hand operation by a photographer, and as shown in FIG. 6 and FIG. It is assembled so that it can rotate 180 °.
[0016]
That is, as shown in FIG. 8, a hole 23 is formed in the left side surface of the case 4 of the main body 2, and a hole 24 is also formed in the right side surface of the case 5 of the camera unit 3. In FIG. 24, the main body 2 and the camera 3 are assembled so as to be rotatable around the shaft member through a shaft member (not shown).
[0017]
Further, as shown in FIG. 8, the inside of the grip portion 20 of the case 4 of the main body portion 2 is a battery chamber 25 that is a battery housing portion, that is, four batteries are included in the battery chamber 25. 26, 26, 26, 26 are accommodated.
[0018]
Above these four batteries 26, 26, 26, 26, as shown in FIG. 9, respective battery contact pieces 27, 27, 27, 27 are arranged, and these battery contact pieces 27, 27 are arranged. 27, 27 are attached by soldering directly to the lower surface of the projecting portion 29 projecting into the battery chamber 25 of various switch circuit boards 28 which are circuit boards for power switches and button switches.
[0019]
On the various switch circuit boards 28, the power switch 8, shutter button 9, delete key 10, plus key 11, minus key 12, mode key 13, display key 14, zoom key 15, and self-timer key 16 are mounted. At the same time, wiring by a printed pattern is provided.
[0020]
As shown in FIG. 8, the LCD 6 includes an LCD panel 6 p accommodated in a shield case 30 and a backlight 31 disposed in the case 4 so as to be adjacent to the back side of the shield case 30.
[0021]
Further, an LCD peripheral circuit board 32 is disposed in the case 4 so as to be adjacent to the back side of the backlight 31. The LCD peripheral circuit board 32 has a flexible printed board 33 extending from the LCD panel 6p. And the backlight 31 are also connected.
[0022]
Further, as shown in FIG. 8, a main circuit board 34 is disposed in the case 4 on the side opposite to the LCD 6. The main circuit board 34 has a CPU 35 and other various electronic components such as LSI. 36, 37, 38, and 39 are concentratedly mounted.
[0023]
In the case 5 of the camera unit 3, in addition to the photographing lens 7, as shown in FIGS. 8 and 9, a CCD 40 and a CCD peripheral circuit board 41 on which the CCD 40 is mounted are housed.
[0024]
A flexible printed circuit board (not shown) extends from the CCD peripheral circuit board 41, and the flexible printed circuit board passes through the shaft member serving as the rotation center of the camera unit 3 in the case 4 of the main body unit 2. It is connected to the circuit board 34.
[0025]
FIG. 10 shows a circuit configuration of the digital still camera with an LCD configured as described above. The CCD 40 that converts a video signal into an electrical signal, the A / D converter 52 that converts an analog signal into a digital signal, and the CCD 40 are driven. A timing generator 53 for generating a timing signal for controlling the driving circuit 54, a compression / expansion circuit 55 for compressing / decompressing the digital image signal by encoding / decoding, a DRAM 56 for temporarily recording the captured digital image signal, The CPU 61 operates based on the program recorded in the flash memory 57 and the ROM 58 for storing the image signal, and the RAM 59 as a work RAM, and operates based on the input from the key input unit 60. To generate a digital video signal by adding Generator 62, VRAM 63 for recording digital video signal, D / A converter 64 for converting digital video signal output from signal generator 62 to analog signal, and analog video signal input through amplifier 65 The LCD 6 displays the image by driving the liquid crystal, and the interface 67 inputs and outputs the image signal converted into the serial signal by the CPU 61.
[0026]
Next, the operation of the embodiment configured as described above will be described.
Now, a timing signal is output from the timing generator 53 at a predetermined cycle to control the drive circuit 54, and an image pickup signal corresponding to the subject image formed by the CCD 40 is taken in. An analog signal is converted into a digital signal by the A / D converter 52. It is converted and temporarily stored in the DRAM 56 as a digital image signal. In this case, the imaging signal from the CCD 40 stored in the DRAM 56 passes through the color filter of the CCD 40 and has color components such as Ye, Cy, and Gr.
[0027]
Then, the CPU 61 executes the flowchart shown in FIG. 11 based on the image pickup signal stored in the DRAM 56, and the image signal for the video through display of the monitor by the image processing in the high speed mode and the image recording by the image processing in the high image quality mode are executed. The image signal for generating is generated.
[0028]
First, in step 201, luminance signal generation processing with a reduced amount of information is executed. In this case, the luminance signal is generated using, for example, only the Ye component of the Ye, Cy, and Gr components of the signal read from the DRAM 56. As shown in FIG. A part of the image pickup signal stored in the image signal is selected, the process proceeds to step 302, and the pre-filter consisting of LPF is applied to the corresponding signal and Ye component data of a total of three pixels from both sides of the corresponding signal. A luminance signal is generated by applying γ correction (because luminance and LDC characteristics are not linear, the luminance and LCD characteristics are corrected in advance so that they are linear when displayed on the LCD). .
[0029]
Returning to FIG. 11, the process proceeds to step 202, and a color signal generation process corresponding to the luminance signal with the reduced amount of information is executed. In this case, as shown in FIG. 6, the generation of the color signal is performed for the Ye, Cy, and G component signals read from the DRAM 56 in step 402, and a total of 5 pixels from both sides of the corresponding signal. Generate data for and prefilter. In step 403, the pre-filtered Ye, Cy, and Gr component signals are corrected in such a manner that white balance (color signal variation due to color filter variation is corrected and white is changed to white). In step 404, color calculation is performed to generate color signals RY and BY.
[0030]
Next, returning to FIG. 11, the process proceeds to step 203 where the luminance signal and the color signal generated in steps 201 and 202 are transferred to the signal generator, converted into a video signal, and the video through display of the monitor is performed on the LCD 6. .
[0031]
Next, in FIG. 11, the process proceeds to step 204, where it is determined whether the recording key (shutter button) of the key input unit 60 has been pressed. If the record key has not been pressed, the process returns to step 201 and the above-described operation is repeated.
[0032]
As a result, the video through display on the LCD 6 is continued. At this time, the video through display reduces the number of pixels to be processed by synthesizing the image signals read from the DRAM 56 and also reduces the processing procedure. Therefore, high-speed video through display is possible, and in order to smooth the movement of the monitor screen, it is possible to realize, for example, refreshing a monitor screen of several frames or more per second.
[0033]
Next, when it is determined in step 204 shown in FIG. 11 that the recording key of the key input unit 60 has been pressed, the process proceeds to step 205 to execute a high-quality luminance signal generation process. In this case, the luminance signal is generated by generating continuous data of a total of 7 pixels from the corresponding signal and both sides of the corresponding signal in step 501, as shown in FIG. 14, for the signal read from the DRAM 56. A pre-filter is applied, γ correction is applied in step 502, and moire balance is obtained in step 503. This moire balance corrects variations in luminance signals due to variations in color filters.
[0034]
Then, in step 504, after applying high-pass filter to reduce high-frequency component noise, in step 505, enhancer processing is performed to generate a luminance signal. The enhancer processing in this case is for enhancing the resolution by emphasizing the edge portion because the high frequency component becomes dull and the resolution is lowered by applying the LPF.
[0035]
Then, returning to FIG. 11, the process proceeds to step 206 to execute a color signal generation process corresponding to a high-quality luminance signal. In this case, as shown in FIG. 15, the color signal is generated in step 601 with respect to the Ye, Cy, and Gr component signals read from the DRAM 56, and a total of 11 pixels from the corresponding signal and from both sides of the corresponding signal. Pre-filter the data. Then, the pre-filtered Ye, Cy, and G component signals are subjected to white balance in step 602, and color calculation is performed in step 603 to generate color signals RY and BY.
[0036]
Next, returning to FIG. 11, the process proceeds to step 207, where the luminance signal and the color signal generated in steps 205 and 206 are transferred to the compression / decompression circuit 55, and the compression / decompression circuit 55 encodes the luminance signal and the color signal. The compressed image signal (luminance signal and color signal) is transferred to the flash memory 57 and recorded.
[0037]
And it returns to step 201 again and the operation | movement mentioned above is repeated.
Thereby, since the image recording in the flash memory 57 is performed with fine signal processing without performing pixel blinking, a high-quality image can be recorded. On the other hand, when the image signal is reproduced, if a reproduction key is operated by the key input unit 60, a predetermined compressed image signal (compressed luminance signal and color signal) is read from the flash memory 57 and transferred to the compression / expansion circuit 55. Then, the luminance signal and the color signal are expanded, and a synchronization signal is added by the signal generator 62 to generate a digital video signal, which is displayed on the LCD 6 via the D / A converter 64 and the amplifier 65.
[0038]
Therefore, in this way, in the digital still camera 1 with LCD having the main body 2 having the LCD 6 and the camera unit 3, the image signal captured from the camera unit 3 is stored in the DRAM 56, and the imaging signal stored in the DRAM 56 is stored. Therefore, the CPU 61 generates an image signal for video through display on the LCD 6 by image processing in the high-speed mode and an image signal for image recording by image processing in the high-definition mode. Video through display and image recording to the flash memory 57 in the high-definition mode can be selectively obtained by simple instructions, and an image recorded in the flash memory 57 in the high-definition mode can be read and displayed on the LCD 6. Thus, a high-definition image can be reproduced and displayed on the LCD 6, and the reproduced image can be displayed. It also becomes possible to shim.
[0039]
In addition, since the generation of the image signal in the high-speed mode is configured by at least a luminance signal generation process and a color signal generation process for performing pixel blinking, it is possible to realize image processing with a reduced number of pixels to be processed and a processing procedure. .
[0040]
FIG. 16 is a diagram for more specifically explaining the color process processing by such software.
In the figure, reference numeral 71 denotes a CCD, which is composed of, for example, a 1/5 inch 270,000 pixel frame transfer type CCD, and uses a stripe filter of Ye (yellow) Cy (cyan) G (green) as a filter. Yes.
[0041]
Here, the reason why the frame transfer type CCD is used is that the CCD has an exposure part and a storage part, so that it is not easily affected by external light when reading data.
[0042]
A core IC 72 is connected to the CCD 71. The core IC 72 includes an analog processing unit 721, an amplifier 722, an A / D converter 723, and a CCD drive signal generator 724. After the signal from the CCD 71 is subjected to CDS (correlated double sampling) by the analog processing unit 721. The A / D converter 723 performs A / D conversion at 8 bits via the amplifier 722 and outputs the result digitally.
[0043]
A data bus 73 is connected to the core IC 72, and a CPU 74 and a DRAM 75 are connected to the data bus 73. The CPU 74 includes a DMAC 742, a DRAM controller 743, and a bus controller 744 in addition to the MPU 741, and digital data transfer from the core IC 72 is written to the DRAM 75 by the DMA controller 743.
[0044]
Here, since the CCD 71 outputs one data in three clocks, the DMAC 742 is set to three states when writing to the DRAM 75. Further, the CCD 71 deteriorates the S / N ratio unless data for one line is read continuously. Since it takes about 120 μs to read out one line, this time becomes a problem when the refresh of the DRAM 75 is set to the CAS before RAS refresh. However, this problem was solved by performing refresh several times before reading out.
[0045]
In this way, the data exposed by the CCD 71 is developed on the DRAM 75 in the order of Ye, Cy, G.
In such a configuration, a color process is performed by software. In this case, in addition to a color process for creating a recorded image signal, two kinds of color processes, a high-speed color process for video-through display, are performed. Is adopted.
[0046]
First, in the color process mode for video-through display, an LCD that does not require much resolving power is adopted as an image output destination, and the number of times of accessing the DRAM 75 and the number of operations are reduced by reducing the number of pixels used for the operation as much as possible. And try to generate image data as fast as possible.
[0047]
FIG. 17 shows a flowchart of the Y process (luminance signal generation process) for video through display. In this case, in step 1601, only the most sensitive Ye of the output data Ye, Cy, Gr of the CCD 71 is used as the luminance original signal, and in step 1602, the gamma-processed one is used as the luminance signal as it is. Yes.
[0048]
That is, here, assuming that the number of horizontal effective pixels of the CCD 71 is 480, processing is performed on 160 pixels out of these, and processing is performed only on 112 lines out of 240 effective CCD data lines in the vertical direction. That is, the number of data by this processing is 160 × 112. In this Y process, special processing such as low-pass filter and edge enhancement is not performed because high speed is taken into consideration.
[0049]
FIG. 18 shows a flowchart of the C process (color signal generation process) for video through display. First, in step 1701, processing using a low-pass filter is performed. In this case, of the output data of the CCD 71, a certain Ye and the two pixels before and after it (Cy (-1), Gr (-1), Ye (0), Cy (1), Gr (1)) total 5 pixels. On the other hand, coefficients 1, 2, 3, 2, 1 are assigned to generate color signal calculation data Yec, Cyc, Grc as follows.
[0050]
Yec = (3 × Ye (0)) / 3
Cyc = (Cy (−1) + 2 × Cy (1)) / 3
Grc = (2 × Gr (−1) + Gr (1)) / 3
This low-pass filter is considered to be the minimum necessary for suppressing chroma noise and edge noise while suppressing processing time. Next, in step 1702, chroma calculation is executed. The chroma data RY and BY here are generated by performing the following operation on Yec, Cyc, and Grc.
[0051]
RY = KY1 * Yec + KC1 * Cyc + KG1 * Grc (1)
BY = KY2 * Yec + KC2 * Cyc + KG2 * Grc (2)
The coefficients KY1, KC1, KG1, KY2, KC2, and KG2 will be described in the section of AWB (Auto White Balance).
[0052]
In step 1703, the data is subjected to high luminance Gr removal and edge false color removal processing to obtain a final color difference signal. This process is performed for Ye of 80 pixels horizontally and 56 pixels vertically and 2 pixels before and after that. That is, the number of chroma data in the video through mode (viewfinder mode) is 80 × 56.
[0053]
Next, in a color process mode for creating a recorded image signal, high-definition image data for PC (personal computer) transfer and video output is generated.
FIG. 19 shows a flowchart of a Y process (luminance signal generation process) for creating a recorded image signal. In this case, the problem in generating the luminance signal is the difference in sensitivity between the CCD color filters Ye, Cy, and Gr. If the CCD data is processed as it is, the image may appear dark or the subject may appear as a stripe. In order to suppress this phenomenon, this system uses the following method.
[0054]
First, in step 1801, among the CCD data Ye, Cy, and Gr used to calculate the luminance signal, Cy and Gr are respectively multiplied by 1.2 and 1.5 to create Cy ′ and Gr ′ (moire balance). In step 1802, the data is subjected to a horizontal 7-tap low-pass filter (coefficients -1, 0, 4, 6, 4, 0, -1) to absorb the sensitivity difference between pixels.
[0055]
In step 1803 and step 1804, the final luminance signal is generated by performing gamma processing and edge enhancement processing on the data obtained by the above processing. Since the above processing is performed for all the CCD effective pixels 480 × 240, the number of luminance signal data is 480 × 240.
[0056]
FIG. 20 shows a flowchart of a recording image signal creation C process (color signal generation process). First, in step 1901, processing using a low-pass filter is performed. In this case, a certain Ye of the output data of the CCD and the five pixels before and after it (Cy (-2), Gr (-2), Ye (-1), Cy (-1), Gr (-1), Ye ( 0), Cy (1), Gr (1), Ye (2), Cy (2), Gr (2)) for a total of 11 pixels 1, 2, 3, 4, 5, 6, 5, 4 The coefficients 3, 3, and 1 are assigned to generate color signal calculation data Yec, Cyc, and Grc in the same manner as in the video through mode.
[0057]
Yec = (3 * Ye (-1) + 6 * Ye (0) + 3 * Ye (1)) / 12
Cyc = (Cy (-2) + 4 * Cy (-1) + 5 * Cy (1) + 2 * Cy (1)) / 12
Grc = (2 × Gr (−2) + 5 × Gr (−1) + 4 × Gr (1) + Gr (2)) / 12
In step 1902, this data is subjected to the same calculation as in equations (1) and (2), and then in step 1903, high luminance Gr removal / edge false color removal processing is performed to obtain a color difference signal.
[0058]
This processing is performed for Ye of 160 pixels horizontally and 120 pixels vertically and 5 pixels before and after that. That is, the final number of chroma data is 160 × 120.
By the way, AWB (auto white balance) mentioned in the above-described C process (color signal generation process) will be described. When white balance is achieved, the following relations exist among the three primary colors R, G, and B: It is made up.
[0059]
R = G = B (3)
The pixel data handled by this apparatus are three colors of Ye, Cy, and Gr, and R, G, and B are R = rky × Ye + rkc × Cy + rkg × Gr (4), respectively.
B = bky × Ye + bkc × Cy + bkg × Gr (5)
G = gky × Ye + gkc × Cy + gkg × Gr (6)
It can be expressed as.
[0060]
Here, rky ·· gkg is an independent coefficient, and Ye, Cy, and Gr are independent variables that change with time. In order to satisfy (3), the coefficients are respectively R, G, and B. It is necessary to apply. When the coefficients for R, G, and B are RAMP, GAMP, and BAMP, respectively, and R, G, and B in a state where white balance is achieved by the coefficients are Rw, Gw, and Bw, (4) (5) (6 ) Can be expressed as:
[0061]
Rw = (rky × Ye + rkc × Cy + rkg × Gr) × RAMP (7)
Bw = (bky × Ye + bkc × Cy + bkg × Gr) × BAMP (8)
Gw = (gky × Ye + gkc × Cy + gkg × Gr) × GAMP (9)
If the color difference signals RY and BY in this state are (RY) (w) and (BY) (w),
(R−Y) (w) = Ir × (Rw−Gw) + Jb × (Bw−Gw) (10)
(B−Y) (w) = Ib × (Bw−Gw) + Jr × (Rw−Gw) (11)
From the conditions, (R−Y) (w) = 0, (B−Y) (w) = 0
That is,
Ir × (Rw−Gw) + Jb × (Bw−Gw) = 0 (12)
Ib × (Rw−Gw) + Jr × (Rw−Gw) = 0 (13)
It becomes. Here, if (R−Y) (w) and (B−Y) (w) are functions of Ye, Cy, and Gr,
(R−Y) (w) = KY1 × Ye + KC1 × Cy + KG1 × Gr (14)
(B−Y) (w) = KY2 × Ye + KC2 × Cy + KG2 × Gr (15)
From (7) (8) (9) (12) (13) (14) (15),
KY1 = Ir * rky * RAMP + Jb * bky * BAMP- (Ir + Jb) * gky * GAMP
KC1 = Ir * rkc * RAMP + Jb * bkc * BAMP- (Ir + Jb) * gkc * GAMP
KG1 = Ir × rkg × RAMP + Jb × bkg × BAMP− (Ir + Jb) × gkg × GAMP
KY2 = Ib * bky * BAMP + Jr * rky * RAMP- (Ib + Jr) * gky * GAMP
KC2 = Ib × bkc × BAMP + Jr × rkc × BAMP− (Ib + Jr) × gkc × GAMP
KG2 = Ib × bkg × BAMP + Jr × rkg × BAMP− (Ib + Jr) × gkg × GAMP
Become
GAMP = "Constant"
RAMP = Gw × GAMP / Rw
BAMP = Gw × GAMP / Bw
It becomes.
[0062]
As a result, when the color difference signal is calculated in the C process, it is only necessary to calculate the equations (1) and (2), so that the number of calculations can be reduced and the calculation time can be shortened.
By the way, when trying to realize such an AWB, if the white balance calculation as described above is performed without correlation in the time axis direction, the color of the same subject changes every finder mode screen. Such a phenomenon occurs. When calculating the white balance using integral values INTEG - Ye, INTEG - Cy, INTEG - Gr of the whole screen, Ye, Cy, Gr, for example, a subject (A) with a red object in a white background and white When there is a subject (B) with a blue object in the background and the camera is suddenly shaken from (A) to (B), the information on the entire screen changes, so the background white that should actually be the same color Changes from blue to red. In order to prevent this phenomenon, INTEG the calculation of n screens th WB in this system - Ye, INTEG - Cy, INTEG - INTEG without a Gr - Yen = (Σ INTEG - Ye (k)) / 16
INTEG - Cyn = (Σ INTEG - Cy (k)) / 16
INTERG - Grn = (Σ INTERG - Gr (k)) / 16
Is used.
[0063]
That is, by using the data of Ye, Cy, and Gr for the previous 15 screens for the calculation of WB, the appearance color is prevented from changing greatly.
Therefore, even in this case, by adopting two kinds of color processes, that is, a color process for video-through display and a color process for creating a recorded image signal, these processes are performed by software with time constraints. It is possible to realize this technology, and the device can be greatly reduced in size and price, and by executing these color processes, high-speed video through display and high-quality image recording and playback can be realized. You can also.
[0064]
【The invention's effect】
As described above, according to the present invention, the high-speed mode selectively obtained by simple instruction to image recording by the video through display and high-definition mode by further the number of pixels to be processed during a video through display Image processing with fewer processing steps can be realized.
[0065]
In addition, since the image recorded in the storage unit in the high definition mode can be read and displayed on the display unit, it is possible to enjoy the image reproduced on the display unit in high definition.
[Brief description of the drawings]
FIG. 1 is a perspective view showing a digital still camera with an LCD as an example of an electronic imaging apparatus to which the present invention is applied.
2 is a rear view of the digital still camera with an LCD in FIG. 1 as viewed from the LCD side.
3 is a front view of the digital still camera with an LCD shown in FIG. 1 as viewed from the opposite side of the LCD. FIG.
FIGS. 4A and 4B are a top view and a bottom view of the digital still camera with an LCD shown in FIG. 1, wherein FIG. 4A is a plan view and FIG. 4B is a bottom view.
5A and 5B show both side surfaces of the digital still camera with LCD in FIG. 1, wherein FIG. 5A is a side view of one side, and FIG. 5B is a side view of the other.
6 is a rear view of the main body portion viewed from the LCD side in a state in which the camera portion is rotated 90 ° forward in the digital still camera with an LCD of FIG. 1;
7 is a plan view of the main body viewed from the upper surface side in a state in which the camera unit is rotated 90 ° forward in the digital still camera with an LCD of FIG. 1;
8 is a cross-sectional plan view showing an example of an internal arrangement configuration of the digital still camera with an LCD in FIG. 1. FIG.
9 is a rear perspective view seen from the LCD side, showing an example of the internal arrangement of the digital still camera with LCD in FIG. 1. FIG.
10 is a diagram showing a circuit configuration of the digital still camera with an LCD in FIG. 1. FIG.
11 is a flowchart for explaining the operation of the digital still camera with an LCD in FIG.
12 is a flowchart for explaining the operation of the digital still camera with an LCD shown in FIG.
13 is a flowchart for explaining the operation of the digital still camera with an LCD in FIG.
FIG. 14 is a flowchart for explaining the operation of the digital still camera with an LCD in FIG. 1;
15 is a flowchart for explaining the operation of the digital still camera with an LCD shown in FIG.
16 is a diagram showing a more specific circuit configuration of the digital still camera with an LCD shown in FIG.
17 is a flowchart for explaining the operation of a more specific one of the digital still camera with an LCD in FIG.
18 is a flowchart for explaining the operation of a more specific digital still camera with LCD in FIG. 1; FIG.
19 is a flowchart for explaining the operation of a more specific digital still camera with an LCD in FIG.
20 is a flowchart for explaining the operation of a more specific one of the digital still camera with an LCD shown in FIG.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 1 ... Electronic camera apparatus 2 ... Main-body part 3 ... Camera part 4, 5 ... Case 6 ... LCD
6p ... LCD panel 7 ... taking lens 8 ... power switch 9 ... shutter button 20 ... grip part 21 ... battery cover 25 ... battery housing part (battery compartment)
26 ... Battery 27 ... Battery contact piece 28 ... Various switch circuit boards 29 ... Projection 30 ... Shield case 31 ... Backlight 32 ... LCD peripheral circuit board 33 ... Flexible printed circuit board 34 ... Main circuit board 35 ... CPU
36, 37, 38, 39 ... electronic component 40 ... CCD
41 ... CCD peripheral circuit board 52 ... A / D converter 53 ... timing generator 54 ... drive circuit 55 ... compression / decompression circuit 56 ... DRAM
57 ... Flash memory 58 ... ROM
59 ... RAM
60 ... Key input unit 61 ... CPU
62 ... Signal generator 63 ... VRAM
64 ... D / A converter 65 ... Amplifier 67 ... I / O port 71 ... CCD
72 ... Core IC
73 ... Data bus 74 ... CPU
75 ... DRAM

Claims (4)

撮像素子と表示手段と圧縮手段と記憶手段と記録キーとを有し、
上記撮像素子から出力された撮像信号に対して、上記表示手段へのビデオスルー表示のための高速モードの画像処理及び上記記憶手段への記録のための高精細モードの画像処理を択一的に実行して画像信号を生成する画像信号生成手段と、
この画像信号生成手段により生成された画像信号を上記表示手段、圧縮手段及び記憶手段へ転送する画像信号転送手段と、
上記記録キーが押下されたか否かを判断する判断手段とを具備し、
上記画像信号生成手段は、上記判断手段により記録キーが押下されたと判断されるまで上記撮像信号に対して上記表示手段へのビデオスルー表示のための高速モードの画像処理を実行して表示画像信号を生成し、上記判断手段により上記記録キーが押下されたと判断された時点で上記記憶手段への記録のための高精細モードの画像処理に切り換えて記録画像信号を生成する画像処理切換手段を含み、
上記画像信号転送手段は、上記判断手段により記録キーが押下されたと判断されるまで上記画像信号生成手段により生成された表示画像信号を上記表示手段へ転送するとともに、上記判断手段により上記記録キーが押下されたと判断された時点で上記画像信号生成手段により生成された記録画像信号を上記圧縮手段へ転送して圧縮した後に圧縮画像信号を上記記憶手段へ転送し、
上記高速モードの画像処理は、少なくとも上記撮像信号に対する画素間引処理を含むことを特徴とする電子撮像装置。
An image sensor , display means, compression means, storage means, and a recording key;
For high-speed mode image processing for video-through display on the display means and high-definition mode image processing for recording in the storage means for the image pickup signal output from the image pickup device. Image signal generation means for executing and generating an image signal;
Image signal transfer means for transferring the image signal generated by the image signal generation means to the display means , compression means and storage means;
Determining means for determining whether or not the recording key is pressed,
The image signal generation means executes high-speed mode image processing for video-through display on the display means on the image pickup signal until the determination means determines that the recording key is pressed, and displays the display image signal. Image processing switching means for generating a recording image signal by switching to high-definition mode image processing for recording in the storage means when the determination means determines that the recording key has been pressed. ,
The image signal transfer means transfers the display image signal generated by the image signal generation means to the display means until the determination means determines that the recording key is pressed, and the determination means determines that the recording key is When the recording image signal generated by the image signal generation means is determined to have been pressed and transferred to the compression means and compressed, the compressed image signal is transferred to the storage means,
The electronic image pickup apparatus, wherein the high-speed mode image processing includes at least pixel thinning processing for the image pickup signal.
上記画像信号生成手段により生成され上記圧縮手段により圧縮され上記記憶手段に記録された圧縮画像信号を読み出して伸長する伸張手段と、
この伸長手段により伸長された記録画像信号を上記表示手段に表示する表示制御手段とを備えることを特徴とする請求項1記載の電子撮像装置。
Decompression means for reading out and decompressing the compressed image signal generated by the image signal generation means, compressed by the compression means and recorded in the storage means;
2. The electronic imaging apparatus according to claim 1, further comprising display control means for displaying the recorded image signal expanded by the expansion means on the display means .
上記高精細モードの画像処理は、上記撮像信号に対するモアレバランス処理、ローパスフィルタ処理、又はエッジ強調処理を含むことを特徴とする請求項1又は2記載の電子撮像装置。3. The electronic imaging apparatus according to claim 1, wherein the image processing in the high-definition mode includes moire balance processing, low-pass filter processing, or edge enhancement processing for the imaging signal. 上記撮像素子から出力された撮像信号を一時記憶する一時記憶手段を具備し、
上記画像信号生成手段は、上記一時記憶手段に一時記憶された撮像信号に対して画像処理を実行して画像信号を生成することを特徴とする請求項1乃至3のいずれかに記載の電子撮像装置。
Comprising temporary storage means for temporarily storing an imaging signal output from the imaging element ;
4. The electronic imaging according to claim 1, wherein the image signal generation unit generates an image signal by performing image processing on the imaging signal temporarily stored in the temporary storage unit. 5. apparatus.
JP31118895A 1994-08-31 1995-11-29 Electronic imaging device Expired - Lifetime JP3765503B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP31118895A JP3765503B2 (en) 1994-08-31 1995-11-29 Electronic imaging device

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP06206887 1994-08-31
JP6-292183 1994-10-31
JP6-206887 1994-10-31
JP29218394 1994-10-31
JP31118895A JP3765503B2 (en) 1994-08-31 1995-11-29 Electronic imaging device

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP07191828 Division 1995-07-27 1995-07-27

Publications (2)

Publication Number Publication Date
JPH08214258A JPH08214258A (en) 1996-08-20
JP3765503B2 true JP3765503B2 (en) 2006-04-12

Family

ID=27328696

Family Applications (1)

Application Number Title Priority Date Filing Date
JP31118895A Expired - Lifetime JP3765503B2 (en) 1994-08-31 1995-11-29 Electronic imaging device

Country Status (1)

Country Link
JP (1) JP3765503B2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3011157B2 (en) 1997-10-30 2000-02-21 日本電気株式会社 Image reading method and apparatus
JP3416536B2 (en) 1998-10-14 2003-06-16 三洋電機株式会社 Digital camera
AU2003244192A1 (en) * 2003-06-25 2005-01-13 Nokia Corporation Image data compression parameter value controlling digital imaging device and image data compression parameter value decision method
JP4877995B2 (en) * 2007-03-23 2012-02-15 ローム株式会社 Image processing apparatus and electronic apparatus using the same

Also Published As

Publication number Publication date
JPH08214258A (en) 1996-08-20

Similar Documents

Publication Publication Date Title
EP0720388B1 (en) An electronic camera having dual modes for previewing and capturing still images
KR100957261B1 (en) Imaging Device and Chromatic Aberration Correction Method
JP2000224490A (en) Imaging control apparatus and imaging control method
JP4154025B2 (en) Imaging device
US20060139468A1 (en) Digital camera
JP3536452B2 (en) Electronic camera device
JP4584544B2 (en) Image reproducing device and solid-state imaging device
JP4941219B2 (en) Noise suppression device, noise suppression method, noise suppression program, and imaging device
JP3765503B2 (en) Electronic imaging device
JP6032912B2 (en) Imaging apparatus, control method thereof, and program
JP3743866B2 (en) Electronic imaging device
CN120034743A (en) Image processing device, camera device, image processing method, storage medium and computer program product
JP3399454B2 (en) Digital camera, image processing method, and recording medium recording image photographing program
JP4419705B2 (en) Imaging device, imaging method, and light amount adjustment device
JP2002051250A (en) Electronic camera
JP2005277618A (en) Imaging apparatus, shading correction apparatus, and shading correction method
JP4201302B2 (en) On-screen information image display method
JP4035263B2 (en) Imaging device
JPH0998379A (en) Electronic imaging device
JP2001169152A (en) Electronic camera, method for display state adjustment of electronic camera, and recording medium
JPH0998376A (en) Electronic imaging device
JPH0998377A (en) Electronic imaging system
JP4586044B2 (en) Image recording apparatus, control method therefor, and imaging apparatus
JP2006109046A (en) Imaging device
JP3954204B2 (en) Signal processing apparatus and signal processing method thereof

Legal Events

Date Code Title Description
A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20031216

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040106

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20040120

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20040312

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20060120

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100203

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110203

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120203

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120203

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130203

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130203

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140203

Year of fee payment: 8

EXPY Cancellation because of completion of term