Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP3298545B2 - デジタルカメラ及び画像処理方法並びに記憶媒体 - Google Patents
[go: Go Back, main page]

JP3298545B2 - デジタルカメラ及び画像処理方法並びに記憶媒体 - Google Patents

デジタルカメラ及び画像処理方法並びに記憶媒体

Info

Publication number
JP3298545B2
JP3298545B2 JP08660899A JP8660899A JP3298545B2 JP 3298545 B2 JP3298545 B2 JP 3298545B2 JP 08660899 A JP08660899 A JP 08660899A JP 8660899 A JP8660899 A JP 8660899A JP 3298545 B2 JP3298545 B2 JP 3298545B2
Authority
JP
Japan
Prior art keywords
image
pixel
resolution
pixel interpolation
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP08660899A
Other languages
English (en)
Other versions
JP2000278591A (ja
Inventor
広明 久保
Original Assignee
ミノルタ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ミノルタ株式会社 filed Critical ミノルタ株式会社
Priority to JP08660899A priority Critical patent/JP3298545B2/ja
Priority to US09/534,252 priority patent/US6710801B1/en
Publication of JP2000278591A publication Critical patent/JP2000278591A/ja
Application granted granted Critical
Publication of JP3298545B2 publication Critical patent/JP3298545B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/69Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/58Means for changing the camera field of view without moving the camera body, e.g. nutating or panning of optics or image sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/84Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/843Demosaicing, e.g. interpolating colour pixel values
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/634Warning indications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • H04N23/671Focus control based on electronic image sensor signals in combination with active ranging signals, e.g. using light or sound signals emitted toward objects

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Studio Circuits (AREA)

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】この発明は、デジタルカメ
ラ、及びデジタルカメラ等によって撮影された画像の画
素数を増加させる際の画像処理方法、並びにこの画像処
理方法をコンピュータ等の画像処理装置に実行させるた
めのプログラムを格納した記憶媒体に関する。
【0002】
【従来の技術】一般に、デジタルカメラの解像度は、撮
像センサの画素密度を増加することにより改善される
が、画素密度を増大すると各画素の面積が小さくなり、
感度低下を招く。一方、各画素の面積を小さくすること
なく画素数を増加させると、撮像センサの大型化を招き
コストアップとなる。
【0003】そこで、撮像センサの大きさや画素密度は
そのままで、撮影画像の見かけ上の画素数を増加させる
ことにより、解像度の向上を図ったデジタルカメラが知
られている。
【0004】このデジタルカメラでは、画素数増加を指
示する操作スイッチを備え、この操作スイッチが操作さ
れると、操作に応じて解像度が例えば2倍の画像が得ら
れるようになっている。
【0005】従来、このような画素数の増加は、周辺画
素を参照しての演算処理により補間用画素データを作成
し、この画素データを用いて画素補間処理することによ
り行われていた。
【0006】また、画角を変えて被写体を撮影し、得ら
れた複数個の画像のサイズを統一して部分的に張り合わ
せることにより、画素数を部分的に増加させることも行
われていた。
【0007】
【発明が解決しようとする課題】しかし、演算処理によ
る画素補間処理では、解像度の向上に限界があった。特
に、ズーム機能を備えたデジタルカメラにおいて広角
(ワイド)撮影を行った場合、ワイド撮影時には被写体
の周波数成分が上がり、より高解像度の画像が要求され
るため、演算処理により画素補間を行う方式では、細部
の再現性に劣った画像しか得られないという欠点があっ
た。
【0008】また、画像の部分的張り合わせによる方式
では、張り合わせ部分が目立ち、不自然な印象を与える
という欠点があった。
【0009】この発明は、このような欠点を解消するた
めになされたものであって、撮像センサの大きさや画素
密度を変更することなく、撮影画像の画素数を増加させ
ることが可能なデジタルカメラにおいて、細部の再現性
に優れた高解像度の撮影画像を不自然な印象を与えるこ
となく得ることができるデジタルカメラの提供を第1の
課題とする。
【0010】さらに、この発明は、細部の再現性に優れ
た高解像度の撮影画像を得るための画像処理方法の提供
を第2の課題とする。
【0011】さらに、この発明は、前記画像処理方法を
コンピュータ等の画像処理装置に実行させるためのプロ
グラムを格納した記憶媒体の提供を第3の課題とする。
【0012】
【課題を解決するための手段】上記第1の課題は、撮像
センサと、該撮像センサで得られた画像についての画素
数の増加を指示する指示手段と、ズーム機能を有する撮
影レンズと、前記指示手段によって画素数の増加が指示
された時は、第1の撮影を行った後、前記撮影レンズの
焦点距離を拡大撮影方向に少なくとも一回変えて解像度
改善用の撮影を行わせる撮影制御手段と、前記指示手段
によって画素数の増加が指示された時は、前記第1の撮
影画像データを拡大して画素補間を行う画素補間手段
と、を備え、前記画素補間手段は、前記拡大された第1
の撮影画像のサイズと、前記解像度改善用の撮影によっ
て得られた画像のサイズを同一にしたときに、前記第1
の撮影画像の画素補間位置に、前記解像度改善用画像の
対応する画素データが存在する場合には、該画素データ
を用いて前記画素補間を行い、対応する画素データが存
在しない画素補間位置については、演算処理によって作
成した画素データを用いて前記画素補間を行うものとな
されていることを特徴とするデジタルカメラによって解
決される。
【0013】このデジタルカメラによれば、第1の撮影
画像データにおける画素補間位置に、解像度改善用の画
像の対応する画素データが存在する場合には、被写体を
光学的に拡大撮影した実際の画像データである解像度改
善用の画素データで、前記第1の撮影画像が画素補間さ
れるから、この画素補間部分において解像度が改善され
る。
【0014】しかも、第1の撮影画像の画素補間位置に
は、画素補間により必ず画素が存在しているから、複数
の撮影画像を張り合わせたような画像の不自然さはな
い。
【0015】また、前記第2の課題は、第1の撮影画像
データと、第1の撮影画像よりも被写体を拡大撮影した
解像度改善用の撮影画像データに対し、前記第1の撮影
画像を画素補間のために拡大する処理と、前記拡大され
た第1の撮影画像のサイズと、前記解像度改善用の撮影
画像のサイズを同一にしたときに、前記第1の撮影画像
の画素補間位置に、前記解像度改善用画像の対応する画
素データが存在する場合には、該画素データを用いて前
記画素補間を行い、対応する画素データが存在しない画
素補間位置については、演算処理によって作成した画素
データを用いて前記画素補間を行う画素補間処理と、を
実施することを特徴とする画像処理方法によって解決さ
れる。
【0016】この画像処理方法によっても、第1の撮影
画像データにおける画素補間位置に、解像度改善用の画
像の対応する画素データが存在する場合には、被写体を
光学的に拡大撮影した実際の画像データである解像度改
善用の画素データで、前記第1の撮影画像を画素補間す
るから、この画素補間部分において解像度が改善され
る。
【0017】また、前記第3の課題は、第1の撮影画像
データと、第1の撮影画像よりも被写体を拡大撮影した
解像度改善用の撮影画像データに対し、前記第1の撮影
画像を画素補間のために拡大する処理と、前記拡大され
た第1の撮影画像のサイズと、前記解像度改善用の撮影
画像のサイズを同一にしたときに、前記第1の撮影画像
の画素補間位置に、前記解像度改善用画像の対応する画
素データが存在する場合には、該画素データを用いて前
記画素補間を行い、対応する画素データが存在しない画
素補間位置については、演算処理によって作成した画素
データを用いて前記画素補間を行う画素補間処理とを、
画像処理装置に実行させるプログラムが格納されている
ことを特徴とする記憶媒体によって解決される。
【0018】この記憶媒体によれば、コンピュータ等の
画像処理装置に、上記の処理を実行させることができ、
画像処理装置によって、画素数の増加に際して解像度の
改善された画像が得られる。
【0019】
【発明の実施の形態】以下、この発明の実施形態を図面
に基づいて説明する。
【0020】図1はこの発明の一実施形態であるデジタ
ルカメラにおける主要機構部分と、その電気的構成を示
すブロック図である。
【0021】デジタルカメラ1は、例えば銀塩一眼レフ
カメラを利用して構成されたカメラ本体2を有し、この
カメラ本体2の前面に撮影レンズユニット3が装着さ
れ、撮影レンズユニット3には、撮影レンズ4、絞り5
および撮影レンズ駆動用のモータ6などが配設されてい
る。前記撮影レンズ4は、ズーム機能を備えており、モ
ータ6の駆動によって撮影レンズの焦点距離が変化する
ものとなされている。
【0022】撮影レンズ4の光路方向後方には、該撮影
レンズで取り込まれた被写体光をR(赤)、G(緑)、
B(青)の三原色に色分解するプリズム7が配設される
とともに、プリズム7の出力側には、色分解された各色
ごとの光を受光するためのCCD(Charge Co
upled Device)からなる合計3個の撮像セ
ンサ8a、8b、8cが配置されている。
【0023】一方、カメラ本体2には、前記の各撮像セ
ンサ8a、8b、8cの出力に基いて得られた画像を表
示する液晶表示器(LCD)からなる表示部16が設け
られており、この表示部16にプレビュー画像が表示さ
れ、撮影前に被写体像を確認できるようになっている。
【0024】また、カメラ本体2内には、被写体光を受
光して被写体までの距離を検出し、撮影レンズを自動合
焦させるためのオートフォーカス(AF)センサ(図示
せず)が設けられている。
【0025】20は、カメラ本体2内に設けられたカメ
ラ制御CPUであり、カメラ本体2の各部品を制御する
ものである。具体的には、上記絞り5を絞りドライバ2
1を介して制御し、モータ6をズームドライバ25を介
して制御し、さらに各撮像センサ8a、8b、8cをタ
イミングジェネレータ22および対応する3個のドライ
バ26a、26b、26cを介して制御する。
【0026】また、前記カメラ制御CPU20は、各撮
像センサ8a、8b、8cから出力されるR、G、Bの
各データに基づいて、露出制御データを演算し、絞り5
の絞り値および撮像センサ8a、8b、8cの電荷蓄積
時間を決定し、この絞り値、電荷蓄積時間となるよう
に、絞り5及び撮像センサ8a、8b、8cをフィード
バック制御する。
【0027】このカメラ制御CPU20には、解像度変
換モード設定スイッチ51、画素数指定スイッチ52、
その他のカメラ操作スイッチ24が接続されている。解
像度変換モード設定スイッチ51は、撮影者が解像度の
変換(画素数の増加)を望む場合に操作されるもので、
一回操作されると解像度変換モードが設定され、再度操
作されると通常の撮影モードが設定される。また、画素
数指定スイッチ52は、解像度変換モードが設定されて
いるときに操作することで、画素数を所望の値に増加指
定するスイッチである。また、カメラ操作スイッチ24
は、図示しないシャッターボタンや電源スイッチなどを
含む。
【0028】カメラ制御CPU20は、解像度変換モー
ド設定スイッチ51、画素数指定スイッチ52、シャッ
ターボタン等の操作入力を受けて関連した処理を行な
う。たとえば、解像度変換モードが設定されているとき
に、画素数指定スイッチ52により画素数の増加が指定
された時は、カメラ制御CPU20は後述するように、
通常の撮影を行った後、ズームドライバ25を介してモ
ータ6を駆動し、少なくとも一回撮影レンズ4の焦点距
離を拡大撮影方向(テレ方向)に変えて、解像度改善用
の撮影を行わせる。
【0029】前記撮像センサ8a、8b、8cは、撮影
レンズ4によって取り込まれプリズム7によって色分解
された被写体の光学像を、それぞれR、G、Bの色成分
ごとに光電変換して出力する。
【0030】前記タイミングジェネレータ22は、カメ
ラ制御CPU20から送信される基準クロックに基づき
撮像センサ8a、8b、8cの駆動制御信号や、切替ス
イッチ50の制御信号を生成し出力するものである。こ
のタイミングジェネレータ22は、例えば積分開始/終
了(露出開始/終了)のタイミング信号、各画素の受光
信号の読出制御信号(水平同期信号、垂直同期信号、転
送信号等)等のクロック信号を生成し、各ドライバ26
a、26b、26cを介して各撮像センサ8a、8b、
8cに出力する。
【0031】前記各撮像センサ8a、8b、8cにおい
て電荷の蓄積が完了すると、被写体像を光電変換した信
号は、各撮像センサ内の転送路へシフトされ、ここから
バッファを介してそれぞれ読み出される。読み出された
出力は、それぞれの撮像センサ8a、8b、8cに対応
して設けられたCDS(相関二重サンプリング)回路8
1a、81b、81c、AGC(オートゲインコントロ
ール)回路82a、82b、82c、及びA/D変換器
83a、83b、83cによって信号処理される。
【0032】CDS回路81a、81b、81cは、サ
ンプリングにより画像信号のノイズの低減を行い、AG
C回路82a、82b、82cは、ゲイン調整により画
像信号の感度のレベル調整を行う。A/D変換器83
a、83b、83cは、AGC回路82a、82b、8
2cで正規化されたアナログ信号を10ビットのデジタ
ル信号に変換するものである。
【0033】40は上記A/D変換器83a、83b、
83cの出力を画像処理して画像ファイルを形成する画
像処理部であり、画像処理CPUにより制御される。
【0034】前記各A/D変換器83a、83b、83
cからの信号は、切替スイッチ50によって画素ごとに
切り替えられながら画像処理部40に取り込まれる。取
り込まれた信号は、撮像センサ8a、8b、8cからの
読み出しに同期して画像メモリ61に書き込まれ、以後
この画像メモリ61のデータをアクセスして各ブロック
の処理が行われる。
【0035】画像処理部40において、画像拡大・画素
補間ブロック41は、画像データを拡大できる機能を有
し、前記解像度変換モード設定スイッチ51で解像度変
換モードが設定され、画素数指定スイッチ52で所定の
画素数が指定された場合には、撮影画像を所定に拡大
し、演算処理により画素補間用の画素データを作成して
画素補間を行い、画素数を指定数に増加できる機能を有
する。さらに後述するような複数個の画像データに基づ
いて、所定の画素データを置換する処理をも行う。画像
拡大・画素補間ブロック41における処理は、R、G、
Bの各色ごとに行われる。
【0036】カラーバランス制御ブロック43は、前記
画像拡大・画素補間ブロック41からの各R、G、B出
力を独立にゲイン補正して、R、G、Bのホワイトバラ
ンス調整を行うものである。ホワイトバランスは、撮影
被写体から本来白色と思われる部分を輝度、彩度データ
などから推測し、その部分のR、G、Bそれぞれの平
均、R/G、B/Gを求め、R、Bの補正ゲインとして
いる。
【0037】ガンマ補正ブロック44は、カラーバラン
制御ブロック43でホワイトバランス処理が施された
各R、G、B出力に対して非線形変換を行うものであ
り、表示部16に適した階調変換が行われる。ガンマ補
正された画像データは、画像メモリ61に格納される。
【0038】画像圧縮ブロック45は、得られた撮影画
像について、画像データを画像メモリ61から呼び出し
て圧縮処理を行うもので、撮影画像は圧縮後はメモリカ
ードドライバ47を介してメモリカード62に記録され
る。
【0039】なお、メモリカード62はデジタルカメラ
1のカメラ本体2の所定部位に着脱自在に装着されるよ
うになっている。
【0040】ビデオエンコーダー46は、画像メモリ6
1に格納された上記データを呼び出してNTSC/PA
Lにエンコードし、表示部16に表示する。プレビュー
時には、画像は所定の周期で更新され、動画レートで表
示部16に表示されるようになっている。一方、撮影後
には、撮影画像が表示部16に表示され、所定時間後に
再びプレビュー状態に復帰する構成となっている。
【0041】次に、図1に示したデジタルカメラ1にお
いて、解像度変換モードが設定された際の解像度の改善
原理を説明する。
【0042】一般の被写体は、ワイド撮影時には、被写
体の周波数成分が上がるため、テレ時に比べ高解像度の
画像が要求される。このため、ワイド撮影画像を、演算
処理により作成した画素補間データで画素補間して画素
数を増加させても、細部の再現性に劣った描写となる。
【0043】そこで、ワイド撮影画像に対し、解像度変
換モード設定スイッチ51で変換モードに設定され、画
素数指定スイッチ52により画素数が指定されたとき
は、演算処理により画素補間データを作成するととも
に、画像中心部の画素については、撮影レンズ4の焦点
距離を変えて拡大撮影した解像度改善用の撮影画像デー
タの画素で置換する。
【0044】図2は、解像度の改善原理を示す概念図で
ある。
【0045】図2における升目の交点はワイド撮影時の
画素位置を示し、図2(a)はワイド撮影時の画素の状
態を示している。また、図2中の黒丸は画素数増加のた
めの画素補間を行うときに、画素データとして利用可能
な画素を示す。
【0046】画素数指定スイッチ52により画素数の増
加が指定されると、通常の撮影のほか、モータ6を駆動
し撮影レンズ4の焦点距離を変えて拡大撮影する。この
実施形態では、焦点距離を3回変更して解像度改善用の
撮影を行っており、それぞれの画像は画像メモリ61
記録される。
【0047】そして、各画像について、被写体の大きさ
が同じになるように、画像拡大・画素補間ブロック41
でサイズを変倍する。図2(b)は、(a)のワイド画
像よりも拡大して撮影し、かつ(a)の画像とサイズ
同じにした状態の画素位置を示しており、黒丸で示した
画素が、(a)のワイド撮影画像の画素補間位置に存在
している。
【0048】図2(c)は、(b)よりもさらに拡大し
て撮影し、かつ(a)の画像とサイズを同じにした状態
の画素位置を示しており、黒丸で示した画素が、(a)
のワイド撮影画像の画素位置または画素補間位置に存在
している。
【0049】図2(d)はさらに拡大して撮影し、かつ
(a)の画像とサイズを同じにした状態の画素位置を示
しており、黒丸で示した画素が、(a)のワイド撮影画
像の画素位置または画素補間位置に存在している。
【0050】そして、これら図2(a)〜(d)の4つ
の画像を重ね合わせると、図2(e)に示すようにな
る。この図における黒丸の位置からわかるように、解像
度改善用の拡大撮影によって得られた画像データの多数
の画素が、図2(a)の画像データの特に中心部の画素
位置あるいは画素補間位置に存在している。
【0051】図3は、図2(a)のワイド撮影画像に対
する画像補間処理を説明するための図である。
【0052】図3(a)は、図2(e)における黒丸の
みを示したものである。図3(a)の画像データについ
て、図3(b)のように、枠で囲んだ領域A〜Cを設定
すると、領域Aについては、画素補間位置に解像度改善
用の撮影によって得られた画素データは存在しないか
ら、図2(a)の元のワイド撮影画像の画像データに基
づいて、画像拡大・画素補間ブロック41における演算
処理により画素補間を行う。
【0053】領域Bについては、解像度改善用の撮影に
よって得られた画素データが存在する画素補間位置と存
在しない画素補間位置があるから、画素データが存在す
る画素補間位置についてはその画素データで画素補間を
行い、画素データが存在しない画素補間位置について
は、演算処理によって求めた画素データを用いて画素補
間を行う。
【0054】領域Cについては、すべての画素補間位置
に、解像度改善用の撮影によって得られた画素データが
存在するから、これらの画素データで画素補間を行い、
演算処理による画素補間は行わない。
【0055】こうして、画素補間を行った2倍拡大補間
時の画素配列を図3(c)に示す。図3(c)におい
て、黒丸は実際の撮影によって得られた画素データを示
し、白丸は演算によって生成された画素データを示して
いる。
【0056】この図からわかるように、画像の中心部
は、光学的に拡大された画像に基づいて作成された画素
で補間されており、解像度が改善されていることがわか
る。また、周辺部は演算処理によって作成された画素で
補間されており、解像度は従来のものと変わらない。通
常の撮影では、画像中心に主要被写体が存在することが
多いため、主要被写体の解像度が改善された画像を得る
ことができる。
【0057】なお、ワイド撮影画像の画素位置にある画
素データについては、ワイド撮影時の画素データをその
まま残しても良いが、解像度改善用撮影の画素データが
存在する場合には、その画素データに置換した方が、よ
り解像度が改善される。また、以上の例では、解像度改
善用の拡大撮影枚数は3枚としたが、1枚のみでも2枚
でも良いし、4枚以上でも良い。
【0058】次に、図1〜3に示したデジタルカメラの
動作を、図4のフローチャートを参照して説明する。な
お、図4及び以下の説明においては、ステップをSと省
略する。
【0059】まず、S1において、撮影者が解像度変換
モード設定スイッチ51で解像度変換モードを設定した
かどうかを、カメラ制御CPU20が判断する。解像度
変換モードの設定がなされた場合は(S1にてYE
S)、S2で、撮影者により画素数指定スイッチ52に
よる画素数が指定される。
【0060】カメラ制御CPU20は、S3で、画素数
の入力に応じて解像度改善用の拡大撮影を行うための焦
点距離を演算するとともに、解像度改善用の撮影枚数と
焦点距離を決定する。
【0061】次に、S4で、撮影レンズ4を初期位置で
あるワイド撮影時の位置へ移動させたのち、S5でシャ
ッターボタンが半押しされるのを待つ。
【0062】シャッターボタンが半押しされると(S5
にてYES)、S6で、測光、側色が行われ、露出制御
値、ホワイトバランス制御値が固定され、次いでS7で
オートフォーカス処理が行われる。
【0063】次に、S8で、各撮像センサ8a〜8cが
露光されて被写体の光学像が撮像センサに取り込まれ、
光電変換される。所定の露光時間の経過後、S9で撮像
センサ8a〜8cに蓄積された画像データが読み出さ
れ、画像処理部40で所定の画像処理が行われ、得られ
た画像がプレビュー画像として表示部16に表示され
る。このような動作がシャッターボタンの全押しまで所
定の周期で繰り返され、表示部16にはライブビュー画
像が表示される(S10)。
【0064】シャッターボタンが全押しされると(S1
1にてYES)、S12で撮像センサ8a〜8cの露
光、S13で画像データの読み出しが行われ、画像処理
部40で所定の画像処理が行われた撮影画像が、S14
で画像メモリ61に一時記録される。ここまでは、通常
の撮影動作と同じである。
【0065】次いで、解像度改善用の撮影を続いて行う
ために、S15で、カメラ1をそのままの姿勢で保持す
る旨の警告を表示部16に表示する。
【0066】そして、S16で、撮影レンズ4の焦点距
離を変更してズームアップしたのち、S17でオートフ
ォーカス処理、S18で撮像センサの露光が行われ、S
19で画像データが読み出されて所定の処理を施された
後、S20で画像メモリ61に一時記録される。解像度
改善用の撮影を2回以上行う場合は(S21でNO)、
S15〜S20の動作が解像度改善用の撮影が終了する
まで繰り返され、撮影レンズ4の焦点距離をそれぞれ変
えた状態の撮影画像データを得る。
【0067】全駒の撮影が完了すると(S21でYE
S)、S22で前記警告表示を解除したのち、S23で
周囲画素からの演算により画素補間を行い、第1の撮影
画像の画素数を指定された画素数へ増大する。
【0068】次に、S24で、解像度改善用の撮影画像
による画素データの置換処理を行う。具体的には、解像
度改善用の撮影画像の被写体サイズが、第1の撮影画像
のサイズと同じになるように解像度改善用の撮影画像を
変倍したのち、第1の撮影画像の画素補間位置及び画素
位置に、解像度改善用の撮影画像の画素が存在する場合
には、その画素で第1の撮影画像の画素を置換する。こ
れにより、第1の撮影画像の中心部分には、光学的に拡
大された画像の画素が存在することになり、解像度が改
善される。もとより、第1の撮影画像の全体の画素数
は、指定された画素数となっており、第1の画像の補間
画素位置には必ず画素が存在し、かつ局部的な画素密度
の増大もないから、違和感のない自然な画像となる。
【0069】こうして、画素補間により画素数を増加さ
れた画像は、S25で画像圧縮ブロック45で圧縮され
たのち、S26でメモリカード62に書き込まれる。
【0070】なお、S1の判断において、解像度変換モ
ードが設定されなかった場合には、通常のデジタルカメ
ラの動作が行われ、前述したS5〜S14と同じ動作が
S31〜S40で行われる。
【0071】そして、画像メモリ61に一時記録された
画像は、S25で画像圧縮ブロック45で圧縮されたの
ち、S26でメモリカード62に書き込まれる。
【0072】なお、以上の実施形態では、第1の撮影画
像の拡大処理や第1の撮影画像の補間処理を、デジタル
カメラ内のカメラ制御CPU20の指示に基づいて画像
処理部40内で行った場合を示したが、これら画像サイ
ズの変更処理及び第1の撮影画像の補間処理のためのプ
ログラムを、CD−ROM、フロッピィディスクその他
の記憶媒体に格納しておき、このプログラムをコンピュ
ータ等の画像処理装置に外部からインストールして、別
途用意した第1の撮影画像データと解像度改善用の撮影
画像データについての画像処理を実行させるものとして
も良い。
【0073】
【発明の効果】この発明に係るデジタルカメラ、及びこ
の発明に係る画像処理方法によれば、第1の撮影画像デ
ータにおける画素補間位置に、解像度改善用の画像の対
応する画素データが存在する場合には、被写体を光学的
に拡大撮影した実際の画像データである解像度改善用の
画素データで、前記第1の撮影画像を画素補間するか
ら、この画素補間部分において解像度を改善でき、撮像
センサの大きさや画素密度を変更することなく、細部の
再現性に優れた高解像度の撮影画像を得ることができ
る。
【0074】しかも、画像の部分的張り合わせ方式によ
り解像度を改善するものではないから、張り合わせ部分
が目立ち、不自然な印象を与えるという欠点もない。
【0075】また、この発明に係る記憶媒体によれば、
コンピュータ等の画像処理装置に、この発明に係る画像
処理を実行させることができ、画像処理装置によって細
部の再現性に優れた高解像度の撮影画像を得ることがで
きる。
【図面の簡単な説明】
【図1】この発明の一実施形態に係るデジタルカメラの
主要機構部分及び電気系を示すブロック図である。
【図2】解像度の改善原理を示す概念図である。
【図3】図2(a)のワイド撮影画像に対する画像補間
処理を説明するための図である。
【図4】図1〜3に示したデジタルカメラの動作を示す
フローチャートである。
【符号の説明】
1・・・・・・・・デジタルカメラ 2・・・・・・・・カメラ本体 4・・・・・・・・撮影レンズ 8a〜8c・・・・撮像センサ 20・・・・・・・カメラ制御CPU(撮影制御手段) 40・・・・・・・画像処理部 41・・・・・・・画像拡大・画素補間ブロック(画素
補間手段) 51・・・・・・・解像度変換モード設定スイッチ 52・・・・・・・画素数指定スイッチ(指示手段)
フロントページの続き (58)調査した分野(Int.Cl.7,DB名) H04N 5/225 - 5/28

Claims (3)

    (57)【特許請求の範囲】
  1. 【請求項1】 撮像センサと、 該撮像センサで得られた画像についての画素数の増加を
    指示する指示手段と、 ズーム機能を有する撮影レンズと、 前記指示手段によって画素数の増加が指示された時は、
    第1の撮影を行った後、前記撮影レンズの焦点距離を拡
    大撮影方向に少なくとも一回変えて解像度改善用の撮影
    を行わせる撮影制御手段と、 前記指示手段によって画素数の増加が指示された時は、
    前記第1の撮影画像データを拡大して画素補間を行う画
    素補間手段と、を備え、 前記画素補間手段は、前記拡大された第1の撮影画像の
    サイズと、前記解像度改善用の撮影によって得られた
    像のサイズを同一にしたときに、前記第1の撮影画像の
    画素補間位置に、前記解像度改善用画像の対応する画素
    データが存在する場合には、該画素データを用いて前記
    画素補間を行い、対応する画素データが存在しない画素
    補間位置については、演算処理によって作成した画素デ
    ータを用いて前記画素補間を行うものとなされているこ
    とを特徴とするデジタルカメラ。
  2. 【請求項2】 第1の撮影画像データと、第1の撮影画
    像よりも被写体を拡大撮影した解像度改善用の撮影画像
    データに対し、 前記第1の撮影画像を画素補間のために拡大する処理
    と、 前記拡大された第1の撮影画像のサイズと、前記解像度
    改善用の撮影画像のサイズを同一にしたときに、前記第
    1の撮影画像の画素補間位置に、前記解像度改善用画像
    の対応する画素データが存在する場合には、該画素デー
    タを用いて前記画素補間を行い、対応する画素データが
    存在しない画素補間位置については、演算処理によって
    作成した画素データを用いて前記画素補間を行う画素補
    間処理と、 を実施することを特徴とする画像処理方法。
  3. 【請求項3】 第1の撮影画像データと、第1の撮影画
    像よりも被写体を拡大撮影した解像度改善用の撮影画像
    データに対し、 前記第1の撮影画像を画素補間のために拡大する処理
    と、 前記拡大された第1の撮影画像のサイズと、前記解像度
    改善用の撮影画像のサイズを同一にしたときに、前記第
    1の撮影画像の画素補間位置に、前記解像度改善用画像
    の対応する画素データが存在する場合には、該画素デー
    タを用いて前記画素補間を行い、対応する画素データが
    存在しない画素補間位置については、演算処理によって
    作成した画素データを用いて前記画素補間を行う画素補
    間処理と、 を画像処理装置に実行させるプログラムが格納されてい
    ることを特徴とする記憶媒体。
JP08660899A 1999-03-29 1999-03-29 デジタルカメラ及び画像処理方法並びに記憶媒体 Expired - Fee Related JP3298545B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP08660899A JP3298545B2 (ja) 1999-03-29 1999-03-29 デジタルカメラ及び画像処理方法並びに記憶媒体
US09/534,252 US6710801B1 (en) 1999-03-29 2000-03-23 Image taking and processing device for a digital camera and method for processing image data

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP08660899A JP3298545B2 (ja) 1999-03-29 1999-03-29 デジタルカメラ及び画像処理方法並びに記憶媒体

Publications (2)

Publication Number Publication Date
JP2000278591A JP2000278591A (ja) 2000-10-06
JP3298545B2 true JP3298545B2 (ja) 2002-07-02

Family

ID=13891741

Family Applications (1)

Application Number Title Priority Date Filing Date
JP08660899A Expired - Fee Related JP3298545B2 (ja) 1999-03-29 1999-03-29 デジタルカメラ及び画像処理方法並びに記憶媒体

Country Status (2)

Country Link
US (1) US6710801B1 (ja)
JP (1) JP3298545B2 (ja)

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001061165A (ja) * 1999-08-20 2001-03-06 Sony Corp レンズ装置及びカメラ
US20050140820A1 (en) * 1999-08-20 2005-06-30 Koichi Takeuchi Lens unit and camera
US7196805B1 (en) 2000-12-29 2007-03-27 Cisco Technology, Inc. Consumer level device for automatically transferring digital images to an internet-based service provider
US20080036886A1 (en) * 2001-06-29 2008-02-14 Hannigan Brett T Methods For Generating Enhanced Digital Images
US6970200B2 (en) * 2001-10-26 2005-11-29 Hewlett-Packard Development Company, L.P. System and method for a simplified digital camera interface for viewing images and controlling camera operation
JP4198449B2 (ja) * 2002-02-22 2008-12-17 富士フイルム株式会社 デジタルカメラ
JP4657564B2 (ja) * 2002-04-30 2011-03-23 イーストマン コダック カンパニー 電子スチルカメラ及び画像処理方法
US7257278B2 (en) * 2003-02-26 2007-08-14 Hewlett-Packard Development Company, L.P. Image sensor for capturing and filtering image data
FR2872661B1 (fr) * 2004-07-05 2006-09-22 Eastman Kodak Co Procede et dispositif de prise de vue a resolution multiplie
JP4576179B2 (ja) * 2004-08-31 2010-11-04 Hoya株式会社 撮影装置
KR100476828B1 (ko) * 2004-09-24 2005-03-18 엠텍비젼 주식회사 복수의 영상 이미지를 이용한 합성 이미지 생성 방법 및장치
JP2007158935A (ja) * 2005-12-07 2007-06-21 Sony Corp 撮像装置および撮像システム
JP4931055B2 (ja) * 2006-11-22 2012-05-16 ソニー株式会社 画像処理装置及び画像処理方法
CN101771810A (zh) * 2008-12-29 2010-07-07 上海乐金广电电子有限公司 获取清晰图像的方法及装置
JP2011071605A (ja) * 2009-09-24 2011-04-07 Fujifilm Corp 立体撮像装置及び立体撮像方法
JP2013038632A (ja) * 2011-08-09 2013-02-21 Sharp Corp 撮影装置、当該撮影装置を有する携帯情報処理端末、および携帯情報処理端末を制御するためのプログラム
JP2013109034A (ja) * 2011-11-17 2013-06-06 Sony Corp 撮像装置と撮像制御方法およびプログラム
US9053557B2 (en) 2011-12-02 2015-06-09 Industrial Technology Research Institute System and method for improving visual effect of a display device
EP2942941B1 (en) * 2014-05-08 2016-04-27 Axis AB Method and apparatus for determining a need for a change in a pixel density requirement due to changing light conditions
CN112188035B (zh) * 2020-09-29 2023-02-17 Oppo(重庆)智能科技有限公司 图像处理方法、图像处理器、拍摄装置、电子设备

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000188714A (ja) 1998-12-22 2000-07-04 Sony Corp 画像信号撮像装置および方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5650819A (en) * 1993-09-30 1997-07-22 Canon Kabushiki Kaisha Image pickup apparatus
JPH08289188A (ja) 1995-04-14 1996-11-01 Canon Inc 画像形成装置
US5991463A (en) * 1995-11-08 1999-11-23 Genesis Microchip Inc. Source data interpolation method and apparatus
US6429895B1 (en) * 1996-12-27 2002-08-06 Canon Kabushiki Kaisha Image sensing apparatus and method capable of merging function for obtaining high-precision image by synthesizing images and image stabilization function

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000188714A (ja) 1998-12-22 2000-07-04 Sony Corp 画像信号撮像装置および方法

Also Published As

Publication number Publication date
JP2000278591A (ja) 2000-10-06
US6710801B1 (en) 2004-03-23

Similar Documents

Publication Publication Date Title
JP3298545B2 (ja) デジタルカメラ及び画像処理方法並びに記憶媒体
JP3971246B2 (ja) デジタル撮影装置
JP4503878B2 (ja) 撮像装置及び撮像方法
JP2001177741A (ja) 電子カメラおよび表示システム
JP2010074813A (ja) 撮像装置および撮像方法
JP3912404B2 (ja) 撮像装置
JP3395770B2 (ja) デジタルスチルカメラ
JP5381142B2 (ja) 撮像素子および撮像装置
TWI331472B (en) Image pick-up apparatus
JP2006033123A (ja) 撮像装置
JP4033456B2 (ja) デジタルカメラ
JP4584544B2 (ja) 画像再生装置および固体撮像装置
JP2004023747A (ja) 電子カメラ
JP3444281B2 (ja) 画像処理システム、撮像装置、画像処理方法及びその方法の処理プログラムが記録された記録媒体
US8503772B2 (en) Image processing unit, image processing method, and device for adjusting tone of monotone images by reducing color as a function of brightness
JP4053858B2 (ja) 固体撮像装置の信号読出し方法
JP2003060982A (ja) 撮像装置およびその制御方法
JP2001057649A (ja) 電子カメラ
US7391446B2 (en) Digital camera having circuitry shortening processing time to correct distortion
JP4595231B2 (ja) 電子カメラ
JP4003172B2 (ja) 画像信号処理装置及び電子カメラ
JP3826885B2 (ja) 電子カメラ
JP5397048B2 (ja) デジタルカメラ、及びその撮影感度設定方法とプログラム
JP2008053931A (ja) 撮像装置
JP2004096328A (ja) 電子カメラ

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080419

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090419

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090419

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100419

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100419

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110419

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110419

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120419

Year of fee payment: 10

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120419

Year of fee payment: 10

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130419

Year of fee payment: 11

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130419

Year of fee payment: 11

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140419

Year of fee payment: 12

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees