Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP5531666B2 - Imaging apparatus, image quality adjustment system, imaging method, and program - Google Patents
[go: Go Back, main page]

JP5531666B2 - Imaging apparatus, image quality adjustment system, imaging method, and program - Google Patents

Imaging apparatus, image quality adjustment system, imaging method, and program Download PDF

Info

Publication number
JP5531666B2
JP5531666B2 JP2010034165A JP2010034165A JP5531666B2 JP 5531666 B2 JP5531666 B2 JP 5531666B2 JP 2010034165 A JP2010034165 A JP 2010034165A JP 2010034165 A JP2010034165 A JP 2010034165A JP 5531666 B2 JP5531666 B2 JP 5531666B2
Authority
JP
Japan
Prior art keywords
image
optical
lens
unit
imaging
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2010034165A
Other languages
Japanese (ja)
Other versions
JP2011172031A5 (en
JP2011172031A (en
Inventor
洋一 村山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Priority to JP2010034165A priority Critical patent/JP5531666B2/en
Publication of JP2011172031A publication Critical patent/JP2011172031A/en
Publication of JP2011172031A5 publication Critical patent/JP2011172031A5/ja
Application granted granted Critical
Publication of JP5531666B2 publication Critical patent/JP5531666B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Processing (AREA)
  • Studio Devices (AREA)

Description

本発明は、被写体の光学像をレンズにより結像する撮像装置、画質調整システム、撮像方法及びプログラムに関する。   The present invention relates to an imaging apparatus that forms an optical image of a subject with a lens, an image quality adjustment system, an imaging method, and a program.

近年、デジタルカメラにおいては、撮像された画像を補正することにより、レンズに固有に生じる光学像の歪みを解消する技術が用いられている(例えば、特許文献1参照)。
例えば、この特許文献1にあっては、ズームレンズの各ズーム段で生じる歪みを補正するために、複数のズーム段の各々と歪みを補正するための補正パラメータの各々とをそれぞれ対応付けている。
In recent years, in digital cameras, a technique for correcting distortion of an optical image inherent in a lens by correcting a captured image (see, for example, Patent Document 1).
For example, in Patent Document 1, each of a plurality of zoom stages is associated with each of correction parameters for correcting the distortion in order to correct distortion generated at each zoom stage of the zoom lens. .

特開2008−295097号公報JP 2008-295097 A

しかしながら、上記特許文献1に記載される技術の場合、ズーム段によっては微々たる効果しか得られないとしても複数のズーム段の全てで補正処理を行うので、画像処理にかかる負担が増大してしまうという問題がある。   However, in the case of the technique described in Patent Document 1, correction processing is performed in all of a plurality of zoom stages even if only a slight effect can be obtained depending on the zoom stage, thereby increasing the burden on image processing. There is a problem.

そこで、本願発明は、上記問題点に鑑みてなされたものであり、画像補正にかかる処理負担を軽減することができる撮像装置、画質調整システム、撮像方法及びプログラムを提供することを目的とする。   Accordingly, the present invention has been made in view of the above problems, and an object thereof is to provide an imaging device, an image quality adjustment system, an imaging method, and a program that can reduce the processing burden for image correction.

上記課題を解決するため、請求項1に記載の発明は、光学素子を通過した光学像を画像情報に変換して出力する撮像手段と、前記光学素子の移動に基づく光学像の歪みに関連する光学特性情報に従って、当該光学素子が特定の位置にある場合に前記撮像手段から出力される画像情報を補正するか、又は、前記撮像手段から出力される画像情報を所定の割合で拡大処理するかの少なくとも一方を行うよう制御する制御手段と、前記制御手段により処理が施された画像情報、または、当該光学素子が特定の位置にない場合に前記撮像手段から出力され前記制御手段によって制御されていない画像情報を処理済み画像として出力する出力手段と、を備えたことを特徴としている。 In order to solve the above-mentioned problem, the invention according to claim 1 relates to imaging means for converting an optical image that has passed through the optical element into image information and outputting the image information, and distortion of the optical image based on movement of the optical element. Whether to correct the image information output from the imaging means when the optical element is at a specific position according to the optical characteristic information, or to enlarge the image information output from the imaging means at a predetermined rate A control unit that controls to perform at least one of the following: image information processed by the control unit , or output from the imaging unit when the optical element is not at a specific position and controlled by the control unit Output means for outputting non-image information as a processed image.

請求項2に記載の発明は、請求項1に記載の発明において、前記制御手段による制御内容と、前記光学特性情報とを対応付けて記憶する記憶手段を更に備え、前記制御手段は、前記光学特性情報に基づいて、前記光学素子が特定の位置にある場合の補正内容又は拡大処理の割合の少なくとも一方を前記記憶手段から読み出すことを特徴としている。 The invention according to claim 2, in the invention described in claim 1, and a control by the control means, prior Symbol further comprising a storage means for storing in association with the optical characteristic information, said control means, said based on the optical characteristic information, the optical element is characterized in that reading out at least one of the ratio of the correction contents or expansion processing when a particular location from the storage means.

請求項3に記載の発明は、請求項に記載の撮像装置において、前記光学素子は、光学ズーム機構を構成するズーム調整用レンズを含み、前記特定の位置とは、前記ズーム調整用レンズのレンズ位置が広角端に対応する位置であることを特徴としている。 According to a third aspect of the present invention, in the imaging apparatus according to the second aspect , the optical element includes a zoom adjustment lens that constitutes an optical zoom mechanism, and the specific position refers to the zoom adjustment lens. The lens position is a position corresponding to the wide-angle end.

請求項4に記載の発明は、請求項3に記載の発明において、前記制御手段による補正内容又は拡大処理の比率の少なくとも一方を前記ズーム調整用レンズのレンズ位置に応じて可変することを特徴としている。 According to a fourth aspect of the present invention, in the third aspect of the present invention, at least one of the content of correction by the control means or the ratio of the enlargement processing is varied according to the lens position of the zoom adjustment lens. Yes.

請求項5に記載の発明は、請求項〜4の何れか一項に記載の撮像装置が撮像する画像の画質を調整する画質調整システムであって、前記光学特性情報は、前記光学素子と対応付けられた情報記録媒体に記録された記録情報で表され、前記情報記録媒体から前記記録情報を読み取るための読取手段と、この読取手段により読み取られた記録情報に基づいて、前記記憶手段から読み出すべき前記補正内容及び前記拡大処理の割合を前記撮像装置に設定する設定手段と、を備えることを特徴としている。 Invention of Claim 5 is an image quality adjustment system which adjusts the image quality of the image which the imaging device as described in any one of Claims 2-4 images, Comprising: The said optical characteristic information is the said optical element, Based on the recording information represented by the recording information recorded on the associated information recording medium and reading the recording information from the information recording medium, and from the storage means based on the recording information read by the reading means And setting means for setting the correction contents to be read and the ratio of the enlargement processing in the imaging apparatus.

請求項6に記載の発明の撮像方法は、光学素子を通過した光学像を画像情報に変換して出力する撮像手段を備える撮像装置を用いた撮像方法であって、前記光学素子の移動に基づく光学像の歪みに関連する光学特性情報に従って、当該光学素子が特定の位置にある場合に前記撮像手段から出力される画像情報を補正する処理、及び、前記光学特性情報に従って、前記光学素子が特定の位置にある場合に前記撮像手段から出力される画像情報を所定の割合で拡大する処理のうち、少なくとも何れか一方の処理を行うステップと、画像情報を補正する処理及び画像情報を拡大する処理のうち、少なくとも何れか一方が施された画像情報、または、当該光学素子が特定の位置にない場合に前記撮像手段から出力され前記補正する処理及び所定の割合で拡大する処理が施されていない画像情報を処理済み画像として出力するステップと、を実行することを特徴としている。 An imaging method according to a sixth aspect of the invention is an imaging method using an imaging device including an imaging unit that converts an optical image that has passed through an optical element into image information and outputs the image information, and is based on the movement of the optical element. A process for correcting image information output from the imaging means when the optical element is at a specific position according to optical characteristic information related to distortion of the optical image, and the optical element specified according to the optical characteristic information A step of performing at least one of the processes for enlarging the image information output from the imaging means at a predetermined ratio when it is at the position, a process for correcting the image information, and a process for enlarging the image information of the image information at least one has been applied, or the processing and predetermined ratio of the optical element is output from the imaging means when not in a specific position the correction of Is characterized by performing the step of outputting the image information processing enlarge have not been applied as the processed image.

請求項7に記載の発明のプログラムは、光学素子を通過した光学像を画像情報に変換して出力する撮像手段を備える撮像装置のコンピュータを、前記光学素子の移動に基づく光学像の歪みに関連する光学特性情報に従って、当該光学素子が特定の位置にある場合に前記撮像手段から出力される画像情報を補正する補正手段、前記光学特性情報に従って、前記光学素子が特定の位置にある場合に前記撮像手段から出力される画像情報を所定の割合で拡大処理する拡大処理手段、前記補正手段による補正及び前記拡大処理手段による拡大処理のうち、少なくとも何れか一方が施された画像情報、または、当該光学素子が特定の位置にない場合に前記撮像手段から出力され前記補正手段及び前記拡大処理手段によって処理されていない画像情報を処理済み画像として出力する出力制御手段、として機能させることを特徴としている。 According to a seventh aspect of the present invention, there is provided a program for an imaging apparatus including an imaging unit that converts an optical image that has passed through an optical element into image information and outputs the image information, and relates to distortion of the optical image based on movement of the optical element. According to the optical characteristic information to be corrected, correcting means for correcting image information output from the imaging means when the optical element is at a specific position, and according to the optical characteristic information, when the optical element is at a specific position Image information to which at least one of enlargement processing means for enlarging the image information output from the imaging means at a predetermined ratio, correction by the correction means, and enlargement processing by the enlargement processing means , or processing image information that has not been processed by the optical element is output from the imaging means when not in a particular position the correction means and the enlargement processing unit Output control means for outputting as a finished image, is characterized in that to function as a.

本発明によれば、画像補正にかかる処理負担を軽減することができる。   According to the present invention, it is possible to reduce the processing burden for image correction.

本発明を適用した一実施形態の撮像装置の概略構成を示すブロック図である。It is a block diagram which shows schematic structure of the imaging device of one Embodiment to which this invention is applied. 図1の撮像装置のメモリのメモリマップを模式的に示す図である。It is a figure which shows typically the memory map of the memory of the imaging device of FIG. ズームレンズにおける広角端の焦点距離の公称値に対する個体バラツキの分布を模式的に示す図である。It is a figure which shows typically distribution of the individual variation with respect to the nominal value of the focal distance of the wide-angle end in a zoom lens. 図1の撮像装置のROMのメモリマップを模式的に示す図である。It is a figure which shows typically the memory map of ROM of the imaging device of FIG. 図1の撮像装置に係る歪曲補正用データと拡大用データの一例を模式的に示す図である。It is a figure which shows typically an example of the data for distortion correction and the data for expansion which concern on the imaging device of FIG. 図1の撮像装置によるメモリ書き込み処理に係る動作の一例を示すフローチャートである。3 is a flowchart illustrating an example of an operation related to a memory writing process by the imaging apparatus of FIG. 1. 図1の撮像装置による画質調整処理に係る動作の一例を示すフローチャートである。3 is a flowchart illustrating an example of an operation related to image quality adjustment processing by the imaging apparatus of FIG. 1. 図7の画質調整処理に係る画像の一例を模式的に示す図である。It is a figure which shows typically an example of the image which concerns on the image quality adjustment process of FIG. 本発明を適用した一実施形態の画質調整システムの概略構成を示すブロック図である。It is a block diagram which shows schematic structure of the image quality adjustment system of one Embodiment to which this invention is applied.

以下に、本発明について、図面を用いて具体的な態様を説明する。ただし、発明の範囲は、図示例に限定されない。
図1は、本発明を適用した一実施形態の撮像装置100の概略構成を示すブロック図である。
Hereinafter, specific embodiments of the present invention will be described with reference to the drawings. However, the scope of the invention is not limited to the illustrated examples.
FIG. 1 is a block diagram illustrating a schematic configuration of an imaging apparatus 100 according to an embodiment to which the present invention is applied.

本実施形態の撮像装置100は、ズームレンズ部1の光学像の歪みに関連するレンズタイプに従って、ズーム調整用レンズ1aが広角端に対応する位置にある場合に電子撮像部2から出力される画像情報を補正する処理、及び、ズーム調整用レンズ1aが広角端に対応する位置にある場合に電子撮像部2から出力される画像情報を所定の割合で拡大する処理のうち、少なくとも何れか一方の処理を行って、処理済み画像を出力する。
具体的には、図1に示すように、撮像装置100は、ズームレンズ部1と、電子撮像部2と、CDS/ADC部3と、メモリ4と、ROM5と、画像処理部6と、表示制御部7と、表示部8と、画像記録部9と、操作入力部10と、CPU11とを備えている。
The imaging apparatus 100 according to the present embodiment outputs an image output from the electronic imaging unit 2 when the zoom adjustment lens 1a is at a position corresponding to the wide-angle end according to the lens type related to the distortion of the optical image of the zoom lens unit 1. At least one of a process of correcting information and a process of enlarging image information output from the electronic imaging unit 2 at a predetermined ratio when the zoom adjustment lens 1a is at a position corresponding to the wide-angle end. Process and output the processed image.
Specifically, as illustrated in FIG. 1, the imaging apparatus 100 includes a zoom lens unit 1, an electronic imaging unit 2, a CDS / ADC unit 3, a memory 4, a ROM 5, an image processing unit 6, and a display. A control unit 7, a display unit 8, an image recording unit 9, an operation input unit 10, and a CPU 11 are provided.

ズームレンズ部1は、複数の光学レンズを有して構成された光学ズーム機構を具備しており、複数の光学レンズのうち、ズーム調整用レンズ(光学素子)1aの光軸方向の位置を調整することで焦点距離を可変させる。
具体的には、例えば、ユーザによる操作入力部10のズームボタンの所定操作に基づいてCPU11によって光学ズーム倍率が指定されると、レンズ駆動部(例えば、モータ等、カム等)1bは、CPU11から出力され入力された光学ズーム倍率の指定指示に従って、ズーム調整用レンズ1aを光軸方向に移動させて当該ズーム調整用レンズ1aの光軸方向の位置を調整する。
なお、レンズ駆動部1bは、複数の光学レンズのうち、フォーカス調整用レンズ(図示略)の光軸方向の位置を調整するための駆動源や動力伝達機構として機能しても良い。
The zoom lens unit 1 includes an optical zoom mechanism including a plurality of optical lenses, and adjusts the position in the optical axis direction of a zoom adjustment lens (optical element) 1a among the plurality of optical lenses. To change the focal length.
Specifically, for example, when the optical zoom magnification is designated by the CPU 11 based on a predetermined operation of the zoom button of the operation input unit 10 by the user, the lens driving unit (for example, a motor, cam, etc.) 1b is sent from the CPU 11. The zoom adjustment lens 1a is moved in the direction of the optical axis in accordance with the designation instruction for the optical zoom magnification that is output and input, and the position of the zoom adjustment lens 1a in the direction of the optical axis is adjusted.
The lens drive unit 1b may function as a drive source or a power transmission mechanism for adjusting the position of the focus adjustment lens (not shown) in the optical axis direction among the plurality of optical lenses.

電子撮像部2は、例えば、図示は省略するが、CCD(Charge Coupled Device)やCMOS(Complementary Metal-oxide Semiconductor)等のイメージセンサ等から構成されている。そして、電子撮像部2は、ズームレンズ部1の各種光学レンズや絞り(図示略)を通過した光学像を二次元の画像信号(RGB画像データ)に変換して、CDS/ADC部3に出力する。   For example, although not shown, the electronic imaging unit 2 includes an image sensor such as a charge coupled device (CCD) or a complementary metal-oxide semiconductor (CMOS). Then, the electronic imaging unit 2 converts an optical image that has passed through various optical lenses and a diaphragm (not shown) of the zoom lens unit 1 into a two-dimensional image signal (RGB image data) and outputs it to the CDS / ADC unit 3. To do.

このように、ズームレンズ部1及び電子撮像部2は、ズーム調整用レンズ1aを通過した光学像を画像情報に変換して出力する撮像手段を構成している。   As described above, the zoom lens unit 1 and the electronic imaging unit 2 constitute an imaging unit that converts an optical image that has passed through the zoom adjustment lens 1a into image information and outputs the image information.

CDS/ADC部3は、電子撮像部2から出力された被写体の光学像に応じたRGB色成分よりなる画像信号が入力され、必要に応じて、YUV色空間に対応する画像データ(YUV画像データ)やHSV色空間に対応する画像データ(HSV画像データ)に変換してCPU11に出力する。
また、CDS/ADC部3は、入力された画像のRGB成分のゲイン量を調整して、当該画像のホワイトバランス調整を行っても良い。
The CDS / ADC unit 3 receives an image signal composed of RGB color components corresponding to the optical image of the subject output from the electronic imaging unit 2 and, if necessary, image data corresponding to the YUV color space (YUV image data). Or image data (HSV image data) corresponding to the HSV color space and output to the CPU 11.
Further, the CDS / ADC unit 3 may adjust the gain amount of the RGB components of the input image and perform white balance adjustment of the image.

メモリ4は、RAM4aと、フラッシュメモリ4bとを具備している。   The memory 4 includes a RAM 4a and a flash memory 4b.

フラッシュメモリ4bは、不揮発性のメモリであり、当該撮像装置100に組み付けられたズームレンズ部1のレンズタイプ(光学特性;後述)を記憶する(図2参照)。
具体的には、当該撮像装置100の製造の際に、装置本体に対するズームレンズ部1の組み付け後に所定の測定装置(図示略)を用いて広角端の実際の焦点距離に係る設計値(後述)を測定し、フラッシュメモリ4bは、複数のレンズタイプの中で当該設計値に基づいて特定されたズームレンズ部1の光学特性に関する情報(レンズタイプ)を、メモリマップの所定のレンズタイプ記憶領域に書き込む。
The flash memory 4b is a nonvolatile memory, and stores the lens type (optical characteristics; described later) of the zoom lens unit 1 assembled in the imaging device 100 (see FIG. 2).
Specifically, when the imaging apparatus 100 is manufactured, a design value (described later) related to the actual focal length at the wide-angle end using a predetermined measuring apparatus (not shown) after the zoom lens unit 1 is assembled to the apparatus body. The flash memory 4b stores information (lens type) on the optical characteristics of the zoom lens unit 1 specified based on the design value among the plurality of lens types in a predetermined lens type storage area of the memory map. Write.

次に、ズームレンズ部1の光学特性に応じて区分されたレンズタイプの一例について図4を参照して説明する。
図3に示すように、広角端の焦点距離に対する許容範囲を例えば焦点距離の公称値(レンズメーカーが公表する値)±5%以内とした場合に、当該許容範囲以内のズームレンズ部1のタイプをレンズタイプ「0」とする。また、許容範囲外で、且つ、誤差範囲内(例えば、焦点距離の設計値+5%以内)のズームレンズ部1を光学特性に応じて所定数(例えば、3つ)の区分に分ける。そして、設計値が許容範囲に近い順に、ズームレンズ部1のタイプをレンズタイプ「1」、「2」、「3」とする。
ここで、設計値とは、レンズ製造メーカーから納品された光学レンズを撮像装置100に組み付けた状態で発揮される光学性能に関する情報である。
Next, an example of a lens type divided according to the optical characteristics of the zoom lens unit 1 will be described with reference to FIG.
As shown in FIG. 3, when the allowable range with respect to the focal length at the wide-angle end is set within ± 5% of the nominal value of the focal length (value published by the lens manufacturer), for example, the type of the zoom lens unit 1 within the allowable range Is the lens type “0”. Further, the zoom lens unit 1 that is outside the allowable range and within the error range (for example, within the design value of the focal length + 5% or less) is divided into a predetermined number (for example, three) according to the optical characteristics. Then, the types of the zoom lens unit 1 are set to the lens types “1”, “2”, and “3” in order from the design value close to the allowable range.
Here, the design value is information regarding optical performance exhibited in a state where an optical lens delivered from a lens manufacturer is assembled to the imaging apparatus 100.

なお、レンズタイプ「0」〜「3」の区分は、一例であってこれらに限られるものではなく、区分の数は適宜任意に変更可能である。また、レンズタイプの各区分は、歪曲補正用パラメータと拡大用パラメータとのずれを考慮して決定しても良く、例えば、レンズタイプ「0」の中で、歪曲補正用パラメータと拡大用パラメータとのずれに応じてより細分化された区分を設定しても良い。さらに、各区分の大きさは、例えば、ほぼ均等であっても良いし、許容範囲に近いか否かに応じてそれぞれの大きさを変更しても良い。   The classification of the lens types “0” to “3” is an example and is not limited to these, and the number of classifications can be arbitrarily changed as appropriate. In addition, each lens type classification may be determined in consideration of the difference between the distortion correction parameter and the enlargement parameter. For example, in the lens type “0”, the distortion correction parameter and the enlargement parameter A more detailed classification may be set according to the deviation. Furthermore, the size of each section may be substantially equal, for example, or may be changed depending on whether or not the size is close to the allowable range.

このように、レンズタイプ「0」〜「3」は、ズームレンズ部1に備わるズーム調整用レンズ1aの光軸方向の移動に基づく光学像の歪みに係る光学特性に応じて区分されている。即ち、レンズタイプは、ズーム調整用レンズ1aの移動に基づく光学像の歪みに関連する光学特性情報と対応付けられている。   As described above, the lens types “0” to “3” are classified according to the optical characteristics related to the distortion of the optical image based on the movement in the optical axis direction of the zoom adjustment lens 1 a provided in the zoom lens unit 1. That is, the lens type is associated with optical characteristic information related to distortion of the optical image based on the movement of the zoom adjustment lens 1a.

RAM4aは、例えば、DRAM等により構成され、画像処理部6やCPU11等によって処理されるデータ等を一時的に記憶する。
また、RAM4aは、フラッシュメモリ4bから読み出され、当該撮像装置100に組み付けられたレンズのレンズタイプを記憶する(図2参照)。具体的には、当該撮像装置100の電源投入時に、フラッシュメモリ4bに記憶されているレンズタイプに関する情報を読み出して、当該レンズタイプが正常なレンズタイプ、即ち、画像の歪曲補正や拡大処理にて対応可能な光学性能を具備するタイプ(例えば、レンズタイプ「0」〜「3」等)のレンズである場合に、読み出されたレンズタイプに関する情報を、メモリマップの所定のレンズタイプ記憶領域に書き込む。
The RAM 4a is constituted by, for example, a DRAM or the like, and temporarily stores data processed by the image processing unit 6, the CPU 11, or the like.
Further, the RAM 4a stores the lens type of the lens read from the flash memory 4b and assembled to the imaging device 100 (see FIG. 2). Specifically, when the imaging apparatus 100 is powered on, information on the lens type stored in the flash memory 4b is read, and the lens type is a normal lens type, that is, by distortion correction or enlargement processing of the image. In the case of a lens having a compatible optical performance (for example, lens types “0” to “3”), information about the read lens type is stored in a predetermined lens type storage area of the memory map. Write.

ROM5は、撮像装置100用の各種処理プログラムや各種データを記憶する。具体的には、ROM5は、画像処理部6による画質調整処理にて用いられる歪曲補正用データd1や拡大用データd2を記憶する。   The ROM 5 stores various processing programs and various data for the imaging apparatus 100. Specifically, the ROM 5 stores distortion correction data d1 and enlargement data d2 used in image quality adjustment processing by the image processing unit 6.

歪曲補正用データd1は、ROM5のメモリマップの歪曲補正用データ記憶領域に記憶されており(図4参照)、画像処理部6の画像補正部6aによる歪曲補正の内容と、ズームレンズ部1のレンズタイプ(光学特性)とを対応付けて記憶している。
具体的には、歪曲補正用データd1は、ズームレンズ部1の光学ズーム機構の各ズーム段と、当該ズームレンズ部1のレンズタイプ毎に画像補正部6aによる歪曲補正に用いられる歪曲補正用パラメータ(補正内容)とを対応付けたデータである。例えば、図4に示すように、光学ズーム機構のズーム1段目(広角端)の歪曲補正用パラメータとして、レンズタイプ「0」のレンズ用の「D PARAM Z1,0」と、レンズタイプ「1」のレンズ用の「D PARAM Z1,1」と、レンズタイプ「2」のレンズ用の「D PARAM Z1,2」と、レンズタイプ「3」のレンズ用の「D PARAM Z1,3」とが記憶されている。同様に、光学ズーム機構のズーム2段目の歪曲補正用パラメータとして、レンズタイプ「0」のレンズ用の「D PARAM Z2,0」と、レンズタイプ「1」のレンズ用の「D PARAM Z2,1」と、レンズタイプ「2」のレンズ用の「D PARAM Z2,2」と、レンズタイプ「3」のレンズ用の「D PARAM Z2,3」とが記憶されている。同様に、ズーム3段目以降も望遠端側までそれぞれ対応付けて記憶されているが、図示は省略する。
なお、光学ズーム機構の各ズーム段の歪曲補正用パラメータは、例えば、設計値やレンズサンプルを用いて予め実際に撮影した結果に基づいて規定されている。
The distortion correction data d1 is stored in the distortion correction data storage area of the memory map of the ROM 5 (see FIG. 4). The distortion correction contents by the image correction unit 6a of the image processing unit 6 and the zoom lens unit 1 The lens type (optical characteristics) is stored in association with each other.
Specifically, the distortion correction data d1 is a distortion correction parameter used for distortion correction by the image correction unit 6a for each zoom stage of the optical zoom mechanism of the zoom lens unit 1 and for each lens type of the zoom lens unit 1. (Correction content). For example, as shown in FIG. 4, “D PARAM Z1,0” for the lens of the lens type “0” and the lens type “1” are used as the distortion correction parameters at the first zoom stage (wide-angle end) of the optical zoom mechanism. "D PARAM Z1,1" for lenses of "D", "D PARAM Z1,2" for lenses of lens type "2", and "D PARAM Z1,3" for lenses of lens type "3" It is remembered. Similarly, “D PARAM Z2,0” for the lens type “0” and “D PARAM Z2,” for the lens type “1” are used as distortion correction parameters for the second stage of the zoom of the optical zoom mechanism. “1”, “D PARAM Z2,2” for the lens of the lens type “2”, and “D PARAM Z2,3” for the lens of the lens type “3” are stored. Similarly, the third and subsequent zoom stages are also stored in association with each other up to the telephoto end side, but illustration is omitted.
It should be noted that the distortion correction parameters for each zoom stage of the optical zoom mechanism are defined based on, for example, a result of actual photographing in advance using a design value or a lens sample.

拡大用データd2は、ROM5のメモリマップの拡大用データ記憶領域に記憶されており(図4参照)、画像処理部6の拡大処理部6bによる拡大処理の内容と、ズームレンズ部1のレンズタイプ(光学特性)とを対応付けて記憶している。
具体的には、拡大用データd2は、ズームレンズ部1の光学ズーム機構の各ズーム段と、当該ズームレンズ部1のレンズタイプ毎に拡大処理部6bによる拡大処理に用いられる拡大用パラメータ(拡大処理の割合)とを対応付けたデータである。例えば、図4に示すように、光学ズーム機構のズーム1段目(広角端)の拡大用パラメータとして、レンズタイプ「0」のレンズ用の「E PARAM Z1,0」と、レンズタイプ「1」のレンズ用の「E PARAM Z1,1」と、レンズタイプ「2」のレンズ用の「E PARAM Z1,2」と、レンズタイプ「3」のレンズ用の「E PARAM Z1,3」とが記憶されている。同様に、光学ズーム機構のズーム2段目の拡大用パラメータとして、レンズタイプ「0」のレンズ用の「E PARAM Z2,0」と、レンズタイプ「1」のレンズ用の「E PARAM Z2,1」と、レンズタイプ「2」のレンズ用の「E PARAM Z2,2」と、レンズタイプ「3」のレンズ用の「E PARAM Z2,3」とが記憶されている。同様に、ズーム3段目以降も望遠端側までそれぞれ対応付けて記憶されているが、図示は省略する。
なお、光学ズーム機構の各ズーム段の拡大用パラメータは、例えば、設計値やレンズサンプルを用いて予め実際に撮影した結果に基づいて規定されている。
The enlargement data d2 is stored in the enlargement data storage area of the memory map of the ROM 5 (see FIG. 4). The contents of the enlargement processing by the enlargement processing unit 6b of the image processing unit 6 and the lens type of the zoom lens unit 1 are stored. (Optical characteristics) are stored in association with each other.
Specifically, the enlargement data d2 includes the enlargement parameter (enlargement) used for the enlargement processing by the enlargement processing unit 6b for each zoom stage of the optical zoom mechanism of the zoom lens unit 1 and for each lens type of the zoom lens unit 1. The ratio of processing). For example, as shown in FIG. 4, “E PARAM Z1,0” for the lens of the lens type “0” and the lens type “1” are used as the enlargement parameters at the first zoom stage (wide angle end) of the optical zoom mechanism. "E PARAM Z1,1" for lens of "3", "E PARAM Z1,2" for lens of lens type "2", and "E PARAM Z1,3" for lens of lens type "3" Has been. Similarly, as an expansion parameter for the second zoom stage of the optical zoom mechanism, “E PARAM Z2,0” for the lens type “0” and “E PARAM Z2,1” for the lens type “1” are used. , “E PARAM Z2,2” for the lens of the lens type “2”, and “E PARAM Z2,3” for the lens of the lens type “3” are stored. Similarly, the third and subsequent zoom stages are also stored in association with each other up to the telephoto end side, but illustration is omitted.
Note that the enlargement parameter for each zoom stage of the optical zoom mechanism is defined based on, for example, a result of actual photographing in advance using a design value or a lens sample.

ここで、広角端の焦点距離に対する歪曲補正の強度及び拡大処理の割合の一例について、図5を参照して説明する。
なお、図5にあっては、広角端の焦点距離の公称値及び設計値に対応する歪曲補正用データd1及び拡大用データd2の内容の一例を例示する。また、焦点距離の公称値に対して設計値が望遠端側に3%ずれている。
また、歪曲補正用データd1に係る歪曲補正用パラメータは、Dis補正値(%)として表し、負の数値が小さい程補正の強度が小さくなっている。また、拡大用データd2に係る拡大用パラメータは、拡大率(100:1倍)として表し、数値が小さい程拡大の割合が小さくなっている。
Here, an example of the intensity of distortion correction and the ratio of enlargement processing with respect to the focal length at the wide-angle end will be described with reference to FIG.
FIG. 5 illustrates an example of the contents of the distortion correction data d1 and the enlargement data d2 corresponding to the nominal value and the design value of the focal length at the wide angle end. Further, the design value is shifted by 3% toward the telephoto end side with respect to the nominal value of the focal length.
The distortion correction parameter related to the distortion correction data d1 is expressed as a Dis correction value (%), and the smaller the negative numerical value, the smaller the correction intensity. The enlargement parameter related to the enlargement data d2 is expressed as an enlargement ratio (100: 1 times), and the smaller the numerical value, the smaller the enlargement ratio.

図5に示すように、光学レンズは、広角端側になるにつれて歪曲収差の度合いが大きくなるため、Dis補正値も同様に広角端側になるにつれて歪曲補正の強度が大きくなっている。また、焦点距離の公称値±5%以内となるレンズタイプ「0」のズームレンズの場合、Dis補正値は焦点距離の公称値に対する1%の誤差毎に規定されている。具体的には、Dis補正値は、「-6.00」、「-6.63」、「-7.27」、「-7.90」、「-8.33」、「-8.77」、「-9.20」、「-9.63」、「-10.07」、「-10.50」と、望遠端側から広角端側になるにつれて歪曲補正の強度が大きくなるように規定されている。
これに対して、レンズタイプ「1」〜「3」のズームレンズは、レンズタイプ「1」に対応するDis補正値は「-5.00」、レンズタイプ「1」に対応するDis補正値は「-4.50」、レンズタイプ「1」に対応するDis補正値は「-4.00」と、各レンズタイプに応じてDis補正値が規定されている。
As shown in FIG. 5, since the degree of distortion aberration increases as the optical lens becomes closer to the wide-angle end side, the intensity of distortion correction also increases as the Dis correction value similarly becomes closer to the wide-angle end side. Further, in the case of a zoom lens of the lens type “0” that is within ± 5% of the nominal value of the focal length, the Dis correction value is defined for each 1% error with respect to the nominal value of the focal length. Specifically, Dis correction values are `` -6.00 '', `` -6.63 '', `` -7.27 '', `` -7.90 '', `` -8.33 '', `` -8.77 '', `` -9.20 '', `` -9.63 '', “-10.07” and “-10.50” are defined so that the strength of distortion correction increases from the telephoto end side toward the wide-angle end side.
On the other hand, in the zoom lenses of lens types “1” to “3”, the Dis correction value corresponding to the lens type “1” is “−5.00”, and the Dis correction value corresponding to the lens type “1” is “−”. The Dis correction value corresponding to “4.50” and the lens type “1” is “−4.00”, and the Dis correction value is defined according to each lens type.

また、画像データの拡大率は、Dis補正値と同様に、広角端側になるにつれて歪曲補正の強度が大きくなっている。また、画像データの拡大率は、焦点距離の公称値±5%以内のズームレンズとこの範囲外のズームレンズとで異なっており、具体的には、レンズタイプ「0」のズームレンズの拡大率は「103.0」であり、レンズタイプ「1」〜「3」のズームレンズの拡大率は「102.0」となっている。
このように、レンズタイプ「1」〜「3」のズームレンズでは、拡大率が固定されているのに対して、公称値に対する設計値の望遠端側へのずれが大きくなる程Dis補正値が小さくされている。従って、レンズタイプ「1」〜「3」のズームレンズでは、公称値に対する設計値の望遠端側へのずれが大きくなるにつれて、画像処理における画像データの拡大処理の比重が次第に大きく、即ち、歪曲補正の比重が次第に小さくなっている。
Further, as with the Dis correction value, the magnification of the image data increases as the distortion correction intensity increases toward the wide-angle end. Further, the zoom ratio of the image data differs between the zoom lens within the nominal value ± 5% of the focal length and the zoom lens outside this range. Specifically, the zoom ratio of the zoom lens of the lens type “0” is different. Is “103.0”, and the zoom ratio of the zoom lenses of the lens types “1” to “3” is “102.0”.
Thus, in the zoom lenses of the lens types “1” to “3”, the enlargement ratio is fixed, but the Dis correction value increases as the deviation of the design value from the nominal value toward the telephoto end increases. It has been made smaller. Accordingly, in the zoom lenses of the lens types “1” to “3”, the specific gravity of the image data enlargement process in the image processing is gradually increased as the deviation of the design value from the nominal value toward the telephoto end increases. The specific gravity of correction is gradually decreasing.

ここで、ROM5は、画像補正部6aに係る歪曲補正用パラメータ(補正内容)及び拡大処理部6bに係る拡大用パラメータ(拡大処理の割合)と、レンズタイプ(光学特性情報)とを対応付けて記憶する記憶手段を構成している。   Here, the ROM 5 associates the distortion correction parameter (correction content) related to the image correction unit 6a and the enlargement parameter (enlargement processing ratio) related to the enlargement processing unit 6b with the lens type (optical characteristic information). Storage means for storing is configured.

また、図5にあっては、公称値に対する設計値のずれの程度や、歪曲補正用パラメータ及び拡大用パラメータの数値等は一例であってこれらに限られるものではなく、適宜任意に変更可能である。   Further, in FIG. 5, the degree of deviation of the design value from the nominal value, the numerical values of the distortion correction parameter and the enlargement parameter, and the like are merely examples, and can be arbitrarily changed as appropriate. is there.

画像処理部6は、CDS/ADC部3から出力された画像データの記録時に、CPU11から出力された画像データを受け取って、当該画像データに対して各種の画像処理や圧縮等を施してファイル化する。そして、画像処理部6は、ファイル化された画像データを画像記録部9に転送する。   The image processing unit 6 receives the image data output from the CPU 11 when recording the image data output from the CDS / ADC unit 3, and performs various image processing, compression, etc. on the image data to form a file. To do. Then, the image processing unit 6 transfers the filed image data to the image recording unit 9.

また、画像処理部6は、画像補正部6aと、拡大処理部6bとを具備している。   The image processing unit 6 includes an image correction unit 6a and an enlargement processing unit 6b.

画像補正部6aは、CDS/ADC部3から出力され入力された画像データを、ズームレンズ部1の光学特性と対応付けられたレンズタイプに応じて所定の補正強度で補正する。
即ち、画像補正部6aは、CDS/ADC部3から出力され入力された画像データに対して歪曲補正を行うものであり、ROM5に記憶されている歪曲補正用データd1に基づいて、ズームレンズ部1のレンズタイプ毎に当該歪曲補正の強度(補正内容)をズーム調整用レンズ1aの光軸方向の位置に応じて可変させる。具体的には、先ず、CPU11は、ユーザによる操作入力部10のズームボタンの所定操作に基づいて光学ズーム倍率の指定指示に係る所定の操作信号が入力されると、この指定指示に対応する光学ズーム機構のズーム段、即ち、ズーム調整用レンズ1aの光軸方向の位置を特定する。そして、CPU11は、特定された光学ズーム機構のズーム段及び当該ズームレンズ部1のレンズタイプに基づいて、歪曲補正用データd1における対応する歪曲補正用パラメータ(図4参照)をROM5から読み出して画像補正部6aに設定する。そして、画像補正部6aは、当該歪曲補正用パラメータに応じた強度で画像データに対して歪曲補正を行う(図8(a)等参照)。
なお、画像補正部6aは、ズームレンズ部1のレンズタイプ毎にズーム調整用レンズ1aの光軸方向の位置(ズーム段)に応じて歪曲補正の強度を可変させて施すようにしたが、これに限られるものではなく、少なくともズーム調整用レンズ1aが特定の位置、例えば、広角端に対応する位置にある場合に、ズームレンズ部1のレンズタイプ(光学特性)に応じて歪曲補正の強度を可変させて施すようにすれば良い。
The image correction unit 6 a corrects the input image data output from the CDS / ADC unit 3 with a predetermined correction intensity according to the lens type associated with the optical characteristics of the zoom lens unit 1.
That is, the image correction unit 6 a performs distortion correction on the image data output from the CDS / ADC unit 3 and input, and based on the distortion correction data d 1 stored in the ROM 5, the zoom lens unit For each lens type, the distortion correction intensity (correction content) is varied according to the position of the zoom adjustment lens 1a in the optical axis direction. Specifically, first, when a predetermined operation signal related to an instruction to specify an optical zoom magnification is input based on a predetermined operation of the zoom button of the operation input unit 10 by the user, the CPU 11 receives an optical corresponding to the specification instruction. The zoom stage of the zoom mechanism, that is, the position of the zoom adjusting lens 1a in the optical axis direction is specified. Then, the CPU 11 reads out the corresponding distortion correction parameter (see FIG. 4) in the distortion correction data d1 from the ROM 5 based on the specified zoom stage of the optical zoom mechanism and the lens type of the zoom lens unit 1, and reads the image. Set in the correction unit 6a. Then, the image correction unit 6a performs distortion correction on the image data with an intensity corresponding to the distortion correction parameter (see FIG. 8A and the like).
Note that the image correction unit 6a performs the distortion correction by varying the intensity of the zoom adjustment lens 1a in the optical axis direction (zoom stage) for each lens type of the zoom lens unit 1. The intensity of distortion correction is set according to the lens type (optical characteristics) of the zoom lens unit 1 at least when the zoom adjustment lens 1a is at a specific position, for example, a position corresponding to the wide-angle end. What is necessary is just to make it variable.

ここで、画像補正部6aは、ズーム調整用レンズ1aの移動に基づく光学像の歪みに関連するズームレンズ部1の光学特性情報(レンズタイプ)に従って、当該ズーム調整用レンズ1aが特定の位置にある場合に電子撮像部2から出力される画像データを補正する補正手段を構成している。
また、画像補正部6a及びCPU11は、補正手段として、レンズタイプに基づいて、ズーム調整用レンズ1aが特定の位置にある場合の補正内容をROM5から読み出す。なお、画像補正部6aは、CPU11とは独立して、光学ズーム機構のズーム段及びズームレンズ部1のレンズタイプに基づいて、歪曲補正用データd1における対応する歪曲補正用パラメータをROM5から読み出す処理を行っても良い。
Here, the image correction unit 6a has the zoom adjustment lens 1a at a specific position in accordance with the optical characteristic information (lens type) of the zoom lens unit 1 related to the distortion of the optical image based on the movement of the zoom adjustment lens 1a. In some cases, correction means for correcting image data output from the electronic imaging unit 2 is configured.
Further, the image correction unit 6a and the CPU 11 read out correction contents when the zoom adjustment lens 1a is at a specific position from the ROM 5 based on the lens type as correction means. The image correction unit 6a is a process of reading out the corresponding distortion correction parameters in the distortion correction data d1 from the ROM 5 based on the zoom stage of the optical zoom mechanism and the lens type of the zoom lens unit 1 independently of the CPU 11. May be performed.

拡大処理部6bは、CDS/ADC部3から出力され入力された画像データを、ズームレンズ部1の光学特性と対応付けられたレンズタイプに応じて所定の割合で拡大する。
即ち、拡大処理部6bは、CDS/ADC部3から出力され入力された画像データを所定位置(例えば、画像の略中心)を基準として所定の割合で切り出した後、切り出した部分全体を所定の比率で(略均等に)拡大するものであり、ROM5に記憶されている拡大用データd2に基づいて、ズームレンズ部1のレンズタイプ毎に当該拡大処理の割合をズーム調整用レンズ1aの光軸方向の位置に応じて可変させる。具体的には、先ず、CPU11は、ユーザによる操作入力部10のズームボタンの所定操作に基づいて光学ズーム倍率の指定指示に係る所定の操作信号が入力されると、この指定指示に対応する光学ズーム機構のズーム段、即ち、ズーム調整用レンズ1aの光軸方向の位置を特定する。そして、CPU11は、特定された光学ズーム機構のズーム段及び当該ズームレンズ部1のレンズタイプに基づいて、拡大用データd2における対応する拡大用パラメータ(図4参照)をROM5から読み出して拡大処理部6bに設定する。そして、拡大処理部6bは、当該拡大用パラメータに応じた割合で画像データを切り出した後、切り出した部分を拡大する処理を行う(図8(a)等参照)。
なお、拡大処理部6bは、ズームレンズ部1のレンズタイプ毎にズーム調整用レンズ1aの光軸方向の位置(ズーム段)に応じて拡大処理の割合を可変させるようにしたが、これに限られるものではなく、少なくともズーム調整用レンズ1aが特定の位置、例えば、広角端に対応する位置にある場合に、ズームレンズ部1のレンズタイプ(光学特性)に応じて拡大処理の割合を可変させるようにすれば良い。
The enlargement processing unit 6b enlarges the input image data output from the CDS / ADC unit 3 at a predetermined ratio according to the lens type associated with the optical characteristics of the zoom lens unit 1.
That is, the enlargement processing unit 6b cuts out the image data output and input from the CDS / ADC unit 3 at a predetermined ratio with reference to a predetermined position (for example, approximately the center of the image), and then the entire cut-out part is predetermined. The ratio is enlarged (roughly uniformly), and based on the enlargement data d2 stored in the ROM 5, the ratio of the enlargement process for each lens type of the zoom lens unit 1 is changed to the optical axis of the zoom adjustment lens 1a. Variable according to the position of the direction. Specifically, first, when a predetermined operation signal related to an instruction to specify an optical zoom magnification is input based on a predetermined operation of the zoom button of the operation input unit 10 by the user, the CPU 11 receives an optical corresponding to the specification instruction. The zoom stage of the zoom mechanism, that is, the position of the zoom adjusting lens 1a in the optical axis direction is specified. Then, the CPU 11 reads out the corresponding enlargement parameter (see FIG. 4) in the enlargement data d2 from the ROM 5 based on the specified zoom stage of the optical zoom mechanism and the lens type of the zoom lens unit 1 and enlargement processing unit Set to 6b. The enlargement processing unit 6b cuts out the image data at a rate corresponding to the enlargement parameter, and then performs a process of enlarging the cut out portion (see FIG. 8A and the like).
The enlargement processing unit 6b varies the enlargement processing ratio according to the position (zoom stage) of the zoom adjustment lens 1a in the optical axis direction for each lens type of the zoom lens unit 1, but the present invention is not limited to this. However, when at least the zoom adjustment lens 1a is at a specific position, for example, at a position corresponding to the wide-angle end, the ratio of the enlargement process is changed according to the lens type (optical characteristics) of the zoom lens unit 1. You can do that.

ここで、拡大処理部6bは、ズーム調整用レンズ1aの移動に基づく光学像の歪みに関連するズームレンズ部1の光学特性情報(レンズタイプ)に従って、当該ズーム調整用レンズ1aが特定の位置にある場合に電子撮像部2から出力される画像データを所定の割合で拡大処理する拡大処理手段を構成している。
また、拡大処理部6b及びCPU11は、拡大処理手段として、レンズタイプに基づいて、ズーム調整用レンズ1aが特定の位置にある場合の拡大処理の割合をROM5から読み出す。なお、拡大処理部6bは、CPU11とは独立して、光学ズーム機構のズーム段及びズームレンズ部1のレンズタイプに基づいて、拡大用データd2における対応する拡大用パラメータをROM5から読み出す処理を行っても良い。
Here, the enlargement processing unit 6b moves the zoom adjustment lens 1a to a specific position according to the optical characteristic information (lens type) of the zoom lens unit 1 related to the distortion of the optical image based on the movement of the zoom adjustment lens 1a. In some cases, enlargement processing means for enlarging the image data output from the electronic imaging unit 2 at a predetermined rate is configured.
Further, the enlargement processing unit 6b and the CPU 11 read out from the ROM 5 a ratio of enlargement processing when the zoom adjustment lens 1a is at a specific position based on the lens type as enlargement processing means. The enlargement processing unit 6b performs a process of reading out the corresponding enlargement parameter in the enlargement data d2 from the ROM 5 based on the zoom stage of the optical zoom mechanism and the lens type of the zoom lens unit 1 independently of the CPU 11. May be.

また、画像処理部6は、出力手段として、画像補正部6aによる歪曲補正及び拡大処理部6bによる拡大処理が施された画像データを処理済み画像としてCPU11に出力する。   Further, the image processing unit 6 outputs, as output means, image data that has undergone distortion correction by the image correction unit 6a and enlargement processing by the enlargement processing unit 6b to the CPU 11 as a processed image.

表示制御部7は、メモリ4に一時的に記憶されている表示用の画像データを読み出して表示部8に表示させる制御を行う。
具体的には、表示制御部7は、VRAM、VRAMコントローラ、デジタルビデオエンコーダなどを備えている(何れも図示略)。そして、デジタルビデオエンコーダは、CPU11の制御下にてメモリ4から読み出されてVRAMに記録されている輝度信号Y及び色差信号Cb,Crを、VRAMコントローラを介してVRAMから定期的に読み出して、これらのデータを元にビデオ信号を発生して表示部8に出力する。
The display control unit 7 performs control for reading display image data temporarily stored in the memory 4 and displaying the read image data on the display unit 8.
Specifically, the display control unit 7 includes a VRAM, a VRAM controller, a digital video encoder, and the like (all not shown). The digital video encoder periodically reads out the luminance signal Y and the color difference signals Cb and Cr read from the memory 4 and recorded in the VRAM under the control of the CPU 11 from the VRAM through the VRAM controller, Based on these data, a video signal is generated and output to the display unit 8.

表示部8は、例えば、液晶表示装置であり、表示制御部7からのビデオ信号に基づいて電子撮像部2により撮像された画像などを表示画面に表示する。具体的には、表示部8は、静止画撮像モードや動画撮像モードにて、電子撮像部2による被写体の撮像により生成された複数の画像フレームを所定のフレームレートで逐次更新しながらライブビュー画像を表示する。   The display unit 8 is, for example, a liquid crystal display device, and displays an image captured by the electronic imaging unit 2 on the display screen based on a video signal from the display control unit 7. Specifically, the display unit 8 updates the live view image while sequentially updating a plurality of image frames generated by the imaging of the subject by the electronic imaging unit 2 at a predetermined frame rate in the still image capturing mode and the moving image capturing mode. Is displayed.

画像記録部9は、例えば、不揮発性メモリ等により構成され、画像処理部6の符号化部(図示略)により所定の圧縮形式で符号化された記録用の静止画像データや複数の画像フレームからなる動画像データを記録する。   The image recording unit 9 includes, for example, a non-volatile memory or the like, and includes recording still image data or a plurality of image frames encoded in a predetermined compression format by an encoding unit (not shown) of the image processing unit 6. Is recorded.

操作入力部10は、当該撮像装置100の所定操作を行うためのものである。具体的には、操作入力部10は、被写体の撮像指示に係るシャッタボタン、撮像モードや機能等の選択指示に係る選択決定用ボタン、ズーム量の調整指示に係るズームボタン等を備え(何れも図示略)、これらのボタンの操作に応じて所定の操作信号をCPU11に出力する。   The operation input unit 10 is for performing a predetermined operation of the imaging apparatus 100. Specifically, the operation input unit 10 includes a shutter button related to an imaging instruction of a subject, a selection determination button related to an instruction to select an imaging mode, a function, etc., a zoom button related to an instruction to adjust the zoom amount, etc. A predetermined operation signal is output to the CPU 11 in response to the operation of these buttons.

CPU11は、撮像装置100の各部を制御するものである。具体的には、CPU11は、ROM5から読み出された撮像装置100用の各種処理プログラム(図示略)に従って各種の制御動作を行う。   The CPU 11 controls each part of the imaging device 100. Specifically, the CPU 11 performs various control operations according to various processing programs (not shown) for the imaging apparatus 100 read from the ROM 5.

次に、撮像装置100によるメモリ書き込み処理について、図7を参照して説明する。
図6は、メモリ書き込み処理に係る動作の一例を示すフローチャートである。
Next, the memory writing process by the imaging apparatus 100 will be described with reference to FIG.
FIG. 6 is a flowchart illustrating an example of an operation related to the memory writing process.

メモリ書き込み処理は、撮像装置100の電源が投入された際に実行される処理である。
図6に示すように、撮像装置100の電源が投入されると、CPU11は、先ず、メモリ4のRAM4aに対するアクセスを可能としたり、所定の初期値を書き込むなどの初期化を実行する(ステップS1)。
The memory writing process is a process executed when the power of the imaging apparatus 100 is turned on.
As shown in FIG. 6, when the power of the imaging apparatus 100 is turned on, the CPU 11 first executes initialization such as enabling access to the RAM 4a of the memory 4 or writing a predetermined initial value (step S1). ).

その後、CPU11は、メモリ4のフラッシュメモリ4bに書き込まれているレンズタイプ、即ち、当該撮像装置100に組み付けられたレンズのレンズタイプに関する情報を読み出して(ステップS2)、当該レンズタイプが正常であるか否かを判定する(ステップS3)。即ち、CPU11は、レンズタイプが画像の歪曲補正や拡大処理にて対応可能な光学性能を具備するタイプ(例えば、レンズタイプ「0」〜「3」等)であるか否かを判定する。
そして、ステップS3にて、レンズタイプが正常であると判定されると(ステップS3;YES)、CPU11は、読み出されたレンズタイプに関する情報をRAM4aのメモリマップの所定のレンズタイプ記憶領域に書き込んで(ステップS4)、メモリ書き込み処理を終了する。
Thereafter, the CPU 11 reads out information regarding the lens type written in the flash memory 4b of the memory 4, that is, the lens type of the lens assembled in the imaging apparatus 100 (step S2), and the lens type is normal. Is determined (step S3). That is, the CPU 11 determines whether or not the lens type is a type (for example, lens types “0” to “3”) having optical performance that can be handled by image distortion correction and enlargement processing.
If it is determined in step S3 that the lens type is normal (step S3; YES), the CPU 11 writes information on the read lens type in a predetermined lens type storage area of the memory map of the RAM 4a. (Step S4), the memory writing process is terminated.

一方、ステップS3にて、レンズタイプが正常でないと判定されると(ステップS3;NO)、CPU11は、レンズタイプが異常である旨のエラー表示を実行させる指示を表示制御部7に出力して、表示制御部7は、所定のエラー表示を表示部8に表示させる(ステップS5)。その後、CPU11は、念のため、レンズタイプ「0」に関する情報をRAM4aのメモリマップの所定のレンズタイプ記憶領域に書き込んで(ステップS6)、メモリ書き込み処理を終了する。   On the other hand, when it is determined in step S3 that the lens type is not normal (step S3; NO), the CPU 11 outputs an instruction to execute an error display indicating that the lens type is abnormal to the display control unit 7. The display control unit 7 displays a predetermined error display on the display unit 8 (step S5). Thereafter, as a precaution, the CPU 11 writes information on the lens type “0” in a predetermined lens type storage area of the memory map of the RAM 4a (step S6), and ends the memory writing process.

次に、撮像装置100による画質調整処理について、図7及び図8を参照して説明する。
図7は、画質調整処理に係る動作の一例を示すフローチャートである。
Next, image quality adjustment processing by the imaging apparatus 100 will be described with reference to FIGS.
FIG. 7 is a flowchart illustrating an example of operations related to image quality adjustment processing.

画質調整処理は、撮像装置100の電源が投入されてメモリ書き込み処理が行われた後に実行される処理である。
図7に示すように、CPU11は、先ず、歪曲補正用パラメータ及び課題用パラメータを初期化する(ステップS21)。具体的には、CPU11は、ズームレンズ部1の光学ズーム機構のズーム段(即ち、ズーム調整用レンズ1aの光軸方向の位置)を特定するとともに、メモリ書き込み処理でRAM4aに書き込まれたズームレンズ部1のレンズタイプを読み出す。そして、CPU11は、特定された光学ズーム機構のズーム段及び読み出されたズームレンズ部1のレンズタイプに基づいて、歪曲補正用データd1における対応する歪曲補正用パラメータ(図4参照)を特定するとともに、拡大用データd2における対応する拡大用パラメータ(図4参照)を特定する。
The image quality adjustment process is a process executed after the imaging apparatus 100 is turned on and the memory writing process is performed.
As shown in FIG. 7, the CPU 11 first initializes the distortion correction parameter and the problem parameter (step S21). Specifically, the CPU 11 specifies the zoom stage of the optical zoom mechanism of the zoom lens unit 1 (that is, the position of the zoom adjustment lens 1a in the optical axis direction), and the zoom lens written in the RAM 4a by the memory writing process. Read the lens type of unit 1. Then, the CPU 11 specifies the corresponding distortion correction parameter (see FIG. 4) in the distortion correction data d1 based on the specified zoom stage of the optical zoom mechanism and the read lens type of the zoom lens unit 1. At the same time, the corresponding enlargement parameter (see FIG. 4) in the enlargement data d2 is specified.

次に、CPU11は、ライブビュー画像や記録画像の撮像の際などに、光学ズーム倍率、即ち、光学ズーム機構のズーム段が変更されたか否かを判定する(ステップS22)。具体的には、CPU11は、ユーザによる操作入力部10のズームボタンの所定操作に基づいて、光学ズーム倍率の指定指示に係る所定の操作信号が入力されたか否かに応じて、光学ズーム倍率が変更されたか否かを判定する。   Next, the CPU 11 determines whether or not the optical zoom magnification, that is, the zoom stage of the optical zoom mechanism has been changed at the time of capturing a live view image or a recorded image (step S22). Specifically, the CPU 11 determines the optical zoom magnification based on whether or not a predetermined operation signal related to an instruction to specify the optical zoom magnification is input based on a predetermined operation of the zoom button of the operation input unit 10 by the user. It is determined whether or not it has been changed.

そして、ステップS22にて、光学ズーム倍率が変更されたと判定されると(ステップS22;YES)、CPU11は、ズームレンズ部1のレンズタイプに基づいて、対応する歪曲補正用パラメータ(図4参照)を読み出して当該パラメータに変更する(ステップS23)。具体的には、CPU11は、ユーザにより指定指示された光学ズーム倍率、即ち、光学ズーム機構のズーム段及び当該ズームレンズ部1のレンズタイプに基づいて、歪曲補正用データd1における対応する歪曲補正用パラメータ(図4参照)をROM5から読み出して当該パラメータに変更する。
次に、CPU11は、ズームレンズ部1のレンズタイプに基づいて、対応する拡大用パラメータ(図4参照)を読み出して当該パラメータに変更する(ステップS24)。具体的には、CPU11は、ユーザにより指定指示された光学ズーム倍率、即ち、光学ズーム機構のズーム段及び当該ズームレンズ部1のレンズタイプに基づいて、拡大用データd2における対応する拡大用パラメータ(図4参照)をROM5から読み出して当該パラメータに変更する。
If it is determined in step S22 that the optical zoom magnification has been changed (step S22; YES), the CPU 11 determines a corresponding distortion correction parameter based on the lens type of the zoom lens unit 1 (see FIG. 4). Is changed to the parameter (step S23). Specifically, the CPU 11 performs the corresponding distortion correction in the distortion correction data d1 based on the optical zoom magnification designated by the user, that is, the zoom stage of the optical zoom mechanism and the lens type of the zoom lens unit 1. A parameter (see FIG. 4) is read from the ROM 5 and changed to the parameter.
Next, based on the lens type of the zoom lens unit 1, the CPU 11 reads the corresponding enlargement parameter (see FIG. 4) and changes it to the parameter (step S24). Specifically, the CPU 11 specifies the corresponding enlargement parameter (2) in the enlargement data d2 based on the optical zoom magnification designated by the user, that is, the zoom stage of the optical zoom mechanism and the lens type of the zoom lens unit 1. 4) is read from the ROM 5 and changed to the relevant parameter.

続けて、CPU11は、変更された歪曲補正用パラメータ(図4参照)を画像処理部6の画像補正部6aに設定するとともに(ステップS25)、変更された拡大用パラメータ(図4参照)を画像処理部6の拡大処理部6bに設定する(ステップS26)。
また、ステップS22にて、光学ズーム倍率が変更されていないと判定された場合にも(ステップS22;NO)、CPU11は、処理をステップS25に移行して、上記と同様に、ステップS21にて特定された歪曲補正用パラメータ及び拡大用パラメータの設定を行う。
Subsequently, the CPU 11 sets the changed distortion correction parameter (see FIG. 4) in the image correction unit 6a of the image processing unit 6 (step S25), and the changed enlargement parameter (see FIG. 4) as an image. The enlargement processing unit 6b of the processing unit 6 is set (step S26).
Even when it is determined in step S22 that the optical zoom magnification has not been changed (step S22; NO), the CPU 11 shifts the processing to step S25 and, similarly to the above, in step S21. The specified distortion correction parameter and enlargement parameter are set.

なお、CPU11による歪曲補正用パラメータの変更後(ステップS23)、拡大用パラメータの変更処理(ステップS24)を行うようにしたが、処理の順序はこれに限られるものではなく、これらの処理の順序は逆であっても良い。
また、CPU11による歪曲補正用パラメータの画像補正部6aに対する設定後(ステップS25)、拡大用パラメータの拡大処理部6bに対する設定処理(ステップS26)を行うようにしたが、処理の順序はこれに限られるものではなく、これらの処理の順序は逆であっても良い。
Note that, after the distortion correction parameters are changed by the CPU 11 (step S23), the enlargement parameter changing process (step S24) is performed, but the order of the processes is not limited to this, and the order of these processes is not limited. May be reversed.
Further, after the CPU 11 sets the distortion correction parameter for the image correction unit 6a (step S25), the setting process for the enlargement parameter enlargement processing unit 6b (step S26) is performed. However, the processing order is not limited to this. However, the order of these processes may be reversed.

そして、画像処理部6の画像補正部6a及び拡大処理部6bは、歪曲補正用パラメータ及び拡大用パラメータに基づいて、処理対象画像に対する画質調整を行う(ステップS27)。具体的には、画像補正部6aは、歪曲補正用パラメータに応じた強度で画像データに対して歪曲補正を行うとともに、拡大用パラメータに応じた割合で画像データを切り出した後、切り出した部分を拡大する処理を行う(図8(a)等参照)。
例えば、ズームレンズ部1がレンズタイプ「0」のレンズである場合、画像補正部6aは、レンズタイプ「1」に比して相対的に強い補正強度(補正度合:大)で画像データに対して歪曲補正を行うとともに、レンズタイプ「1」に比して相対的に大きい拡大率で画像データを切り出した後、切り出した部分を拡大する処理を行う(図8(a)参照)。また、ズームレンズ部1がレンズタイプ「1」のレンズである場合、当該レンズの焦点距離の設計値が望遠側にずれているため、歪曲収差もより小さくなるとともに画角も狭くなることから、画像補正部6aは、レンズタイプ「0」に比して相対的に弱い補正強度(補正度合:小)で画像データに対して歪曲補正を行うとともに、レンズタイプ「1」に比して相対的に小さい拡大率で画像データを切り出した後、切り出した部分を拡大する処理を行う(図8(b)参照)。
Then, the image correction unit 6a and the enlargement processing unit 6b of the image processing unit 6 perform image quality adjustment on the processing target image based on the distortion correction parameter and the enlargement parameter (step S27). Specifically, the image correction unit 6a performs distortion correction on the image data with the intensity according to the distortion correction parameter, and after cutting out the image data at a rate according to the enlargement parameter, Enlarging processing is performed (see FIG. 8A and the like).
For example, when the zoom lens unit 1 is a lens of the lens type “0”, the image correction unit 6a applies a relatively strong correction strength (correction degree: large) to the image data compared to the lens type “1”. Then, distortion correction is performed, and after the image data is cut out with an enlargement ratio relatively larger than that of the lens type “1”, a process of enlarging the cut out portion is performed (see FIG. 8A). Further, when the zoom lens unit 1 is a lens of the lens type “1”, the design value of the focal length of the lens is shifted to the telephoto side, so that distortion becomes smaller and the angle of view becomes narrower. The image correction unit 6a performs distortion correction on the image data with a relatively weak correction strength (correction degree: small) compared to the lens type “0”, and relative to the lens type “1”. After the image data is cut out with a small enlargement ratio, a process for enlarging the cut out portion is performed (see FIG. 8B).

その後、画像処理部6は、画像補正部6aによる歪曲補正及び拡大処理部6bによる拡大処理が施された画像データを処理済み画像としてCPU11に出力した後(ステップS28)、CPU11は、処理をステップS22に移行して、それ以降の処理を繰り返す。   Thereafter, the image processing unit 6 outputs the image data subjected to the distortion correction by the image correction unit 6a and the enlargement processing by the enlargement processing unit 6b to the CPU 11 as a processed image (step S28), and then the CPU 11 performs the process. The process proceeds to S22 and the subsequent processing is repeated.

以上のように、本実施形態の撮像装置100によれば、ズーム調整用レンズ1aが広角端に対応する位置にある場合に、ズーム調整用レンズ1aの移動に基づく光学像の歪みに関連するレンズタイプ(光学特性情報)を基準として、画像データに対する歪曲補正処理及び所定の割合で拡大する処理を行うので、ズームレンズ部1の光学ズーム機構の複数のズーム段の中で、画像データに対する歪曲補正処理及び所定の割合で拡大する処理を行うズーム段を制限することができ、光学ズーム機構の複数のズーム段の全てで画像処理を行う場合に比べて歪曲補正にかかる処理負担を軽減させることができる。特に、異なるレンズタイプのズームレンズ部1にて、公称値に対する設計値の望遠端側へのずれが大きくなるにつれて、画像処理における画像データの拡大処理の比重を次第に大きく、即ち、歪曲補正の比重を次第に小さくすることで、当該歪曲補正にかかる処理負担をさらに軽減させることができる。
また、比較的画角が広くなる光学ズーム倍率にて画像データを所定の割合で切り出して拡大する処理を行うことで、撮像される画像の構図に対する影響を小さくすることができる。即ち、画角が最も広い広角端(焦点距離が最短)側で画像データの拡大率を最も大きくし、且つ、画角が狭くなる望遠側となる(焦点距離が長くなる)程、画像データの拡大率を小さくしていくことで、画像の構図に対する影響をより小さくしていくことができる。
さらに、装置本体に組み付けられるレンズによって周辺ボケやケラレ等が発生しても、画像処理部6による歪曲補正や拡大処理などで対応することができ、光学性能が不良のズームレンズとすることがなくなって当該撮像装置100の生産性を向上させることができる。
As described above, according to the imaging apparatus 100 of the present embodiment, when the zoom adjustment lens 1a is at a position corresponding to the wide angle end, the lens related to the distortion of the optical image based on the movement of the zoom adjustment lens 1a. Since distortion correction processing for image data and enlargement processing at a predetermined ratio are performed based on the type (optical characteristic information), distortion correction for image data is performed in a plurality of zoom stages of the optical zoom mechanism of the zoom lens unit 1. The zoom stage for performing the process and the process of enlarging at a predetermined ratio can be limited, and the processing burden for distortion correction can be reduced compared to the case where image processing is performed in all of the plurality of zoom stages of the optical zoom mechanism. it can. In particular, in the zoom lens unit 1 of different lens types, as the deviation of the design value from the nominal value toward the telephoto end increases, the specific gravity of the image data enlargement processing in the image processing increases gradually, that is, the specific gravity of distortion correction. By gradually reducing, the processing burden for the distortion correction can be further reduced.
In addition, by performing a process of cutting out and enlarging image data at a predetermined ratio at an optical zoom magnification with a relatively wide angle of view, it is possible to reduce the influence on the composition of the captured image. That is, the image data enlargement ratio is maximized at the wide-angle end (focal length is shortest) side where the angle of view is the widest, and the telephoto side where the angle of view becomes narrower (focal length becomes longer). By reducing the enlargement ratio, it is possible to reduce the influence on the composition of the image.
Furthermore, even if peripheral blurring or vignetting occurs due to a lens assembled in the main body of the apparatus, it can be dealt with by distortion correction or enlargement processing by the image processing unit 6, and a zoom lens with poor optical performance is not produced. Thus, the productivity of the imaging apparatus 100 can be improved.

また、画像補正部6aによる歪曲補正の内容及び拡大処理部6bによる拡大処理の割合のうち、少なくとも何れか一方と、ズームレンズ部1のレンズタイプとを対応付けて記憶しているので、当該撮像装置100本体に取り付けられるズームレンズ部1のレンズタイプに応じて、画像データに対する歪曲補正処理及び拡大処理の所定の割合を設定することができる。
即ち、CPU11は、ズームレンズ部1のレンズタイプに基づいて、ズーム調整用レンズ1aが広角端に対応する位置にある場合の歪曲補正用パラメータを読み出して画像補正部6aに設定することができるとともに、当該レンズタイプに基づいて、ズーム調整用レンズ1aが広角端に対応する位置にある場合の拡大用パラメータを読み出して拡大処理部6bに設定することができる。そして、画像補正部6aは、設定された歪曲補正用パラメータに応じた強度で画像データに対して歪曲補正を行うことができるとともに、拡大処理部6bは、設定された拡大用パラメータに応じた割合で画像データを切り出した後、切り出した部分を拡大する処理を行うことができる。
これにより、焦点距離の公称値に対して設計値が望遠端側にずれているズームレンズ、即ち、広角端の焦点距離に対する許容範囲(例えば、焦点距離の公称値±5%)外のレンズタイプ「1」〜「3」のズームレンズであっても、当該撮像装置100本体に取り付けられるズームレンズ部1のレンズタイプ毎に、画像データに対する歪曲補正処理及び所定の割合で拡大する処理をそれぞれ行うことができ、光学性能が不良のズームレンズとすることがなくなって当該撮像装置100の生産性を向上させることができる。
Further, since at least one of the content of the distortion correction by the image correction unit 6a and the ratio of the enlargement processing by the enlargement processing unit 6b is stored in association with the lens type of the zoom lens unit 1, the imaging is performed. In accordance with the lens type of the zoom lens unit 1 attached to the main body of the apparatus 100, it is possible to set a predetermined ratio of distortion correction processing and enlargement processing for image data.
That is, based on the lens type of the zoom lens unit 1, the CPU 11 can read and set the distortion correction parameters when the zoom adjustment lens 1 a is at a position corresponding to the wide-angle end and set it in the image correction unit 6 a. Based on the lens type, the enlargement parameter when the zoom adjustment lens 1a is at a position corresponding to the wide-angle end can be read and set in the enlargement processing unit 6b. The image correction unit 6a can perform distortion correction on the image data with an intensity according to the set distortion correction parameter, and the enlargement processing unit 6b can perform a ratio according to the set enlargement parameter. After the image data is cut out by the above, processing for enlarging the cut out portion can be performed.
Thereby, a zoom lens whose design value is deviated toward the telephoto end side with respect to the nominal value of the focal length, that is, a lens type outside the allowable range for the focal length at the wide angle end (for example, the nominal value of the focal length ± 5%) Even in the zoom lenses “1” to “3”, the distortion correction process for image data and the process of enlarging at a predetermined ratio are performed for each lens type of the zoom lens unit 1 attached to the imaging apparatus 100 main body. Therefore, it is possible to improve the productivity of the imaging apparatus 100 without using a zoom lens with poor optical performance.

なお、本発明は、上記実施形態に限定されることなく、本発明の趣旨を逸脱しない範囲において、種々の改良並びに設計の変更を行っても良い。
例えば、レンズ製造と撮像装置100の製造とが異なる業者や場所で行われる場合に、画質調整システム300によって、納品されたレンズを装置本体に組み付ける際に、当該レンズと対応付けられているレンズタイプに関する情報を設定装置200(後述)により読み取って、撮像装置100のCPU11に、当該レンズタイプに対応する歪曲補正用パラメータを設定させるとともに、当該レンズタイプに対応する拡大用パラメータを設定させるようにしても良い(図9参照)。
The present invention is not limited to the above-described embodiment, and various improvements and design changes may be made without departing from the spirit of the present invention.
For example, when the lens manufacturing and the imaging device 100 are manufactured at different vendors or places, the lens type associated with the lens when the delivered lens is assembled to the apparatus main body by the image quality adjustment system 300. The setting device 200 (to be described later) reads the information related to the CPU 11 of the imaging device 100 to set the distortion correction parameter corresponding to the lens type and to set the enlargement parameter corresponding to the lens type. (See FIG. 9).

画質調整システム300は、図9に示すように、撮像装置100と、この撮像装置100と接続される設定装置200とを備えている。設定装置200は、例えば、撮像装置100の製造工場などに設置されるものであり、レンズタイプ読取部201と、処理内容設定部202と、外部通信部203とを備え、この外部通信部203を介して撮像装置100の外部通信部12と接続されている。
なお、図9にあっては、撮像装置100を模式的に表しており、外部通信部12を備える以外の構成は、上記実施形態と略同様であるので、その詳細な説明は省略する。
As illustrated in FIG. 9, the image quality adjustment system 300 includes an imaging device 100 and a setting device 200 connected to the imaging device 100. The setting device 200 is installed in, for example, a manufacturing factory of the imaging device 100, and includes a lens type reading unit 201, a processing content setting unit 202, and an external communication unit 203. Via the external communication unit 12 of the imaging device 100.
In FIG. 9, the imaging apparatus 100 is schematically shown, and the configuration other than the provision of the external communication unit 12 is substantially the same as that of the above embodiment, and thus detailed description thereof is omitted.

レンズタイプ読取部201は、例えば、スキャナなどにより構成され、納品されるズームレンズと対応付けられたレンズタイプに関する情報を読み取る。
例えば、ズームレンズ製造の際に特定されたレンズタイプに関する情報が、バーコード(一次元コード)や二次元コードなどの形態に変換されて所定の情報記録媒体(図示略)に印刷されたものがズームレンズとともに納品される。そして、レンズタイプ読取部201は、所定の情報記録媒体からレンズタイプに関する情報を光学的に読み取って取得する。
ここで、レンズタイプ読取部201は、情報記録媒体からズームレンズと対応付けられたレンズタイプに関する記録情報を読み取るための読取手段を構成している。
The lens type reading unit 201 includes, for example, a scanner and reads information related to a lens type associated with a delivered zoom lens.
For example, information on the lens type specified at the time of manufacturing the zoom lens is converted into a barcode (one-dimensional code) or two-dimensional code and printed on a predetermined information recording medium (not shown). Delivered with the zoom lens. The lens type reading unit 201 optically reads and acquires information on the lens type from a predetermined information recording medium.
Here, the lens type reading unit 201 constitutes reading means for reading recorded information relating to the lens type associated with the zoom lens from the information recording medium.

処理内容設定部202は、外部通信部203を介してレンズタイプに関する情報を撮像装置100に送信して、ROM5から読み出すべき歪曲補正用パラメータや拡大用パラメータを設定させる。
具体的には、処理内容設定部202は、外部通信部203(例えば、通信コネクタ等)と撮像装置100の外部通信部12(例えば、対応する通信コネクタ等)とが所定の通信回線(図示略)を介して通信可能に接続された状態で、レンズタイプ読取部201により読み取られたレンズタイプに関する情報を外部通信部203を介して撮像装置100に送信し、撮像装置100のCPU11に、歪曲補正用データd1のうち、当該レンズタイプに対応する歪曲補正用パラメータ(図4参照)を設定させるとともに、拡大用データd2のうち、当該レンズタイプに対応する拡大用パラメータ(図4参照)を設定させる。
その後、撮像装置100のCPU11は、設定された歪曲補正用パラメータ(図4参照)を読み出して画像補正部6aに設定するとともに、設定された拡大用パラメータ(図4参照)を読み出して拡大処理部6bに設定する。
The processing content setting unit 202 transmits information regarding the lens type to the imaging apparatus 100 via the external communication unit 203 to set a distortion correction parameter and an enlargement parameter to be read from the ROM 5.
Specifically, the processing content setting unit 202 includes a predetermined communication line (not shown) between an external communication unit 203 (for example, a communication connector) and an external communication unit 12 (for example, a corresponding communication connector) of the imaging apparatus 100. ), Information relating to the lens type read by the lens type reading unit 201 is transmitted to the imaging device 100 via the external communication unit 203, and distortion correction is performed on the CPU 11 of the imaging device 100. In the data for data d1, a distortion correction parameter (see FIG. 4) corresponding to the lens type is set, and in the data for enlargement d2, an expansion parameter (see FIG. 4) corresponding to the lens type is set. .
Thereafter, the CPU 11 of the imaging apparatus 100 reads the set distortion correction parameters (see FIG. 4) and sets them in the image correction unit 6a, and also reads the set enlargement parameters (see FIG. 4) to enlarge the processing unit. Set to 6b.

これにより、撮像装置100にあっては、画像補正部6aは、設定された歪曲補正用パラメータに応じた強度で画像データに対して歪曲補正を行うことができるとともに、拡大処理部6bは、設定された拡大用パラメータに応じた割合で画像データを切り出した後、切り出した部分を拡大する処理を行うことができる。
従って、上記実施形態と同様に、当該撮像装置100本体に取り付けられるズームレンズ部1のレンズタイプ毎に、画像データに対する歪曲補正処理及び所定の割合で拡大する処理をそれぞれ行うことができ、焦点距離の公称値に対して設計値が望遠端側にずれているズームレンズであっても当該撮像装置100の生産性を向上させることができる。
さらに、ズームレンズ部1のレンズタイプのRAM4aに対する書き込み処理を、電源投入の際のメモリ書き込み処理にて行う必要がなくなり、当該撮像装置100の起動時間を減少させてより使い勝手のよい撮像装置100を提供することができる。
Thereby, in the imaging device 100, the image correction unit 6a can perform distortion correction on the image data with an intensity according to the set distortion correction parameter, and the enlargement processing unit 6b After the image data is cut out at a rate corresponding to the enlarged enlargement parameter, a process of enlarging the cut out portion can be performed.
Therefore, similarly to the above-described embodiment, for each lens type of the zoom lens unit 1 attached to the main body of the imaging apparatus 100, it is possible to perform a distortion correction process for image data and a process for enlarging at a predetermined ratio, and a focal length. Even if the zoom lens has a design value shifted to the telephoto end side with respect to the nominal value, the productivity of the imaging apparatus 100 can be improved.
Further, it is not necessary to perform the writing process to the lens type RAM 4a of the zoom lens unit 1 in the memory writing process at the time of turning on the power, and the startup time of the imaging apparatus 100 is reduced, so that the imaging apparatus 100 that is more convenient to use can be obtained. Can be provided.

なお、上記画質調整システム300にあっては、レンズタイプに関する情報に基づいて、ROM5から読み出すべき歪曲補正用パラメータや拡大用パラメータを設定するようにしたが、これに限られるものではなく、レンズタイプに関する情報を、撮像装置100のCPU11の制御下にて、フラッシュメモリ4bのメモリマップの所定のレンズタイプ記憶領域に書き込ませるようにしても良い。この場合には、上記実施形態と同様に、撮像装置100のCPU11は、レンズタイプに関する情報をRAM4aに書き込んだ後、当該レンズタイプに対応する歪曲補正用パラメータや拡大用パラメータをROM5から読み出すようになっている。
また、レンズタイプに関する情報の代わりに設計値に関する情報を、例えば、バーコード(一次元コード)や二次元コードなどの形態に変換して所定の記録媒体に印刷しておいても良く、所定の読取装置(図示略)を用いて設計値に関する情報を光学的に読み取って、複数のレンズタイプの中で当該設計値に基づいてレンズタイプを特定した後、特定されたレンズタイプをレンズタイプ記憶領域に書き込ませるようにしても良い。
In the image quality adjustment system 300, the distortion correction parameter and the enlargement parameter to be read from the ROM 5 are set based on the information on the lens type. However, the present invention is not limited to this. Information related to this may be written in a predetermined lens type storage area of the memory map of the flash memory 4b under the control of the CPU 11 of the imaging apparatus 100. In this case, as in the above embodiment, the CPU 11 of the imaging apparatus 100 writes information on the lens type in the RAM 4a, and then reads out the distortion correction parameter and the enlargement parameter corresponding to the lens type from the ROM 5. It has become.
Further, instead of information on the lens type, information on the design value may be converted into a form such as a barcode (one-dimensional code) or a two-dimensional code and printed on a predetermined recording medium. Information on a design value is optically read using a reading device (not shown), a lens type is specified based on the design value among a plurality of lens types, and the specified lens type is stored in a lens type storage area. You may make it write in.

さらに、上記実施形態にあっては、ズームレンズ部1を撮像装置100本体に対して着脱自在に構成しても良い。この場合には、例えば、ズームレンズ部1内の記憶手段(図示略)にズーム調整用レンズ1aの移動に基づく光学像の歪みに関連する光学特性情報(レンズタイプ)を記憶しておく。そして、当該ズームレンズ部1が装置本体のマウント(図示略)に取り付けられた状態で、CPU11は、マウントの信号接点を介してフラッシュメモリ4bのメモリマップのレンズタイプ記憶領域に書き込むようにしても良いし、或いは、歪曲補正用データd1のうち、当該レンズタイプに対応する歪曲補正用パラメータを設定するとともに、拡大用データd2のうち、当該レンズタイプに対応する拡大用パラメータを設定するようにしても良い。
これにより、交換レンズによっては周辺ボケやケラレ等が発生しても、画像処理部6による歪曲補正や拡大処理などで対応することができ、光学性能が不良の交換レンズとすることがなくなる。
Furthermore, in the above embodiment, the zoom lens unit 1 may be configured to be detachable from the main body of the imaging apparatus 100. In this case, for example, optical characteristic information (lens type) related to distortion of the optical image based on the movement of the zoom adjustment lens 1a is stored in a storage means (not shown) in the zoom lens unit 1. Then, in a state where the zoom lens unit 1 is attached to the mount (not shown) of the apparatus main body, the CPU 11 may write to the lens type storage area of the memory map of the flash memory 4b via the signal contact of the mount. Alternatively, a distortion correction parameter corresponding to the lens type is set in the distortion correction data d1, and an enlargement parameter corresponding to the lens type is set in the expansion data d2. Also good.
Accordingly, even if peripheral blurring or vignetting occurs depending on the interchangeable lens, it can be dealt with by distortion correction or enlargement processing by the image processing unit 6, and an interchangeable lens with poor optical performance is not produced.

また、上記実施形態にあっては、画像補正部6aによる歪曲補正及び拡大処理部6bによる拡大処理の比率をズーム調整用レンズ1aの光軸方向のレンズ位置に応じて可変するようにしても良い。このとき、画像補正部6aによる歪曲補正と拡大処理部6bによる拡大処理との比率は、0〜100の間で可変となっており、上記実施形態のように、画像処理部6の処理対象画像に対して、画像補正部6aによる歪曲補正及び拡大処理部6bによる拡大処理の両方を行うようにしても良いし、何れか一方の処理を施すようにしても良い。
例えば、レンズの焦点距離の設計値が公称値に対して望遠側にずれていくと、歪曲収差もより小さくなるとともに画角も狭くなることから、拡大処理部6bによる拡大処理を行うだけで歪曲補正を行わなくとも比較的歪みの少ない画像を得ることができるため、拡大処理部6bによる拡大処理の比率を画像補正部6aによる歪曲補正に対して大きくする。一方、レンズの焦点距離の設計値が公称値に対して広角側にずれる場合には、公称値に比べてより広い画角を確保することができることから、拡大処理部6bによる拡大処理で対応するよりも画像補正部6aによる歪曲補正で対応する方が良い場合もあると考えられるため、画像補正部6aによる歪曲補正の比率を拡大処理部6bによる拡大処理に対して大きくする。
なお、画像補正部6aによる歪曲補正及び拡大処理部6bによる拡大処理のうち、何れか一方の処理を施す場合にあっては、ROM5には、画像処理部6による画質調整処理にて用いられる歪曲補正用パラメータ及び拡大用パラメータのうち、何れか一方を記憶しておれば良い。
In the above embodiment, the ratio of distortion correction by the image correction unit 6a and enlargement processing by the enlargement processing unit 6b may be varied according to the lens position in the optical axis direction of the zoom adjustment lens 1a. . At this time, the ratio between the distortion correction by the image correction unit 6a and the enlargement processing by the enlargement processing unit 6b is variable between 0 and 100, and the image to be processed by the image processing unit 6 as in the above embodiment. On the other hand, both the distortion correction by the image correction unit 6a and the enlargement processing by the enlargement processing unit 6b may be performed, or one of the processes may be performed.
For example, when the design value of the focal length of the lens shifts to the telephoto side with respect to the nominal value, the distortion aberration becomes smaller and the angle of view becomes narrower. Since an image with relatively little distortion can be obtained without correction, the ratio of the enlargement processing by the enlargement processing unit 6b is made larger than the distortion correction by the image correction unit 6a. On the other hand, when the design value of the focal length of the lens is shifted to the wide angle side with respect to the nominal value, it is possible to secure a wider angle of view as compared with the nominal value. Since it may be better to deal with distortion correction by the image correction unit 6a, the ratio of distortion correction by the image correction unit 6a is made larger than the enlargement processing by the enlargement processing unit 6b.
Note that in the case where any one of distortion correction by the image correction unit 6a and enlargement processing by the enlargement processing unit 6b is performed, the ROM 5 stores the distortion used in the image quality adjustment processing by the image processing unit 6. Any one of the correction parameters and the enlargement parameters may be stored.

また、撮像装置100の構成は、上記実施形態に例示したものは一例であり、これに限られるものではない。   In addition, the configuration of the imaging apparatus 100 is merely an example illustrated in the above embodiment, and is not limited thereto.

加えて、上記実施形態にあっては、補正手段、拡大処理手段、出力手段としての機能を、CPU11の制御下にて、画像処理部6が駆動することにより実現される構成としたが、これに限られるものではなく、CPU11によって所定のプログラム等が実行されることにより実現される構成としても良い。
即ち、プログラムを記憶するプログラムメモリ(図示略)に、補正処理ルーチン、拡大処理ルーチン、出力制御処理ルーチンを含むプログラムを記憶しておく。そして、補正処理ルーチンによりCPU11を、光学素子の移動に基づく光学像の歪みに関連する光学特性情報に従って、当該光学素子が特定の位置にある場合に電子撮像部2から出力される画像情報を補正する補正手段として機能させるようにしても良い。また、拡大処理ルーチンによりCPU11を、光学特性情報に従って、光学素子が特定の位置にある場合に電子撮像部2から出力される画像情報を所定の割合で拡大処理する拡大処理手段として機能させるようにしても良い。また、出力制御処理ルーチンによりCPU11を、補正手段による補正及び拡大処理手段による拡大処理のうち、少なくとも何れか一方が施された画像情報を処理済み画像として出力する出力制御手段として機能させるようにしても良い。
In addition, in the above embodiment, the functions as the correction unit, the enlargement processing unit, and the output unit are realized by driving the image processing unit 6 under the control of the CPU 11. The present invention is not limited to this, and a configuration realized by executing a predetermined program or the like by the CPU 11 may be adopted.
In other words, a program including a correction processing routine, an enlargement processing routine, and an output control processing routine is stored in a program memory (not shown) that stores the program. Then, according to the correction processing routine, the CPU 11 corrects the image information output from the electronic imaging unit 2 when the optical element is at a specific position according to the optical characteristic information related to the distortion of the optical image based on the movement of the optical element. You may make it function as a correction means to do. Further, the enlargement processing routine causes the CPU 11 to function as enlargement processing means for enlarging the image information output from the electronic imaging unit 2 at a predetermined rate when the optical element is at a specific position according to the optical characteristic information. May be. Further, the output control processing routine causes the CPU 11 to function as output control means for outputting image information subjected to at least one of correction by the correction means and enlargement processing by the enlargement processing means as a processed image. Also good.

さらに、上記の各処理を実行するためのプログラムを格納したコンピュータ読み取り可能な媒体として、ROMやハードディスク等の他、フラッシュメモリ等の不揮発性メモリ、CD−ROM等の可搬型記録媒体を適用することも可能である。また、プログラムのデータを所定の通信回線を介して提供する媒体としては、キャリアウェーブ(搬送波)も適用される。   Furthermore, as a computer-readable medium storing a program for executing each of the above processes, a non-volatile memory such as a flash memory or a portable recording medium such as a CD-ROM is applied in addition to a ROM or a hard disk. Is also possible. A carrier wave is also used as a medium for providing program data via a predetermined communication line.

100 撮像装置
1 ズームレンズ部
1a ズーム調整用レンズ
2 電子撮像部
3 CDS/ADC部
5 ROM
6 画像処理部
6a 画像補正部
6b 拡大処理部
11 CPU
200 設定装置
201 レンズタイプ読取部
202 処理内容設定部
300 画質調整システム
d1 歪曲補正用データ
d2 拡大用データ
DESCRIPTION OF SYMBOLS 100 Imaging device 1 Zoom lens part 1a Zoom adjustment lens 2 Electronic imaging part 3 CDS / ADC part 5 ROM
6 Image processing unit 6a Image correction unit 6b Enlargement processing unit 11 CPU
200 Setting Device 201 Lens Type Reading Unit 202 Processing Content Setting Unit 300 Image Quality Adjustment System d1 Distortion Correction Data d2 Enlargement Data

Claims (7)

光学素子を通過した光学像を画像情報に変換して出力する撮像手段と、
前記光学素子の移動に基づく光学像の歪みに関連する光学特性情報に従って、当該光学素子が特定の位置にある場合に前記撮像手段から出力される画像情報を補正するか、又は、前記撮像手段から出力される画像情報を所定の割合で拡大処理するかの少なくとも一方を行うよう制御する制御手段と、
前記制御手段により処理が施された画像情報、または、当該光学素子が特定の位置にない場合に前記撮像手段から出力され前記制御手段によって制御されていない画像情報を処理済み画像として出力する出力手段と、
を備えたことを特徴とする撮像装置。
Imaging means for converting an optical image that has passed through the optical element into image information and outputting the image information;
According to the optical characteristic information related to the distortion of the optical image based on the movement of the optical element, the image information output from the imaging unit when the optical element is at a specific position is corrected, or from the imaging unit Control means for controlling to perform at least one of enlargement processing of output image information at a predetermined ratio;
Output means for outputting image information processed by the control means or image information output from the imaging means and not controlled by the control means when the optical element is not at a specific position as a processed image When,
An imaging apparatus comprising:
前記制御手段による制御内容と、前記光学特性情報とを対応付けて記憶する記憶手段を更に備え、
前記制御手段は、前記光学特性情報に基づいて、前記光学素子が特定の位置にある場合の補正内容又は拡大処理の割合の少なくとも一方を前記記憶手段から読み出すことを特徴とする請求項1に記載の撮像装置。
Further comprising storage means for storing the control content by the control means and the optical characteristic information in association with each other;
2. The control unit according to claim 1, wherein the control unit reads out at least one of correction contents and a ratio of enlargement processing when the optical element is at a specific position based on the optical characteristic information from the storage unit. Imaging device.
前記光学素子は、光学ズーム機構を構成するズーム調整用レンズを含み、
前記特定の位置とは、前記ズーム調整用レンズのレンズ位置が広角端に対応する位置であることを特徴とする請求項2に記載の撮像装置。
The optical element includes a zoom adjustment lens constituting an optical zoom mechanism,
The imaging apparatus according to claim 2, wherein the specific position is a position where a lens position of the zoom adjustment lens corresponds to a wide angle end.
前記制御手段による補正内容又は拡大処理の比率の少なくとも一方を前記ズーム調整用レンズのレンズ位置に応じて可変することを特徴とする請求項3に記載の撮像装置。   The imaging apparatus according to claim 3, wherein at least one of a correction content by the control unit or a ratio of enlargement processing is varied according to a lens position of the zoom adjustment lens. 請求項〜4の何れか一項に記載の撮像装置が撮像する画像の画質を調整する画質調整システムであって、
前記光学特性情報は、前記光学素子と対応付けられた情報記録媒体に記録された記録情報で表され、
前記情報記録媒体から前記記録情報を読み取るための読取手段と、
この読取手段により読み取られた記録情報に基づいて、前記記憶手段から読み出すべき前記補正内容又は前記拡大処理の割合の少なくとも一方を前記撮像装置に設定する設定手段と、
を備えることを特徴とする画質調整システム。
An image quality adjustment system that adjusts the image quality of an image captured by the imaging apparatus according to claim 2 ,
The optical characteristic information is represented by recording information recorded on an information recording medium associated with the optical element,
Reading means for reading the recorded information from the information recording medium;
Based on the recording information read by the reading means, setting means for setting at least one of the correction content to be read from the storage means or the ratio of the enlargement processing in the imaging device;
An image quality adjustment system comprising:
光学素子を通過した光学像を画像情報に変換して出力する撮像手段を備える撮像装置を用いた撮像方法であって、
前記光学素子の移動に基づく光学像の歪みに関連する光学特性情報に従って、当該光学素子が特定の位置にある場合に前記撮像手段から出力される画像情報を補正する処理、及び、前記光学特性情報に従って、前記光学素子が特定の位置にある場合に前記撮像手段から出力される画像情報を所定の割合で拡大する処理のうち、少なくとも何れか一方の処理を行うステップと、
画像情報を補正する処理及び画像情報を拡大する処理のうち、少なくとも何れか一方が施された画像情報、または、当該光学素子が特定の位置にない場合に前記撮像手段から出力され前記補正する処理及び所定の割合で拡大する処理が施されていない画像情報を処理済み画像として出力するステップと、
を実行することを特徴とする撮像方法。
An imaging method using an imaging device including an imaging means for converting an optical image that has passed through an optical element into image information and outputting the image information,
Processing for correcting image information output from the imaging means when the optical element is at a specific position in accordance with optical characteristic information related to distortion of an optical image based on movement of the optical element, and the optical characteristic information And performing at least one of the processes of enlarging the image information output from the imaging means at a predetermined rate when the optical element is at a specific position;
Image information that has been subjected to at least one of processing for correcting image information and processing for enlarging image information , or processing that is output from the imaging means and corrected when the optical element is not at a specific position And outputting image information that has not been subjected to processing for enlargement at a predetermined ratio as a processed image;
The imaging method characterized by performing.
光学素子を通過した光学像を画像情報に変換して出力する撮像手段を備える撮像装置のコンピュータを、
前記光学素子の移動に基づく光学像の歪みに関連する光学特性情報に従って、当該光学素子が特定の位置にある場合に前記撮像手段から出力される画像情報を補正する補正手段、
前記光学特性情報に従って、前記光学素子が特定の位置にある場合に前記撮像手段から出力される画像情報を所定の割合で拡大処理する拡大処理手段、
前記補正手段による補正及び前記拡大処理手段による拡大処理のうち、少なくとも何れか一方が施された画像情報、または、当該光学素子が特定の位置にない場合に前記撮像手段から出力され前記補正手段及び前記拡大処理手段によって処理されていない画像情報を処理済み画像として出力する出力制御手段、
として機能させることを特徴とするプログラム。
A computer of an imaging apparatus comprising imaging means for converting an optical image that has passed through an optical element into image information and outputting the image information,
Correction means for correcting image information output from the imaging means when the optical element is at a specific position in accordance with optical characteristic information related to distortion of an optical image based on movement of the optical element;
An enlargement processing means for enlarging the image information output from the imaging means at a predetermined rate when the optical element is at a specific position according to the optical characteristic information;
Image information subjected to at least one of correction by the correction unit and enlargement processing by the enlargement processing unit , or output from the imaging unit when the optical element is not at a specific position, and the correction unit and Output control means for outputting image information not processed by the enlargement processing means as a processed image;
A program characterized by functioning as
JP2010034165A 2010-02-19 2010-02-19 Imaging apparatus, image quality adjustment system, imaging method, and program Expired - Fee Related JP5531666B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010034165A JP5531666B2 (en) 2010-02-19 2010-02-19 Imaging apparatus, image quality adjustment system, imaging method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010034165A JP5531666B2 (en) 2010-02-19 2010-02-19 Imaging apparatus, image quality adjustment system, imaging method, and program

Publications (3)

Publication Number Publication Date
JP2011172031A JP2011172031A (en) 2011-09-01
JP2011172031A5 JP2011172031A5 (en) 2013-04-04
JP5531666B2 true JP5531666B2 (en) 2014-06-25

Family

ID=44685682

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010034165A Expired - Fee Related JP5531666B2 (en) 2010-02-19 2010-02-19 Imaging apparatus, image quality adjustment system, imaging method, and program

Country Status (1)

Country Link
JP (1) JP5531666B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11727545B2 (en) 2019-12-12 2023-08-15 Canon Kabushiki Kaisha Image processing apparatus and image capturing apparatus

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009105546A (en) * 2007-10-22 2009-05-14 Canon Inc Imaging device
US8199243B2 (en) * 2008-04-28 2012-06-12 Panasonic Corporation Imaging device and camera body

Also Published As

Publication number Publication date
JP2011172031A (en) 2011-09-01

Similar Documents

Publication Publication Date Title
US9357106B2 (en) Information processing apparatus, imaging apparatus, and method for correcting images
JP5272699B2 (en) Image processing apparatus, imaging apparatus, program, and image processing method
US8542301B2 (en) Electronic image pickup apparatus including an image forming optical system having a mark
JP2000069343A (en) Digital image pickup device
JP6188407B2 (en) interchangeable lens
JP6468868B2 (en) Image processing apparatus, imaging apparatus, image processing method, and program
US8872959B2 (en) Digital photographing apparatus, method of controlling the same, and recording medium having recorded thereon program for executing the method
JP2012042912A (en) Stereoscopic image pickup device and lens driving method in stereoscopic image pickup device
CN104919367B (en) Interchangeable lens, camera system, imaging device, camera system control method, and imaging device control method
JP4594004B2 (en) IMAGING DEVICE, ITS CONTROL METHOD, PROGRAM, AND STORAGE MEDIUM
JP5618560B2 (en) Imaging apparatus, drive control apparatus, control method, and program
JP4299561B2 (en) Imaging device
JP5531666B2 (en) Imaging apparatus, image quality adjustment system, imaging method, and program
JP2012044454A (en) Imaging apparatus, control method thereof, and program
JP2003219357A (en) Digital imaging apparatus and image forming system
JP6669065B2 (en) Filter control device, filter control method, and imaging device
JP4826217B2 (en) Imaging apparatus and program
JP4983541B2 (en) Program, image processing apparatus and camera
JP5187416B2 (en) Imaging apparatus, imaging condition setting method and program
JP2011155420A (en) Camera shake correction device, imaging processing method and program
JP5070690B2 (en) Chromatic aberration correction device
JP6795961B2 (en) Image processing device, control method of image processing device, and program
JP6395513B2 (en) Imaging apparatus, control method therefor, program, and storage medium
JP5981793B2 (en) Imaging apparatus, control method therefor, program, and storage medium
JP5273136B2 (en) Chromatic aberration correction device

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130219

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130219

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20130219

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20131112

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131119

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140116

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140325

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140407

R150 Certificate of patent or registration of utility model

Ref document number: 5531666

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees