JP4123574B2 - Imaging device - Google Patents
Imaging device Download PDFInfo
- Publication number
- JP4123574B2 JP4123574B2 JP18467598A JP18467598A JP4123574B2 JP 4123574 B2 JP4123574 B2 JP 4123574B2 JP 18467598 A JP18467598 A JP 18467598A JP 18467598 A JP18467598 A JP 18467598A JP 4123574 B2 JP4123574 B2 JP 4123574B2
- Authority
- JP
- Japan
- Prior art keywords
- color
- filter
- light
- image
- component
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Images
Landscapes
- Color Television Image Signal Generators (AREA)
Description
【0001】
【発明の属する技術分野】
本発明は、光像を撮像する撮像装置に関する。特に、本発明は、撮像手段の画素配列,カラーフィルタの色配列および光学ローパスフィルタの特性を最適に組み合わせる技術に関する。
【0002】
【従来の技術】
図16(a)は、従来の単板式撮像装置を示す構成図である。
図16(a)において、撮影光学系81の像空間側に、光学ローパスフィルタ82が配置される。この光学ローパスフィルタ82は、光を複屈折する第1フィルタ83と、偏光面を攪乱する1/4波長板84と、光を複屈折する第2フィルタ85との貼り合わせにより構成される。
【0003】
この光学ローパスフィルタ82の後方には、カラーフィルタ87を介して、撮像素子86が配置される。このカラーフィルタ87は、撮像素子86の画素位置に合わせて、水平ピッチPxおよび垂直ピッチPyに区分され、RGB3色に色分けされる。
図16(b)は、カラーフィルタ87の色配列を示す図である。ここでの色配列は、G成分を市松模様に配し、残りにR成分およびB成分を配した色配列(いわゆる「ベイヤー配列」)である。
図16(c)は、上述した光学ローパスフィルタ82による「点像のぼかし像」を示す図である。本図に示すようなぼかし像は、次の(1)〜(3)の光学作用により実現する。
【0004】
(1)第2フィルタ85は、光像を正常光線と異常光線とに複屈折し、互いの結像位置を垂直ピッチPyと略等しい距離Δyだけ垂直方向にずらす。
【0005】
(2)1/4波長板84は、第2フィルタ85で二分された直線偏光を円偏光などに変換し、偏光面を攪乱する。
【0006】
(3)第1フィルタ83は、1/4波長板84を通過した光像を正常光線と異常光線とに再び複屈折し、結像位置を水平ピッチPxと略等しい距離Δxだけ水平方向にずらす。
このような光学ローパスフィルタ82の光学作用により、図17(a)に示す色配列の1区画には、4区画分の光が混ざって入射する。その結果、色配列の1区画分における実質的な受光範囲(以下、この実質的な受光範囲を「受光窓」という)は、縦横2倍程度に拡大される。
【0007】
図17(b)〜(d)は、このような受光窓の様子を、RGB成分ごとに示した図である。図に示されるように、各色成分ごとの受光窓の配列は、縦横2倍程度に広がって、受光面全体を隙間無く埋め尽くす。
撮像素子86は、これらの受光窓の各領域ごとに平滑化された画素出力を生成する。そのため、光像の高域成分は確実に抑圧され、画像出力における偽色やモアレの発生を効果的に抑制することが可能となる。
【0008】
【発明が解決しようとする課題】
ところで、このような従来例では、図17(b)に示すように、G成分の受光窓が重なり合って形成される。そのため、G成分については、空間周波数の高域抑圧が過度に働き、解像度の著しい低下を招くという問題点があった。
そこで、本発明では、偽色やモアレを十分に抑制しつつ、かつ解像度を極力損なわない撮像装置を提供することを目的とする。
【0009】
また、請求項2に記載の発明では、特に原色などのベイヤー配列において、偽色の抑制と解像度の向上とをバランス良く両立させた撮像装置を提供することを目的とする。
さらに、請求項3に記載の発明では、一番密度が高い第1色成分について受光窓をほぼ正方形状とすることが可能な撮像装置を提供することを目的とする。
【0010】
請求項4に記載の発明では、請求項3の目的に加えて、その他の色成分について偽色やモアレを確実に抑制することが可能な撮像装置を提供することを目的とする。
請求項5に記載の発明では、請求項3の目的に加えて、正方画素の撮像素子が使用可能な撮像装置を提供することを目的とする。
【0011】
【課題を解決するための手段】
(請求項1)
請求項1に記載の発明は、複数の色成分を、該複数の色成分のうちの第1色成分を他の色成分に比べて最も高密度に配列したカラーフィルタと、前記カラーフィルタを透過した光像を撮像する撮像手段とを備えた撮像装置において、入射光による光像を第1方向にぼかす第1フィルタと、前記入射光による光像の色成分のうち前記第1色成分を除く色成分の光を波長選択して前記第1方向と異なる第2方向にぼかして前記カラーフィルタへ出射するとともに、前記第1色成分の光をそのまま透過させる第2フィルタとを有する光学ローパスフィルタを備えたことを特徴とする。
【0012】
このような構成では、光学ローパスフィルタが、その他の色成分を第1方向および第2方向にぼかす。そのため、光像のその他の色成分については、偽色やモアレの発生を十分に抑制することが可能となる。
一方、第2フィルタは、「前記入射光による光像の色成分のうち前記第1色成分を除く色成分の光を波長選択して前記第1方向と異なる第2方向にぼかして前記カラーフィルタへ出射するとともに、前記第1色成分の光をそのまま透過させる」という特性を有する。その結果、第1色成分については、第2方向の解像度を高めることが可能となる。
【0013】
なお、第1色成分は、カラーフィルタ上で一番高密度に配置される。そのため、撮像手段における第1色成分の標本間隔は最も細かく、この第1色成分の標本化信号に混入する折り返し雑音は、その他の色成分の場合に比べてより高域側へシフトする。したがって、第1色成分については、偽色やモアレの発生するおそれは少ない。以上の理由から、請求項1に記載の発明では、偽色やモアレを十分に抑制しつつ、かつ第1色成分の解像度を極力損なうことがなくなる。
【0014】
(請求項2)
請求項2に記載の発明は、水平方向に光像をぼかす第1フィルタと、垂直方向に光像をぼかす第2フィルタとを有する光学ローパスフィルタと、光学ローパスフィルタを通過した光像を、複数色の色配列を介して色分けするカラーフィルタと、カラーフィルタを通過した光像を撮像する撮像手段とを備えた撮像装置において、カラーフィルタの色配列は、第1色成分を市松模様に配置し、第2色成分および第3色成分を残りの位置に配置してなるベイヤー配列であり、色配列の水平ピッチをPxとし、垂直ピッチをPyとしたとき、第1フィルタは、光像の第1〜第3色成分を、水平ピッチPxと略等しい距離だけ水平方向にぼかし、第2フィルタは、光像の第2色成分および第3色成分を波長選択して、垂直ピッチPyと略等しい距離だけ垂直方向にぼかすことを特徴とする。
【0015】
このような構成では、第1色成分は、第2フィルタにおいて波長選択されない。そのため、第1色成分は、主として、水平方向にPxと略等しい距離だけぼかされる。このような水平方向のぼかし効果により、第1色成分の受光窓は、水平方向に倍程度引き延ばされる。
ところで、図1(a)に示すように、ベイヤー配列では、第1色成分が水平1区画おきに配置される。したがって、第1色成分の受光窓が水平方向に略2倍引き延ばされることにより、図1(b)に示すように、受光面全体を第1色成分の受光窓でほぼ重なりなく埋めることが可能となる。
【0016】
このように第1色成分の受光窓がほぼ重ならずに形成されることにより、第1色成分の解像度を必要以上に損なうことがなくなる。その上、受光窓はほぼ隙間無く配置されるため、第1色成分に生じる偽色やモアレを十分に抑制することも可能となる。
一方、第2色成分および第3色成分は、第1フィルタと第2フィルタによって水平垂直にぼかされる。このようなぼかし効果により、第2色成分および第3色成分の受光窓は、水平垂直に略2倍ずつ(面積比では略4倍)引き延ばされる。
【0017】
ところで、図1(a)に示すように、ベイヤー配列では、第2色成分が、水平1区画おき、かつ垂直1区画おきに配置される。したがって、第2色成分の受光窓が水平垂直に略2倍ずつ広がることにより、図1(c)に示すように、受光面全体を第2色成分の受光窓でほぼ重なりなく埋め尽くすことが可能となる。
また同様にして、第3色成分の受光窓についても、図1(d)に示すように、受光面全体がほぼ重なりなく埋め尽くされる。
【0018】
このような受光窓の配列により、第2色成分および第3色成分についても、解像度を必要以上に損なうことがなく、かつ偽色やモアレの発生を十分に抑制することが可能となる。
以上説明したように、請求項2に記載の発明では、ベイヤー配列における3種類の色成分すべてについて、偽色やモアレの抑制効果と解像度の向上効果を最大限に両立させた、良質な画像信号を得ることが可能となる。
【0019】
(請求項3)
請求項3に記載の発明は、水平方向に光像をぼかす第1フィルタと、水平もしくは垂直方向に光像をぼかす第2フィルタとを有する光学ローパスフィルタと、光学ローパスフィルタを通過した光像を、複数色の色配列を介して色分けするカラーフィルタと、カラーフィルタを通過した光像を撮像する撮像手段とを備えた撮像装置において、カラーフィルタは、一番密度が高い第1色成分とその他の色成分との色配列により構成され、さらに色配列の水平ピッチPxは垂直ピッチPyの略2倍に設定されてなり、第1フィルタは、光像を、水平ピッチPxと略等しい距離だけ水平方向にぼかし、第2フィルタは、光像におけるその他の色成分を波長選択して、垂直ピッチPyと略等しい距離だけ、水平もしくは垂直の方向にぼかすことを特徴とする。
【0020】
このような構成では、図2(a)に示すように、色配列の水平ピッチPxが、垂直ピッチPyの略半分に設定される。そのため、第1フィルタにより第1の色成分を水平方向にPxと略等しい距離だけぼかすことにより、図2(b)に示すように、第1色成分の受光窓はほぼ正方形状となる。
したがって、第1色成分については、アスペクト変換などの複雑な計算処理を経ることなく、画素アスペクト比1:1の信号を容易に得ることが可能となる。
【0021】
(請求項4)
請求項4に記載の発明は、請求項3に記載の撮像装置において、カラーフィルタの色配列は、その他の色成分に関して、同色間のピッチが水平方向と垂直方向とで相異なっており、第2フィルタは、光像のその他の色成分を、同色間のピッチの大きい方向にぼかすフィルタであることを特徴とする。
このような構成では、第2フィルタにより、その他の色成分が、同色間のピッチの大きい方向にぼかされる。そのため、図2(c)および図2(d)に示されるように、その他の色成分の受光窓が同色間で重なることがなく、その他の色成分の解像度を必要以上に損なうことがない。
【0022】
(請求項5)
請求項5に記載の発明は、請求項3または請求項4に記載の撮像装置において、撮像手段は、受光面上に画素ピッチPxで受光素子が2次元配列されてなり、色配列の1区画分の透過光を、受光素子2つ分で受光することを特徴とする。
このような構成により、正方画素で構成された一般的な撮像素子を使用して、請求項3,4に記載の撮像装置を容易に実現することが可能となる。
【0023】
なお、上述した各請求項では、「P−と略等しい距離だけぼかす」という平易な表現を使用している(「−」には、xもしくはyが入る)。これを詳しく言えば、元の光像に対してほぼP−ずらした光像を重ねる程度の空間周波数特性を有するという意味である。
一般に、複屈折を使用した光学ローパスフィルタの場合は、単純に光像をずらして重ねるので、上記の意味にそのまま当てはめればよい。
【0024】
一方、位相格子などを使用した光学ローパスフィルタの場合は、高次の成分や光のにじみ(いわゆるハロー)などが生じるため、単純に2つの光像を重ねているとは言えない。しかしながら、このような場合も、空間周波数特性のゼロ点を[1/(2P−)]近傍に配したり、またはローパス特性の肩部分を同じにするなどのフィルタ設計を行うことにより、「元の光像に対してほぼP−ずらした光像を重ねる程度の空間周波数特性」を実現することができる。
(請求項6)
請求項6に記載の発明は、光学ローパスフィルタと、前記光学ローパスフィルタを通過した光像を、複数色の色配列を介して色分けするカラーフィルタと、前記カラーフィルタを通過した光像を撮像する撮像手段とを備えた撮像装置において、前記カラーフィルタの色配列は、第1色成分が最も高密度に配置され、その他の色成分が残りの位置に配置されてなる色配列であり、前記光学ローパスフィルタは、前記光像を前記撮像手段の受光面上の第1方向にぼかす第1フィルタと、前記その他の色成分の光を前記第1方向とは異なる第2方向にぼかす第2フィルタとを備え、記第1色成分の光及びその他の色成分の光のそれぞれの色成分が前記光学ローパスフィルタによってぼかされる範囲は、同一の色成分の光どうしが重畳することなく、前記撮像手段の受光面全体をほぼ隙間無く埋め尽くすことを特徴とする。
【0025】
【発明の実施の形態】
以下、図面に基づいて本発明における実施の形態を説明する。
【0026】
(第1の実施形態)
第1の実施形態は、請求項1,2,6に記載の発明に対応する実施形態である。
図3(a)は、第1の実施形態の構成を示す図である。
図3(a)において、撮影光学系11の像空間側に、光学ローパスフィルタ12が配置される。この光学ローパスフィルタ12は、光を複屈折する第1フィルタ13と、偏光面を攪乱する1/4波長板14と、波長選択性を有する第2フィルタ15との貼り合わせにより構成される。
【0027】
この光学ローパスフィルタ12の後方には、カラーフィルタ17を介して、撮像素子16が配置される。このカラーフィルタ17は、撮像素子16の画素位置に合わせて、水平ピッチPxおよび垂直ピッチPyに区分され、RGB3色に色分けされる。
図3(b)は、この色配列の様子を示す図である。ここでの色配列は、G成分を市松模様に配し、残りにR成分およびB成分を配した色配列(いわゆる「ベイヤー配列」)である。
図3(c)は、上述した光学ローパスフィルタ12による「点像のぼかし像」を示す図である。本図に示すようなぼかし状態は、次の(1)〜(3)の光学作用により実現する。
【0028】
(1)第2フィルタ15は、RB成分を波長選択して、RB成分の結像位置を垂直ピッチPyと等しい距離Δyだけ垂直にぼかす。一方、G成分は、第2フィルタ15をほぼそのまま通過する。このような特性のフィルタとしては、例えば、特開平5−66370号公報に記載される波長選択性位相格子を使用することができる。
【0029】
(2)1/4波長板14は、第2フィルタ15の回折作用や屈折作用などにより生じる可能性がある直線偏光成分の偏光面を攪乱する。なお、第2フィルタ15において直線偏光成分がさほど生じなければ、1/4波長板14を省いてもよい。
【0030】
(3)第1フィルタ13は、1/4波長板14を通過したRGB成分を正常光線と異常光線とに分け、互いの結像位置を水平ピッチPxと等しい距離Δxだけ水平方向にずらす。
以上のようなぼかし効果により、図4(a)に示すG成分の1区画には、2区画分の光が混ざって入射する。また、RB成分の1区画には、4区画分の光が混ざって入射する。
【0031】
その結果、RGB成分の各受光窓は、図4(b)〜(d)に示すように拡大され、それぞれに受光面全体を隙間無く埋め尽くす。
したがって、RGB成分それぞれの受光窓に無用な重なりを生じることが一切なく、3種類の色成分全ての解像度を極力高めることが可能となる。また、このときRGB成分それぞれの受光窓に隙間がほとんど生じないので、3種類の色成分全てについて偽色やモアレを十分に抑制することもできる。
【0032】
特に、従来例(図17)と比較した場合、第1の実施形態ではG成分の受光窓に重なりが一切生じない。したがって、実質的な解像度に最も寄与するG成分の解像度を一段と高めることにより、特に良質な画像信号を生成することが可能となる。
次に、別の実施形態について説明する。
【0033】
(第2の実施形態)
第2の実施形態は、請求項1〜6に記載の発明に対応する実施形態である。
図5(a)は、第2の実施形態の構成を示す図である。
図5(a)において、撮影光学系11の像空間側に、光学ローパスフィルタ22が配置される。この光学ローパスフィルタ22は、光を複屈折する第1フィルタ23と、偏光面を攪乱する1/4波長板24と、波長選択性を有する第2フィルタ25との貼り合わせにより構成される。
【0034】
この光学ローパスフィルタ22の後方には、カラーフィルタ27を介して、正方画素の撮像素子26が配置される。この撮像素子26から出力される画素出力は、走査中や走査完了後に垂直2画素分ずつ加算されることにより、アスペクト比2の画素出力に変換される。
カラーフィルタ27の面は、この垂直2画素分に位置を合わせて、水平ピッチPxおよび垂直ピッチPy(=2Px)に区分され、それぞれRGB3色に色分けされる。
【0035】
図5(b)は、この色配列の様子を示す図である。カラーフィルタ27の奇数行は「GRGR・・」に色分けされ、偶数行は「GBGB・・」に色分けされる。
図5(d)は、上述した光学ローパスフィルタ22による「点像のぼかし像」を示す図である。本図に示すようなぼかし状態は、次の(1)〜(3)の光学作用により実現する。
【0036】
(1)第2フィルタ25は、RB成分を波長選択して、RB成分の結像位置を垂直ピッチPyと等しい距離Δyだけ垂直にぼかす。一方、G成分は、第2フィルタ25をほぼそのまま通過する。このような特性のフィルタとしては、例えば、特開平5−66370号公報に記載される波長選択性位相格子を使用することができる。
【0037】
(2)1/4波長板24は、第2フィルタ25の回折作用や屈折作用などにより生じる可能性がある直線偏光成分の偏光面を攪乱する。なお、第2フィルタ25において直線偏光成分がさほど生じなければ、1/4波長板24を省いてもよい。
【0038】
(3)第1フィルタ23は、1/4波長板24を通過したRGB成分を正常光線と異常光線とに分け、互いの結像位置を水平ピッチPxと等しい距離Δxだけ水平にずらす。
以上のようなぼかし効果により、図6(a)に示すG成分の1区画には、2区画分の光が混ざって入射する。また、RB成分の1区画には、4区画分の光が混ざって入射する。
【0039】
その結果、RGB成分の各受光窓は、図6(b)〜(d)に示すように拡大され、それぞれに受光面全体を隙間無く埋め尽くす。
したがって、RGB成分それぞれの受光窓に無用な重なりが生じることが一切なく、3種類の色成分全ての解像度を最大限に高めることが可能となる。また、このときRGB成分それぞれの受光窓に隙間が全く生じないので、3種類の色成分全てについて偽色やモアレを十分に抑制することもできる。
【0040】
またこのとき、G成分の受光窓の形状は、図6(b)に示すように正方形となる。したがって、G成分の画像信号については、アスペクト変換などの複雑な処理を経ることなく、正方画素の画像信号を直に生成することが可能となる。したがって、正方画素の画像を扱うことの多いコンピュータ関連分野において、特に好適な撮像装置を実現することができる。
【0041】
さらに、第2フィルタ25のぼかし方向は、「RB成分に関して同色間のピッチが一段と広い垂直方向」に設定される。したがって、RB成分の受光窓に重なりは生じず、RB成分の解像度を必要以上に損なうことがない。
また、カラーフィルタ27の1区画分を透過した光を、受光素子28の2つ分で受光するので、一般的な正方画素の撮像素子26を使用することも可能となる。
次に、別の実施形態について説明する。
【0042】
(第3の実施形態)
第3の実施形態は、請求項1〜6に記載の発明に対応する実施形態である。
図7は、第3の実施形態を説明するための図である。
第3の実施形態における構成上の特徴点は、カラーフィルタの奇数行が「GRGB・・」に色分けされ、偶数行は「GBGR・・」に色分けされている点である。なお、その他の構成については、第2の実施形態と同一であるため、ここでの構成説明を省略する。
【0043】
このような構成では、RGB成分の各受光窓が、図7に示すように拡大され、それぞれに受光面全体を隙間無く埋め尽くす。したがって、第3の実施形態においても、第2の実施形態と同様の効果を得ることが可能となる。
また、第3の実施形態に特有な効果としては、RB成分の受光窓が半位相ずつずれながら斜めに並ぶ点である。このような受光窓の配列により、RB成分の実質的な解像度を高めることも可能となる。
次に、別の実施形態について説明する。
【0044】
(第4の実施形態)
第4の実施形態は、請求項1〜6に記載の発明に対応する実施形態である。
図8は、第4の実施形態を説明するための図である。
第4の実施形態における構成上の特徴点は、カラーフィルタの奇数行が「GRGR・・」に色分けされ、偶数行は「BGBG・・」に色分けされている点である。なお、その他の構成については、第2の実施形態と同一であるため、ここでの構成説明を省略する。
【0045】
このような構成では、RGB成分の各受光窓が、図8に示すように拡大され、それぞれに受光面全体を隙間無く埋め尽くす。したがって、第4の実施形態においても、第2の実施形態と同様の効果を得ることが可能となる。
また、第4の実施形態に特有な効果としては、G成分の受光窓が斜め格子に並ぶ点である。このような受光窓の配列により、G成分の実質的な解像度を高めることも可能となる。
【0046】
(第5の実施形態)
第5の実施形態は、請求項1〜6に記載の発明に対応する実施形態である。
図9は、第5の実施形態を説明するための図である。
第5の実施形態における構成上の特徴点は、次の2点である。
【0047】
(1)カラーフィルタの水平行が「GRGB・・」でストライプ状に色分けされる。
【0048】
(2)第2フィルタのぼかし方向が、RB成分の同色ピッチが広い水平方向に設定される。
なお、その他の構成については、第2の実施形態と同一であるため、ここでの構成説明を省略する。
このような構成では、RGB成分の各受光窓が、図9に示すように拡大され、それぞれに受光面全体を隙間無く埋め尽くす。したがって、第5の実施形態においても、第2の実施形態と同様の効果を得ることが可能となる。
【0049】
特に、第5の実施形態に特有な効果としては、RB成分の受光窓の垂直位相と、G成分の受光窓の垂直位相とが一致している点である。このように相互の垂直位相が予め一致しているので、RGB成分を同位相で全て揃えた画像信号を容易に生成することが可能となる。
次に、別の実施形態について説明する。
【0050】
(第6の実施形態)
第6の実施形態は、請求項1〜6に記載の発明に対応する実施形態である。
図10は、第6の実施形態を説明するための図である。
第6の実施形態における構成上の特徴点は、次の2点である。
【0051】
(1)カラーフィルタの奇数行が「GRGB・・」に色分けされ、偶数行が「GBGR・・」に色分けされる。
【0052】
(2)第2フィルタのぼかし方向が、RB成分の同色ピッチが広い水平方向に設定される。
なお、その他の構成については、第2の実施形態と同一であるため、ここでの構成説明を省略する。
このような構成では、RGB成分の各受光窓が、図10に示すように拡大され、それぞれに受光面全体を隙間無く埋め尽くす。したがって、第6の実施形態においても、第2の実施形態と同様の効果を得ることが可能となる。
【0053】
また、第6の実施形態に特有な効果としては、RB成分の受光窓が半位相ずつずれながら斜めに並ぶ点である。このような受光窓の配列により、RB成分の実質的な解像度を高めることも可能となる。
さらに、第6の実施形態では、RB成分の受光窓の垂直位相と、G成分の受光窓の垂直位相とが一致する。このように相互の垂直位相が予め一致するので、RGB成分を同位相で全て揃えた画像信号を容易に生成することが可能となる。
次に、別の実施形態について説明する。
【0054】
(第7の実施形態)
第7の実施形態は、請求項1〜6に記載の発明に対応する実施形態である。
図11は、第7の実施形態を説明するための図である。
第7の実施形態における構成上の特徴点は、次の2点である。
【0055】
(1)カラーフィルタの奇数行が「GRGB・・」に色分けされ、偶数行が「RGBG・・」に色分けされる。
【0056】
(2)第2フィルタのぼかし方向が、RB成分の同色ピッチが広い水平方向に設定される。
なお、その他の構成については、第2の実施形態と同一であるため、ここでの構成説明を省略する。
このような構成では、RGB成分の各受光窓が、図11に示すように拡大され、それぞれに受光面全体を隙間無く埋め尽くす。したがって、第7の実施形態においても、第2の実施形態と同様の効果を得ることが可能となる。
【0057】
その上、第7の実施形態では、G成分の受光窓が斜め格子に並ぶ。また、RB成分の受光窓が1/4位相ずつずれながら斜めに並ぶ。このような受光窓の配列により、RGB成分の実質的な解像度を高めることも可能となる。
さらに、第7の実施形態では、RB成分の受光窓の垂直位相と、G成分の受光窓の垂直位相とが一致する。このように相互の垂直位相が予め一致するので、RGB成分を同位相で全て揃えた画像信号を容易に生成することが可能となる。
次に、別の実施形態について説明する。
【0058】
(第8の実施形態)
第8の実施形態は、請求項1〜6に記載の発明に対応する実施形態である。
図12は、第8の実施形態を説明するための図である。
第8の実施形態における構成上の特徴点は、カラーフィルタの奇数列と偶数列とにおいて、色配列が垂直方向に半位相ずつずれる点である。
【0059】
撮像素子側では、この色配列の位相ずらしに合わせて、受光素子28のブロックを、図13(b)に示すように設定する。このような受光素子28のブロック単位で画素出力を加算することにより、正方画素の撮像素子を使用しながら図13(a)に示すような色配列の画素出力を生成することが可能となる。
なお、ここでの加算動作は、画素出力の垂直転送動作を奇数列と偶数列とで独立して行いつつ実行してもよいし、撮像素子の外部で画像処理を行う際に実行してもよい。
【0060】
なお、その他の構成については、第2の実施形態と同一であるため、ここでの構成説明を省略する。
このような構成では、RGB成分の各受光窓が、図12に示すように拡大され、それぞれに受光面全体を隙間無く埋め尽くす。したがって、第8の実施形態においても、第2の実施形態と同様の効果を得ることが可能となる。
【0061】
その上、第8の実施形態では、RB成分の受光窓1つ分の垂直位相が、G成分の受光窓2つ分の垂直位相と一致する。このように相互の垂直位相が予め一致しているので、RGB成分を同位相で全て揃えた画像信号を容易に生成することが可能となる。
次に、別の実施形態について説明する。
【0062】
(第9の実施形態)
第9の実施形態は、請求項1〜6に記載の発明に対応する実施形態である。
図14は、第9の実施形態を説明するための図である。
第9の実施形態における構成上の特徴点は、次の2点である。
【0063】
(1)カラーフィルタの奇数列と偶数列とにおいて、色配列が垂直方向に半位相ずつずれる。
【0064】
(2)R成分とB成分が、偶数列上において市松模様に配置される。
なお、その他の構成については、第2の実施形態と同一であるため、ここでの構成説明を省略する。
このような構成では、RGB成分の各受光窓が、図14に示すように拡大され、それぞれに受光面全体を隙間無く埋め尽くす。したがって、第9の実施形態においても、第2の実施形態と同様の効果を得ることが可能となる。
【0065】
その上、第9の実施形態では、RB成分の受光窓1つ分の垂直位相が、G成分の受光窓2つ分の垂直位相と一致する。このように相互の垂直位相が予め一致しているので、RGB成分を同位相で全て揃えた画像信号を容易に生成することが可能となる。
また、第9の実施形態では、RB成分の受光窓が半位相ずつずれながら斜めに並ぶ。このような受光窓の配列により、RB成分の実質的な解像度を高めることも可能となる。
次に、別の実施形態について説明する。
【0066】
(第10の実施形態)
第10の実施形態は、請求項1〜6に記載の発明に対応する実施形態である。
図15は、第10の実施形態を説明するための図である。
第10の実施形態における構成上の特徴点は、次の3点である。
【0067】
(1)カラーフィルタの奇数列と偶数列とにおいて、色配列が垂直方向に半位相ずつずれる。
【0068】
(2)R成分とB成分が、偶数列上において縦ストライプに配置される。
【0069】
(3)第2フィルタのぼかし方向が、RB成分の同色ピッチが広い水平方向に設定される。
なお、その他の構成については、第2の実施形態と同一であるため、ここでの構成説明を省略する。
このような構成では、RGB成分の各受光窓が、図15に示すように拡大され、それぞれに受光面全体を隙間無く埋め尽くす。したがって、第10の実施形態においても、第2の実施形態と同様の効果を得ることが可能となる。
その上、第10の実施形態では、RB成分の受光窓1つ分の水平位相が、G成分の受光窓2つ分の水平位相と一致する。このように相互の水平位相が予め一致しているので、RGB成分を同位相で全て揃えた画像信号を容易に生成することが可能となる。
【0070】
(実施形態のバリエーションなど)
なお、上述した各実施形態では、光像をぼかす距離をPx,Pyに一致させているので、受光窓に隙間や重なりが一切生じず、撮像装置の解像度と受光窓の開口率とを最大限に得ることが可能となる。
しかしながら、本発明はこれに限定されるものではない。一般的には、光像をぼかす距離をPx,Pyに略等しくすることによって、本発明の効果を得ることが可能となる。例えば、光像を水平方向にぼかす距離Δxと、垂直方向にぼかす距離Δyを
(0.6Px)≦Δx≦(1.5Px)
(0.6Py)≦Δy≦(1.5Py)
の範囲内で設定しても、偽色やモアレを若干なりとも抑制することが可能となる。
【0071】
また、上述した各実施形態では、第1フィルタとして、光の複屈折するフィルタを使用する場合について説明したが、本発明はこれに限定されるものではない。一般的には、光像を所定距離だけぼかす光学素子であれば光学ローパスフィルタとして使用することができる。例えば、位相格子を使用した光学ローパスフィルタを使用してもよい。
【0072】
さらに、上述した各実施形態では、第2フィルタとして、波長選択性位相格子を使用する場合について説明したが、本発明はこれに限定されるものではない。一般的には、波長によってぼかし量が変化する光学素子であれば、第2フィルタとして使用することができる。
また、上述した各実施形態では、光路に沿って「第2フィルタ→第1フィルタ」の順番で貼り合わせているが、これに限定されるものではない。この順番が逆でもよいし、両フィルタを貼り合わせずに独立に配置してもよい。(ただし、位相格子を使用する場合には、撮像素子と位相格子との間隔を位相格子設計時の設定値に合わせる点に留意する必要がある。)
さらに、上述した各実施形態では、3種類の色成分について説明したが、本発明はこれに限定されるものではない。例えば、色成分として2色(例えば、2板式撮像装置の片方の撮像素子に本発明を適用する場合)もしくは4色以上を割り当てるなどの態様が考えられる。
また、上述した実施形態では、色配列の1区画分を受光素子2つ分に割り振っているが、これに限定されるものではない。例えば、図13(c)に示すように、色配列の1区画を受光素子1つ分で構成してもかまわない。また、色配列の1区画を受光素子3つ以上のブロックで構成しても勿論よい。
【0073】
【発明の効果】
(請求項1)
請求項1に記載の発明では、第2フィルタは、「第1色成分のぼかし量が、その他の色成分のぼかし量よりも小さいか実効上ゼロである」という波長選択性を有する。そのため、第1色成分については、第2方向のぼかし量が小さくなり、第2方向の解像度を高めることが可能となる。
【0074】
なお、撮像手段においては第1色成分の標本間隔が一番細かいため、第1色成分の標本化信号に生じる折り返し雑音は、その他の色成分の場合に比べてより高域側へシフトする。したがって、第1色成分については、上述のようにぼかし量を低減しても偽色やモアレの発生するおそれは少ない。
以上説明したように、請求項1に記載の発明では、偽色やモアレを十分に抑制しつつ、かつ解像度を極力損なうことがない撮像装置を実現することが可能となる。
【0075】
(請求項2)
請求項2に記載の発明では、図1(b)〜(d)に示すように、ベイヤー配列をなす3種類の色成分それぞれについて、受光面全体を受光窓でほぼ重なりなく覆うことができる。したがって、3種類の色成分全てについて、解像度を必要以上に損なうことがなく、かつ偽色やモアレを十分抑制することが可能となる。
このように、請求項2に記載の発明では、3種類の色成分全てについて、偽色やモアレの抑制効果と解像度の向上効果とを最大限に両立させた、良質な画像信号を得ることが可能となる。
【0076】
(請求項3)
請求項3に記載の発明では、第1色成分の受光窓がほぼ正方形状となる。したがって、第1色成分については、アスペクト変換などの複雑な計算処理を経ることなく、画素アスペクト比1:1の画像信号を容易に得ることが可能となる。
そのため、請求項3に記載の発明では、正方画素の画像を扱うことの多いコンピュータ関連分野などに好適な撮像装置を実現することができる。
【0077】
(請求項4)
請求項4に記載の発明では、第2フィルタにより、その他の色成分が、同色間のピッチの大きい方向にぼかされる。そのため、その他の色成分の受光窓が同色間で重なることが少なく、その他の色成分の解像度をできるだけ高めることが可能となる。
【0078】
(請求項5)
請求項5に記載の発明では、色配列の1区画を2つ分の受光素子で受光するので、正方画素で構成された一般的な撮像素子を使用することが可能となる。したがって、特殊な長方画素からなる撮像素子を使用する必要がなくなり、請求項3,4に記載の撮像装置を容易に実現することが可能となる。
【図面の簡単な説明】
【図1】 請求項2,6に記載の発明を説明する図である。
【図2】 請求項3〜6に記載の発明を説明するための図である。
【図3】 第1の実施形態の構成を示す図である。
【図4】 第1の実施形態の動作を説明する図である。
【図5】 第2の実施形態の構成を示す図である。
【図6】 第2の実施形態の動作を説明する図である。
【図7】 第3の実施形態を説明するための図である。
【図8】 第4の実施形態を説明するための図である。
【図9】 第5の実施形態を説明するための図である。
【図10】 第6の実施形態を説明するための図である。
【図11】 第7の実施形態を説明するための図である。
【図12】 第8の実施形態を説明するための図(1/2)である。
【図13】 第8の実施形態を説明するための図(2/2)である。
【図14】 第9の実施形態を説明するための図である。
【図15】 第10の実施形態を説明するための図である。
【図16】 従来列の構成を示す図である。
【図17】 従来例の動作を説明する図である。[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an imaging apparatus that captures an optical image. In particular, the present invention relates to a technique for optimally combining the pixel arrangement of an image pickup means, the color arrangement of a color filter, and the characteristics of an optical low-pass filter.
[0002]
[Prior art]
FIG. 16A is a configuration diagram illustrating a conventional single-plate imaging device.
In FIG. 16A, an optical low-pass filter 82 is disposed on the image space side of the photographing optical system 81. The optical low-pass filter 82 is configured by bonding a
[0003]
An imaging element 86 is disposed behind the optical low-pass filter 82 via a
FIG. 16B is a diagram showing the color arrangement of the
FIG. 16C is a diagram illustrating a “blurred image of a point image” by the optical low-pass filter 82 described above. The blurred image as shown in this figure is realized by the following optical actions (1) to (3).
[0004]
(1) The second filter 85 birefringes the optical image into a normal ray and an extraordinary ray, and shifts the image forming positions in the vertical direction by a distance Δy substantially equal to the vertical pitch Py.
[0005]
(2) The quarter-wave plate 84 converts the linearly polarized light divided by the second filter 85 into circularly polarized light and disturbs the polarization plane.
[0006]
(3) The
Due to the optical action of the optical low-pass filter 82, light of four sections is mixed and incident on one section of the color arrangement shown in FIG. As a result, a substantial light receiving range (hereinafter, this substantial light receiving range is referred to as a “light receiving window”) in one section of the color array is enlarged by about twice in the vertical and horizontal directions.
[0007]
FIGS. 17B to 17D are diagrams showing such a light receiving window for each RGB component. As shown in the figure, the arrangement of the light receiving windows for each color component extends about twice in the vertical and horizontal directions, and fills the entire light receiving surface without any gaps.
The image sensor 86 generates a smoothed pixel output for each region of these light receiving windows. Therefore, the high frequency component of the optical image is surely suppressed, and it is possible to effectively suppress the occurrence of false color and moire in the image output.
[0008]
[Problems to be solved by the invention]
Incidentally, in such a conventional example, as shown in FIG. 17B, the light receiving windows for the G component are formed so as to overlap each other. For this reason, the G component has a problem in that high frequency suppression of the spatial frequency works excessively and causes a significant decrease in resolution.
Therefore, Book It is an object of the present invention to provide an imaging apparatus that sufficiently suppresses false colors and moire and does not impair the resolution as much as possible.
[0009]
Another object of the present invention is to provide an imaging device that balances the suppression of false colors and the improvement of resolution in a Bayer arrangement such as primary colors.
Furthermore, it is an object of the present invention to provide an imaging device capable of making the light receiving window substantially square with respect to the first color component having the highest density.
[0010]
According to a fourth aspect of the present invention, in addition to the object of the third aspect, an object of the present invention is to provide an imaging apparatus capable of reliably suppressing false color and moire for other color components.
According to a fifth aspect of the present invention, in addition to the object of the third aspect, an object of the present invention is to provide an image pickup apparatus in which a square pixel image pickup device can be used.
[0011]
[Means for Solving the Problems]
(Claim 1)
The invention described in
[0012]
In such a configuration, the optical low-pass filter blurs the other color components in the first direction and the second direction. For this reason, the occurrence of false colors and moire can be sufficiently suppressed for the other color components of the optical image.
On the other hand, the second filter is “ Among the color components of the light image by the incident light, the light of the color component excluding the first color component is selected, and the light is blurred in the second direction different from the first direction and emitted to the color filter. Transmit light of color component as it is " Characteristic Have . So As a result, the resolution in the second direction can be increased for the first color component.
[0013]
The first color component is arranged at the highest density on the color filter. Therefore, the sampling interval of the first color component in the imaging means is the finest, and the aliasing noise mixed in the sampling signal of the first color component is shifted to a higher frequency side than in the case of other color components. Therefore, for the first color component ,false There is little risk of color or moire. For the reasons described above, the invention according to
[0014]
(Claim 2)
According to a second aspect of the present invention, there is provided an optical low-pass filter having a first filter that blurs the optical image in the horizontal direction and a second filter that blurs the optical image in the vertical direction, and a plurality of optical images that have passed through the optical low-pass filter. In an imaging apparatus including a color filter that performs color classification via a color arrangement of colors and an imaging unit that captures an optical image that has passed through the color filter, the color arrangement of the color filter includes a first color component arranged in a checkered pattern. , A Bayer arrangement in which the second color component and the third color component are arranged at the remaining positions, and when the horizontal pitch of the color arrangement is Px and the vertical pitch is Py, the first filter The first to third color components are horizontally blurred by a distance substantially equal to the horizontal pitch Px, and the second filter selects wavelengths of the second color component and the third color component of the optical image and is substantially equal to the vertical pitch Py. Just the distance Wherein the blur in the orthogonal direction.
[0015]
In such a configuration, the wavelength of the first color component is not selected in the second filter. Therefore, the first color component is blurred mainly by a distance substantially equal to Px in the horizontal direction. Due to such a horizontal blurring effect, the light receiving window for the first color component is stretched about twice in the horizontal direction.
By the way, as shown in FIG. 1A, in the Bayer array, the first color component is arranged every other horizontal section. Accordingly, by extending the light receiving window for the first color component approximately twice in the horizontal direction, the entire light receiving surface can be filled with the light receiving window for the first color component almost without overlapping as shown in FIG. It becomes possible.
[0016]
By forming the light receiving windows for the first color component without substantially overlapping in this way, the resolution of the first color component is not impaired more than necessary. In addition, since the light receiving windows are arranged with almost no gap, it is possible to sufficiently suppress false colors and moire generated in the first color component.
On the other hand, the second color component and the third color component are blurred horizontally and vertically by the first filter and the second filter. Due to such a blurring effect, the light receiving windows of the second color component and the third color component are extended approximately twice each in horizontal and vertical directions (approximately 4 times in area ratio).
[0017]
By the way, as shown in FIG. 1A, in the Bayer array, the second color component is arranged every other horizontal section and every other vertical section. Accordingly, the light receiving window for the second color component spreads approximately twice in the horizontal and vertical directions, so that the entire light receiving surface can be completely filled with the light receiving windows for the second color component as shown in FIG. 1C. It becomes possible.
Similarly, with respect to the light receiving window for the third color component, as shown in FIG. 1 (d), the entire light receiving surface is almost completely filled.
[0018]
With such an arrangement of the light receiving windows, the second color component and the third color component can be prevented from spoiling the resolution more than necessary, and generation of false colors and moire can be sufficiently suppressed.
As described above, in the invention described in
[0019]
(Claim 3)
According to a third aspect of the present invention, an optical low-pass filter having a first filter that blurs the optical image in the horizontal direction, a second filter that blurs the optical image in the horizontal or vertical direction, and an optical image that has passed through the optical low-pass filter. In the image pickup apparatus including a color filter that performs color classification through a color arrangement of a plurality of colors and an image pickup unit that picks up a light image that has passed through the color filter, the color filter includes the first color component having the highest density and the others The horizontal pitch Px of the color array is set to approximately twice the vertical pitch Py, and the first filter horizontally converts the optical image by a distance substantially equal to the horizontal pitch Px. The second filter is characterized in that the other color components in the light image are wavelength-selected and blurred in a horizontal or vertical direction by a distance substantially equal to the vertical pitch Py. That.
[0020]
In such a configuration, as shown in FIG. 2A, the horizontal pitch Px of the color array is set to substantially half of the vertical pitch Py. Therefore, by blurring the first color component by a distance substantially equal to Px in the horizontal direction by the first filter, the light receiving window for the first color component becomes substantially square as shown in FIG.
Therefore, for the first color component, it is possible to easily obtain a signal with a pixel aspect ratio of 1: 1 without performing complicated calculation processing such as aspect conversion.
[0021]
(Claim 4)
According to a fourth aspect of the present invention, in the imaging device according to the third aspect, the color arrangement of the color filters is different in the pitch between the same colors in the horizontal direction and the vertical direction with respect to the other color components. The second filter is a filter that blurs the other color components of the light image in the direction in which the pitch between the same colors is large.
In such a configuration, other color components are blurred by the second filter in the direction in which the pitch between the same colors is large. Therefore, as shown in FIGS. 2C and 2D, the light receiving windows of other color components do not overlap between the same colors, and the resolution of the other color components is not unnecessarily impaired.
[0022]
(Claim 5)
According to a fifth aspect of the present invention, in the imaging device according to the third or fourth aspect, the imaging means includes a two-dimensional array of light receiving elements with a pixel pitch Px on the light receiving surface, and one section of a color array. The transmitted light is received by two light receiving elements.
With such a configuration, it is possible to easily realize the imaging device according to
[0023]
In each of the above-mentioned claims, a simple expression “blur only a distance substantially equal to P−” is used (“−” is replaced by x or y). More specifically, this means that the original optical image has a spatial frequency characteristic such that a light image substantially shifted by P- is superimposed.
In general, in the case of an optical low-pass filter using birefringence, the optical images are simply shifted and overlapped, so that the above-mentioned meanings can be applied as they are.
[0024]
On the other hand, in the case of an optical low-pass filter using a phase grating or the like, high-order components and light blurring (so-called halo) occur, so it cannot be said that two optical images are simply superimposed. However, in such a case as well, by designing a filter such as arranging the zero point of the spatial frequency characteristic in the vicinity of [1 / (2P−)] or making the shoulder portion of the low-pass characteristic the same, the “original It is possible to realize a “spatial frequency characteristic that can superimpose a P-shifted optical image on the optical image”.
(Claim 6)
According to a sixth aspect of the present invention, an optical low-pass filter, a color filter that color-codes a light image that has passed through the optical low-pass filter through a color arrangement of a plurality of colors, and a light image that has passed through the color filter are captured. In the imaging apparatus including the imaging unit, the color arrangement of the color filter is a color arrangement in which the first color components are arranged at the highest density and the other color components are arranged at remaining positions, and the optical filter The low pass filter A first filter that blurs a light image in a first direction on a light receiving surface of the imaging unit; and a second filter that blurs the light of the other color components in a second direction different from the first direction. The range in which the respective color components of the light of one color component and the light of the other color component are blurred by the optical low-pass filter is substantially the same over the entire light receiving surface of the imaging unit without overlapping the light of the same color component. Fill without gaps It is characterized by that.
[0025]
DETAILED DESCRIPTION OF THE INVENTION
Embodiments of the present invention will be described below with reference to the drawings.
[0026]
(First embodiment)
The first embodiment is claimed in
FIG. 3A is a diagram illustrating the configuration of the first embodiment.
In FIG. 3A, an optical low-pass filter 12 is disposed on the image space side of the photographing optical system 11. The optical low-pass filter 12 is configured by bonding a
[0027]
An
FIG. 3B is a diagram showing the color arrangement. The color arrangement here is a color arrangement (so-called “Bayer arrangement”) in which the G component is arranged in a checkered pattern and the remaining R component and B component are arranged.
FIG. 3C is a diagram showing a “blurred image of a point image” by the optical low-pass filter 12 described above. The blurring state as shown in this figure is realized by the following optical actions (1) to (3).
[0028]
(1) The second filter 15 selects the wavelength of the RB component and blurs the image formation position of the RB component vertically by a distance Δy equal to the vertical pitch Py. On the other hand, the G component passes through the second filter 15 almost as it is. As the filter having such characteristics, for example, a wavelength selective phase grating described in Japanese Patent Laid-Open No. 5-66370 can be used.
[0029]
(2) The quarter-wave plate 14 disturbs the polarization plane of the linearly polarized light component that may be generated by the diffraction action or refraction action of the second filter 15. If the linearly polarized light component is not so much generated in the second filter 15, the quarter wavelength plate 14 may be omitted.
[0030]
(3) The
Due to the blurring effect as described above, light of two sections is mixed and incident on one section of the G component shown in FIG. Further, light of four sections is mixed and incident on one section of the RB component.
[0031]
As a result, the light receiving windows of the RGB components are enlarged as shown in FIGS. 4B to 4D, and each fills the entire light receiving surface without any gap.
Therefore, there is no unnecessary overlap in the light receiving windows of the RGB components, and the resolution of all three types of color components can be increased as much as possible. At this time, almost no gap is generated in the light receiving windows of the RGB components, so that false colors and moire can be sufficiently suppressed for all three types of color components.
[0032]
In particular, when compared with the conventional example (FIG. 17), the G component light receiving window does not overlap at all in the first embodiment. Accordingly, it is possible to generate a particularly good image signal by further increasing the resolution of the G component that contributes most to the substantial resolution.
Next, another embodiment will be described.
[0033]
(Second Embodiment)
The second embodiment claims 1 It is embodiment corresponding to invention of -6.
FIG. 5A is a diagram illustrating a configuration of the second embodiment.
In FIG. 5A, an optical low-pass filter 22 is disposed on the image space side of the photographing optical system 11. The optical low-pass filter 22 is configured by bonding a
[0034]
A square
The surface of the color filter 27 is divided into a horizontal pitch Px and a vertical pitch Py (= 2Px) in alignment with the two vertical pixels, and each of them is color-coded into three RGB colors.
[0035]
FIG. 5B is a diagram showing the color arrangement. The odd-numbered rows of the color filter 27 are color-coded as “GRGR...”, And the even-numbered rows are color-coded as “GBGB.
FIG. d ) Is a diagram showing a “blurred image of a point image” by the optical low-pass filter 22 described above. The blurring state as shown in this figure is realized by the following optical actions (1) to (3).
[0036]
(1) The
[0037]
(2) The
[0038]
(3) The
Due to the blurring effect as described above, light for two sections is mixedly incident on one section of the G component shown in FIG. Further, light of four sections is mixed and incident on one section of the RB component.
[0039]
As a result, the light receiving windows of the RGB components are enlarged as shown in FIGS. 6B to 6D, and each fills the entire light receiving surface without any gap.
Therefore, there is no unnecessary overlap in the light receiving windows of the RGB components, and the resolution of all three types of color components can be maximized. At this time, since no gap is generated in the light receiving windows of the RGB components, false colors and moire can be sufficiently suppressed for all three types of color components.
[0040]
At this time, the G component light receiving window has a square shape as shown in FIG. Therefore, for the G component image signal, it is possible to directly generate a square pixel image signal without performing complicated processing such as aspect conversion. Therefore, it is possible to realize a particularly suitable imaging device in a computer-related field that often handles square pixel images.
[0041]
Further, the blurring direction of the
In addition, since the light transmitted through one section of the color filter 27 is received by two light receiving elements 28, it is possible to use a general square
Next, another embodiment will be described.
[0042]
(Third embodiment)
The third embodiment claims 1 It is embodiment corresponding to invention of -6.
FIG. 7 is a diagram for explaining the third embodiment.
The feature point of the configuration in the third embodiment is that the odd-numbered rows of the color filter are color-coded as “GRGB ••” and the even-numbered rows are color-coded as “GBGR ••”. Since the other configuration is the same as that of the second embodiment, description of the configuration here is omitted.
[0043]
In such a configuration, the light receiving windows of the RGB components are enlarged as shown in FIG. 7, and each fills the entire light receiving surface without any gap. Therefore, also in the third embodiment, it is possible to obtain the same effect as in the second embodiment.
An effect unique to the third embodiment is that the light receiving windows of the RB component are arranged obliquely while being shifted by half phase. By such an arrangement of the light receiving windows, it is possible to increase the substantial resolution of the RB component.
Next, another embodiment will be described.
[0044]
(Fourth embodiment)
The fourth embodiment claims 1 It is embodiment corresponding to invention of -6.
FIG. 8 is a diagram for explaining the fourth embodiment.
The feature point of the configuration in the fourth embodiment is that the odd-numbered lines of the color filter are color-coded as “GRGR...” And the even-numbered lines are color-coded as “BGBG. Since the other configuration is the same as that of the second embodiment, description of the configuration here is omitted.
[0045]
In such a configuration, the light receiving windows of the RGB components are enlarged as shown in FIG. 8, and each fills the entire light receiving surface without any gap. Therefore, also in the fourth embodiment, it is possible to obtain the same effect as in the second embodiment.
Further, an effect peculiar to the fourth embodiment is that the G component light receiving windows are arranged in an oblique lattice. By such an arrangement of the light receiving windows, it is possible to increase the substantial resolution of the G component.
[0046]
(Fifth embodiment)
The fifth embodiment claims 1 It is embodiment corresponding to invention of -6.
FIG. 9 is a diagram for explaining the fifth embodiment.
The structural features in the fifth embodiment are the following two points.
[0047]
(1) The horizontal lines of the color filters are color-coded in stripes with “GRGB.
[0048]
(2) The blurring direction of the second filter is set to a horizontal direction in which the same color pitch of the RB component is wide.
Since the other configuration is the same as that of the second embodiment, description of the configuration here is omitted.
In such a configuration, the light receiving windows of the RGB components are enlarged as shown in FIG. 9, and the entire light receiving surface is filled without any gaps. Therefore, also in the fifth embodiment, it is possible to obtain the same effect as in the second embodiment.
[0049]
In particular, the effect peculiar to the fifth embodiment is that the vertical phase of the light receiving window for the RB component matches the vertical phase of the light receiving window for the G component. As described above, since the mutual vertical phases coincide with each other in advance, it is possible to easily generate an image signal in which all the RGB components are aligned in the same phase.
Next, another embodiment will be described.
[0050]
(Sixth embodiment)
The sixth embodiment claims 1 It is embodiment corresponding to invention of -6.
FIG. 10 is a diagram for explaining the sixth embodiment.
The structural feature points in the sixth embodiment are the following two points.
[0051]
(1) The odd-numbered lines of the color filter are color-coded as “GRGB...” And the even-numbered lines are color-coded as “GBGR.
[0052]
(2) The blurring direction of the second filter is set to a horizontal direction in which the same color pitch of the RB component is wide.
Since the other configuration is the same as that of the second embodiment, description of the configuration here is omitted.
In such a configuration, the light receiving windows of the RGB components are enlarged as shown in FIG. 10, and each fills the entire light receiving surface without any gap. Therefore, in the sixth embodiment, it is possible to obtain the same effect as in the second embodiment.
[0053]
An effect unique to the sixth embodiment is that the light receiving windows of the RB component are arranged obliquely while being shifted by half phase. By such an arrangement of the light receiving windows, it is possible to increase the substantial resolution of the RB component.
Furthermore, in the sixth embodiment, the vertical phase of the light receiving window for the RB component matches the vertical phase of the light receiving window for the G component. As described above, since the mutual vertical phases coincide with each other in advance, it is possible to easily generate an image signal in which all the RGB components are aligned in the same phase.
Next, another embodiment will be described.
[0054]
(Seventh embodiment)
The seventh embodiment claims 1 It is embodiment corresponding to invention of -6.
FIG. 11 is a diagram for explaining the seventh embodiment.
The structural features in the seventh embodiment are the following two points.
[0055]
(1) The odd-numbered lines of the color filter are color-coded as “GRGB...” And the even-numbered lines are color-coded as “RGBG.
[0056]
(2) The blurring direction of the second filter is set to a horizontal direction in which the same color pitch of the RB component is wide.
Since the other configuration is the same as that of the second embodiment, description of the configuration here is omitted.
In such a configuration, the light receiving windows of the RGB components are enlarged as shown in FIG. 11, and each of the light receiving surfaces is completely filled with no gap. Therefore, also in the seventh embodiment, it is possible to obtain the same effect as in the second embodiment.
[0057]
In addition, in the seventh embodiment, the light receiving windows for the G component are arranged in an oblique lattice. Further, the light receiving windows for the RB component are arranged obliquely while being shifted by ¼ phase. Such an arrangement of the light receiving windows makes it possible to increase the substantial resolution of the RGB components.
Furthermore, in the seventh embodiment, the vertical phase of the light receiving window for the RB component matches the vertical phase of the light receiving window for the G component. As described above, since the mutual vertical phases coincide with each other in advance, it is possible to easily generate an image signal in which all the RGB components are aligned in the same phase.
Next, another embodiment will be described.
[0058]
(Eighth embodiment)
An eighth embodiment is the
FIG. 12 is a diagram for explaining the eighth embodiment.
The feature of the configuration in the eighth embodiment is that the color arrangement is shifted by half a phase in the vertical direction between the odd and even columns of the color filter.
[0059]
On the image sensor side, the block of the light receiving element 28 is set as shown in FIG. 13B in accordance with the phase shift of the color arrangement. By adding the pixel outputs in units of blocks of the light receiving elements 28 as described above, it is possible to generate pixel outputs having a color array as shown in FIG. 13A while using square pixel imaging elements.
The addition operation here may be performed while performing the vertical transfer operation of the pixel output independently for the odd-numbered columns and the even-numbered columns, or may be performed when image processing is performed outside the imaging device. Good.
[0060]
Since the other configuration is the same as that of the second embodiment, description of the configuration here is omitted.
In such a configuration, the light receiving windows of the RGB components are enlarged as shown in FIG. 12, and each fills the entire light receiving surface without any gap. Therefore, also in the eighth embodiment, it is possible to obtain the same effect as in the second embodiment.
[0061]
Moreover, in the eighth embodiment, the vertical phase of one RB component light receiving window matches the vertical phase of two G component light receiving windows. As described above, since the mutual vertical phases coincide with each other in advance, it is possible to easily generate an image signal in which all the RGB components are aligned in the same phase.
Next, another embodiment will be described.
[0062]
(Ninth embodiment)
Ninth Embodiment is
FIG. 14 is a diagram for explaining the ninth embodiment.
The structural features in the ninth embodiment are the following two points.
[0063]
(1) The color arrangement is shifted by a half phase in the vertical direction between the odd and even columns of the color filter.
[0064]
(2) The R component and the B component are arranged in a checkered pattern on the even columns.
Since the other configuration is the same as that of the second embodiment, description of the configuration here is omitted.
In such a configuration, the light receiving windows of the RGB components are enlarged as shown in FIG. 14, and each fills the entire light receiving surface without any gap. Therefore, also in the ninth embodiment, it is possible to obtain the same effect as in the second embodiment.
[0065]
In addition, in the ninth embodiment, the vertical phase of one RB component light receiving window coincides with the vertical phase of two G component light receiving windows. As described above, since the mutual vertical phases coincide with each other in advance, it is possible to easily generate an image signal in which all the RGB components are aligned in the same phase.
In the ninth embodiment, the light receiving windows for the RB component are arranged obliquely while being shifted by a half phase. By such an arrangement of the light receiving windows, it is possible to increase the substantial resolution of the RB component.
Next, another embodiment will be described.
[0066]
(Tenth embodiment)
The tenth embodiment claims 1 It is embodiment corresponding to invention of -6.
FIG. 15 is a diagram for explaining the tenth embodiment.
The structural features in the tenth embodiment are the following three points.
[0067]
(1) The color arrangement is shifted by a half phase in the vertical direction between the odd and even columns of the color filter.
[0068]
(2) R component and B component are arranged in vertical stripes on even columns.
[0069]
(3) The blurring direction of the second filter is set to the horizontal direction in which the same color pitch of the RB component is wide.
Since the other configuration is the same as that of the second embodiment, description of the configuration here is omitted.
In such a configuration, each light receiving window of the RGB components is enlarged as shown in FIG. 15, and each fills the entire light receiving surface without any gap. Therefore, also in the tenth embodiment, it is possible to obtain the same effect as in the second embodiment.
Moreover, in the tenth embodiment, the horizontal phase of one RB component light receiving window matches the horizontal phase of two G component light receiving windows. As described above, since the horizontal phases of each other coincide with each other in advance, it is possible to easily generate an image signal in which all the RGB components are aligned in the same phase.
[0070]
(Variations of embodiments, etc.)
In each of the above-described embodiments, the distance for blurring the optical image is made coincident with Px and Py, so that no gap or overlap occurs in the light receiving window, and the resolution of the imaging device and the aperture ratio of the light receiving window are maximized. Can be obtained.
However, the present invention is not limited to this. In general, the effect of the present invention can be obtained by making the distance for blurring the optical image substantially equal to Px and Py. For example, the distance Δx that blurs the optical image in the horizontal direction and the distance Δy that blurs the optical image in the vertical direction
(0.6Px) ≦ Δx ≦ (1.5Px)
(0.6Py) ≦ Δy ≦ (1.5Py)
Even if it is set within the range, it becomes possible to suppress false colors and moiré.
[0071]
Moreover, although each embodiment mentioned above demonstrated the case where the filter which birefringes light was used as a 1st filter, this invention is not limited to this. In general, any optical element that blurs a light image by a predetermined distance can be used as an optical low-pass filter. For example, an optical low-pass filter using a phase grating may be used.
[0072]
Furthermore, although each embodiment mentioned above demonstrated the case where a wavelength selective phase grating was used as a 2nd filter, this invention is not limited to this. In general, any optical element whose blur amount varies depending on the wavelength can be used as the second filter.
Further, in each of the above-described embodiments, the bonding is performed in the order of “second filter → first filter” along the optical path, but is not limited thereto. This order may be reversed, or both filters may be arranged independently without being bonded. (However, when using a phase grating, it is necessary to pay attention to the fact that the interval between the image sensor and the phase grating is adjusted to the set value at the time of designing the phase grating.)
Further, in each of the above-described embodiments, three types of color components have been described, but the present invention is not limited to this. For example, a mode in which two colors (for example, when the present invention is applied to one image sensor of a two-plate imaging device) or four or more colors is assigned as color components is conceivable.
In the above-described embodiment, one section of the color array is allocated to two light receiving elements, but the present invention is not limited to this. For example, as shown in FIG. 13C, one section of the color array may be configured by one light receiving element. Of course, one section of the color array may be composed of blocks of three or more light receiving elements.
[0073]
【The invention's effect】
(Claim 1)
In the first aspect of the present invention, the second filter has a wavelength selectivity that “the blur amount of the first color component is smaller than the blur amount of the other color components or is effectively zero”. Therefore, for the first color component, the blur amount in the second direction is reduced, and the resolution in the second direction can be increased.
[0074]
In the imaging unit, since the sampling interval of the first color component is the smallest, aliasing noise generated in the sampling signal of the first color component is shifted to a higher frequency side than in the case of other color components. Therefore, the first color component is less likely to cause false color or moire even if the blur amount is reduced as described above.
As described above, according to the first aspect of the present invention, it is possible to realize an imaging apparatus that sufficiently suppresses false colors and moire and does not impair the resolution as much as possible.
[0075]
(Claim 2)
In the second aspect of the present invention, as shown in FIGS. 1B to 1D, the entire light receiving surface of each of the three types of color components forming the Bayer array can be covered with the light receiving window substantially without overlapping. Therefore, for all three color components, the resolution is not impaired more than necessary, and false colors and moire can be sufficiently suppressed.
As described above, in the invention according to
[0076]
(Claim 3)
In the invention according to
Therefore, according to the third aspect of the present invention, it is possible to realize an imaging apparatus suitable for a computer-related field or the like that often handles square pixel images.
[0077]
(Claim 4)
In the fourth aspect of the invention, the second filter causes the other color components to be blurred in the direction in which the pitch between the same colors is large. For this reason, the light receiving windows of other color components hardly overlap between the same colors, and the resolution of the other color components can be increased as much as possible.
[0078]
(Claim 5)
According to the fifth aspect of the present invention, since one section of the color array is received by two light receiving elements, it is possible to use a general image sensor composed of square pixels. Therefore, it is not necessary to use an image pickup element composed of special rectangular pixels, and the image pickup apparatus according to
[Brief description of the drawings]
BRIEF DESCRIPTION OF THE DRAWINGS , 6 It is a figure explaining invention of description.
FIG. 2 6 It is a figure for demonstrating invention described in (2).
FIG. 3 is a diagram showing a configuration of the first exemplary embodiment.
FIG. 4 is a diagram illustrating the operation of the first embodiment.
FIG. 5 is a diagram illustrating a configuration of a second embodiment.
FIG. 6 is a diagram for explaining the operation of the second embodiment.
FIG. 7 is a diagram for explaining a third embodiment.
FIG. 8 is a diagram for explaining a fourth embodiment;
FIG. 9 is a diagram for explaining a fifth embodiment;
FIG. 10 is a diagram for explaining a sixth embodiment.
FIG. 11 is a diagram for explaining a seventh embodiment.
FIG. 12 is a diagram (1/2) for explaining an eighth embodiment;
FIG. 13 is a diagram (2/2) for explaining the eighth embodiment;
FIG. 14 is a diagram for explaining a ninth embodiment.
FIG. 15 is a diagram for explaining a tenth embodiment;
FIG. 16 is a diagram illustrating a configuration of a conventional column.
FIG. 17 is a diagram illustrating the operation of a conventional example.
Claims (6)
前記カラーフィルタを透過した光像を撮像する撮像手段とを備えた撮像装置において、
入射光による光像を第1方向にぼかす第1フィルタと、前記入射光による光像の色成分のうち前記第1色成分を除く色成分の光を波長選択して前記第1方向と異なる第2方向にぼかして前記カラーフィルタへ出射するとともに、前記第1色成分の光をそのまま透過させる第2フィルタとを有する光学ローパスフィルタを備えた
ことを特徴とする撮像装置。 A color filter in which a plurality of color components are arranged with the highest density of the first color component of the plurality of color components as compared to the other color components ;
In an imaging apparatus comprising imaging means for imaging a light image transmitted through the color filter,
A first filter for blurring a light image by incident light in a first direction, and a wavelength of light of a color component excluding the first color component out of the color components of the light image by incident light is different from the first direction. An imaging apparatus comprising: an optical low-pass filter having a second filter that blurs in two directions and emits the light to the color filter and transmits the light of the first color component as it is.
前記光学ローパスフィルタを通過した光像を、複数色の色配列を介して色分けするカラーフィルタと、
前記カラーフィルタを通過した光像を撮像する撮像手段とを備えた撮像装置において、
前記カラーフィルタの色配列は、第1色成分を市松模様に配置し、第2色成分および第3色成分を残りの位置に配置してなるベイヤー配列であり、
前記色配列の水平ピッチをPxとし、垂直ピッチをPyとしたとき、
前記第1フィルタは、
光像の第1〜第3色成分を、前記水平ピッチPxと略等しい距離だけ水平方向にぼかし、
前記第2フィルタは、
光像の第2色成分および第3色成分を波長選択して、前記垂直ピッチPyと略等しい距離だけ垂直方向にぼかす
ことを特徴とする撮像装置。An optical low-pass filter having a first filter that blurs the optical image in the horizontal direction and a second filter that blurs the optical image in the vertical direction;
A color filter for color-coding the optical image that has passed through the optical low-pass filter through a color arrangement of a plurality of colors;
In an imaging device comprising an imaging means for imaging a light image that has passed through the color filter,
The color arrangement of the color filter is a Bayer arrangement in which the first color components are arranged in a checkered pattern, and the second color components and the third color components are arranged in the remaining positions.
When the horizontal pitch of the color array is Px and the vertical pitch is Py,
The first filter is:
Blur the first to third color components of the light image in the horizontal direction by a distance substantially equal to the horizontal pitch Px;
The second filter is
An imaging apparatus, wherein the second color component and the third color component of an optical image are wavelength-selected and blurred in a vertical direction by a distance substantially equal to the vertical pitch Py.
前記光学ローパスフィルタを通過した光像を、複数色の色配列を介して色分けするカラーフィルタと、
前記カラーフィルタを通過した光像を撮像する撮像手段とを備えた撮像装置において、
前記カラーフィルタは、
一番密度が高い第1色成分とその他の色成分との色配列により構成され、さらに色配列の水平ピッチをPxとし、垂直ピッチをPyとしたとき、PyはPxの略2倍に設定されてなり、
前記第1フィルタは、
光像を、前記水平ピッチPxと略等しい距離だけ水平方向にぼかし、
前記第2フィルタは、
光像における前記その他の色成分を波長選択して、前記垂直ピッチPyと略等しい距離だけ、水平もしくは垂直の方向にぼかす
ことを特徴とする撮像装置。An optical low-pass filter having a first filter that blurs the optical image in the horizontal direction and a second filter that blurs the optical image in the horizontal or vertical direction;
A color filter for color-coding the optical image that has passed through the optical low-pass filter through a color arrangement of a plurality of colors;
In an imaging device comprising an imaging means for imaging a light image that has passed through the color filter,
The color filter is
It is composed of the color arrangement of the first color component with the highest density and the other color components, and when the horizontal pitch of the color arrangement is Px and the vertical pitch is Py, Py is set to approximately twice Px. And
The first filter is:
Blur the optical image in the horizontal direction by a distance substantially equal to the horizontal pitch Px,
The second filter is
An imaging apparatus, wherein the other color components in the optical image are wavelength-selected and blurred in a horizontal or vertical direction by a distance substantially equal to the vertical pitch Py.
前記カラーフィルタの色配列は、
前記その他の色成分に関して、同色間のピッチが水平方向と垂直方向とで相異なっており、
前記第2フィルタは、
光像の前記その他の色成分を、前記同色間のピッチの大きい方向にぼかすフィルタである
ことを特徴とする撮像装置。The imaging device according to claim 3.
The color arrangement of the color filter is:
Regarding the other color components, the pitch between the same colors is different in the horizontal direction and the vertical direction,
The second filter is
An image pickup apparatus characterized by being a filter that blurs the other color components of the optical image in a direction in which the pitch between the same colors is large.
前記撮像手段は、
受光面上に画素ピッチPxで受光素子が2次元配列されてなり、前記色配列の1区画分の透過光を、前記受光素子2つ分で受光する
ことを特徴とする撮像装置。In the imaging device according to claim 3 or 4,
The imaging means includes
An image pickup apparatus, wherein light receiving elements are two-dimensionally arranged at a pixel pitch Px on a light receiving surface, and transmitted light for one section of the color array is received by the two light receiving elements.
前記光学ローパスフィルタを通過した光像を、複数色の色配列を介して色分けするカラーフィルタと、
前記カラーフィルタを通過した光像を撮像する撮像手段とを備えた撮像装置において、
前記カラーフィルタの色配列は、第1色成分が最も高密度に配置され、その他の色成分が残りの位置に配置されてなる色配列であり、
前記光学ローパスフィルタは、前記光像を前記撮像手段の受光面上の第1方向にぼかす第1フィルタと、前記その他の色成分の光を前記第1方向とは異なる第2方向にぼかす第2フィルタとを備え、
前記第1色成分の光及びその他の色成分の光のそれぞれの色成分が前記光学ローパスフィルタによってぼかされる範囲は、同一の色成分の光どうしが重畳することなく、前記撮像手段の受光面全体をほぼ隙間無く埋め尽くすことを特徴とする撮像装置。An optical low-pass filter;
A color filter for color-coding the optical image that has passed through the optical low-pass filter through a color arrangement of a plurality of colors;
In an imaging device comprising an imaging means for imaging a light image that has passed through the color filter,
The color arrangement of the color filter is a color arrangement in which the first color components are arranged at the highest density and the other color components are arranged at the remaining positions.
The optical low-pass filter includes a first filter that blurs the light image in a first direction on a light receiving surface of the imaging unit, and a second filter that blurs the light of the other color components in a second direction different from the first direction. With a filter,
The range in which the color components of the light of the first color component and the light of the other color components are blurred by the optical low-pass filter is the entire light receiving surface of the imaging unit without overlapping the light of the same color component. An image pickup apparatus that fills up almost without any gap .
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP18467598A JP4123574B2 (en) | 1998-06-30 | 1998-06-30 | Imaging device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP18467598A JP4123574B2 (en) | 1998-06-30 | 1998-06-30 | Imaging device |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2000023171A JP2000023171A (en) | 2000-01-21 |
| JP2000023171A5 JP2000023171A5 (en) | 2005-10-20 |
| JP4123574B2 true JP4123574B2 (en) | 2008-07-23 |
Family
ID=16157402
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP18467598A Expired - Lifetime JP4123574B2 (en) | 1998-06-30 | 1998-06-30 | Imaging device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4123574B2 (en) |
Families Citing this family (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8120690B2 (en) | 2001-04-12 | 2012-02-21 | Nikon Corporation | Imaging device |
| WO2002085002A1 (en) * | 2001-04-12 | 2002-10-24 | Nikon Corporation | Solid-state image sensor |
| JP4587450B2 (en) * | 2004-07-29 | 2010-11-24 | 富士フイルム株式会社 | Solid-state imaging device |
| US7570290B2 (en) | 2004-12-27 | 2009-08-04 | Sony Corporation | Drive method for solid-state imaging device, solid-state imaging device, and imaging apparatus |
| JP4551307B2 (en) * | 2005-10-13 | 2010-09-29 | 日本放送協会 | Single-plate color imaging device |
-
1998
- 1998-06-30 JP JP18467598A patent/JP4123574B2/en not_active Expired - Lifetime
Also Published As
| Publication number | Publication date |
|---|---|
| JP2000023171A (en) | 2000-01-21 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5589146B2 (en) | Imaging device and imaging apparatus | |
| KR101011833B1 (en) | Solid state image pickup device and image pickup device using the same | |
| JP3735867B2 (en) | Luminance signal generator | |
| JP5702893B2 (en) | Color imaging device and imaging apparatus | |
| JP5597777B2 (en) | Color imaging device and imaging apparatus | |
| KR20080089601A (en) | Optical low pass filter and imaging device using the same | |
| CN104429061B (en) | Color imaging element and imaging device | |
| JP5621054B2 (en) | Color image sensor | |
| WO2014007282A1 (en) | Color imaging element and imaging device | |
| WO2013100039A1 (en) | Color imaging element and imaging device | |
| JPWO2012114993A1 (en) | Color image sensor | |
| CN104012084B (en) | Color imaging element | |
| CN104025578B (en) | Color image sensor | |
| JP4123574B2 (en) | Imaging device | |
| KR100878785B1 (en) | Imaging device | |
| JP2000184386A (en) | Solid-state image pickup device and signal processing method | |
| JP6149544B2 (en) | Imaging apparatus and control program | |
| JP2000023171A5 (en) | ||
| JPH10248069A (en) | Imaging device | |
| JP4027079B2 (en) | Imaging device | |
| JP2000023172A (en) | Imaging device | |
| JPH0795595A (en) | Color imaging device | |
| JP2723910B2 (en) | Solid-state imaging device | |
| JP2022122350A (en) | Imaging apparatus and control method of imaging apparatus | |
| JPH0965221A (en) | Imaging device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050624 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050704 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20070926 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20071009 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20071207 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080115 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080314 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20080415 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20080428 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110516 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110516 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140516 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140516 Year of fee payment: 6 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140516 Year of fee payment: 6 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| EXPY | Cancellation because of completion of term |