Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP4487658B2 - Digital image signal processing device - Google Patents
[go: Go Back, main page]

JP4487658B2 - Digital image signal processing device - Google Patents

Digital image signal processing device Download PDF

Info

Publication number
JP4487658B2
JP4487658B2 JP2004195567A JP2004195567A JP4487658B2 JP 4487658 B2 JP4487658 B2 JP 4487658B2 JP 2004195567 A JP2004195567 A JP 2004195567A JP 2004195567 A JP2004195567 A JP 2004195567A JP 4487658 B2 JP4487658 B2 JP 4487658B2
Authority
JP
Japan
Prior art keywords
line memory
line
noise reduction
resolution conversion
reduction circuit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2004195567A
Other languages
Japanese (ja)
Other versions
JP2006020050A (en
Inventor
淳 北原
浩正 山田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2004195567A priority Critical patent/JP4487658B2/en
Publication of JP2006020050A publication Critical patent/JP2006020050A/en
Application granted granted Critical
Publication of JP4487658B2 publication Critical patent/JP4487658B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Picture Signal Circuits (AREA)
  • Television Systems (AREA)

Description

本発明は、デジタル画像信号処理装置に関し、詳しくはノイズ低減回路と解像度変換回路でラインメモリを共有するようにしたことで、使用するラインメモリの数を減少させたノイズ低減回路及び解像度変換回路からなるデジタル画像信号処理装置に関する。   The present invention relates to a digital image signal processing apparatus, and more particularly, from a noise reduction circuit and a resolution conversion circuit in which the number of line memories used is reduced by sharing a line memory between a noise reduction circuit and a resolution conversion circuit. This relates to a digital image signal processing apparatus.

従来技術におけるラインメモリを使用したノイズ低減回路及び解像度変換回路を備えたデジタル画像信号処理装置は、図5に示すように、従来の2次元フィルタを用いたノイズ低減回路と解像度変換回路を組み合わせたもので、1は画像信号の入力端子、2、3、4、5、6、7、8はそれぞれ1ライン分の画像データを記憶するラインメモリ、9は2次元フィルタを用いたノイズ低減回路、10は垂直方向の解像度変換フィルタ、11は水平方向の解像度変換フィルタ、12は画像信号の出力端子からなる。   As shown in FIG. 5, a digital image signal processing apparatus having a noise reduction circuit using a line memory and a resolution conversion circuit according to the prior art combines a noise reduction circuit using a conventional two-dimensional filter and a resolution conversion circuit. 1 is an image signal input terminal, 2, 3, 4, 5, 6, 7, and 8 are line memories each storing image data for one line, 9 is a noise reduction circuit using a two-dimensional filter, 10 is a vertical resolution conversion filter, 11 is a horizontal resolution conversion filter, and 12 is an image signal output terminal.

このような構成からなる従来の2次元フィルタを用いたノイズ低減回路及び解像度変換回路からなるデジタル画像信号処理装置の動作を説明する。
先ず、入力端子1に入力された画像信号は、ノイズ低減回路9とラインメモリ3に分配される。ラインメモリ3から読み出された信号はノイズ低減回路9に入力される。ノイズ低減回路9に入力された信号は、2次元フィルタを用いて水平方向、垂直方向、斜め方向のそれぞれの相関を元にノイズが低減され、ラインメモリ4、5、6、7、8にライン毎に入力される。ラインメモリ4、5、6、7、8のうち4本のラインメモリから読み出された信号は、垂直解像度フィルタ10に入力される。垂直解像度を変換された信号は水平解像度変換フィルタ11に入力される。水平解像度を変換された信号は出力端子12から出力される。
特開昭61−53878号(第2頁 第1図)
The operation of the digital image signal processing apparatus including the noise reduction circuit and the resolution conversion circuit using the conventional two-dimensional filter having such a configuration will be described.
First, the image signal input to the input terminal 1 is distributed to the noise reduction circuit 9 and the line memory 3. The signal read from the line memory 3 is input to the noise reduction circuit 9. The signal input to the noise reduction circuit 9 is reduced in noise based on the respective correlations in the horizontal direction, the vertical direction, and the diagonal direction using a two-dimensional filter, and the lines are stored in the line memories 4, 5, 6, 7, and 8. Input every time. Signals read from four line memories among the line memories 4, 5, 6, 7, and 8 are input to the vertical resolution filter 10. The signal whose vertical resolution has been converted is input to the horizontal resolution conversion filter 11. The signal whose horizontal resolution has been converted is output from the output terminal 12.
JP-A-61-53878 (Page 2, Fig. 1)

しかしながら、従来技術で説明したラインメモリを使用したノイズ低減回路及び解像度変換回路からなるデジタル画像信号処理装置において、垂直方向の相関も検出したい場合は、遅延回路としてラインメモリを複数使う必要があり、その分ゲート規模が増大してしまうという問題がある。
例えば、従来技術で説明したノイズ低減回路では、7個のラインメモリを必要とし、ゲート規模が増大してチップサイズの大型化や消費電力の増加やコストアップにつながる。
又、画像信号のうち、輝度、色差それぞれについてノイズ低減を行う場合、輝度用の回路、色差用の回路と2つ必要になり、2倍のラインメモリを必要とする。画像信号が年々多画素になっている状況においては、ラインメモリの増大はゲート規模増大の大きな原因となっている。
However, in the digital image signal processing apparatus including the noise reduction circuit and the resolution conversion circuit using the line memory described in the prior art, if it is desired to detect the correlation in the vertical direction, it is necessary to use a plurality of line memories as delay circuits. There is a problem that the gate scale increases accordingly.
For example, the noise reduction circuit described in the prior art requires seven line memories, which increases the gate scale, leading to an increase in chip size, an increase in power consumption, and an increase in cost.
Further, when noise reduction is performed for each of luminance and color difference in the image signal, two circuits for luminance and one for color difference are required, and double line memory is required. In a situation where the number of image signals increases every year, the increase in line memory is a major cause of the increase in gate scale.

従って、ラインメモリを使用する解像度変換機能を備えた固体撮像装置において、ラインメモリの数を増加させることなく2次元フィルタによるノイズ低減を行うことができるデジタル画像信号処理装置に解決しなければならない課題を有する。   Therefore, in a solid-state imaging device having a resolution conversion function that uses a line memory, there is a problem to be solved in a digital image signal processing device that can perform noise reduction by a two-dimensional filter without increasing the number of line memories Have

上記課題を解決するために、本願発明のデジタル画像信号処理装置は、次に示す構成にすることである。   In order to solve the above problems, a digital image signal processing apparatus according to the present invention is configured as follows.

(1)デジタル画像信号処理装置は、入力端子から入力された画像信号を、1ライン分の画像データとして記憶する第1、第2、第3、第4、第5のラインメモリの夫々に順次記憶させるラインメモリ記憶手段と、前記ラインメモリ記憶手段により記憶されている第2、第3、第4のラインメモリから読み出された信号を入力して水平方向、垂直方向、斜め方向の相関を検出してノイズを低減する2次元フィルタを用いた第1のノイズ低減回路と、前記ラインメモリ記憶手段により記憶されている第3、第4、第5のラインメモリから読み出された信号を入力して水平方向、垂直方向、斜め方向の相関を検出してノイズを低減する2次元フィルタを用いた第2のノイズ低減回路と、前記ラインメモリ記憶手段により記憶されている第2のラインメモリからの信号、前記第1のノイズ低減回路からの信号、前記第2のノイズ低減回路からの信号、前記第5のラインメモリからの信号の4つの信号を入力して垂直方向の解像度を変換する垂直解像度変換フィルタ及び水平方向の解像度を変換する水平解像度変換フィルタとからなる解像度変換回路と、を備えてなる。
(2)デジタル画像信号処理装置は、入力端子から入力された画像信号を、1ライン分の画像データとして記憶する第1、第2、第3、第4、第5のラインメモリの夫々に順次記憶させるラインメモリ記憶手段と、前記ラインメモリ記憶手段により記憶されている第2、第3、第4のラインメモリから読み出された信号、または第3、第4、第5のラインメモリから読み出された信号を切替えて入力して水平方向、垂直方向、斜め方向の相関を検出してノイズを低減する2次元フィルタを用いたノイズ低減回路と、前記ラインメモリ記憶手段により記憶されている第2のラインメモリからの信号、前記ノイズ低減回路からの信号、前記第5のラインメモリからの信号を入力して垂直方向の解像度を変換する垂直解像度変換フィルタ及び水平方向の解像度を変換する水平解像度変換フィルタとからなる解像度変換回路と、を備えてなる。
(3)デジタル画像信号処理装置は、入力端子から入力された画像信号を、1ライン分の画像データとして記憶する第1、第2、第3、第4、第5のラインメモリの夫々に順次記憶させるラインメモリ記憶手段と、前記ラインメモリ記憶手段により記憶されている第3、第4、第5のラインメモリから読み出された信号を入力して水平方向、垂直方向、斜め方向の相関を検出してノイズを低減する2次元フィルタを用いたノイズ低減回路と、前記ラインメモリ記憶手段により記憶されている第2のラインメモリからの信号、第3のラインメモリからの信号、前記ノイズ低減回路からの信号、前記第5のラインメモリからの信号の4つの信号を入力して垂直方向の解像度を変換する垂直解像度変換フィルタ及び水平方向の解像度を変換する水平解像度変換フィルタとからなる解像度変換回路と、を備えてなる。
(1) The digital image signal processing device sequentially stores the image signal input from the input terminal in each of the first, second, third, fourth, and fifth line memories that store image data for one line. The line memory storage means for storing, and the signals read from the second, third and fourth line memories stored by the line memory storage means are inputted to correlate the horizontal direction, the vertical direction and the diagonal direction. A first noise reduction circuit using a two-dimensional filter that detects and reduces noise, and signals read from the third, fourth, and fifth line memories stored in the line memory storage means are input. Then, a second noise reduction circuit using a two-dimensional filter that detects the correlation in the horizontal direction, the vertical direction, and the diagonal direction to reduce noise, and the second line stored in the line memory storage means. The vertical resolution is converted by inputting four signals: a signal from the memory, a signal from the first noise reduction circuit, a signal from the second noise reduction circuit, and a signal from the fifth line memory. And a resolution conversion circuit including a horizontal resolution conversion filter for converting the resolution in the horizontal direction.
(2) The digital image signal processing apparatus sequentially stores the image signal input from the input terminal in each of the first, second, third, fourth, and fifth line memories that store image data for one line. Line memory storage means for storing, signals read from the second, third, and fourth line memories stored by the line memory storage means, or read from the third, fourth, and fifth line memories A noise reduction circuit using a two-dimensional filter for reducing the noise by detecting the correlation in the horizontal direction, the vertical direction, and the oblique direction by switching and inputting the output signal, and the first stored in the line memory storage means A vertical resolution conversion filter for converting a vertical resolution by inputting a signal from the second line memory, a signal from the noise reduction circuit, and a signal from the fifth line memory, and a horizontal direction And resolution conversion circuit consisting of a horizontal resolution conversion filter for converting the resolution of, consisting comprise.
(3) The digital image signal processing apparatus sequentially stores the image signal input from the input terminal in each of the first, second, third, fourth, and fifth line memories that store image data for one line. The line memory storage means for storing, and the signals read from the third, fourth and fifth line memories stored by the line memory storage means are inputted to correlate the horizontal direction, the vertical direction and the diagonal direction. A noise reduction circuit using a two-dimensional filter that detects and reduces noise, a signal from the second line memory stored by the line memory storage means, a signal from a third line memory, and the noise reduction circuit And a horizontal resolution for converting the resolution in the horizontal direction by inputting the four signals of the signal from the fifth line memory and the signal from the fifth line memory and converting the resolution in the vertical direction. And resolution conversion circuit comprising a Zodo conversion filter, consisting comprise.

(1)以上のように、本発明のデジタル画像信号処理装置によれば、ノイズ低減回路と解像度変換回路でラインメモリを共有するようにしたことで、ノイズ低減回路専用のラインメモリを持たずに2次元フィルタによるノイズ低減を行うことができる。これは画像信号の多画素化が進んでもラインメモリを増加させる必要がないという大きなメリットになる。
(2)実施例1では、2つのノイズ低減回路を使用する構成になっているため、ノイズ低減回路は2倍になるが、輝度、色差処理夫々あわせてラインメモリは従来の回路構成に比べて4個のラインメモリを減らすことができる。
(3)実施例2では、ノイズ低減回路を単一にして、クロックを早くしたことで、消費電力が増加するが、輝度、色差処理夫々合わせてラインメモリは従来の回路構成に比べて4個のラインンメモリを減らすことができる。
(4)実施例3では、垂直解像度を変換しない場合しかノイズを低減できないが、輝度、色差夫々合わせてラインメモリは従来の回路構成に比べて4個のラインメモリを減らすことができる。
(1) As described above, according to the digital image signal processing apparatus of the present invention, since the line memory is shared by the noise reduction circuit and the resolution conversion circuit, a line memory dedicated to the noise reduction circuit is not provided. Noise reduction by a two-dimensional filter can be performed. This is a great merit that it is not necessary to increase the line memory even if the number of pixels of the image signal is increased.
(2) In the first embodiment, since the configuration using two noise reduction circuits is used, the noise reduction circuit is doubled. However, the line memory is compared with the conventional circuit configuration for both luminance and color difference processing. Four line memories can be reduced.
(3) In the second embodiment, a single noise reduction circuit and a faster clock increase power consumption, but there are four line memories compared to the conventional circuit configuration for both luminance and color difference processing. The line memory can be reduced.
(4) In the third embodiment, noise can be reduced only when the vertical resolution is not converted, but the line memory can be reduced by four line memories in comparison with the conventional circuit configuration in accordance with the luminance and the color difference.

次に、本願発明に係るデジタル画像信号処理装置の実施形態について、図面を参照して、以下説明する。   Next, an embodiment of a digital image signal processing apparatus according to the present invention will be described below with reference to the drawings.

本願発明の第1実施例のノイズ低減回路と解像度変換回路でラインメモリを共有するようにしたデジタル画像信号処理装置は、図1に示すように、13は画像信号の入力端子、14、15、16、17、18はそれぞれ1ライン分の画像データを記憶する第1、第2、第3、第4、第5のラインメモリ、19、20は2次元フィルタを用いた第1、第2のノイズ低減回路、21は垂直方向の垂直解像度変換フィルタ、22、23、24、25はそれぞれ垂直解像度変換フィルタ21の入力端子、26は水平方向の水平解像度変換フィルタ、27は画像信号の出力端子、28、29は遅延回路をそれぞれ表し、垂直解像度変換フィルタ21及び水平解像度変換フィルタ26で解像度変換回路を構成する。 As shown in FIG. 1, the digital image signal processing apparatus in which the line memory is shared by the noise reduction circuit and the resolution conversion circuit of the first embodiment of the present invention is as shown in FIG. 16, 17, and 18 are first, second, third, fourth, and fifth line memories that store image data for one line , and 19 and 20 are first and second lines that use a two-dimensional filter . A noise reduction circuit , 21 is a vertical resolution conversion filter in the vertical direction, 22, 23, 24 and 25 are input terminals of the vertical resolution conversion filter 21, 26 is a horizontal resolution conversion filter in the horizontal direction, and 27 is an output terminal for image signals, Reference numerals 28 and 29 respectively denote delay circuits, and the vertical resolution conversion filter 21 and the horizontal resolution conversion filter 26 constitute a resolution conversion circuit.

このような構成からなるノイズ低減回路と解像度変換回路でラインメモリを共有するようにしたデジタル画像信号処理装置において、先ず、入力端子13に入力された画像信号は、第1、第2、第3、第4、第5のラインメモリ14、15、16、17、18にライン毎に入力されて記憶される。
ここでは、ノイズ低減回路と垂直解像度変換フィルタ用のラインメモリを共有することにより、従来技術の図5を参照して説明したデジタル画像信号処理装置の構成に比べて2つのラインメモリを削減している。
In the digital image signal processing apparatus in which the line memory is shared between the noise reduction circuit and the resolution conversion circuit configured as described above, first, the image signal input to the input terminal 13 is the first, second, and third. The fourth and fifth line memories 14 , 15 , 16 , 17, and 18 are inputted and stored for each line.
Here, by sharing the line memory for the noise reduction circuit and the vertical resolution conversion filter, two line memories are reduced compared to the configuration of the digital image signal processing apparatus described with reference to FIG. 5 of the prior art. Yes.

第2、第3、第4のラインメモリ15、16、17から読み出された信号は第1のノイズ低減回路19に入力され、第3、第4、第5のラインメモリ16、17、18から読み出された信号は第2のノイズ低減回路20に入力される。第1、第2のノイズ低減回路19、20に入力された信号は2次元フィルタを用いて水平方向、垂直方向、斜め方向のそれぞれの相関を元にノイズが低減され、垂直解像度変換フィルタ21の入力端子23、24にそれぞれ入力される。 The signals read from the second, third, and fourth line memories 15, 16, and 17 are input to the first noise reduction circuit 19, and the third, fourth, and fifth line memories 16, 17, and 18 are input. The signal read from is input to the second noise reduction circuit 20. The signals input to the first and second noise reduction circuits 19 and 20 are reduced in noise based on the respective correlations in the horizontal direction, the vertical direction, and the diagonal direction using a two-dimensional filter. Input to the input terminals 23 and 24, respectively.

ここで使用する垂直解像度変換フィルタ21は、入力端子22、25に入力される信号のフィルタ係数の絶対値に比べて、入力端子23、24に入力される信号のフィルタ係数の絶対値が大きいFIRフィルタを用いる。フィルタ係数が小さければ、ノイズ低減回路を入れなくとも出力される画像への影響は少ないからである。
又、入力端子22、25に入力される信号レベルが入力端子23、24に入力される信号レベルより飛びぬけて大きい場合はそもそもその信号はノイズではなく、原画像のエッジであると判断する。
以上の理由により、4本の信号線(ライン)である入力端子22、23、24、25の全てにノイズ低減回路を入れないようにして、垂直解像度変換フィルタ21の4タップのうち処理の重みが大きいM個のライン、実施例においては入力端子23、24にノイズ低減回路を設けた構成となっている。具体的には、第2、第3、第4のラインメモリ15、16、17からの信号を第1のノイズ低減回路19に入力し、第3、第4、第5のラインメモリ16、17、18からの信号を第2のノイズ低減回路20に入力し、第1のノイズ低減回路19の出力が垂直解像度変換フィルタ21の入力端子23に入力され、第2のノイズ低減回路20の出力が垂直解像度変換フィルタ21の入力端子24に入力されるようにして、ノイズ低減回路を2個にしてゲート規模の増加を抑えている。
The vertical resolution conversion filter 21 used here is an FIR in which the absolute value of the filter coefficient of the signal input to the input terminals 23 and 24 is larger than the absolute value of the filter coefficient of the signal input to the input terminals 22 and 25. Use a filter. This is because if the filter coefficient is small, the influence on the output image is small even without the noise reduction circuit.
If the signal level input to the input terminals 22 and 25 is much higher than the signal level input to the input terminals 23 and 24, it is determined that the signal is not noise but an edge of the original image.
For the above reasons, the noise reduction circuit is not inserted in all of the input terminals 22, 23, 24, and 25 that are four signal lines (lines), and the processing weight among the four taps of the vertical resolution conversion filter 21. In this embodiment, a noise reduction circuit is provided at the input terminals 23 and 24. Specifically, signals from the second, third, and fourth line memories 15, 16, and 17 are input to the first noise reduction circuit 19, and the third, fourth, and fifth line memories 16, 17 are input. , 18 are input to the second noise reduction circuit 20, the output of the first noise reduction circuit 19 is input to the input terminal 23 of the vertical resolution conversion filter 21, and the output of the second noise reduction circuit 20 is Two noise reduction circuits are provided so as to be input to the input terminal 24 of the vertical resolution conversion filter 21, thereby suppressing an increase in gate scale.

図2は、4タップのFIRローパスフィルタのフィルタ係数の例である。実線は方形窓による窓関数法で求めた正規化遮断周波数0.25のローパスフィルタのインパルス応答であり、垂直解像度を2倍にする場合を想定したものである。これを4タップで実現した場合、フィルタ係数は(0、0、1、0)、(−0.21、0.63、0.63、−0.21)となり、フィルタ係数の中心ほど両端に比べて係数の絶対値が大きいことがわかる。
このようにして垂直解像度を変換された信号は水平解像度変換フィルタ26に入力され、水平解像度が変換されて出力端子27から出力される。
FIG. 2 is an example of a filter coefficient of a 4-tap FIR low-pass filter. The solid line represents the impulse response of a low-pass filter with a normalized cutoff frequency of 0.25 obtained by the window function method using a rectangular window, and assumes a case where the vertical resolution is doubled. When this is realized with 4 taps, the filter coefficients are (0, 0, 1, 0), (−0.21, 0.63, 0.63, −0.21), and the center of the filter coefficient is at both ends. It can be seen that the absolute value of the coefficient is large.
The signal whose vertical resolution is converted in this way is input to the horizontal resolution conversion filter 26, where the horizontal resolution is converted and output from the output terminal 27.

以上の処理を輝度信号、色差信号それぞれに行うとすると、ノイズ低減回路は2倍必要になるが、ラインメモリは従来の回路構成に比べて4つ減少する。又、垂直解像度変換フィルタにおいて、フィルタ係数が大きい信号だけノイズ低減を行うことによりゲート規模を抑えることができる。   If the above processing is performed for each of the luminance signal and the color difference signal, a noise reduction circuit is required twice, but the line memory is reduced by four compared to the conventional circuit configuration. Further, in the vertical resolution conversion filter, the gate scale can be suppressed by reducing noise only for a signal having a large filter coefficient.

次に、本発明の第2実施例のノイズ低減回路と解像度変換回路でラインメモリを共有するようにしたデジタル画像信号処理装置について、図面を参照して以下説明する。   Next, a digital image signal processing apparatus in which a line memory is shared by the noise reduction circuit and the resolution conversion circuit of the second embodiment of the present invention will be described with reference to the drawings.

第2実施例のノイズ低減回路と解像度変換回路でラインメモリを共有するようにしたデジタル画像信号処理装置は、図3に示すように、30は画像信号の入力端子、31、32、33、34、35はそれぞれ1ライン分の画像データを記憶する第1、第2、第3、第4、第5のラインメモリ、36はセレクタ、37はラインメモリの2倍のクロックで動作する2次元フィルタを用いたノイズ低減回路、38は垂直方向の垂直解像度変換フィルタ、39、40、41、42はそれぞれ垂直解像度変換フィルタ38の入力端子、43は水平方向の水平解像度変換フィルタ、44は画像信号の出力端子、45、46は遅延回路、47は2倍のクロックで動作する単位遅延回路をそれぞれ表し、垂直解像度変換フィルタ38及び水平解像度変換フィルタ43で解像度変換回路を構成する。 In the digital image signal processing apparatus in which the line memory is shared by the noise reduction circuit and the resolution conversion circuit of the second embodiment, as shown in FIG. 3, 30 is an input terminal for image signals, 31, 32, 33, 34. , 35 are first, second, third, fourth, and fifth line memories that store image data for one line, 36 is a selector, and 37 is a two-dimensional filter that operates at twice the clock of the line memory. , 38 is a vertical resolution conversion filter in the vertical direction, 39, 40, 41, and 42 are input terminals of the vertical resolution conversion filter 38, 43 is a horizontal resolution conversion filter in the horizontal direction, and 44 is an image signal. An output terminal, 45 and 46 are delay circuits, and 47 is a unit delay circuit that operates with a double clock. The vertical resolution conversion filter 38 and the horizontal resolution conversion filter The resolution conversion circuit is configured by the data 43.

このような構成からなるノイズ低減回路と解像度変換回路でラインメモリを共有するようにしたデジタル画像信号処理装置において、第1実施例と異なるのは。ノイズ低減回路をラインメモリのN倍クロック、実施例では2倍の周波数で動作させるようにして、解像度変換回路における処理の重みが大きいMライン、実施例では入力端子40、41の2ラインであるのでM/N個のノイズ低減回路は1つですみ、第1実施例に比べてノイズ低減回路を1つ減らしたことである。ノイズ低減回路を1つにすることにより、セレクタ36を2倍のクロックで切り替えて、ノイズ低減回路への入力を選択する。この第2実施例では、ノイズ低減回路を減らしたのでゲート規模の増加は殆どないが、2倍のクロックで動作させるので消費電力は増加する。   The digital image signal processing apparatus in which the line memory is shared between the noise reduction circuit and the resolution conversion circuit having such a configuration is different from the first embodiment. The noise reduction circuit is operated at an N-times clock of the line memory, in the embodiment, twice the frequency, so that the processing weight in the resolution conversion circuit is M lines, and in the embodiment, the input terminals 40 and 41 are two lines. Therefore, only one M / N noise reduction circuit is required, and the noise reduction circuit is reduced by one compared to the first embodiment. By using one noise reduction circuit, the selector 36 is switched with a double clock to select the input to the noise reduction circuit. In this second embodiment, since the noise reduction circuit is reduced, there is almost no increase in the gate scale, but the power consumption is increased because it is operated with twice the clock.

次に、本発明の第3実施例のノイズ低減回路と解像度変換回路でラインメモリを共有するようにしたデジタル画像信号処理装置について、図面を参照して以下説明する。   Next, a digital image signal processing apparatus in which a line memory is shared by a noise reduction circuit and a resolution conversion circuit according to a third embodiment of the present invention will be described below with reference to the drawings.

第3実施例のノイズ低減回路と解像度変換回路でラインメモリを共有するようにしたデジタル画像信号処理装置は、図4に示すように、48は画像信号の入力端子、49、50、51、52、53はそれぞれ1ライン分の画像データを記憶する第1、第2、第3、第4、第5のラインメモリ、54は2次元フィルタを用いたノイズ低減回路、55は垂直方向の垂直解像度変換フィルタ、56、57、58、59はそれぞれ垂直解像度変換フィルタ55の入力端子、60は水平方向の水平解像度変換フィルタ、61は画像信号の出力端子、62、63、64は遅延回路をそれぞれ表し、垂直解像度変換フィルタ55及び水平解像度変換フィルタ60で解像度変換回路を構成する。 In the digital image signal processing apparatus in which the line memory is shared between the noise reduction circuit and the resolution conversion circuit of the third embodiment, as shown in FIG. 4, 48 is an input terminal for image signals, 49, 50, 51, 52 , 53 are first, second, third, fourth, and fifth line memories that store image data for one line, 54 is a noise reduction circuit using a two-dimensional filter, and 55 is vertical resolution in the vertical direction. Conversion filters 56, 57, 58, and 59 are input terminals of the vertical resolution conversion filter 55, 60 is a horizontal resolution conversion filter in the horizontal direction, 61 is an output terminal for image signals, and 62, 63, and 64 are delay circuits, respectively. The vertical resolution conversion filter 55 and the horizontal resolution conversion filter 60 constitute a resolution conversion circuit.

このような構成からなるノイズ低減回路と解像度変換回路でラインメモリを共有するようにしたデジタル画像信号処理装置において、第1実施例と異なるのは。入力端子57に接続してあったノイズ低減回路を削除したことである。垂直解像度を変換しない場合のフィルタ係数は、図2に示すグラフより、(0、0、1、0)であり、解像度変換回路における処理の重みが最も大きいライン、実施例では入力端子58の信号だけが使用されるからである。
この第3実施例ではゲート規模、消費電力とも最も抑えられるので、垂直解像度を変換しない場合だけノイズ低減を行うように用途を限定した場合は、この実施例が有効である。
The digital image signal processing apparatus in which the line memory is shared between the noise reduction circuit and the resolution conversion circuit having such a configuration is different from the first embodiment. The noise reduction circuit connected to the input terminal 57 is deleted. The filter coefficient when the vertical resolution is not converted is (0, 0, 1, 0) from the graph shown in FIG. 2, and is the line with the highest processing weight in the resolution conversion circuit, in the embodiment, the signal at the input terminal 58. Because only is used.
In the third embodiment, both the gate scale and the power consumption can be minimized, and this embodiment is effective when the application is limited so that noise reduction is performed only when the vertical resolution is not converted.

ノイズ低減回路と解像度変換回路でラインメモリを共有するようにしたことにより、ノイズ低減回路専用のラインメモリを持たずに2次元フィルタによるノイズ低減を行うことができ、画像信号の多画素化が進むほどラインメモリを減らすことができるデジタル画像信号処理装置を提供する。   By sharing the line memory between the noise reduction circuit and the resolution conversion circuit, noise can be reduced by a two-dimensional filter without having a line memory dedicated to the noise reduction circuit, and the number of pixels of the image signal is increased. Provided is a digital image signal processing apparatus capable of reducing the line memory.

本発明に係る第1実施例のノイズ低減回路と解像度変換回路でラインメモリを共有するようにしたデジタル画像信号処理装置を略示的に示したブロック図である。1 is a block diagram schematically showing a digital image signal processing apparatus in which a line memory is shared by a noise reduction circuit and a resolution conversion circuit according to a first embodiment of the present invention. 同、4タップのFIRローパスフィルタのフィルタ係数の例を示したグラフである。It is the graph which showed the example of the filter coefficient of the same 4 tap FIR low pass filter. 本発明に係る第2実施例のノイズ低減回路と解像度変換回路でラインメモリを共有するようにしたデジタル画像信号処理装置を略示的に示したブロック図である。It is the block diagram which showed schematically the digital image signal processing apparatus which made the line memory share by the noise reduction circuit and resolution conversion circuit of 2nd Example which concern on this invention. 本発明に係る第3実施例のノイズ低減回路と解像度変換回路でラインメモリを共有するようにしたデジタル画像信号処理装置を略示的に示したブロック図である。FIG. 10 is a block diagram schematically showing a digital image signal processing apparatus in which a line memory is shared by a noise reduction circuit and a resolution conversion circuit according to a third embodiment of the present invention. 従来技術におけるラインメモリを使用したノイズ低減回路及び解像度変換回路で構成されているデジタル画像信号処理装置を略示的に示したブロック図である。It is the block diagram which showed schematically the digital image signal processing apparatus comprised by the noise reduction circuit and resolution conversion circuit which used the line memory in a prior art.

符号の説明Explanation of symbols

13;入力端子、14;ラインメモリ、15;ラインメモリ、16;ラインメモリ、17;ラインメモリ、18;ラインメモリ、19;ノイズ低減回路、20;ノイズ低減回路、21;解像度変換フィルタ、22;入力端子、23;入力端子、24;入力端子、25;入力端子、26;解像度変換フィルタ、27;出力端子、28;遅延回路、29;遅延回路、30;入力端子、31;ラインメモリ、32;ラインメモリ、33;ラインメモリ、34;ラインメモリ、35;ラインメモリ、36;セレクタ、37;ノイズ低減回路、38;解像度変換フィルタ、39;入力端子、40;入力端子、41;入力端子、42;入力端子、43;解像度変換フィルタ、44;出力端子、45;遅延回路、46;遅延回路、47;単位遅延回路、48;入力端子、49;ラインメモリ、50;ラインメモリ、51;ラインメモリ、52;ラインメモリ、53;ラインメモリ、54;ノイズ低減回路、55;解像度変換フィルタ、56;入力端子、57;入力端子、58;入力端子、59;入力端子、60;解像度変換フィルタ、61;出力端子、62;遅延回路、63;遅延回路、64;遅延回路。 13; Input terminal, 14; Line memory, 15; Line memory, 16; Line memory, 17; Line memory, 18; Line memory, 19; Noise reduction circuit, 20; Noise reduction circuit, 21; Input terminal, 23; Input terminal, 24; Input terminal, 25; Input terminal, 26; Resolution conversion filter, 27; Output terminal, 28; Delay circuit, 29; Delay circuit, 30; Line memory 33; line memory 34; line memory 35; line memory 36; selector 37; noise reduction circuit 38; resolution conversion filter 39; input terminal 40; input terminal 41; input terminal; 42; input terminal 43; resolution conversion filter 44; output terminal 45; delay circuit 46; delay circuit 47; unit delay circuit 48 Line terminal, 49; Line memory, 50; Line memory, 51; Line memory, 52; Line memory, 53; Line memory, 54; Noise reduction circuit, 55; Resolution conversion filter, 56; Input terminal, 57; 58; input terminal 59; input terminal 60; resolution conversion filter 61; output terminal 62; delay circuit 63; delay circuit 64; delay circuit.

Claims (3)

入力端子から入力された画像信号を、1ライン分の画像データとして記憶する第1、第2、第3、第4、第5のラインメモリの夫々に順次記憶させるラインメモリ記憶手段と、
前記ラインメモリ記憶手段により記憶されている第2、第3、第4のラインメモリから読み出された信号を入力して水平方向、垂直方向、斜め方向の相関を検出してノイズを低減する2次元フィルタを用いた第1のノイズ低減回路と、
前記ラインメモリ記憶手段により記憶されている第3、第4、第5のラインメモリから読み出された信号を入力して水平方向、垂直方向、斜め方向の相関を検出してノイズを低減する2次元フィルタを用いた第2のノイズ低減回路と、
前記ラインメモリ記憶手段により記憶されている第2のラインメモリからの信号、前記第1のノイズ低減回路からの信号、前記第2のノイズ低減回路からの信号、前記第5のラインメモリからの信号の4つの信号を入力して垂直方向の解像度を変換する垂直解像度変換フィルタ及び水平方向の解像度を変換する水平解像度変換フィルタとからなる解像度変換回路と、
を備えてなるデジタル画像信号処理装置。
Line memory storage means for sequentially storing the image signal input from the input terminal in each of the first, second, third, fourth, and fifth line memories that store image data for one line;
Inputs signals read from the second, third, and fourth line memories stored by the line memory storage means, detects the correlation in the horizontal direction, vertical direction, and diagonal direction, and reduces noise 2 A first noise reduction circuit using a dimensional filter;
Input signals read from the third, fourth, and fifth line memories stored in the line memory storage means to detect horizontal, vertical, and diagonal correlations to reduce noise 2 A second noise reduction circuit using a dimensional filter;
The signal from the second line memory stored by the line memory storage means, the signal from the first noise reduction circuit, the signal from the second noise reduction circuit, and the signal from the fifth line memory A resolution conversion circuit comprising a vertical resolution conversion filter for converting the vertical resolution by inputting the four signals and a horizontal resolution conversion filter for converting the horizontal resolution;
A digital image signal processing apparatus comprising:
入力端子から入力された画像信号を、1ライン分の画像データとして記憶する第1、第2、第3、第4、第5のラインメモリの夫々に順次記憶させるラインメモリ記憶手段と、
前記ラインメモリ記憶手段により記憶されている第2、第3、第4のラインメモリから読み出された信号、または第3、第4、第5のラインメモリから読み出された信号を切替えて入力して水平方向、垂直方向、斜め方向の相関を検出してノイズを低減する2次元フィルタを用いたノイズ低減回路と、
前記ラインメモリ記憶手段により記憶されている第2のラインメモリからの信号、前記ノイズ低減回路からの信号、前記第5のラインメモリからの信号を入力して垂直方向の解像度を変換する垂直解像度変換フィルタ及び水平方向の解像度を変換する水平解像度変換フィルタとからなる解像度変換回路と、
を備えてなるデジタル画像信号処理装置。
Line memory storage means for sequentially storing the image signal input from the input terminal in each of the first, second, third, fourth, and fifth line memories that store image data for one line;
The signal read from the second, third, and fourth line memories stored by the line memory storage means or the signal read from the third, fourth, and fifth line memories is switched and input. A noise reduction circuit using a two-dimensional filter that detects the correlation by detecting the correlation in the horizontal direction, vertical direction, and diagonal direction, and
Vertical resolution conversion for converting the resolution in the vertical direction by inputting the signal from the second line memory stored in the line memory storage means, the signal from the noise reduction circuit, and the signal from the fifth line memory. A resolution conversion circuit comprising a filter and a horizontal resolution conversion filter for converting the resolution in the horizontal direction;
A digital image signal processing apparatus comprising:
入力端子から入力された画像信号を、1ライン分の画像データとして記憶する第1、第2、第3、第4、第5のラインメモリの夫々に順次記憶させるラインメモリ記憶手段と、
前記ラインメモリ記憶手段により記憶されている第3、第4、第5のラインメモリから読み出された信号を入力して水平方向、垂直方向、斜め方向の相関を検出してノイズを低減する2次元フィルタを用いたノイズ低減回路と、
前記ラインメモリ記憶手段により記憶されている第2のラインメモリからの信号、第3のラインメモリからの信号、前記ノイズ低減回路からの信号、前記第5のラインメモリからの信号の4つの信号を入力して垂直方向の解像度を変換する垂直解像度変換フィルタ及び水平方向の解像度を変換する水平解像度変換フィルタとからなる解像度変換回路と、
を備えてなるデジタル画像信号処理装置。
Line memory storage means for sequentially storing the image signal input from the input terminal in each of the first, second, third, fourth, and fifth line memories that store image data for one line;
Input signals read from the third, fourth, and fifth line memories stored in the line memory storage means to detect horizontal, vertical, and diagonal correlations to reduce noise 2 A noise reduction circuit using a dimensional filter;
The four signals of the signal from the second line memory, the signal from the third line memory, the signal from the noise reduction circuit, and the signal from the fifth line memory stored in the line memory storage means are obtained. A resolution conversion circuit composed of a vertical resolution conversion filter that inputs and converts the resolution in the vertical direction and a horizontal resolution conversion filter that converts the resolution in the horizontal direction;
A digital image signal processing apparatus comprising:
JP2004195567A 2004-07-01 2004-07-01 Digital image signal processing device Expired - Fee Related JP4487658B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004195567A JP4487658B2 (en) 2004-07-01 2004-07-01 Digital image signal processing device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004195567A JP4487658B2 (en) 2004-07-01 2004-07-01 Digital image signal processing device

Publications (2)

Publication Number Publication Date
JP2006020050A JP2006020050A (en) 2006-01-19
JP4487658B2 true JP4487658B2 (en) 2010-06-23

Family

ID=35793865

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004195567A Expired - Fee Related JP4487658B2 (en) 2004-07-01 2004-07-01 Digital image signal processing device

Country Status (1)

Country Link
JP (1) JP4487658B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8385422B2 (en) 2008-08-04 2013-02-26 Kabushiki Kaisha Toshiba Image processing apparatus and image processing method
JP5060447B2 (en) 2008-10-07 2012-10-31 株式会社東芝 Noise cancellation processing circuit and solid-state imaging device

Also Published As

Publication number Publication date
JP2006020050A (en) 2006-01-19

Similar Documents

Publication Publication Date Title
US11949995B2 (en) Universal and adaptive de-mosaicing (CFA) system
US9392236B2 (en) Image processing method, image signal processor, and image processing system including the same
CN102640500B (en) image processing equipment
US6567571B1 (en) Image sensing device capable of outputting image signals by blocks and processing circuit which processes image signals by blocks
JP2015216644A (en) Architecture for video processing, high-speed still image processing, and high-quality still image processing
TW201011694A (en) Methods and apparatus for flat region image filtering
CN119012033A (en) Imaging circuit with high frame rate edge detection
JP4487658B2 (en) Digital image signal processing device
JP2002058026A (en) Image encoding apparatus and method and image decoding apparatus and method
KR20050077285A (en) Resolution conversion method and device
JP5011289B2 (en) Imaging device
US8559759B2 (en) Image processing apparatus for image reduction processing and control method thereof
JP2004297314A (en) Pixel density converter
KR100769460B1 (en) Real time stereo image matching system
JPH05130513A (en) Solid state image pickup device
US8452827B2 (en) Data processing circuit
KR101586844B1 (en) Image processing apparatus and method
KR20250175429A (en) Image sensor, image processing system including the same and image processing method thereof
Deng et al. An efficient VLSI architecture of the sample interpolation for MPEG-4 advanced simple profile
US6654052B1 (en) Card type semiconductor memory device
JP2012008656A (en) Signal processor
JP4439338B2 (en) Image converter
KR20260053968A (en) Encoder, decoder, and image processing system
JP4407475B2 (en) Camera image processing device
KR20090097740A (en) Image reduction device and image reduction method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070416

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20091019

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20091029

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20091214

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20091225

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20100218

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100309

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100322

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130409

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130409

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees