JP4175879B2 - Reprojection method, image creation method, and image processing apparatus - Google Patents
Reprojection method, image creation method, and image processing apparatus Download PDFInfo
- Publication number
- JP4175879B2 JP4175879B2 JP2002369384A JP2002369384A JP4175879B2 JP 4175879 B2 JP4175879 B2 JP 4175879B2 JP 2002369384 A JP2002369384 A JP 2002369384A JP 2002369384 A JP2002369384 A JP 2002369384A JP 4175879 B2 JP4175879 B2 JP 4175879B2
- Authority
- JP
- Japan
- Prior art keywords
- reprojection
- image
- pixels
- data
- line
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4007—Scaling of whole images or parts thereof, e.g. expanding or contracting based on interpolation, e.g. bilinear interpolation
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Image Analysis (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Image Processing (AREA)
Description
【0001】
【発明の属する技術分野】
本発明は、再投影方法、画像作成方法および画像処理装置に関し、さらに詳しくは、画像を基に投影データを高速に作成することが出来る再投影方法、骨と実質部の境界をはっきり区別できる画像を高速に作成することが出来る画像作成方法およびそれら方法を好適に実施しうる画像処理装置に関する。
【0002】
【従来の技術】
断層像から投影データを作成する再投影方法の第1の従来例では、各画素に対応する小領域に断層像を区画し、再投影線が通過する複数の小領域に対応する画素値を、各小領域が含む再投影線の長さに応じた荷重を用いて加重加算することで、再投影線に対応する再投影データを得ている(例えば、非特許文献1参照。)。
再投影方法の第2の従来例は、2DBP(2-Dimensional BackProjection)法と呼ばれるものであり、断層像を2DFFT(2-Dimensional Fast Fourier Transform)し、次いで極座標変換後、再投影方向に垂直な方向の2DFFT成分を取り出し、それを1DFFTすることで、再投影方向の再投影データを得ている。
【0003】
【非特許文献1】
"Reprojection using a parallel backprojector" Carl R. Crawford, Medical Physics, Vol.13, No.4, Jul/Aug 1986, page 480-483
【0004】
また、従来、骨と実質部分の境界をはっきり区別できる画像を得るために、骨と実質部分とを別々に計算して合成する画像作成方法が知られている。
【0005】
【発明が解決しようとする課題】
上記従来技術では、乗算量が非常に多くなるため、長い処理時間がかかる問題点があった。
そこで、本発明の目的は、画像を基に投影データを高速に作成することが出来る再投影方法、骨と実質部の境界をはっきり区別できる画像を高速に作成することが出来る画像作成方法およびそれら方法を好適に実施しうる画像処理装置を提供することにある。
【0006】
【課題を解決するための手段】
第1の観点では、本発明は、画像の画素間を補間して画素密度を増やしておき、次いで再投影線上に位置する画素を抽出し、それら抽出した画素値を加算し、前記再投影線に対応する再投影データを得ることを特徴とする再投影方法を提供する。
上記第1の観点による再投影方法では、最初に画像の画素間を補間して画素密度を増やす。この補間により増やした画素の画素値は、補間演算の結果、荷重が付けられた画素値となる。次に、再投影線上に位置する画素を抽出するが、画素密度を増やしているため、再投影線の最近傍の画素を、再投影線上に位置する画素と見なすことが出来る。つまり、乗算は不要になる。次に、抽出した画素値を加算するが、既に画素値には荷重が付けられているため、単に加算すればよい。つまり、乗算は不要になる。結局、補間演算だけで乗算すれば済むため、乗算量が減り、画像を基に投影データを高速に作成することが出来る。
【0007】
第2の観点では、本発明は、上記構成の再投影方法において、画像の画素が直交するi方向およびj方向の格子状に並んでおり、再投影線とj方向の成す角度が45°以内の場合は、画像の画素間をi方向に補間してi方向の画素密度を増やし、再投影線とi方向の成す角度が45°以内の場合は、画像の画素間をj方向に補間してj方向の画素密度を増やすことを特徴とする再投影方法を提供する。
上記第2の観点による再投影方法では、i方向またはj方向の一方のみ画素密度を増すため、i方向およびj方向の両方の画素密度を増す場合に比べて、演算量を減らすことが出来る。また、画素密度を増した方向と投影線の成す角度が45゜以上となるので、再投影線上に位置する画素の抽出精度を高く保つことが出来る。
【0008】
第3の観点では、本発明は、上記構成の再投影方法において、補間が線形補間であることを特徴とする再投影方法を提供する。
上記第3の観点による再投影方法では、線形補間を行うため、増やした画素の画素値に、元々存在した画素までの距離が近いほど大きな荷重を付けることが出来る。
【0009】
第4の観点では、本発明は、断層画像から対象部分を抽出した対象抽出画像を作成し、対象抽出画像に対して上記構成の再投影方法を施して再投影データを求め、再投影データを加工処理し、加工処理した再投影データを基に画像再構成して新対象画像を作成し、新対象画像と断層画像とを加重加算して新断層画像を作成することを特徴とする画像作成方法を提供する。
上記第4の観点による再投影方法では、元の断層画像よりも対象部分を目立つようにしたり,目立たないようにした新断層画像を作成できる。そして、上記構成の再投影方法により再投影データを得るため、対象と非対象の境界をはっきり区別できる画像を高速に作成することが出来る。
【0010】
第5の観点では、本発明は、上記構成の画像作成方法において、対象が頭蓋骨もしくは環状に骨が存在する部位であることを特徴とする画像作成方法を提供する。
上記第5の観点による再投影方法では、頭蓋骨もしくは環状に骨が存在する部位と実質部の境界をはっきり区別できる画像を高速に作成することが出来る。
【0011】
第6の観点では、本発明は、上記構成の画像作成方法において、加工処理が、非線型データ変換処理であることを特徴とする画像作成方法を提供する。
上記第6の観点による再投影方法では、再投影データを例えば2乗処理のような非線型データ変換処理するため、対象(例えば骨)を強調した画像を作成することが出来る。
【0012】
第7の観点では、本発明は、画像の画素間を補間して画素密度を増やす補間手段と、再投影線上に位置する画素を抽出しそれら抽出した画素値を加算して前記再投影線に対応する再投影データを得る再投影データ算出手段とを具備したことを特徴とする画像処理装置を提供する。
上記第7の観点による画像処理装置では、上記第1の観点による再投影方法を好適に実施できる。
【0013】
第8の観点では、本発明は、断層画像から対象部分を抽出した対象抽出画像を作成する抽出手段と、対象抽出画像の直交する座標の片方の座標軸に沿って画素間を補間して画素密度を増やす補間手段と、再投影線上に位置する画素を抽出しそれら抽出した画素値を加算して前記再投影線に対応する再投影データを得る再投影データ算出手段と、再投影データを加工処理する加工処理手段と、加工処理した再投影データを基に画像再構成して新対象画像を作成する画像再構成手段と、新対象画像と断層画像とを加重加算して新断層画像を作成する加算手段とを具備したことを特徴とする画像処理装置を提供する。
上記第8の観点による画像処理装置では、上記第4の観点による再投影方法を好適に実施できる。
【0014】
第9の観点では、本発明は、上記構成の画像処理装置において、対象が頭蓋骨もしくは環状に骨が存在する部位であることを特徴とする画像処理装置を提供する。
上記第9の観点による画像処理装置では、上記第5の観点による再投影方法を好適に実施できる。
【0015】
第10の観点では、本発明は、上記構成の画像処理装置において、前記加工処理手段が非線型データ変換処理を行うことを特徴とする画像処理装置を提供する。
上記第10の観点による画像処理装置では、上記第6の観点による再投影方法を好適に実施できる。
【0016】
第11の観点では、本発明は、上記構成の画像処理装置において、前記補間手段は、画像の画素が直交するi方向およびj方向の格子状に並んでおり、再投影線とj方向の成す角度が45°以内の場合は、画像の画素間をi方向に補間してi方向の画素密度を増やし、再投影線とi方向の成す角度が45°以内の場合は、画像の画素間をj方向に補間してj方向の画素密度を増やすことを特徴とする画像処理装置を提供する。
上記第11の観点による画像処理装置では、上記第2の観点による再投影方法を好適に実施できる。
【0017】
第12の観点では、本発明は、上記構成の画像処理装置において、前記補間手段が線形補間を行うことを特徴とする画像処理装置を提供する。
上記第12の観点による画像処理装置では、上記第3の観点による再投影方法を好適に実施できる。
【0018】
【発明の実施の形態】
以下、図を参照して本発明の実施形態を説明する。なお、これにより本発明が限定されるものではない。
【0019】
図1は、本発明の一実施形態にかかるX線CT(Computed Tomograhy)装置のブロック図である。
このX線CT装置100は、操作コンソール1と、撮影テーブル10と、走査ガントリ20とを具備している。
【0020】
前記操作コンソール1は、操作者の入力を受け付ける入力装置2と、本発明に係る再投影処理や画像作成処理などを実行する中央処理装置3と、走査ガントリ20で取得したデータを収集するデータ収集バッファ5と、前記データから再構成したCT画像を表示するCRT6と、プログラムやデータやCT画像を記憶する記憶装置7とを具備している。
【0021】
前記撮影テーブル10は、被検体を乗せて前記走査ガントリ20のボア(空洞部)に入れ出しするクレードル12を具備している。クレードル12は、テーブル装置10に内蔵するモータで駆動される。
【0022】
前記走査ガントリ20は、X線管21と、X線コントローラ22と、コリメータ23と、検出器24と、DAS(Data Acquisition System)25と、被検体の体軸の回りにX線管21などを回転させる回転コントローラ26と、制御信号などを前記操作コンソール1や撮影テーブル10とやり取りする制御インタフェース29とを具備している。
【0023】
図2は、X線CT装置100の再投影処理の流れを示すフロー図である。
ステップS1では、断層画像データg(i,j)をi方向に補間処理して補間画像データg(x,j)を作成する。補間処理は、例えば線形補間である。補間により増やす画素数は、元々存在する画素間にm(例えばm=2〜8)個とする。
図5に、断層画像データg(i,j)を例示する。
この断層画像データg(i,j)では、直交するi方向およびj方向の格子状に画素g(i,j)が並んでいる。0≦i≦I(例えばI=511),0≦j≦J(例えばJ=511)である。画素間隔は、Δdである。最も外側の画素よりΔ/2だけ外側に画像枠Wを想定する。
図6に、i方向に補間処理した補間画像データg(x,j)を例示する。
xは、画像枠Wの左端からのi方向の距離であり、右方向を正方向とする。
0≦x≦Δd(I+0.5)である。
【0024】
ステップS2では、断層画像データg(i,j)をj方向に補間処理して補間画像データg(i,y)を作成する。補間処理は、例えば線形補間である。補間により増やす画素数は、元々存在する画素間にm(例えばm=2〜8)個とする。
図7に、j方向に補間処理した補間画像データg(i,y)を例示する。
yは、画像枠Wの上端からのj方向の距離であり、下方向を正方向とする。
0≦y≦Δd(J+0.5)である。
【0025】
ステップS3では、ビュー角度θ=−45°に初期設定する。なお、ビュー角度θ=−45゜,−45゜+Δθ,−45゜+2Δθ,…,315゜−Δθの再投影データを求める場合を想定している。また、j方向に平行で上から下への投影線Pをθ=0゜とし、時計回りをθの正方向とする。
【0026】
ステップS4では、図8に示すように、投影線Pが画像枠Wに入射する上辺の左端から入射位置までの距離xo=Xs(θ)に初期設定する。ここで、Xs(θ)は、ビュー角度θのΔp間隔の複数の投影線Pのうちで最も左側の投影線Pに対応した距離xoであり、予め設定しておく。
【0027】
ステップS5では、次式により投影データR(θ,xo)を算出する。
上式の根拠は、図8に示す幾何学的関係から理解されよう。
【0028】
ステップS6では、投影線Pが画像枠Wに入射する上辺の左端から入射位置までの距離xo=Xe(θ)でないならステップS7へ進み、xo=Xe(θ)ならステップS8へ進む。ここで、Xe(θ)は、ビュー角度θのΔp間隔の複数の投影線Pのうちで最も右側の投影線Pに対応した距離xoであり、予め設定しておく。
【0029】
ステップS7では、投影線Pが画像枠Wに入射する上辺の左端から入射位置までの距離xoをΔp/cosθだけ増加させる。そして、ステップS5に戻る。
【0030】
ステップS8では、ビュー角度θをΔθだけ増加させる。
ステップS9では、−45゜≦θ<45゜ならステップS4に戻り、そうでないなら図3のステップS14へ進む。
【0031】
ステップS14では、図9に示すように、投影線Pが画像枠Wに入射する右辺の上端から入射位置までの距離yo=Ys(θ)に初期設定する。ここで、Ys(θ)は、ビュー角度θのΔp間隔の複数の投影線Pのうちで最も上側の投影線Pに対応した距離yoであり、予め設定しておく。
【0032】
ステップS15では、次式により投影データR(θ,yo)を算出する。
上式の根拠は、図9に示す幾何学的関係から理解されよう。
【0033】
ステップS16では、投影線Pが画像枠Wに入射する右辺の上端から入射位置までの距離yo=Ye(θ)でないならステップS17へ進み、yo=Ye(θ)ならステップS18へ進む。ここで、Ye(θ)は、ビュー角度θのΔp間隔の複数の投影線Pのうちで最も下側の投影線Pに対応した距離yoであり、予め設定しておく。
【0034】
ステップS17では、投影線Pが画像枠Wに入射する右辺の上端から入射位置までの距離yoをΔp/cos(θ-90゜)だけ増加させる。そして、ステップS15に戻る。
【0035】
ステップS18では、ビュー角度θをΔθだけ増加させる。
ステップS19では、45゜≦θ<135゜ならステップS14に戻り、そうでないならステップS24へ進む。
【0036】
ステップS24では、図10に示すように、投影線Pが画像枠Wに入射する下辺の左端から入射位置までの距離xo=Xs(θ)に初期設定する。ここで、Xs(θ)は、ビュー角度θのΔp間隔の複数の投影線Pのうちで最も左側の投影線Pに対応した距離yoであり、予め設定しておく。
【0037】
ステップS25では、次式により投影データR(θ,xo)を算出する。
上式の根拠は、図10に示す幾何学的関係から理解されよう。
【0038】
ステップS26では、投影線Pが画像枠Wに入射する下辺の左端から入射位置までの距離xo=Xe(θ)でないならステップS27へ進み、xo=Xe(θ)ならステップS28へ進む。ここで、Xe(θ)は、ビュー角度θのΔp間隔の複数の投影線Pのうちで最も右側の投影線Pに対応した距離xoであり、予め設定しておく。
【0039】
ステップS27では、投影線Pが画像枠Wに入射する下辺の左端から入射位置までの距離xoをΔp/cos(θ-180゜)だけ増加させる。そして、ステップS25に戻る。
【0040】
ステップS28では、ビュー角度θをΔθだけ増加させる。
ステップS29では、135゜≦θ<225゜ならステップS24に戻り、そうでないなら図4のステップS34へ進む。
【0041】
ステップS34では、図11に示すように、投影線Pが画像枠Wに入射する左辺の上端から入射位置までの距離yo=Ys(θ)に初期設定する。ここで、Ys(θ)は、ビュー角度θのΔp間隔の複数の投影線Pのうちで最も上側の投影線Pに対応した距離yoであり、予め設定しておく。
【0042】
ステップS35では、次式により投影データR(θ,yo)を算出する。
上式の根拠は、図11に示す幾何学的関係から理解されよう。
【0043】
ステップS36では、投影線Pが画像枠Wに入射する左辺の上端から入射位置までの距離yo=Ye(θ)でないならステップS37へ進み、yo=Ye(θ)ならステップS38へ進む。ここで、Ye(θ)は、ビュー角度θのΔp間隔の複数の投影線Pのうちで最も下側の投影線Pに対応した距離yoであり、予め設定しておく。
【0044】
ステップS37では、投影線Pが画像枠Wに入射する左辺の上端から入射位置までの距離yoをΔp/cos(θ-270゜)だけ増加させる。そして、ステップS35に戻る。
【0045】
ステップS38では、ビュー角度θをΔθだけ増加させる。
ステップS39では、225゜≦θ<315゜ならステップS34に戻り、そうでないなら処理を終了する。
【0046】
図12は、X線CT装置100の画像作成処理の流れを示すフロー図である。
ステップB1では、如き断層画像データf(i,j)を読み込む。
図13に、断層画像データf(i,j)を例示する。
この断層画像データf(i,j)は、X線CT装置100で撮影した頭部のアキシャル断層画像であるが、実質部aと骨部bの境界が明確でない。そこで、本画像作成処理により、実質部aと骨部bの境界を明確化する。
【0047】
ステップB2では、断層画像データf(i,j)の画素のうちで画素値が閾値より小さい画素の画素値を「0」にする。例えば、CT値が「500」より小さい画素のCT値を「0」にする。これにより、図14に示すように、骨部bを抽出した骨抽出画像g(i,j)が得られる。
【0048】
ステップB3では、図2〜図11を参照して先に説明した再投影処理を骨抽出画像g(i,j)に適用し、図15に示す如き再投影データR(θ)を得る。
【0049】
ステップB4では、骨部bを強調する加工処理を再投影データR(θ)に施す。例えば、図16に示すように、再投影データR(θ)を2乗する。
【0050】
ステップB5では、図16に示すR(θ)×R(θ)のように強調加工処理した再投影データを基に画像再構成を行い、図17に示す如き新骨画像b(i,j)を作成する。
【0051】
ステップB6では、新断層画像F(i,j)を次式により作成し、処理を終了する。
F(i,j)=f(i,j)+k・b(i,j)
ここで、kは、経験的に設定される係数であり、例えばk=0.7である。
図18に、新断層画像データF(i,j)を例示する。
この新断層画像データF(i,j)では、元の断層画像データf(i,j)よりも実質部aと骨部bの境界が明確化されている。
【0052】
−他の実施形態−
(1)補間処理を例えば3点補間または4点補間またはそれ以上の多点補間により行ってもよい。
(2)加工処理を例えばR(θ)の4乗処理としてもよい。
(3)X線CT装置とは別体のコンピュータで上記再投影処理や上記画像作成処理を行ってもよい。
【0053】
【発明の効果】
本発明の再投影方法および画像処理装置によれば、画像を基に投影データを高速に作成することが出来る。
また、本発明の画像作成方法および画像処理装置によれば、骨と実質部の境界をはっきり区別できる画像を高速に作成することが出来る。
【図面の簡単な説明】
【図1】本発明の一実施形態に係るX線CT装置のブロック図である。
【図2】本発明に係る再投影処理を示すフロー図である。
【図3】図2の続きのフロー図である。
【図4】図3の続きのフロー図である。
【図5】断層画像データg(i,j)の例示図である。
【図6】i方向に補間処理した断層画像データg(x,j)の例示図である。
【図7】j方向に補間処理した断層画像データg(i,y)の例示図である。
【図8】−45゜≦θ<45゜における投影線と断層画像データの幾何学的関係を示す説明図である。
【図9】45゜≦θ<135゜における投影線と断層画像データの幾何学的関係を示す説明図である。
【図10】135゜≦θ<225゜における投影線と断層画像データの幾何学的関係を示す説明図である。
【図11】225゜≦θ<315゜における投影線と断層画像データの幾何学的関係を示す説明図である。
【図12】本発明に係る画像作成処理を示すフロー図である。
【図13】頭部の断層画像データf(i,j)の例示図である。
【図14】骨抽出画像データg(i,j)の例示図である。
【図15】一つのビュー角度θにおける再投影データR(θ)の概念図である。
【図16】一つのビュー角度θにおける2乗処理した再投影データR(θ)×R(θ)の概念図である。
【図17】新しく補正された頭蓋骨もしくは環状の骨の部位の画像データb(i,j)の例示図である。
【図18】新断層画像データF(i,j)の例示図である。
【符号の説明】
1 操作コンソール
3 中央処理装置
20 走査ガントリ
21 X線管
24 検出器[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a reprojection method, an image creation method, and an image processing apparatus. More specifically, the present invention relates to a reprojection method capable of creating projection data at high speed based on an image, and an image capable of clearly distinguishing the boundary between a bone and a substantial part. The present invention relates to an image creation method capable of creating the image at high speed and an image processing apparatus that can suitably implement the method.
[0002]
[Prior art]
In a first conventional example of a reprojection method for creating projection data from a tomographic image, a tomographic image is partitioned into small areas corresponding to the respective pixels, and pixel values corresponding to a plurality of small areas through which the reprojection line passes are obtained. Reprojection data corresponding to the reprojection line is obtained by performing weighted addition using a load corresponding to the length of the reprojection line included in each small region (see, for example, Non-Patent Document 1).
A second conventional example of the reprojection method is called a 2DBP (2-Dimensional BackProjection) method, and a tomographic image is subjected to 2DFFT (2-Dimensional Fast Fourier Transform), and then converted to polar coordinates, and then perpendicular to the reprojection direction. The reprojection data in the reprojection direction is obtained by taking out the 2DFFT component in the direction and performing 1DFFT on the component.
[0003]
[Non-Patent Document 1]
"Reprojection using a parallel backprojector" Carl R. Crawford, Medical Physics, Vol.13, No.4, Jul / Aug 1986, page 480-483
[0004]
Conventionally, there has been known an image creation method in which a bone and a substantial part are separately calculated and synthesized in order to obtain an image that can clearly distinguish the boundary between the bone and the substantial part.
[0005]
[Problems to be solved by the invention]
The prior art has a problem that it takes a long processing time because the multiplication amount is very large.
Therefore, an object of the present invention is to provide a reprojection method capable of creating projection data at a high speed based on an image, an image creation method capable of creating an image capable of clearly distinguishing the boundary between a bone and a substantial part, and those An object of the present invention is to provide an image processing apparatus capable of suitably carrying out the method.
[0006]
[Means for Solving the Problems]
In a first aspect, the present invention interpolates between pixels of an image to increase the pixel density, then extracts pixels located on the reprojection line, adds the extracted pixel values, and adds the reprojection line. A reprojection method is provided, characterized by obtaining reprojection data corresponding to.
In the reprojection method according to the first aspect, the pixel density is first increased by interpolating between pixels of the image. The pixel value of the pixel increased by this interpolation becomes a weighted pixel value as a result of the interpolation calculation. Next, a pixel located on the reprojection line is extracted. However, since the pixel density is increased, a pixel nearest to the reprojection line can be regarded as a pixel located on the reprojection line. That is, multiplication is not necessary. Next, the extracted pixel values are added. Since the pixel values are already loaded, it is only necessary to add them. That is, multiplication is not necessary. Eventually, since only multiplication by interpolation is required, the amount of multiplication is reduced, and projection data can be created at high speed based on the image.
[0007]
In a second aspect, the present invention provides the reprojection method having the above-described configuration, in which the pixels of the image are arranged in a grid pattern in the i and j directions orthogonal to each other, and the angle formed by the reprojection line and the j direction is within 45 °. In this case, the pixel density in the i direction is increased by interpolating between the pixels of the image in the i direction, and when the angle formed between the reprojection line and the i direction is within 45 °, the pixel in the image is interpolated in the j direction. The reprojection method is characterized by increasing the pixel density in the j direction.
In the reprojection method according to the second aspect, since the pixel density is increased only in one of the i direction and the j direction, the calculation amount can be reduced as compared with the case where the pixel density is increased in both the i direction and the j direction. In addition, since the angle formed by the direction in which the pixel density is increased and the projection line is 45 ° or more, the extraction accuracy of the pixels located on the reprojection line can be kept high.
[0008]
In a third aspect, the present invention provides a reprojection method characterized in that, in the reprojection method configured as described above, the interpolation is linear interpolation.
In the reprojection method according to the third aspect, since linear interpolation is performed, a larger load can be applied to the pixel value of the increased pixel as the distance to the originally existing pixel is closer.
[0009]
In a fourth aspect, the present invention creates a target extraction image obtained by extracting a target portion from a tomographic image, obtains reprojection data by applying the reprojection method of the above configuration to the target extraction image, Image creation characterized by processing, creating a new target image by reconstructing the image based on the processed reprojection data, and creating a new tomographic image by weighted addition of the new target image and the tomographic image Provide a method.
In the reprojection method according to the fourth aspect, it is possible to create a new tomographic image in which the target portion is more conspicuous or less conspicuous than the original tomographic image. Since reprojection data is obtained by the reprojection method having the above-described configuration, an image that can clearly distinguish the boundary between the target and the non-target can be created at high speed.
[0010]
In a fifth aspect, the present invention provides an image creation method characterized in that, in the image creation method configured as described above, the target is a skull or a region where bone is present in an annular shape.
In the reprojection method according to the fifth aspect, an image that can clearly distinguish the boundary between the skull or the portion where the bone is present in an annular shape and the substantial part can be created at high speed.
[0011]
In a sixth aspect, the present invention provides an image creation method characterized in that, in the image creation method configured as described above, the processing is a non-linear data conversion process.
In the reprojection method according to the sixth aspect, since reprojection data is subjected to nonlinear data conversion processing such as square processing, an image in which an object (for example, bone) is emphasized can be created.
[0012]
In a seventh aspect, the present invention provides an interpolating means for interpolating between pixels of an image to increase the pixel density, extracting pixels located on the reprojection line, and adding the extracted pixel values to the reprojection line. Provided is an image processing apparatus comprising reprojection data calculation means for obtaining corresponding reprojection data.
In the image processing apparatus according to the seventh aspect, the reprojection method according to the first aspect can be suitably implemented.
[0013]
In an eighth aspect, the present invention relates to an extraction means for creating a target extraction image obtained by extracting a target portion from a tomographic image, and pixel density by interpolating between pixels along one coordinate axis of orthogonal coordinates of the target extraction image. Interpolating means for increasing the reprojection line, reprojection data calculating means for extracting the pixels located on the reprojection line and adding the extracted pixel values to obtain reprojection data corresponding to the reprojection line, and processing the reprojection data Processing means, image reconstruction means for creating a new target image by reconstructing the image based on the processed reprojection data, and creating a new tomographic image by weighted addition of the new target image and the tomographic image An image processing apparatus characterized by comprising an adding means.
In the image processing apparatus according to the eighth aspect, the reprojection method according to the fourth aspect can be suitably implemented.
[0014]
In a ninth aspect, the present invention provides an image processing apparatus having the above-described configuration, wherein the target is a skull or a region where bone is present in an annular shape.
In the image processing apparatus according to the ninth aspect, the reprojection method according to the fifth aspect can be suitably implemented.
[0015]
In a tenth aspect, the present invention provides an image processing apparatus, wherein the processing means performs non-linear data conversion processing in the image processing apparatus configured as described above.
In the image processing apparatus according to the tenth aspect, the reprojection method according to the sixth aspect can be suitably implemented.
[0016]
In an eleventh aspect of the present invention, in the image processing apparatus having the above-described configuration, the interpolating unit is configured such that the pixels of the image are arranged in a lattice pattern in the i direction and the j direction orthogonal to each other, and the reprojection line and the j direction form. If the angle is within 45 °, the pixel density in the i direction is increased by interpolating between the pixels of the image in the i direction, and if the angle between the reprojection line and the i direction is within 45 °, the image pixel is interpolated. Provided is an image processing apparatus characterized in that the pixel density in the j direction is increased by interpolation in the j direction.
In the image processing apparatus according to the eleventh aspect, the reprojection method according to the second aspect can be suitably implemented.
[0017]
In a twelfth aspect, the present invention provides an image processing apparatus characterized in that, in the image processing apparatus configured as described above, the interpolation means performs linear interpolation.
In the image processing apparatus according to the twelfth aspect, the reprojection method according to the third aspect can be suitably implemented.
[0018]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to the drawings. Note that the present invention is not limited thereby.
[0019]
FIG. 1 is a block diagram of an X-ray CT (Computed Tomograhy) apparatus according to an embodiment of the present invention.
The X-ray CT apparatus 100 includes an
[0020]
The
[0021]
The imaging table 10 includes a cradle 12 on which a subject is placed and put into and out of a bore (cavity) of the scanning gantry 20. The cradle 12 is driven by a motor built in the
[0022]
The scanning gantry 20 includes an X-ray tube 21, an X-ray controller 22, a collimator 23, a detector 24, a DAS (Data Acquisition System) 25, and an X-ray tube 21 around the body axis of the subject. A
[0023]
FIG. 2 is a flowchart showing the flow of reprojection processing of the X-ray CT apparatus 100.
In step S1, the tomographic image data g (i, j) is interpolated in the i direction to create interpolated image data g (x, j). The interpolation process is, for example, linear interpolation. The number of pixels to be increased by interpolation is m (for example, m = 2 to 8) between originally existing pixels.
FIG. 5 illustrates tomographic image data g (i, j).
In the tomographic image data g (i, j), the pixels g (i, j) are arranged in a lattice pattern in the orthogonal i direction and j direction. 0 ≦ i ≦ I (for example, I = 511) and 0 ≦ j ≦ J (for example, J = 511). The pixel interval is Δd. Assume an image frame W outside the outermost pixel by Δ / 2.
FIG. 6 illustrates the interpolated image data g (x, j) subjected to the interpolation processing in the i direction.
x is the distance in the i direction from the left end of the image frame W, and the right direction is the positive direction.
0 ≦ x ≦ Δd (I + 0.5).
[0024]
In step S2, the tomographic image data g (i, j) is interpolated in the j direction to create interpolated image data g (i, y). The interpolation process is, for example, linear interpolation. The number of pixels to be increased by interpolation is m (for example, m = 2 to 8) between originally existing pixels.
FIG. 7 illustrates the interpolated image data g (i, y) that has been subjected to interpolation processing in the j direction.
y is the distance in the j direction from the upper end of the image frame W, and the downward direction is the positive direction.
0 ≦ y ≦ Δd (J + 0.5).
[0025]
In step S3, the view angle θ is initially set to −45 °. It is assumed that reprojection data of view angles θ = −45 °, −45 ° + Δθ, −45 ° + 2Δθ,..., 315 ° −Δθ is obtained. Further, a projection line P parallel to the j direction and extending from top to bottom is θ = 0 °, and clockwise is the positive direction of θ.
[0026]
In step S4, the projection line P is initially set to a distance xo = Xs (θ) from the left end of the upper side where the projection line P is incident on the image frame W to the incident position, as shown in FIG. Here, Xs (θ) is a distance xo corresponding to the leftmost projection line P among the plurality of projection lines P with an interval Δp of the view angle θ, and is set in advance.
[0027]
In step S5, projection data R (θ, xo) is calculated by the following equation.
The basis of the above equation will be understood from the geometric relationship shown in FIG.
[0028]
In step S6, if the distance xo = Xe (θ) from the left edge of the upper side where the projection line P enters the image frame W is not xo = Xe (θ), the process proceeds to step S7, and if xo = Xe (θ), the process proceeds to step S8. Here, Xe (θ) is a distance xo corresponding to the rightmost projection line P among the plurality of projection lines P with an interval Δp of the view angle θ, and is set in advance.
[0029]
In step S7, the distance xo from the left end of the upper side where the projection line P enters the image frame W to the incident position is increased by Δp / cos θ. Then, the process returns to step S5.
[0030]
In step S8, the view angle θ is increased by Δθ.
In step S9, if −45 ° ≦ θ <45 °, the process returns to step S4, and if not, the process proceeds to step S14 in FIG.
[0031]
In step S14, as shown in FIG. 9, the distance from the upper end of the right side where the projection line P enters the image frame W to the incident position is initially set to yo = Ys (θ). Here, Ys (θ) is a distance yo corresponding to the uppermost projection line P among the plurality of projection lines P with an interval Δp of the view angle θ, and is set in advance.
[0032]
In step S15, projection data R (θ, yo) is calculated by the following equation.
The basis of the above equation will be understood from the geometric relationship shown in FIG.
[0033]
In step S16, if the distance from the upper end of the right side where the projection line P enters the image frame W to the incident position is not yo = Ye (θ), the process proceeds to step S17, and if yo = Ye (θ), the process proceeds to step S18. Here, Ye (θ) is a distance yo corresponding to the lowermost projection line P among the plurality of projection lines P with an interval Δp of the view angle θ, and is set in advance.
[0034]
In step S17, the distance yo from the upper end of the right side where the projection line P enters the image frame W to the incident position is increased by Δp / cos (θ−90 °). Then, the process returns to step S15.
[0035]
In step S18, the view angle θ is increased by Δθ.
In step S19, if 45 ° ≦ θ <135 °, the process returns to step S14, and if not, the process proceeds to step S24.
[0036]
In step S24, as shown in FIG. 10, the projection line P is initially set to a distance xo = Xs (θ) from the left end of the lower side where the projection line P enters the image frame W to the incident position. Here, Xs (θ) is a distance yo corresponding to the leftmost projection line P among the plurality of projection lines P with an interval Δp of the view angle θ, and is set in advance.
[0037]
In step S25, projection data R (θ, xo) is calculated by the following equation.
The basis of the above equation will be understood from the geometric relationship shown in FIG.
[0038]
In step S26, if the distance xo = Xe (θ) from the left end of the lower side where the projection line P is incident on the image frame W is not xo = Xe (θ), the process proceeds to step S27, and if xo = Xe (θ), the process proceeds to step S28. Here, Xe (θ) is a distance xo corresponding to the rightmost projection line P among the plurality of projection lines P with an interval Δp of the view angle θ, and is set in advance.
[0039]
In step S27, the distance xo from the left end of the lower side where the projection line P enters the image frame W to the incident position is increased by Δp / cos (θ−180 °). Then, the process returns to step S25.
[0040]
In step S28, the view angle θ is increased by Δθ.
In step S29, if 135 ° ≦ θ <225 °, the process returns to step S24, and if not, the process proceeds to step S34 in FIG.
[0041]
In step S34, the projection line P is initially set to a distance yo = Ys (θ) from the upper end of the left side where the projection line P enters the image frame W to the incident position. Here, Ys (θ) is a distance yo corresponding to the uppermost projection line P among the plurality of projection lines P with an interval Δp of the view angle θ, and is set in advance.
[0042]
In step S35, projection data R (θ, yo) is calculated by the following equation.
The basis of the above equation will be understood from the geometric relationship shown in FIG.
[0043]
In step S36, if the distance from the upper end of the left side where the projection line P enters the image frame W to the incident position is not yo = Ye (θ), the process proceeds to step S37, and if yo = Ye (θ), the process proceeds to step S38. Here, Ye (θ) is a distance yo corresponding to the lowermost projection line P among the plurality of projection lines P with an interval Δp of the view angle θ, and is set in advance.
[0044]
In step S37, the distance yo from the upper end of the left side where the projection line P enters the image frame W to the incident position is increased by Δp / cos (θ−270 °). Then, the process returns to step S35.
[0045]
In step S38, the view angle θ is increased by Δθ.
In step S39, if 225 ° ≦ θ <315 °, the process returns to step S34, and if not, the process ends.
[0046]
FIG. 12 is a flowchart showing the flow of image creation processing of the X-ray CT apparatus 100.
In step B1, such tomographic image data f (i, j) is read.
FIG. 13 illustrates tomographic image data f (i, j).
The tomographic image data f (i, j) is an axial tomographic image of the head imaged by the X-ray CT apparatus 100, but the boundary between the substantial part a and the bone part b is not clear. Therefore, the boundary between the substantial part a and the bone part b is clarified by this image creation process.
[0047]
In step B2, the pixel value of the pixel whose pixel value is smaller than the threshold value among the pixels of the tomographic image data f (i, j) is set to “0”. For example, the CT value of a pixel having a CT value smaller than “500” is set to “0”. Thereby, as shown in FIG. 14, the bone extraction image g (i, j) which extracted the bone part b is obtained.
[0048]
In step B3, the reprojection processing described above with reference to FIGS. 2 to 11 is applied to the bone extraction image g (i, j) to obtain reprojection data R (θ) as shown in FIG.
[0049]
In step B4, the reprojection data R (θ) is subjected to processing for enhancing the bone portion b. For example, as shown in FIG. 16, the reprojection data R (θ) is squared.
[0050]
In step B5, image reconstruction is performed based on the reprojection data subjected to the enhancement processing as R (θ) × R (θ) shown in FIG. 16, and a new bone image b (i, j) as shown in FIG. Create
[0051]
In step B6, a new tomographic image F (i, j) is created by the following equation, and the process ends.
F (i, j) = f (i, j) + k · b (i, j)
Here, k is a coefficient set empirically, for example, k = 0.7.
FIG. 18 illustrates new tomographic image data F (i, j).
In the new tomographic image data F (i, j), the boundary between the substantial part a and the bone part b is clarified as compared with the original tomographic image data f (i, j).
[0052]
-Other embodiments-
(1) The interpolation processing may be performed by, for example, three-point interpolation, four-point interpolation, or more multipoint interpolation.
(2) The processing process may be, for example, a fourth power process of R (θ).
(3) The reprojection process and the image creation process may be performed by a computer separate from the X-ray CT apparatus.
[0053]
【The invention's effect】
According to the reprojection method and the image processing apparatus of the present invention, projection data can be created at high speed based on an image.
In addition, according to the image creation method and the image processing apparatus of the present invention, an image that can clearly distinguish the boundary between the bone and the substantial part can be created at high speed.
[Brief description of the drawings]
FIG. 1 is a block diagram of an X-ray CT apparatus according to an embodiment of the present invention.
FIG. 2 is a flowchart showing a reprojection process according to the present invention.
FIG. 3 is a flowchart subsequent to FIG. 2;
FIG. 4 is a flowchart subsequent to FIG. 3;
FIG. 5 is an illustration of tomographic image data g (i, j).
FIG. 6 is an exemplary diagram of tomographic image data g (x, j) subjected to interpolation processing in the i direction.
FIG. 7 is an exemplary diagram of tomographic image data g (i, y) subjected to interpolation processing in the j direction.
FIG. 8 is an explanatory diagram showing a geometric relationship between a projection line and tomographic image data when −45 ° ≦ θ <45 °.
FIG. 9 is an explanatory diagram showing a geometric relationship between a projection line and tomographic image data at 45 ° ≦ θ <135 °.
FIG. 10 is an explanatory diagram showing a geometric relationship between a projection line and tomographic image data at 135 ° ≦ θ <225 °.
FIG. 11 is an explanatory diagram showing a geometric relationship between a projection line and tomographic image data at 225 ° ≦ θ <315 °.
FIG. 12 is a flowchart showing image creation processing according to the present invention.
FIG. 13 is an exemplary diagram of tomographic image data f (i, j) of the head.
FIG. 14 is a view showing an example of bone extraction image data g (i, j).
FIG. 15 is a conceptual diagram of reprojection data R (θ) at one view angle θ.
FIG. 16 is a conceptual diagram of reprojection data R (θ) × R (θ) subjected to square processing at one view angle θ.
FIG. 17 is a view showing an example of image data b (i, j) of a newly corrected skull or annular bone part;
FIG. 18 is a view showing an example of new tomographic image data F (i, j).
[Explanation of symbols]
1
Claims (9)
前記再投影線上に位置する画素を、再投影線とj方向の成す角度が45°以内の場合は、前記画素間をi方向に補間して作成された補間画素データから求め、再投影線とi方向の成す角度が45°以内の場合は、前記画素間をj方向に補間して作成された補間画素データから求める
ことを特徴とする再投影方法。Interpolate between pixels of an image in which pixels are arranged in a grid in the i and j directions perpendicular to each other to create interpolated pixel data with increased pixel density, and then add the pixel values of the pixels located on the reprojection line A reprojection method for obtaining reprojection data corresponding to the reprojection line ,
If the angle between the reprojection line and the j direction is within 45 °, the pixel located on the reprojection line is obtained from interpolated pixel data created by interpolating between the pixels in the i direction, The reprojection method , wherein an angle formed by the i direction is within 45 [deg.], obtained from interpolated pixel data created by interpolating between the pixels in the j direction .
前記再投影データ算出手段は、前記再投影線上に位置する画素を、再投影線とj方向の成す角度が45°以内の場合は、前記画素間をi方向に補間して作成された補間画素データから求め、再投影線とi方向の成す角度が45°以内の場合は、前記画素間をj方向に補間して作成された補間画素データから求める
ことを特徴とする画像処理装置。Interpolation means for creating interpolated pixel data having an increased pixel density by interpolating between pixels of an image in which pixels are arranged in a grid in the i-direction and j-direction, and pixel values of pixels located on the reprojection line Reprojection data calculation means for obtaining reprojection data corresponding to the reprojection line by adding,
The reprojection data calculation means is configured to interpolate a pixel located on the reprojection line by interpolating between the pixels in the i direction when the angle between the reprojection line and the j direction is within 45 °. An image processing characterized by obtaining from interpolated pixel data created by interpolating between the pixels in the j direction when the angle formed between the reprojection line and the i direction is within 45 °. apparatus.
画素が直交するi方向およびj方向の格子状に並んでいる前記対象抽出画像の画素間を補間して画素密度を増やす補間手段と、
再投影線上に位置する画素を抽出しそれら抽出した画素値を加算して前記再投影線に対応する再投影データを得る再投影データ算出手段であって、前記再投影線上に位置する画素を、再投影線とj方向の成す角度が45°以内の場合は、前記画素間をi方向に補間して作成された補間画素データから求め、再投影線とi方向の成す角度が45°以内の場合は、前記画素間をj方向に補間して作成された補間画素データから求める再投影データ算出手段と、
再投影データを強調する加工処理する加工処理手段と、
前記加工処理した再投影データを基に画像再構成して新対象画像を作成する画像再構成手段と、
新対象画像と断層画像とを加重加算して新断層画像を作成する加算手段とを具備したことを特徴とする画像処理装置。Extraction means for creating a target extraction image obtained by extracting a target portion from a tomographic image;
Interpolation means for increasing the pixel density by interpolating between pixels of the target extraction image in which pixels are arranged in a grid in the i-direction and j-direction orthogonal to each other;
Reprojection data calculation means for extracting pixels located on the reprojection line and adding the extracted pixel values to obtain reprojection data corresponding to the reprojection line , wherein the pixels located on the reprojection line are: When the angle between the reprojection line and the j direction is within 45 °, the angle between the reprojection line and the i direction is within 45 °. A reprojection data calculating means for obtaining from interpolated pixel data created by interpolating between the pixels in the j direction ;
Processing means for processing to emphasize the reprojection data;
An image reconstruction means for creating said processing new target image reprojected data image reconstruction based on that,
An image processing apparatus comprising addition means for creating a new tomographic image by weighted addition of a new target image and a tomographic image.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002369384A JP4175879B2 (en) | 2002-12-20 | 2002-12-20 | Reprojection method, image creation method, and image processing apparatus |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002369384A JP4175879B2 (en) | 2002-12-20 | 2002-12-20 | Reprojection method, image creation method, and image processing apparatus |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2004195050A JP2004195050A (en) | 2004-07-15 |
| JP4175879B2 true JP4175879B2 (en) | 2008-11-05 |
Family
ID=32765623
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2002369384A Expired - Fee Related JP4175879B2 (en) | 2002-12-20 | 2002-12-20 | Reprojection method, image creation method, and image processing apparatus |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4175879B2 (en) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5317612B2 (en) * | 2008-09-26 | 2013-10-16 | ジーイー・メディカル・システムズ・グローバル・テクノロジー・カンパニー・エルエルシー | Tomographic image processing apparatus, X-ray CT apparatus, and program |
| JP5607196B2 (en) * | 2013-02-28 | 2014-10-15 | ジーイー・メディカル・システムズ・グローバル・テクノロジー・カンパニー・エルエルシー | X-ray tomography equipment |
| US9224216B2 (en) | 2013-07-31 | 2015-12-29 | Kabushiki Kaisha Toshiba | High density forward projector for spatial resolution improvement for medical imaging systems including computed tomography |
-
2002
- 2002-12-20 JP JP2002369384A patent/JP4175879B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2004195050A (en) | 2004-07-15 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3950782B2 (en) | Three-dimensional backprojection method and X-ray CT apparatus | |
| JP4965433B2 (en) | Cone beam CT apparatus using truncated projection and pre-acquired 3D CT image | |
| US9384592B2 (en) | Image processing method and apparatus performing slab multi-planar reformatting rendering of volume data | |
| JP5383014B2 (en) | Radiation image processing apparatus and method | |
| US20140035916A1 (en) | Preparation and display of derived series of medical images | |
| US20130051519A1 (en) | Methods and apparatus for super resolution scanning for cbct system and cone-beam image reconstruction | |
| JP6026214B2 (en) | X-ray computed tomography apparatus (X-ray CT apparatus), medical image processing apparatus, and medical image processing method for supplementing detailed images in continuous multiscale reconstruction | |
| JP6074450B2 (en) | CT system | |
| US12579720B2 (en) | Method of generating trained model, machine learning system, program, and medical image processing apparatus | |
| Lee et al. | Interior tomography using 1D generalized total variation. Part II: Multiscale implementation | |
| CN113962938A (en) | Image segmentation method and device, computer equipment and readable storage medium | |
| Çelik et al. | Improving resolution of panoramic radiographs: super-resolution concept | |
| JP2007260398A (en) | Method and memory medium for reducing stepped artifacts in computed tomography display of the heart | |
| CN101065781A (en) | Image reconstruction device and method | |
| JP4175879B2 (en) | Reprojection method, image creation method, and image processing apparatus | |
| US20050094760A1 (en) | CT image producing method and X-ray CT apparatus | |
| EP3932319A1 (en) | Learning method, learning device, generative model and program | |
| Wang et al. | Ring artifacts correction for computed tomography image using unsupervised contrastive learning | |
| JP4201939B2 (en) | Image processing apparatus and radiation therapy planning system | |
| CN119206097B (en) | DBT reconstruction method, medium and electronic device based on three-dimensional coordinate displacement | |
| Yeo et al. | Three-dimensional image registration for spiral CT angiography | |
| EP1542166A1 (en) | Three-dimension back-projection method and apparatus, and x-ray CT apparatus | |
| US7519144B2 (en) | Multi-positional CT image producing method and X-ray CT apparatus | |
| JP2004329947A (en) | Image creation method and spiral CT apparatus in spiral computed tomography | |
| CN113140016A (en) | Metal artifact correction method and system of CBCT (Cone Beam computed tomography) equipment |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A625 | Written request for application examination (by other person) |
Free format text: JAPANESE INTERMEDIATE CODE: A625 Effective date: 20050302 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080408 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080707 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20080805 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20080819 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110829 Year of fee payment: 3 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110829 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110829 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120829 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120829 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120829 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130829 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130829 Year of fee payment: 5 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |