JP7790891B2 - Information processing device and ophthalmic examination device - Google Patents
Information processing device and ophthalmic examination deviceInfo
- Publication number
- JP7790891B2 JP7790891B2 JP2021133354A JP2021133354A JP7790891B2 JP 7790891 B2 JP7790891 B2 JP 7790891B2 JP 2021133354 A JP2021133354 A JP 2021133354A JP 2021133354 A JP2021133354 A JP 2021133354A JP 7790891 B2 JP7790891 B2 JP 7790891B2
- Authority
- JP
- Japan
- Prior art keywords
- tomographic image
- image
- eye
- tomographic
- subject
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Eye Examination Apparatus (AREA)
Description
本明細書に開示される技術は、情報処理装置及び眼科検査装置に関する。 The technology disclosed in this specification relates to an information processing device and an ophthalmic examination device.
光干渉断層計(OCT;Optical Coherence Tomography)などの断層画像撮影装置を用いると、被検眼内部の構造を三次元的に観察できる。OCTは、疾病の診断をより的確に行うために有用であることから眼科診療に広く用いられている。 Using a tomography imaging device such as an optical coherence tomography (OCT), it is possible to observe the internal structure of the subject's eye in three dimensions. OCT is widely used in ophthalmological examinations because it is useful for more accurate diagnosis of disease.
OCTの種別として、例えば、広帯域な光源とマイケルソン干渉計を組み合わせたTD-OCT(Time domain OCT)がある。TD-OCTは、参照ミラーの位置を一定速度で移動させ、参照光と信号アームで取得した後方散乱光との合波により得られる干渉光を計測することで、被検眼における深さ方向の反射光強度分布を得る。 One type of OCT is TD-OCT (Time Domain OCT), which combines a broadband light source with a Michelson interferometer. TD-OCT moves the reference mirror at a constant speed and measures the interference light obtained by combining the reference light with the backscattered light acquired by the signal arm, thereby obtaining the reflected light intensity distribution in the depth direction of the test eye.
ここで、TD-OCTでは参照ミラーの機械的な移動が必要であるため高速な画像取得が難しかった。そこで、より高速に画像を取得するOCTの種別として、広帯域光源を用いて分光器を介して干渉光を取得するSD-OCT(Spectral domain OCT)が開発された。 However, with TD-OCT, high-speed image acquisition is difficult because the reference mirror needs to be moved mechanically. Therefore, SD-OCT (Spectral Domain OCT) was developed as a type of OCT that acquires images at higher speeds. It uses a broadband light source to acquire interference light via a spectroscope.
さらに、高速で波長を掃引する波長掃引光源を用いて時間的に分光することで高周波の干渉光を検出可能なSS-OCT(Swept Source OCT)が開発された。SS-OCTを用いることで、被検眼の脈絡膜や強膜などの組織が含まれた広画角かつ高深さ範囲の断層画像を取得できる。 In addition, SS-OCT (Swept Source OCT) has been developed, which can detect high-frequency interference light by temporally dispersing it using a wavelength-swept light source that rapidly sweeps the wavelength. SS-OCT makes it possible to obtain tomographic images with a wide field of view and a deep depth range that include tissues such as the choroid and sclera of the subject's eye.
特許文献1には、広画角でかつ高深さ範囲の断層画像が取得された場合、断層画像を等倍に拡大することで層境界を視認しやすくする技術が開示されている。 Patent Document 1 discloses a technology that, when a tomographic image is acquired with a wide angle of view and a deep depth range, enlarges the tomographic image to full size, making it easier to visualize layer boundaries.
ここで、特許文献1で開示されるような広画角でかつ高深さ範囲の断層画像だけでなく、開示される画角よりも狭い画角でかつ高深さ範囲の断層画像を取得する場合が考えられる。このとき、狭い画角で取得された断層画像が高深さ範囲であるにも関わらず、例えば、広い画角で取得された断層画像が表示される表示領域と同じ表示領域に合うように表示させると、被検眼の組織や網膜の層境界などの注目領域が深さ方向につぶれてしまうため視認しづらくなる場合があった。 Here, it is conceivable that in addition to the wide-angle tomographic images with a large depth range as disclosed in Patent Document 1, tomographic images with a narrower angle of view and a large depth range may be acquired. In this case, even though the tomographic image acquired with a narrow angle of view has a large depth range, if it is displayed in the same display area as the tomographic image acquired with a wide angle of view, for example, the area of interest, such as the tissue of the subject's eye or the layer boundaries of the retina, may be crushed in the depth direction, making it difficult to view.
狭い画角かつ高深さ範囲で取得された断層画像を表示領域に表示させる際に、特許文献1で開示されるように断層画像を単純に等倍に拡大させてしまうと、被検眼の深さ方向に交差する方向における断層画像の一部の領域が表示されなくなってしまう。 When displaying a tomographic image acquired with a narrow angle of view and a wide depth range in the display area, if the tomographic image is simply enlarged to the same size as disclosed in Patent Document 1, some areas of the tomographic image in a direction that intersects with the depth direction of the subject's eye will not be displayed.
開示の技術の一つは、被検眼の注目領域の視認性を向上することを目的とする。 One of the disclosed technologies aims to improve the visibility of the area of interest in the subject's eye.
なお、前記目的に限らず、後述する発明を実施するための形態に示す各構成により導かれる作用効果であって、従来の技術によっては得られない作用効果を奏することも本件の他の目的の一つとして位置づけることができる。 In addition to the above-mentioned objectives, the achievement of effects derived from the various components shown in the detailed description of the invention described below, which cannot be obtained with conventional technology, can also be considered as another objective of this invention.
本明細書に開示される技術は、
測定光が照射された被検眼からの戻り光と参照光とを合波して得た干渉光を用いて前記被検眼の断層画像を取得する情報処理装置であって、
前記被検眼の断層画像を取得する画角として、第1の画角と前記第1の画角よりも狭い第2の画角とを含む複数の画角のうちいずれかが選択された場合に、前記選択された画角で前記被検眼において前記測定光を走査する走査手段を制御する制御手段と、
前記第1の画角が選択された場合、前記第1の画角で取得された第1の断層画像を表示領域に表示させ、前記第2の画角が選択された場合、前記第2の画角で取得された第2の断層画像に含まれる部分画像であって前記第2の断層画像よりも被検眼における深さ方向の長さが短い部分画像を、前記表示領域に合わせるように表示させる表示制御手段と、
を備え、
前記部分画像の深さ方向の長さは、前記断層画像を取得した眼科検査装置とは異なる眼科検査装置で取得された断層画像の深さ方向の長さに基づいた長さであり、
前記断層画像を取得した眼科検査装置は、波長掃引光源によって測定光が照射された被検眼からの戻り光と参照光とを合波して得た干渉光を用いて前記被検眼の断層画像を取得するSS-OCTであり、
前記断層画像を取得した眼科検査装置とは異なる眼科検査装置は、分光器を介して取得される干渉光を用いるSD-OCTである。
The technology disclosed in this specification is
1. An information processing device that acquires a tomographic image of a subject's eye using interference light obtained by combining return light from the subject's eye irradiated with measurement light and reference light,
a control means for controlling a scanning means for scanning the measurement light at the subject's eye at a selected angle of view when any of a plurality of angles of view including a first angle of view and a second angle of view narrower than the first angle of view is selected as an angle of view for acquiring a tomographic image of the subject's eye;
a display control means for displaying a first tomographic image acquired at the first angle of view in a display area when the first angle of view is selected, and for displaying a partial image included in a second tomographic image acquired at the second angle of view, the partial image having a length in a depth direction of the subject's eye shorter than that of the second tomographic image, in a manner that fits the display area when the second angle of view is selected;
Equipped with
the length in the depth direction of the partial image is a length based on the length in the depth direction of a tomographic image acquired by an ophthalmic examination apparatus different from the ophthalmic examination apparatus that acquired the tomographic image,
the ophthalmic examination apparatus that has acquired the tomographic image is an SS-OCT that acquires the tomographic image of the test eye using interference light obtained by combining return light from the test eye that has been irradiated with measurement light by a wavelength swept light source and reference light;
The ophthalmic examination apparatus that is different from the ophthalmic examination apparatus that acquired the tomographic image is an SD-OCT that uses interference light acquired through a spectroscope.
本明細書に開示される技術によれば、被検眼の注目領域の視認性を向上することができる。 The technology disclosed in this specification can improve the visibility of the area of interest in the subject's eye.
以下、本明細書に開示される技術を実施するための例示的な実施例を、図面を参照して説明する。なお、以下の実施例で説明する寸法、材料、形状、及び構成要素の相対的な位置等は任意であり、本明細書に開示される技術が適用される装置の構成又は様々な条件に応じて変更できる。 Below, illustrative examples for implementing the technology disclosed herein are described with reference to the drawings. Note that the dimensions, materials, shapes, and relative positions of components described in the following examples are arbitrary and can be changed depending on the configuration of the device to which the technology disclosed herein is applied or various conditions.
例えば、実施例に記載のSD-OCTによって取得される断層画像の深さ方向の寸法は2mmで記載されているが、2mmに限定されない。また、実施例内で扱われる断層画像の被検眼における深さ方向の長さ(撮影深度)は、眼科検査装置の種別ごとに固定である場合を説明するが、1つの眼科検査装置によって複数の撮影深度で断層画像の取得ができる構成であってもよい。 For example, the depth dimension of the tomographic images acquired by the SD-OCT described in the examples is set to 2 mm, but is not limited to 2 mm. Furthermore, the depth dimension (imaging depth) of the tomographic images used in the examples in the test eye is described as being fixed for each type of ophthalmic examination device, but a single ophthalmic examination device may be configured to acquire tomographic images at multiple imaging depths.
また、図面において、同一であるか又は機能的に類似している要素を示すために図面間で同じ参照符号を用いる。また、各図面において説明上重要ではない構成要素、部材、処理の一部は省略して表示する場合がある。 In addition, the same reference symbols are used between drawings to indicate identical or functionally similar elements. Also, some components, parts, and processes that are not important for the explanation may be omitted from each drawing.
<実施例1>
図1から図7を参照して、本実施例の眼科システム10について説明する。眼科システム10は、取得した断層画像の被検眼における深さ方向の長さと、断層画像を取得した断層画像撮影装置の種別とのいずれかに応じて、異なるスケールを適用して断層画像を表示することができる。
Example 1
An ophthalmologic system 10 according to the present embodiment will be described with reference to Figures 1 to 7. The ophthalmologic system 10 can display a tomographic image by applying different scales depending on either the depth of the acquired tomographic image in the subject's eye or the type of tomographic imaging device that acquired the tomographic image.
ここで、深さ方向が長い断層画像又はSS-OCTによって取得された断層画像が選択された場合、断層画像の深さ方向における一部の領域のみ、すなわち部分画像を表示領域に合わせるように表示させるスケールで表示される。取得されたままの断層画像よりも深さ方向が短い部分画像を表示することで、断層画像が深さ方向につぶされることがなく、注目領域を視認しやすくすることができる。 When a tomographic image with a long depth or a tomographic image acquired by SS-OCT is selected, only a portion of the depth of the tomographic image, i.e., a partial image, is displayed at a scale that fits the display area. By displaying a partial image that is shorter in depth than the tomographic image as acquired, the tomographic image is not crushed in the depth direction, making it easier to view the area of interest.
断層画像撮影装置であるOCTによって取得される断層画像の深さ方向の長さ(撮影深度)は、被検眼に照射される測定光の性質と、干渉光を受光するセンサの性質とに依存する。取得される断層画像の深さ方向の長さを変更するためには、光源の変更やサンプリング速度の変更などの光学系の構成の煩雑な変更及び調整が必要であるため、深さ方向の長さは変更不可である場合がある。本実施例では、取得した断層画像を後処理することによって、光学系の構成の煩雑な変更及び調整をすることなく注目領域を視認しやすく表示させることができる。 The depth length (imaging depth) of a tomographic image acquired by an OCT tomographic imaging device depends on the properties of the measurement light irradiated onto the subject's eye and the properties of the sensor that receives the interference light. Changing the depth length of the acquired tomographic image requires complex changes and adjustments to the optical system configuration, such as changing the light source or sampling rate, so the depth length may not be changeable. In this embodiment, by post-processing the acquired tomographic image, the region of interest can be displayed in an easily visible manner without complex changes and adjustments to the optical system configuration.
(システムの構成)
図1を参照して、眼科システム10の構成の一例を説明する。図1は本実施例に係る眼科システム10の構成を示す図である。図1に示すように、眼科システム10は、情報処理装置の一例である眼科制御装置110が、インターフェースを介して断層画像撮影装置100(OCTとも呼ばれる)、記憶部120、入力部130、表示部140と通信可能に接続されたシステムである。
(System configuration)
An example of the configuration of an ophthalmologic system 10 will be described with reference to Fig. 1. Fig. 1 is a diagram showing the configuration of the ophthalmologic system 10 according to this embodiment. As shown in Fig. 1, the ophthalmologic system 10 is a system in which an ophthalmologic control device 110, which is an example of an information processing device, is communicably connected to a tomographic imaging device 100 (also called OCT), a storage unit 120, an input unit 130, and a display unit 140 via interfaces.
断層画像撮影装置100は、被検眼の断層画像を撮影する装置であり、測定光学系101、ステージ部102及びベース部103を備える。断層画像撮影装置100として、波長掃引光源を用いて測定光が照射された被検眼からの戻り光と参照光とを合波して得た干渉光を用いて断層画像を取得する眼科検査装置であるSS-OCTを説明する。 The tomographic imaging device 100 is a device that captures tomographic images of a subject's eye, and is equipped with a measurement optical system 101, a stage unit 102, and a base unit 103. The tomographic imaging device 100 described here is an SS-OCT, an ophthalmic examination device that captures tomographic images using interference light obtained by combining reference light with return light from a subject's eye irradiated with measurement light using a wavelength swept light source.
なお、後述するように眼科制御装置110は、眼科検査装置の別の一例であるSD-OCTと接続可能に構成されてもよい。SD-OCTは分光器を介して干渉光を検出する。 As described below, the ophthalmic control device 110 may be configured to be connectable to an SD-OCT, another example of an ophthalmic examination device. The SD-OCT detects interference light via a spectroscope.
測定光学系101は前眼観察像、被検眼のSLO眼底像、断層画像を取得するための光学系である。ステージ部102は、測定光学系101を前後左右に移動可能にする。 The measurement optical system 101 is an optical system for acquiring anterior eye observation images, SLO fundus images of the subject's eye, and tomographic images. The stage unit 102 allows the measurement optical system 101 to move back and forth and left and right.
眼科制御装置110は、ステージ部102の制御、アライメント動作の制御、断層画像の再構成、画像の表示などを実行するコンピュータである。記憶部120は、断層撮像用のプログラム(撮影パターンなど)、患者情報、過去検査の撮影データや画像データ、計測データなどを記憶する。 The ophthalmic control device 110 is a computer that controls the stage unit 102, alignment operations, tomographic image reconstruction, image display, etc. The storage unit 120 stores tomographic imaging programs (such as imaging patterns), patient information, imaging data and image data from previous examinations, measurement data, etc.
入力部130はコンピュータへの指示を行い、具体的にはキーボードとマウスから構成される。表示部140は、例えばモニターから成る。なおタッチパネルを使用する場合は、入力部130の一部または全てが表示部140に内蔵される。 The input unit 130 issues instructions to the computer and specifically consists of a keyboard and mouse. The display unit 140 consists of, for example, a monitor. If a touch panel is used, part or all of the input unit 130 is built into the display unit 140.
(断層画像撮影装置の構成)
本実施例の断層画像撮影装置100における測定光学系の構成について図2を用いて説明する。ここでは、SS-OCTの構成を例に説明する。
(Configuration of tomographic imaging device)
The configuration of the measurement optical system in the tomographic imaging apparatus 100 of this embodiment will be described with reference to Fig. 2. Here, the configuration of SS-OCT will be described as an example.
まず、測定光学系101の内部について説明する。断層画像撮影装置100は、射出される光の周波数が掃引される波長掃引光源211と、干渉光を生成するOCT干渉部220と、干渉光を検出する検出部230と、干渉光に基づいて、被検体200の眼底の情報を取得する眼科制御装置110とを有している。さらに、断層画像撮影装置100は、測定アーム250と参照アーム260を有している。 First, the interior of the measurement optical system 101 will be described. The tomography apparatus 100 has a wavelength swept light source 211 that sweeps the frequency of the emitted light, an OCT interference unit 220 that generates interference light, a detection unit 230 that detects the interference light, and an ophthalmologic control device 110 that acquires information about the fundus of the subject 200 based on the interference light. Furthermore, the tomography apparatus 100 has a measurement arm 250 and a reference arm 260.
なお、断層画像撮影装置100は走査型検眼鏡(Scanning Laser Ophthalmoscope:以下、SLO)用の光源212を備え、眼底からの反射光を得るためのSLO光学系280、前眼部撮影部290を有する構成であってもよい。また、断層画像撮影装置100は、眼底を可視光によって照明し眼底正面画像を取得する眼底カメラの機能を有していてもよい。 The tomographic imaging device 100 may be equipped with a light source 212 for a scanning laser ophthalmoscope (hereinafter referred to as SLO), an SLO optical system 280 for obtaining reflected light from the fundus, and an anterior segment imaging unit 290. The tomographic imaging device 100 may also have the functionality of a fundus camera that illuminates the fundus with visible light and obtains a frontal image of the fundus.
なお、本実施例では被検体200が人眼である例を説明するが、これに限るものではない。 In this embodiment, an example is described in which the subject 200 is a human eye, but this is not limited to this.
OCT干渉部220は、カプラ221、222を有している。まず、カプラ221は、波長掃引光源211から射出された光を眼底へ照射する測定光と参照光とに分岐する。この実施例において、分岐比は2:8程度であり、測定光:参照光=2:8とする。 The OCT interference unit 220 has couplers 221 and 222. First, the coupler 221 splits the light emitted from the wavelength swept light source 211 into measurement light and reference light that are used to irradiate the fundus. In this embodiment, the split ratio is approximately 2:8, with measurement light:reference light = 2:8.
測定光は、測定アーム250を経由して被検体200である眼底に照射される。より具体的には、測定アーム250に入射した照射光は、偏光コントローラ251で偏光状態を整えられた後、コリメータ252から空間光として射出される。その後、照射光は、X走査スキャナー253、レンズ254、255、Y走査スキャナー256、ダイクロイックミラー273、レンズ257、フォーカスステージ259に固定されたフォーカスレンズ258、対物レンズ276を介して被検体200の眼底に照射される。 The measurement light is irradiated onto the fundus of the subject 200 via the measurement arm 250. More specifically, the irradiation light incident on the measurement arm 250 has its polarization adjusted by the polarization controller 251, and is then emitted as spatial light from the collimator 252. The irradiation light then passes through the X-scan scanner 253, lenses 254 and 255, the Y-scan scanner 256, the dichroic mirror 273, the lens 257, the focus lens 258 fixed to the focus stage 259, and the objective lens 276, before being irradiated onto the fundus of the subject 200.
なお、X走査スキャナー253、Y走査スキャナー256は眼底を照射光で走査する機能を有する走査手段である。走査手段によって、測定光の眼底への照射位置が変えられる。また、ダイクロイックミラー103は、波長1000nm~1100nmの光を反射し、それ以外の光を透過する特性を有する。 The X-scan scanner 253 and Y-scan scanner 256 are scanning means that have the function of scanning the fundus with irradiation light. The scanning means change the irradiation position of the measurement light on the fundus. The dichroic mirror 103 has the property of reflecting light with wavelengths between 1000 nm and 1100 nm and transmitting all other light.
そして、眼底からの後方散乱光(反射光)は、再び上述の光学経路をたどり測定アーム250から射出される。そして、カプラ221を経由してカプラ222に入射する。前記の分岐比に従い、眼底からの戻り光の8割がカプラ222に導かれる。 The backscattered light (reflected light) from the fundus then travels back along the optical path described above and is emitted from measurement arm 250. It then passes through coupler 221 and enters coupler 222. According to the branching ratio described above, 80% of the returning light from the fundus is guided to coupler 222.
一方、参照光は参照アーム260を経由し、カプラ222に入射する。より具体的には、参照アーム260に入射した参照光は、偏光コントローラ261で偏光状態を整えられた後、コリメータ262から空間光として射出される。その後、参照光は分散補償ガラス263、光路長調整光学系264、分散調整プリズムペア265を通り、コリメータレンズ266を介して光ファイバーに入射され、参照アーム260から射出されてカプラ222に入射する。 Meanwhile, the reference light passes through reference arm 260 and enters coupler 222. More specifically, the reference light that enters reference arm 260 has its polarization adjusted by polarization controller 261, and is then emitted as spatial light from collimator 262. The reference light then passes through dispersion compensation glass 263, optical path length adjustment optical system 264, and dispersion adjustment prism pair 265, and is then incident on an optical fiber via collimator lens 266, and is then emitted from reference arm 260 and enters coupler 222.
カプラ222で測定アーム250を経由した被検体200の反射光と参照アーム260を通った光とが合波され干渉する。そして、その干渉光を検出部230で検出する。検出部230は、差動検出器231とA/D変換器232を有している。まず、検出部230では、カプラ222で干渉光を発生させた後すぐに分波された干渉光を差動検出器231で検出する。 The light reflected from the specimen 200 via the measurement arm 250 and the light that has passed through the reference arm 260 are combined by the coupler 222 and interfere. This interference light is then detected by the detection unit 230. The detection unit 230 has a differential detector 231 and an A/D converter 232. First, in the detection unit 230, the differential detector 231 detects the demultiplexed interference light immediately after the interference light is generated by the coupler 222.
そして、差動検出器231で電気信号に変換されたOCT干渉信号をA/D変換器232でデジタル信号に変換している。ここで、図2の断層画像撮影装置100では、干渉光のサンプリングは、波長掃引光源211の中に組み込まれたkクロック発生部が発信するkクロック信号に基づいて等光周波数(等波数)間隔に行われる。A/D変換器232が出力したデジタル信号は眼科制御装置110に送られる。 The OCT interference signal converted into an electrical signal by the differential detector 231 is then converted into a digital signal by the A/D converter 232. In the tomography imaging device 100 of Figure 2, the interference light is sampled at equal optical frequency (equal wavenumber) intervals based on the k-clock signal emitted by the k-clock generating unit incorporated in the wavelength swept light source 211. The digital signal output by the A/D converter 232 is sent to the ophthalmologic control device 110.
以上は、被検体200のある1点における断層に関する情報の取得のプロセスであり、このように被検体の奥行き方向の断層に関する情報を取得することをA-scanと呼ぶ。また、A-scanと直交する方向で被検体の断層に関する情報、すなわち2次元画像を取得するための走査方向をB-scan、更にA-scan、及びB-scanのいずれの走査方向とも直交する方向に走査することをC-scanと呼ぶ。 The above is the process of acquiring information about a cross section at a single point on the subject 200, and acquiring information about a cross section in the depth direction of the subject in this manner is called an A-scan. Furthermore, the scanning direction for acquiring information about the subject's cross section, i.e., a two-dimensional image, in a direction perpendicular to the A-scan is called a B-scan, and scanning in a direction perpendicular to both the A-scan and B-scan scanning directions is called a C-scan.
また、3次元断層像を取得する際に眼底面内に2次元ラスター走査する場合、高速な走査方向がB-scan、B-scanをその直交方向に並べて走査する低速な走査方向をC-scanと呼ぶ。A-scan及びB-scanを行うことで2次元の断層像が得られ、A-scan、B-scan及びC-scanを行うことで、3次元の断層像を得ることができる。B-scan、C-scanは、上述したX走査スキャナー253、Y走査スキャナー256により行われる。 When performing two-dimensional raster scanning on the fundus surface to obtain a three-dimensional tomographic image, the high-speed scanning direction is called a B-scan, and the slower scanning direction, in which two B-scans are aligned perpendicular to the B-scan, is called a C-scan. A two-dimensional tomographic image can be obtained by performing an A-scan and a B-scan, and a three-dimensional tomographic image can be obtained by performing an A-scan, a B-scan, and a C-scan. B-scans and C-scans are performed by the X-scan scanner 253 and the Y-scan scanner 256 described above.
なお、X走査スキャナー253、Y走査スキャナー256は、それぞれ回転軸が互いに直交するよう配置された偏向ミラーで構成されている。X走査スキャナー253は、X軸方向の走査を行い、Y走査スキャナー256は、Y軸方向の走査を行う。X軸方向、Y軸方向の各方向は、眼球の眼軸方向に対して垂直な方向で、互いに垂直な方向である。また、B-scan、C-scanのようなライン走査方向と、X軸方向またはY軸方向とは、一致していなくてもよい。このため、B-scan、C-scanのライン走査方向は、取得したい2次元の断層像あるいは3次元の断層像に応じて、適宜決めることができる。 The X-scan scanner 253 and Y-scan scanner 256 are composed of deflection mirrors arranged so that their rotation axes are perpendicular to each other. The X-scan scanner 253 performs scanning in the X-axis direction, and the Y-scan scanner 256 performs scanning in the Y-axis direction. The X-axis and Y-axis directions are perpendicular to the ocular axis direction of the eyeball and are mutually perpendicular. Furthermore, the line scanning direction of B-scan and C-scan does not have to coincide with the X-axis or Y-axis direction. Therefore, the line scanning direction of B-scan and C-scan can be determined appropriately depending on the 2D or 3D tomographic image to be acquired.
SLO光源212から射出された光はSLO光学系280を介して眼底へ照射される。より具体的にはSLO光学系280に入射した光は、コリメータ281から平行光として空間へ射出される。その後、穴あきミラー271の穴あき部を通過し、レンズ282を介し、X走査スキャナー283、レンズ284、285、Y走査スキャナー286を介し、ダイクロイックミラー272に到達する。 Light emitted from the SLO light source 212 is irradiated onto the fundus via the SLO optical system 280. More specifically, the light incident on the SLO optical system 280 is emitted into space as parallel light from the collimator 281. The light then passes through the perforated portion of the perforated mirror 271, passes via lens 282, X-scan scanner 283, lenses 284 and 285, and Y-scan scanner 286, and reaches the dichroic mirror 272.
なお、X走査スキャナー283、Y走査スキャナー286は、SLO用の走査手段の一例であり、共通のXY走査スキャナーとしてOCT用のX走査スキャナー253、Y走査スキャナー256の構成としても良い。ダイクロイックミラー272は、760nm~800nmを反射し、それ以外の光を透過する特性を有する。ダイクロイックミラー272にて反射された光は、OCTと同様の光路を経由し、被検体200の眼底に到達する。 Note that the X-scan scanner 283 and Y-scan scanner 286 are examples of scanning means for SLO, and the X-scan scanner 253 and Y-scan scanner 256 for OCT may also be configured as a common XY-scan scanner. The dichroic mirror 272 has the property of reflecting light in the 760 nm to 800 nm range and transmitting all other light. The light reflected by the dichroic mirror 272 travels the same optical path as for OCT and reaches the fundus of the subject 200.
眼底に照射された測定光は、眼底で反射・散乱され、上述の光学経路をたどり穴あきミラー271に達する。穴あきミラー271で反射された光が、レンズ287を介し、アバランシェフォトダイオード(以下、APD)288で受光され、電気信号に変換されて、コンピュータ110に送られる。 The measurement light irradiated onto the fundus is reflected and scattered by the fundus, and travels along the optical path described above to reach the perforated mirror 271. The light reflected by the perforated mirror 271 passes through the lens 287 and is received by the avalanche photodiode (APD) 288, converted into an electrical signal, and sent to the computer 110.
ここで、穴あきミラー271の位置は、被検眼の瞳孔位置と共役となっており、眼底に照射された測定光が反射・散乱された光のうち、瞳孔周辺部を通った光が、穴あきミラー271によって反射される。 Here, the position of the perforated mirror 271 is conjugate with the position of the pupil of the subject's eye, and of the measurement light irradiated onto the fundus, the light that is reflected and scattered and passes through the periphery of the pupil is reflected by the perforated mirror 271.
前眼部撮影部290は、波長860nmの照明光を発するLEDから成る照明光源295により前眼部を照明する。前眼部で反射された光は、対物レンズ276を介してダイクロイックミラー275に達する。ダイクロイックミラー275は、820nm~920nmの光を反射し、それ以外の光を透過する特性を有する。ダイクロイックミラー105で反射された光は、レンズ291、292、293を介し、前眼部カメラ294で受光される。前眼部カメラ294で受光された光は電気信号に変換され、眼科制御装置110で受ける。 The anterior segment imaging unit 290 illuminates the anterior segment with an illumination light source 295 consisting of an LED that emits illumination light with a wavelength of 860 nm. Light reflected by the anterior segment reaches the dichroic mirror 275 via the objective lens 276. The dichroic mirror 275 has the property of reflecting light between 820 nm and 920 nm and transmitting all other light. The light reflected by the dichroic mirror 105 passes through lenses 291, 292, and 293 and is received by the anterior segment camera 294. The light received by the anterior segment camera 294 is converted into an electrical signal and received by the ophthalmic control device 110.
内部固視灯225は、内部固視灯用表示部226、レンズ227で構成される。内部固視灯用表示部226として複数の発光ダイオード(LD)がマトリックス状に配置されたものを用いる。発光ダイオードの点灯位置は、撮影したい部位に合わせて変更される。内部固視灯用表示部226からの光は、レンズ227を介し、被検眼に導かれる。内部固視灯用表示部226から射出される光は520nmで、設定した所望のパターンが表示される。 The internal fixation light 225 is composed of an internal fixation light display unit 226 and a lens 227. The internal fixation light display unit 226 uses multiple light-emitting diodes (LDs) arranged in a matrix. The lighting position of the LEDs is changed according to the area to be photographed. Light from the internal fixation light display unit 226 is guided to the subject's eye via the lens 227. The light emitted from the internal fixation light display unit 226 is 520 nm, and displays the desired set pattern.
眼科制御装置110はデジタル信号に変換した干渉信号を信号処理することで、断層画像を取得する。さらに、モーションコントラストデータを解析することで血管造影画像を取得してもよい。同様に、眼科制御装置110は、APD288から送られてくるデジタル信号に変換されたSLOの眼底信号を処理し、SLO画像を計算する。また、前眼部カメラ294から送られてくる信号を処理し、前眼部画像を構成する。 The ophthalmic control device 110 acquires a tomographic image by processing the interference signal converted into a digital signal. Furthermore, an angiographic image may be acquired by analyzing the motion contrast data. Similarly, the ophthalmic control device 110 processes the SLO fundus signal converted into a digital signal sent from the APD 288 to calculate an SLO image. It also processes the signal sent from the anterior eye camera 294 to construct an anterior eye image.
続いて、信号処理の結果得られた眼底および前眼部の情報が表示部140によって表示される。 Then, the fundus and anterior segment information obtained as a result of the signal processing is displayed on the display unit 140.
ここではSS-OCTを例に断層画像撮影装置100の光学系を説明したが、SD-OCTなど他の構成の断層画像撮影装置を用いることも可能である。 Here, the optical system of the tomographic imaging device 100 has been explained using SS-OCT as an example, but tomographic imaging devices with other configurations, such as SD-OCT, can also be used.
(断層画像の表示)
次に図3を参照して、深さ方向の長さが異なる断層画像を同じ大きさの表示領域に配置することによる、表示上の見え方の違いを説明する。図3は異なる種別の断層画像撮影装置であるSD-OCTとSS-OCTとから得られるそれぞれの断層画像と、それぞれの断層画像全体を同じ大きさの表示領域に表示したときの画像との表示の例を示す。
(Display of tomographic image)
Next, the difference in appearance on display caused by arranging tomographic images with different depth lengths in a display area of the same size will be described with reference to Figure 3. Figure 3 shows an example of the display of tomographic images obtained from different types of tomographic imaging devices, SD-OCT and SS-OCT, and the images when the entire tomographic images are displayed in a display area of the same size.
図3(a)は、SD-OCTで被検眼200の眼底を撮影した断層画像300であり、断層画像300には網膜層301が映し出される。正常眼では一般的に、SD-OCTで取得された断層画像には、網膜色素上皮以下の脈絡部分からの戻り光が減衰して脈絡膜部分の途中部分302までが描出された画像となる。 Figure 3(a) shows a tomographic image 300 of the fundus of the test eye 200 captured using SD-OCT, which shows the retinal layer 301. In normal eyes, the tomographic image acquired using SD-OCT generally shows an image depicting up to the middle part 302 of the choroid, due to attenuation of the returning light from the choroid below the retinal pigment epithelium.
図3(c)は、SS-OCTによって被検眼200の眼底を撮影した断層画像320である。高深さ範囲で断層画像を取得可能なSS-OCTで撮影することで、断層画像320に網膜及び脈絡膜を含む領域321を映し出すことが可能である。 Figure 3(c) shows a tomographic image 320 of the fundus of the subject's eye 200 captured using SS-OCT. By capturing images using SS-OCT, which can acquire tomographic images over a wide depth range, it is possible to capture an area 321 including the retina and choroid in the tomographic image 320.
断層画像300又は320が表示部に表示される場合、選択されたスケールに基づいて画像の大きさが変更される。例えば、深さ方向と横方向の1ピクセルの長さが同じになるスケール(Realスケール)や、表示領域に合わせるように画像の深さ方向と横方向とをそれぞれ拡大・縮小し表示するスケール(Fitスケール)など、選択されるスケールの種類に合わせて画像の縦横比を変更されてもよい。 When the tomographic image 300 or 320 is displayed on the display unit, the size of the image is changed based on the selected scale. For example, the aspect ratio of the image may be changed according to the type of scale selected, such as a scale where the length of one pixel in the depth direction and the width direction is the same (Real scale), or a scale where the image is enlarged or reduced in the depth direction and width direction to fit the display area (Fit scale).
Fitスケールで断層画像300と320とを同じ大きさの表示領域に表示した場合、元の画像の縦横比の違いのため表示される網膜の見え方が異なってしまう。図3(b)はSD-OCTによって取得される断層画像を表示した断層画像310である。一方、図3(d)に示されるように、SS-OCTによって取得される断層画像を表示した断層画像330では、深さ方向につぶされて注目領域の1つである網膜部分の視認性が低下する。 When tomographic images 300 and 320 are displayed in the same size display area using Fit scale, the retina appears differently due to the difference in aspect ratio of the original images. Figure 3(b) shows tomographic image 310, which displays a tomographic image acquired by SD-OCT. On the other hand, as shown in Figure 3(d), tomographic image 330, which displays a tomographic image acquired by SS-OCT, is compressed in the depth direction, reducing the visibility of the retina, which is one of the regions of interest.
(眼科制御装置の構成)
次に図4を参照して、情報処理装置の一例である眼科制御装置110の構成を説明する。図4は眼科制御装置110の構成を概略的に示す。眼科制御装置110は断層画像撮影装置100及び入力部130、表示部140と接続されており、撮影制御部410、画像取得部420、記憶部120、表示制御部430が設けられている。
(Configuration of ophthalmic control device)
Next, the configuration of an ophthalmologic control apparatus 110, which is an example of an information processing apparatus, will be described with reference to Fig. 4. Fig. 4 shows a schematic configuration of the ophthalmologic control apparatus 110. The ophthalmologic control apparatus 110 is connected to the tomographic imaging apparatus 100, an input unit 130, and a display unit 140, and is provided with an imaging control unit 410, an image acquisition unit 420, a storage unit 120, and a display control unit 430.
情報処理装置の一例である眼科制御装置110は、例えば、パーソナルコンピュータ、タブレット端末、携帯端末などのいずれかであってよい。また、眼科検査装置が本明細書に開示される情報処理装置の機能を実現する構成であってもよい。開示される情報処理装置の機能が、情報処理装置と眼科検査装置とを含む複数の装置が通信可能に接続された眼科システムによって実現されてもよい。なお、情報処理装置は眼科検査装置に専用の情報処理装置に限らず、例えばCTやMRIなどの眼科以外の検査装置と接続可能であってもよい。 The ophthalmic control device 110, which is an example of an information processing device, may be, for example, a personal computer, a tablet terminal, or a mobile terminal. Furthermore, the ophthalmic examination device may be configured to implement the functions of the information processing device disclosed in this specification. The functions of the disclosed information processing device may be implemented by an ophthalmic system in which multiple devices, including an information processing device and an ophthalmic examination device, are communicatively connected. Note that the information processing device is not limited to an information processing device dedicated to ophthalmic examination devices, and may also be connectable to non-ophthalmic examination devices, such as CT or MRI.
撮影制御部410は、断層画像撮影装置100を制御することで、撮影アライメントの調整や撮影の実施、撮影された前眼観察像・SLO眼底像や断層画像の信号データの取得などを行う。また、撮影された断層画像の撮影パターン、撮影アライメントパラメータ、SLO眼底像などを記憶部120に格納する。 The imaging control unit 410 controls the tomographic imaging device 100 to adjust the imaging alignment, perform imaging, and acquire signal data for the captured anterior eye observation images, SLO fundus images, and tomographic images. It also stores the imaging patterns, imaging alignment parameters, SLO fundus images, and other data for the captured tomographic images in the memory unit 120.
さらに撮影制御部410は、画像取得部420を介して断層画像撮影装置100により撮影された断層画像の信号データから信号処理により断層画像を生成し、記憶部120に格納する。なお、撮影アライメント時に取得する信号データは記憶部120には格納せずプレビュー画像として表示制御部410に送られる。 Furthermore, the imaging control unit 410 generates a tomographic image by signal processing from the signal data of the tomographic image captured by the tomographic imaging device 100 via the image acquisition unit 420, and stores the image in the memory unit 120. Note that the signal data acquired during imaging alignment is not stored in the memory unit 120, but is sent to the display control unit 410 as a preview image.
また画像取得部420は撮影されたデータがOCTA方式の撮影パターンの場合は、同一位置を走査した断層画像からモーションコントラスト画像を生成し、生成した断層画像と共に記憶部120に格納する。また、画像取得部420は、取得した断層画像の層境界を解析して解析結果も断層画像と共に記憶部120に保存する。 Furthermore, if the captured data is an OCTA imaging pattern, the image acquisition unit 420 generates a motion contrast image from a tomographic image scanned at the same position and stores it together with the generated tomographic image in the memory unit 120. The image acquisition unit 420 also analyzes the layer boundaries of the captured tomographic image and stores the analysis results together with the tomographic image in the memory unit 120.
表示制御部430は、撮影画像装置100から撮影制御部410を介して取得した、撮影アライメントを行うための前眼観察像やSLO眼底像、断層画像のプレビュー表示や取得された断層画像、SLO眼底像を、表示部140に表示させる。ここで、表示部140は、例えばディスプレイやプロジェクターなどのいずれかであってよい。なお、表示部140は眼科制御装置110と直接接続されていなくてもよく、例えば、眼科システムに含まれるいずれかの情報処理装置と有線又は無線の通信接続によって接続可能に構成されていればよい。 The display control unit 430 causes the display unit 140 to display previews of anterior eye observation images, SLO fundus images, and tomographic images for performing imaging alignment, which are acquired from the imaging device 100 via the imaging control unit 410, as well as the acquired tomographic images and SLO fundus images. Here, the display unit 140 may be, for example, a display or a projector. Note that the display unit 140 does not need to be directly connected to the ophthalmic control device 110, and may be configured to be connectable, for example, via a wired or wireless communication connection, to any information processing device included in the ophthalmic system.
また、表示制御部430は、ユーザが入力部130を介して入力された内容に基づいて表示部140の表示変更や撮影制御部410への指示を行う。入力部130は、例えば、マウスやキーボード、タッチペンなどの少なくともいずれかである。また、入力部130と表示部140の両方の機能を備えるタッチパネルディスプレイを用いる構成であってもよい。 The display control unit 430 also changes the display on the display unit 140 and issues instructions to the imaging control unit 410 based on the content input by the user via the input unit 130. The input unit 130 is, for example, at least one of a mouse, keyboard, and touch pen. Also, a configuration using a touch panel display that has the functions of both the input unit 130 and the display unit 140 may be used.
さらに、表示制御部430は、記憶部120に保存された断層画像やSLO眼底像のいずれかをユーザが入力部130によって選択する指示に応じて、選択された画像を表示部140に表示する。 Furthermore, in response to an instruction from the user via the input unit 130 to select either a tomographic image or an SLO fundus image stored in the memory unit 120, the display control unit 430 displays the selected image on the display unit 140.
記憶部120は、患者情報(患者の氏名、年齢、性別など)と、撮影した断層画像撮影装置110の装置情報(機種の名前、OCTの種別など)を保持する。さらに記憶部120は、撮影した断層画像やモーションコントラスト画像、SLO画像、撮影パターン情報(左右眼、撮影サイズ、撮影形式、X軸方向のスキャン数、Y軸方向のスキャン数、同一位置の繰り返し走査回数など)、撮影アライメントパラメータ情報(固視灯位置、撮影位置、SLOとOCTのフォーカス値、C-Gate位置など)やユーザが設定したパラメータ(輝度コントラスト調整値、写損の判定など)を保持する。 The memory unit 120 stores patient information (patient name, age, gender, etc.) and device information (model name, OCT type, etc.) of the tomographic imaging device 110 that captured the image. The memory unit 120 also stores captured tomographic images, motion contrast images, SLO images, imaging pattern information (left and right eye, imaging size, imaging format, number of scans in the X-axis direction, number of scans in the Y-axis direction, number of repeated scans at the same position, etc.), imaging alignment parameter information (fixation light position, imaging position, SLO and OCT focus values, C-Gate position, etc.), and parameters set by the user (brightness contrast adjustment value, imaging failure determination, etc.).
また、取得手段の一例である画像取得部420が取得する画像は、撮影制御部410によって取得される画像だけでなく、システムの外部に保存されているデータを取り込んだものも含まれる。その場合は画像だけではなく、被検眼の情報、装置情報、撮影パターン情報、撮影アライメントパラメータ情報、ユーザが設定したパラメータ全ての情報及び解析結果も一緒に取得され、記憶部120で記憶される。なお、取り込んだデータの状態が古い場合や解析結果に破損がある場合などは、古い情報の更新や取り込んだ眼科システム10が持つ解析内容での再解析をして、記憶部120に記憶させる。 In addition, the images acquired by the image acquisition unit 420, which is an example of an acquisition means, include not only images acquired by the imaging control unit 410 but also imported data stored outside the system. In this case, not only images but also information on the subject's eye, device information, imaging pattern information, imaging alignment parameter information, all information on parameters set by the user, and analysis results are acquired and stored in the storage unit 120. Note that if the imported data is outdated or the analysis results are corrupted, the old information is updated or re-analyzed using the analysis content of the imported ophthalmologic system 10, and the data is stored in the storage unit 120.
(本実施例に係る表示画面及び拡大表示画面)
図5と図6を参照して、本実施例の表示制御部430が断層画像をレポートとして表示部140に表示させる際の表示について説明する。図5は、レポートの一例である表示画面500であり、記憶部120に保存された断層画像と断層画像に付随する情報とを表示する。
(Display screen and enlarged display screen according to this embodiment)
5 and 6, a description will be given of a display when the display control unit 430 of this embodiment displays a tomographic image as a report on the display unit 140. Fig. 5 shows a display screen 500, which is an example of a report, and displays the tomographic image stored in the storage unit 120 and information associated with the tomographic image.
ここで、断層画像に付随する情報として、測定光を走査するスキャンモードと、左右眼と、検査日時と、患者情報との少なくとも一つを表示させてもよい。表示部に表示させる情報が多く断層画像を表示させる表示領域が限られる場合においても、断層画像の深さ方向の長さに応じてスケールを変更することで、注目領域を視認しやすくすることができる。 Here, at least one of the following information may be displayed as information accompanying the tomographic image: the scan mode for scanning the measurement light, the left or right eye, the examination date and time, and patient information. Even when there is a lot of information to display on the display unit and the display area for the tomographic image is limited, the area of interest can be made more visible by changing the scale according to the depth direction length of the tomographic image.
また、表示画面500は、不図示の患者画面で患者を選択する指示に応じて、選択された患者の被検眼の断層画像を表示してもよい。 In addition, the display screen 500 may display a tomographic image of the selected patient's eye in response to an instruction to select a patient on a patient screen (not shown).
図6は、拡大表示画面600であり、断層画像の1つを拡大表示する。拡大表示画面600は、表示画面500で表示された断層画像の1つから拡大表示画面600に遷移することで表示される。 Figure 6 shows the enlarged display screen 600, which displays an enlarged version of one of the tomographic images. The enlarged display screen 600 is displayed by transitioning from one of the tomographic images displayed on the display screen 500 to the enlarged display screen 600.
表示画面500は検査選択リスト表示領域510と選択検査内容表示領域520を持つ。検査選択リスト表示領域510では、記憶部120に保存されている検査データが、1撮影を1検査としてリスト状に並べられる。検査は検査日時、撮影機種、左右眼の単位でグルーピングされ、グルーピングされた中の検査は検査日時のうち撮影時間順に並べられる。このとき、検査日時のうち撮影日は降順で撮影時間は昇順で並べられる。 The display screen 500 has an examination selection list display area 510 and a selected examination content display area 520. In the examination selection list display area 510, the examination data stored in the memory unit 120 is arranged in a list, with each image taken representing one examination. The examinations are grouped by examination date and time, camera model, and left or right eye, and the examinations within each group are arranged in order of the examination date and time at which they were taken. At this time, the examination date and time are arranged in descending order and the examination time in ascending order.
また、検査選択リスト表示領域510は他にも撮影パターンごとにグルーピングする表示に切り替えることもできる。検査選択リスト表示領域510内に表示された検査から1つを選択検査511としてユーザが選択することで、選択検査511の断層画像、撮影パターン情報などの検査情報が記憶部120から読みだされて、選択検査内容表示領域520に表示される。 The examination selection list display area 510 can also be switched to a display that groups examinations by imaging pattern. When the user selects one of the examinations displayed in the examination selection list display area 510 as the selected examination 511, examination information such as the tomographic image and imaging pattern information for the selected examination 511 is read from the memory unit 120 and displayed in the selected examination content display area 520.
選択検査内容表示領域520では、1検査表示、左右眼表示、過去検査比較などの目的別の検査表示レイアウトが指定でき、選択されている検査表示レイアウトに応じた画像および検査情報が表示される。選択検査内容表示領域520では画像を表示する領域としてSLO眼底像表示領域521や断層画像表示領域522がある。 In the selected examination content display area 520, you can specify an examination display layout for different purposes, such as displaying one examination, displaying both eyes, or comparing past examinations, and images and examination information will be displayed according to the selected examination display layout. The selected examination content display area 520 includes an SLO fundus image display area 521 and a tomographic image display area 522 as areas for displaying images.
SLO眼底像表示領域521には、選択検査511のSLO画像が表示され、断層画像表示領域522で表示される断層画像の位置や方向がSLO画像上に示される。断層画像表示領域522は、選択検査511の断層画像の少なくとも1つが表示でき、SLO眼底像表示領域521で示した位置と方向に対応した断層画像が表示される。また、断層画像表示領域522上には断層画像の深さ方向とX軸方向それぞれの実寸を示すスケールが表示される。 The SLO fundus image display area 521 displays the SLO image of the selected examination 511, and the position and direction of the tomographic image displayed in the tomographic image display area 522 are indicated on the SLO image. The tomographic image display area 522 can display at least one tomographic image of the selected examination 511, and displays a tomographic image corresponding to the position and direction indicated in the SLO fundus image display area 521. In addition, scales indicating the actual dimensions of the tomographic image in the depth and X-axis directions are displayed on the tomographic image display area 522.
なお、眼底上の特定の領域内を等間隔にスキャンすることで行われる3D撮影など複数の断層画像を扱う検査では、総断層画像数と表示されている断層画像が何枚目かを示す数字が断層画像表示領域522上に表示される。この場合、断層画像はSLO眼底像表示領域521や断層画像表示領域522上のマウススクロールやマウスクリックなどで表示する断層画像を変更できる。表示する断層画像を変更する指示に応じて、SLO眼底像表示領域521上で示される断層画像の位置及び断層画像表示領域522上で示される何枚目の断層画像かを示す数字が変更される。 In addition, in examinations that use multiple tomographic images, such as 3D imaging, which is performed by scanning a specific area on the fundus at equal intervals, the total number of tomographic images and a number indicating which tomographic image is being displayed are displayed in the tomographic image display area 522. In this case, the tomographic image displayed can be changed by scrolling or clicking the mouse in the SLO fundus image display area 521 or tomographic image display area 522. In response to an instruction to change the tomographic image to be displayed, the position of the tomographic image displayed in the SLO fundus image display area 521 and the number indicating which tomographic image is being displayed in the tomographic image display area 522 are changed.
拡大表示画面600は、断層画像表示領域522においてダブルクリック、不図示の右クリックメニューまたは不図示の拡大用ボタンといった拡大画面の表示操作によって表示される。拡大表示画面600は拡大断層画像表示領域610と断層画像操作領域620を持つ。 The enlarged display screen 600 is displayed by performing an enlarged screen display operation such as double-clicking in the tomographic image display area 522, using a right-click menu (not shown), or using an enlargement button (not shown). The enlarged display screen 600 has an enlarged tomographic image display area 610 and a tomographic image operation area 620.
拡大断層画像表示領域610は断層画像表示領域522よりも広い領域を持ち、断層画像表示領域522に表示されていた断層画像が表示される。断層画像操作領域620は、断層画像スケール選択領域621を持ち、拡大断層画像表示領域610の断層画像のスケールを変更することができる。拡大表示画面600が表示された時のスケールは断層画像表示領域522の拡大画面表示操作を行った時と同じ縦横比(Defaultスケール)で表示され、断層画像スケール選択領域621で選択したスケールに応じて拡大断層画像表示領域610に表示される断層画像が変更される。 The enlarged tomographic image display area 610 has a larger area than the tomographic image display area 522, and displays the tomographic image that was displayed in the tomographic image display area 522. The tomographic image operation area 620 has a tomographic image scale selection area 621, which allows the scale of the tomographic image in the enlarged tomographic image display area 610 to be changed. The scale when the enlarged display screen 600 is displayed is the same aspect ratio (default scale) as when the enlarged screen display operation was performed in the tomographic image display area 522, and the tomographic image displayed in the enlarged tomographic image display area 610 changes depending on the scale selected in the tomographic image scale selection area 621.
(本実施例に係るSS-OCTで撮影された断層画像の表示フロー)
次に図7を参照して本実施例に係るSS-OCTで撮影された断層画像を表示するフローについて説明する。図7は本実施例に係る断層画像表示のための動作のフローチャートを示す。
(Display flow of tomographic images captured by SS-OCT according to this embodiment)
Next, a flow for displaying a tomographic image captured by SS-OCT according to this embodiment will be described with reference to Fig. 7. Fig. 7 shows a flowchart of the operation for displaying a tomographic image according to this embodiment.
SS-OCTで撮影された深さ方向が長い断層画像を同じ表示領域に合わせるように表示させた場合、SD-OCTで撮影された深さ方向の短い断層画像と比べると網膜部分が薄く表示される。そこで、断層画像を撮影した断層画像撮影装置100の種別と断層画像の深さ方向の長さとのいずれかに応じて、表示制御部430がスケールを変更することにより、深さ方向の長さが異なる断層画像を取得した場合でも視認性の高い断層画像を断層画像表示領域522に表示する。 When a tomographic image captured with SS-OCT, which has a long depth, is displayed in the same display area, the retina appears fainter than a tomographic image captured with SD-OCT, which has a short depth. Therefore, the display control unit 430 changes the scale depending on either the type of tomographic imaging device 100 that captured the tomographic image or the depth of the tomographic image, so that a highly visible tomographic image can be displayed in the tomographic image display area 522 even when tomographic images with different depth lengths are acquired.
具体的には、ステップS701で、ユーザは表示画面500に表示させる対象の検査を選択し、表示制御部430は記憶部120から選択された検査で取得された断層画像を読み込む。このとき、断層画像が撮影された断層画像撮影装置100の装置情報や撮影パターン情報も記憶部120から取得する。 Specifically, in step S701, the user selects the examination to be displayed on the display screen 500, and the display control unit 430 reads the tomographic images acquired in the selected examination from the storage unit 120. At this time, device information and imaging pattern information for the tomographic imaging device 100 that captured the tomographic images are also acquired from the storage unit 120.
ステップS702では、表示制御部430がステップS701で同時に取得した装置情報から、SD-OCTやSS-OCTといった断層画像を撮影した断層画像撮影装置100の種別を確認する。 In step S702, the display control unit 430 checks the type of tomographic imaging device 100 that captured the tomographic image, such as SD-OCT or SS-OCT, from the device information simultaneously acquired in step S701.
ステップS703では、ステップS702で確認した断層画像撮影装置100の種別に基づいて、表示制御部430が断層画像を表示するスケールを決定する。ここでは断層画像撮影装置100の種別がSD-OCTだった場合は、断層画像表示領域522に断層画像全体を合わせるように表示するFitスケールが選択される。断層画像撮影装置100の種別がSS-OCTだった場合は、断層画像全体を表示させるのではなく、SD-OCTのFitスケール時の深さ方向の長さである2mmと同じ長さの部分画像を断層画像表示領域522に合わせるように表示する、2mm Depthスケールが選択される。 In step S703, the display control unit 430 determines the scale at which to display the tomographic image based on the type of tomographic imaging device 100 confirmed in step S702. Here, if the type of tomographic imaging device 100 is SD-OCT, a Fit scale is selected, which displays the entire tomographic image so that it fits in the tomographic image display area 522. If the type of tomographic imaging device 100 is SS-OCT, a 2 mm Depth scale is selected, which does not display the entire tomographic image, but rather displays a partial image with a length equal to 2 mm, which is the depth length when using the Fit scale for SD-OCT, so that it fits in the tomographic image display area 522.
なお、取得された断層画像の深さ方向の長さをステップS702において確認し、ステップS703において断層画像の深さ方向の長さに応じて断層画像を表示させるスケールを決定してもよい。このとき、断層画像の深さ方向の長さが所定の長さ、例えば2mm以下である場合は断層画像全体を断層画像表示領域522に合わせるように表示させる。また、断層画像の深さ方向の長さが所定の長さ、例えば2mmより長い場合はもとの断層画像よりも深さ方向の長さが短い部分画像を断層画像表示領域522に合わせるように表示させる。 The depth length of the acquired tomographic image may be confirmed in step S702, and the scale for displaying the tomographic image may be determined in step S703 according to the depth length of the tomographic image. At this time, if the depth length of the tomographic image is a predetermined length, for example, 2 mm or less, the entire tomographic image is displayed to fit within the tomographic image display area 522. If the depth length of the tomographic image is a predetermined length, for example, greater than 2 mm, a partial image having a shorter depth length than the original tomographic image is displayed to fit within the tomographic image display area 522.
ここで、断層画像を表示させるスケールを切り替える深さ方向の長さの基準として、一般的なSD-OCTで撮影される断層画像の深さ範囲の長さである2mmを説明したが、これに限られない。また、上述のスケールの設定はデフォルトで行いユーザの操作によって後からスケールを変更する構成や、ユーザがスケールを予め設定可能な構成にしてもよい。 Here, we have described 2 mm, the length of the depth range of a tomographic image captured by a typical SD-OCT, as the reference depth length for switching the scale for displaying a tomographic image, but this is not limited to this. Furthermore, the scale may be set by default and then changed later by user operation, or the scale may be set in advance by the user.
ステップS704では、表示制御部430がステップS702で読み込んだ断層画像の横方向及び深さ方向それぞれの実寸長を取得する。横の実寸は撮影パターン情報の撮影サイズから取得し、深さ方向の実寸は装置情報と共に保存されている場合は装置情報から取得しても、ステップS702で確認した断層画像撮影装置100の種別から固定の値として割り当ててもよい。また、断層画像のオリジナルサイズで1ピクセルが示す実寸長及び断層画像のピクセル数を画像情報として取得して算出してもよい。 In step S704, the display control unit 430 acquires the actual horizontal and depth lengths of the tomographic image read in step S702. The actual horizontal length is acquired from the imaging size in the imaging pattern information, and the actual depth length can be acquired from the device information if it is saved together with the device information, or can be assigned as a fixed value from the type of tomographic imaging device 100 confirmed in step S702. Alternatively, the actual length indicated by one pixel in the original size of the tomographic image and the number of pixels in the tomographic image can be acquired and calculated as image information.
ステップS705では、表示制御部430が断層画像表示領域522のサイズを確認する。 In step S705, the display control unit 430 checks the size of the tomographic image display area 522.
ステップS706では、表示制御部430がステップS703からステップS705までで確認したスケール、断層画像の実寸長と表示領域のサイズから、断層画像の横方向及び深さ方向それぞれで拡大縮小倍率を算出する。Fitスケールの場合は、式1のようにそれぞれの倍率Rx、Rzを求める。 In step S706, the display control unit 430 calculates the zoom ratios in the horizontal and depth directions of the tomographic image from the scale confirmed in steps S703 to S705, the actual length of the tomographic image, and the size of the display area. In the case of Fit scale, the respective magnifications Rx and Rz are calculated using Equation 1.
ここで、Tx、Tzは記憶部120に保存されているオリジナルの断層画像の横方向及び深さ方向のピクセル数を示している。また、Ax、Azは断層画像表示領域522の縦横のピクセル数を示している。2mm Depthスケールの場合は、式2のように深さ方向で2mmのピクセル数が表示領域のピクセル数になるように倍率Rx、Rzを求める。 Here, Tx and Tz indicate the number of pixels in the horizontal and depth directions of the original tomographic image stored in the memory unit 120. Furthermore, Ax and Az indicate the number of pixels in the vertical and horizontal directions of the tomographic image display area 522. In the case of a 2 mm depth scale, the magnifications Rx and Rz are calculated so that the number of pixels for 2 mm in the depth direction becomes the number of pixels in the display area, as shown in Equation 2.
ここで、Tx、TzとAx、Azは式1と同様にオリジナルの断層画像の横方向及び深さ方向のピクセル数と断層画像表示領域522の横方向及び深さ方向のピクセル数を示す。StzはステップS704で求めた断層画像の深さ方向の実寸長を示す。Sazは断層画像表示領域522で表示する実寸長を示し、ここでは2mmとなる。 Here, Tx, Tz, Ax, and Az represent the number of pixels in the horizontal and depth directions of the original tomographic image and the number of pixels in the horizontal and depth directions of the tomographic image display area 522, as in Equation 1. Stz represents the actual length in the depth direction of the tomographic image calculated in step S704. Saz represents the actual length displayed in the tomographic image display area 522, which is 2 mm in this case.
ここで、Rzが1以上の場合には、断層画像の深さ方向が拡大される。深さ方向が拡大される場合、断層画像のうち表示領域に入らない部分が生じる。このため、部分画像が対応する断層画像の位置を移動し、移動した先の部分画像に表示を更新させるための指示を受け付けるスクロールバーを設ける。断層画像表示領域522内にスクロールバーが表示される場合、Axはスクロールバー分のピクセル数を除いた値で算出する。なお、スクロールバーを設けずに、断層画像の表示領域に入らない部分をトリミングする構成にしてもよい。 Here, if Rz is 1 or greater, the tomographic image is expanded in the depth direction. When expanded in the depth direction, portions of the tomographic image will not fit within the display area. For this reason, a scroll bar is provided to move the position of the tomographic image corresponding to the partial image and to accept instructions to update the display to the partial image to which it has been moved. If a scroll bar is displayed within the tomographic image display area 522, Ax is calculated using a value excluding the number of pixels for the scroll bar. Note that a configuration may also be adopted in which the scroll bar is not provided and portions of the tomographic image that do not fit within the display area are trimmed.
ステップS707では、表示制御部430がS706で求めた倍率で拡大・縮小された断層画像を生成する。ニアレストネイバー法やバイリニア法、バイキュービック法、機械学習による超解像などによって補間を行うことで、拡大・縮小された断層画像が生成される。 In step S707, the display control unit 430 generates a tomographic image that has been enlarged or reduced at the magnification calculated in S706. The enlarged or reduced tomographic image is generated by performing interpolation using the nearest neighbor method, bilinear method, bicubic method, super-resolution using machine learning, or the like.
ステップS708では、S706で求めた倍率が1以上の場合、表示領域に表示される部分画像の被検眼における位置を決定する。デフォルト位置として断層画像のうち中央が部分画像として表示される位置を指定することが望ましい。また、断層画像を解析することにより層境界が求められている場合、網膜が部分画像の中央部に表示されるように位置を指定してもよい。 In step S708, if the magnification calculated in S706 is 1 or greater, the position of the partial image on the subject's eye to be displayed in the display area is determined. It is desirable to specify a position where the center of the tomographic image is displayed as the partial image as the default position. Furthermore, if the layer boundaries are determined by analyzing the tomographic image, a position may be specified so that the retina is displayed in the center of the partial image.
なお、3D撮影で撮影された断層画像の場合は断層画像毎で網膜の位置が異なるため、中央にあたる断層画像又は黄斑中心や乳頭中心を通る断層画像の網膜が中央部に来る位置を指定してもよい。また、断層画像毎に網膜が中央部に配置される位置を指定してもよい。さらに、断層画像内でも網膜の高さが異なるため、網膜の最も低い部分が中央となる位置ではなく断層画像表示領域522の底部よりも少し上に位置するよう指定することで、断層画像内の網膜全体が断層画像表示領域522内に表示できる。 In the case of tomographic images taken using 3D imaging, the position of the retina differs for each tomographic image, so the position where the retina is central may be specified for the central tomographic image or the tomographic image passing through the center of the macula or the center of the optic disc. The position where the retina is central may also be specified for each tomographic image. Furthermore, since the height of the retina differs even within a tomographic image, the entire retina in the tomographic image can be displayed within the tomographic image display area 522 by specifying that the lowest part of the retina is positioned slightly above the bottom of the tomographic image display area 522 rather than at the center.
ステップS709では、表示制御部430が断層画像表示領域522内に、ステップS707で生成した断層画像をステップS708で指定した位置で表示する。このとき、断層画像表示領域522に表示される断層画像の被検眼における深さ方向の位置をユーザの指示に応じて変更可能なようにスクロールバーを表示させてもよい。すなわち、スクロールバーを操作することで、部分画像として表示される被検眼の位置をデフォルト位置から変更し、部分画像の表示を異なる部分画像の表示に更新する構成であってもよい。 In step S709, the display control unit 430 displays the tomographic image generated in step S707 at the position specified in step S708 within the tomographic image display area 522. At this time, a scroll bar may be displayed so that the depth position of the tomographic image displayed in the tomographic image display area 522 in the subject's eye can be changed in accordance with a user instruction. In other words, by operating the scroll bar, the position of the subject's eye displayed as a partial image can be changed from the default position, and the display of the partial image can be updated to display a different partial image.
上述した本実施例によれば、例えばSS-OCTで撮影された、深さ方向に長い断層画像を表示領域に表示させる場合においても注目領域を視認しやすくなる。また、網膜部分を大きく見せるために、ユーザが操作して断層画像のスケールを変更したり拡大表示画面600を表示したりする必要がなくなり、ユーザビリティが向上する。 According to the present embodiment described above, the region of interest can be more easily viewed even when a tomographic image long in the depth direction, such as that captured by SS-OCT, is displayed in the display area. Furthermore, there is no need for the user to change the scale of the tomographic image or display the enlarged display screen 600 in order to make the retina appear larger, thereby improving usability.
なお、SD-OCTで撮影された断層画像を拡大表示画面600の拡大断層画像表示領域610上でFitスケール表示することで、断層画像を大きく表示する場合がある。SS-OCTで撮影された断層画像で同様の表示を行う場合においても、断層画像スケール選択領域621の2mm Depthスケールを選択することで、図6(b)のように、SD-OCTのFitスケール表示と同じ見た目で表示することができる。 Note that tomographic images taken with SD-OCT may be displayed enlarged by displaying them in Fit scale in the enlarged tomographic image display area 610 of the enlarged display screen 600. Even when performing a similar display with a tomographic image taken with SS-OCT, by selecting the 2 mm depth scale in the tomographic image scale selection area 621, the image can be displayed in the same appearance as the Fit scale display of SD-OCT, as shown in Figure 6(b).
また、S702からS703では断層画像撮影装置100の種別から表示スケールを設定したが、予め検査毎に指定の初期表示スケールを紐づけておき、その情報を使用してスケールを決定することもできる。例えば、撮影パターンを作成する際に、検査の情報として初期表示スケールが設定できるようにすることで紐づけることができる。 In addition, in steps S702 and S703, the display scale was set based on the type of tomography imaging device 100, but it is also possible to link a specified initial display scale to each examination in advance and use that information to determine the scale. For example, when creating an imaging pattern, the initial display scale can be set as examination information, allowing for linking.
断層画像撮影装置100がSS-OCTなどの広画角・高深達の断層画像を撮影する種別だった場合にのみ2mm Depthスケールが設定することができるようにしてもよい。また、狭画角の撮影パターンの時は2mm Depthを初期状態にすることで、撮影する前に狭画角と広画角の撮影毎で表示を含めた検査条件を設定することができる。 The 2mm Depth scale may be set only when the tomography device 100 is a type that captures wide-angle, deep-penetration tomographic images, such as SS-OCT. Furthermore, by setting 2mm Depth to the initial state when using a narrow-angle imaging pattern, it is possible to set the inspection conditions, including display, for both narrow-angle and wide-angle imaging before imaging.
なお、検査毎ではなく断層画像を表示するに狭画角の断層画像の時、自動的に2mm Depthスケールが設定されてもよい。この場合、予め設定された撮影画角以下のものを狭画角断層画像と指定することで切り替えることができる。 In addition, when displaying tomographic images with a narrow field of view rather than for each examination, a 2 mm depth scale may be automatically set. In this case, images with a field of view equal to or smaller than the preset angle of view can be switched to narrow-field tomographic images.
また、断層画像撮影装置100の種別に関わらず、表示制御部430が取得した断層画像の深さ方向の長さに応じてスケールを設定する構成であってもよい。例えば、断層画像の深さ方向の長さが一定の長さより長い場合、断層画像の一部の領域のみを表示させ、断層画像の深さ方向の長さが一定の長さ以下である場合、断層画像の全体を表示させてもよい。具体的には、断層画像の深さ方向の長さが2mmを超える場合は、深さ方向の長さが2mmの領域のみを表示させ、断層画像の深さ方向の長さが2mm以下である場合は、断層画像の全体を表示させてもよい。なお、表示スケールを切り替える境界は適宜設定できる。 In addition, regardless of the type of tomographic imaging device 100, the display control unit 430 may be configured to set the scale according to the depth of the acquired tomographic image. For example, if the depth of the tomographic image is longer than a certain length, only a partial area of the tomographic image may be displayed, and if the depth of the tomographic image is equal to or less than the certain length, the entire tomographic image may be displayed. Specifically, if the depth of the tomographic image exceeds 2 mm, only an area with a depth of 2 mm may be displayed, and if the depth of the tomographic image is 2 mm or less, the entire tomographic image may be displayed. The boundary for switching the display scale may be set as appropriate.
加えて、本実施例ではステップS704で深さ方向の長さを取得し、ステップS706でその長さを用いて倍率を求めたが、表示上の1ピクセル当たりの実寸サイズが同じになるよう揃える方法であればこれに限らない。例えば、各断層画像撮影装置の撮影深度が無い場合でも、1ピクセル同士の大きさの比率が求められる場合は、式2のSta/Stzに比率を置き換えることで、倍率を求めることができる。 In addition, in this embodiment, the depth length is obtained in step S704, and the magnification is calculated using that length in step S706. However, this is not limited to this method, as long as the actual size per pixel on the display is the same. For example, even if the imaging depth of each tomographic imaging device is not available, if the ratio between the sizes of one pixel can be found, the magnification can be calculated by substituting the ratio into Sta/Stz in Equation 2.
今回は、狭画角で撮影された検査で表示する場合に、2mm Depthスケールで表示する方法を述べたが、広画角撮影時でも2mm Depthスケールでの表示ができてよい。その場合、深さ方向だけでなくX軸方向もSD-OCTの画角に合わせたスケールに拡大表示する構成にしてもよい。広画角の俯瞰的な断層画像の表示と狭画角の従来と同様のSD-OCTと同じ断層画像の表示両方を切り替えて表示することで診断効率が向上する。 This time, we have described a method of displaying a 2mm depth scale when viewing examinations taken with a narrow angle of view, but it would also be acceptable to display a 2mm depth scale when taking wide-angle images. In this case, the display may be configured to enlarge not only the depth direction but also the X-axis direction to a scale that matches the SD-OCT angle of view. Diagnostic efficiency can be improved by switching between displaying a wide-angle bird's-eye view tomographic image and a narrow-angle tomographic image similar to that of conventional SD-OCT.
さらに、実施例内では撮影深度が長い断層画像撮影装置の種別をSS-OCT、撮影深度が短い断層画像撮影装置の種別をSD-OCTで記載したが、撮影深度が長いSD-OCTと撮影深度が短いSD-OCTとを用いてもよい。 Furthermore, in the examples, the type of tomographic imaging device with a long imaging depth is described as SS-OCT, and the type of tomographic imaging device with a short imaging depth is described as SD-OCT, but both SD-OCT with a long imaging depth and SD-OCT with a short imaging depth may also be used.
<実施例2>
本実施例では、複数の検査を同時に表示可能な構成において、比較先の検査を撮影した断層画像撮影装置100の種別が異なる場合に比較元の検査に応じたスケールを決定する例について説明する。表示される複数の検査として、検査選択リスト表示領域510で選択した選択検査511以外にも、選択検査511との比較対象として選択される検査がある。その場合、比較する検査が異なる種別の断層画像撮影装置100によって行われたものであっても、断層画像の見え方は同じであることが望ましい。
Example 2
In this embodiment, an example will be described in which, in a configuration capable of simultaneously displaying multiple examinations, a scale is determined according to the examination to be compared when the type of tomography imaging apparatus 100 that captured the examination to be compared is different. The multiple examinations displayed include not only the selected examination 511 selected in the examination selection list display area 510, but also examinations that can be selected to be compared with the selected examination 511. In this case, it is desirable that the appearance of the tomographic images be the same even if the examinations to be compared were performed by different types of tomography imaging apparatuses 100.
なお、本実施例では、異なる種別の断層画像撮影装置で撮影された複数の断層画像の表示においても、断層構造の縦横比が似た状態で表示されることを同じ見た目であると表現するが、厳密に同じ見た目でなくてもよく、目視による断層構造の比較が行いやすい状態であればよい。 In this embodiment, when displaying multiple tomographic images taken with different types of tomographic imaging devices, the aspect ratios of the tomographic structures are similar, which is referred to as the same appearance. However, the images do not have to look exactly the same, as long as the tomographic structures are easy to compare visually.
(本実施例に係る断層画像比較表示画面)
図8を参照して本実施例の表示制御部430が表示する複数の異なる検査を並べて表示する画面の例を説明する。図8は記憶部120に保存されている断層画像を含む検査を2つ並べて表示する断層画像比較表示画面800である。
(Tomographic image comparison display screen according to this embodiment)
An example of a screen displaying a plurality of different examinations displayed by the display control unit 430 of this embodiment will be described with reference to Fig. 8. Fig. 8 shows a tomographic image comparison display screen 800 displaying two examinations, each including a tomographic image stored in the storage unit 120, side by side.
断層画像表示画面800は表示画面500と同様に検査選択リスト表示領域810と選択検査内容表示領域820を持ち、検査選択リスト表示領域810から選択検査811を選び、選択検査内容表示領域820に表示させる。なお、記憶部120に保存された検査に複数種別の断層画像撮影装置100で撮影した検査が混ざっている場合は、断層画像撮影装置100の種別や機種名、もしくは種別や機種名を示すアイコンや記号を表示してもよい。 Like the display screen 500, the tomographic image display screen 800 has an examination selection list display area 810 and a selected examination content display area 820. A selected examination 811 is selected from the examination selection list display area 810 and displayed in the selected examination content display area 820. Note that if the examinations stored in the memory unit 120 include examinations taken with multiple types of tomographic imaging devices 100, the type or model name of the tomographic imaging device 100, or an icon or symbol indicating the type or model name, may be displayed.
検査選択リスト表示領域810に表示する選択検査内容表示領域820では、左右眼比較や過去検査比較などの比較レポートを指定することで、複数の検査を表示することができる。比較レポートには選択検査表示領域823と比較先検査表示領域822を表示することができ、それぞれで撮影日時、左右眼、断層画像撮影装置100の種別などの検査情報、SLO眼底画像、断層画像を表示することができる。 The selected examination content display area 820 displayed in the examination selection list display area 810 allows multiple examinations to be displayed by specifying a comparison report, such as a comparison between the left and right eyes or a comparison between past examinations. The comparison report can display a selected examination display area 823 and a comparison examination display area 822, each of which can display examination information such as the date and time of imaging, the left or right eye, and the type of tomographic imaging device 100, as well as an SLO fundus image and a tomographic image.
選択検査表示領域823には検査選択リスト表示領域810から選択した選択検査811の検査情報と画像が表示される。比較先検査表示領域822では、過去に撮影された同一の撮影パターンの検査が表示される。比較対象とする検査はユーザによって指定することができ、比較検査選択ボタン821を選択することで、不図示の比較対象検査選択画面から1つ以上の過去検査を指定することで、比較先検査表示領域822に並べて表示することができる。なお、初期表示として選択検査811に最も近い過去の同一撮影パターン検査を自動的に表示してもよい。 The selected examination display area 823 displays the examination information and images of the selected examination 811 selected from the examination selection list display area 810. The comparison examination display area 822 displays examinations with the same shooting pattern taken in the past. The examination to be compared can be specified by the user, and by selecting the comparison examination selection button 821, one or more past examinations can be specified from the comparison examination selection screen (not shown), and displayed side by side in the comparison examination display area 822. Note that the previous examination with the same shooting pattern closest to the selected examination 811 may be automatically displayed as the initial display.
(本実施例に係る異なる断層画像撮影装置で撮影された比較先画像の表示フロー)
図9を参照して本実施例に係る比較先画像がSS-OCTの断層画像で、比較元画像がSD-OCTの断層画像として、断層画像を並べて表示する場合の断層画像の表示フローについて説明する。図9は本実施例に係る比較先断層画像表示のための動作のフローチャートを示す。
(Display flow of comparison images captured by different tomographic imaging apparatuses according to this embodiment)
A flow of displaying tomographic images in the present embodiment in which the comparison target image is an SS-OCT tomographic image and the comparison source image is an SD-OCT tomographic image and the tomographic images are displayed side by side will be described with reference to Fig. 9. Fig. 9 shows a flowchart of the operation for displaying the comparison target tomographic image in the present embodiment.
異なる断層画像撮影装置100の種別で撮影した断層画像を並べて表示する場合、同一の撮影パターンで撮影しても、深さ方向となる縦の解像度や撮影される断層画像の実寸長が異なるため、深さ方向には異なる厚みで断層画像が表示される。そのため、表示制御部430は比較元と比較先の断層画像撮影装置100の種別及び比較元のスケールに合わせて比較先の断層画像のスケールを設定することで、断層画像撮影装置100の種別が異なる場合でも同じ見た目で断層画像を並べて表示する。 When tomographic images captured using different types of tomographic imaging devices 100 are displayed side by side, even if the images are captured using the same imaging pattern, the vertical resolution in the depth direction and the actual length of the captured tomographic images are different, so the tomographic images are displayed with different thicknesses in the depth direction. Therefore, the display control unit 430 sets the scale of the tomographic image to match the types of the tomographic imaging devices 100 used for comparison and the scale of the tomographic image to be compared, thereby allowing the tomographic images to be displayed side by side with the same appearance even if the types of tomographic imaging devices 100 are different.
具体的には、ステップS901で表示制御部430はユーザが選択した検査または初期表示の比較先検査として選ばれた検査の断層画像及び検査情報を記憶部120から取得する。ステップS902で、表示制御部430は比較元となる選択検査811とステップS901で選択した比較先検査の断層画像撮影装置100の種別を確認する。 Specifically, in step S901, the display control unit 430 acquires from the storage unit 120 the tomographic image and examination information of the examination selected by the user or the examination selected as the comparison target examination for initial display. In step S902, the display control unit 430 confirms the type of the selected examination 811 to be used as the comparison source and the type of tomographic imaging device 100 of the comparison target examination selected in step S901.
ステップS903で、表示制御部430はS902で確認した種別と比較元の断層画像が表示しているスケールを元に比較先検査の断層画像のスケールを決定する。比較元検査と比較先検査で同じ断層画像撮影装置100の種別だった場合は、同一のスケールを選択する。比較元検査と比較先検査で異なる断層画像撮影装置100の種別だった場合は、比較元検査のスケールに応じて、比較先検査と比較元検査の断層画像の1ピクセルの実寸長が縦横それぞれで同じになるようにスケールを決定する。 In step S903, the display control unit 430 determines the scale of the tomographic image of the comparison target examination based on the type confirmed in S902 and the scale displayed in the tomographic image of the comparison target examination. If the tomographic imaging device 100 type is the same for the comparison target examination and the comparison target examination, the same scale is selected. If the tomographic imaging device 100 type is different for the comparison target examination and the comparison target examination, the scale is determined according to the scale of the comparison target examination so that the actual length of one pixel in the tomographic images of the comparison target examination and the comparison target examination is the same in both the vertical and horizontal directions.
例えば、比較元検査がSD-OCTで撮影された検査で断層画像がFitスケールで表示されている時に、比較先検査がSS-OCTで撮影された検査の場合は、断層画像表示領域がSD-OCTの深さ方向の長さと同じ長さになる2mm Depthスケールを選択する。また、比較元検査がSS-OCTで撮影された検査で断層画像が2mm Depthスケールで表示されている時に、比較先検査がSD-OCTの場合はFitスケールで選択し、比較元検査のSS-OCTの断層画像がFitスケールで表示されている時は、比較先検査のSD-OCTの断層画像は5mm Depthスケールが選択される。 For example, if the comparison source examination was taken with an SD-OCT and the tomographic images are displayed on the Fit scale, and the comparison target examination was taken with an SS-OCT, the 2mm Depth scale will be selected, as the tomographic image display area will be the same length as the depth direction of the SD-OCT. Also, if the comparison source examination was taken with an SS-OCT and the tomographic images are displayed on the 2mm Depth scale, and the comparison target examination is an SD-OCT, the Fit scale will be selected; if the comparison source SS-OCT tomographic images are displayed on the Fit scale, the 5mm Depth scale will be selected for the comparison target SD-OCT tomographic images.
ステップS904からステップS909にかけて、ステップS903で設定したスケールで比較先検査の断層画像を比較先検査表示領域822に表示する。表示方法はステップS704からステップS709と同じである。なお、ステップS908のスクロールバーの位置においては、比較元検査の断層画像の層境界の情報をもとに、同じ位置になるように設定してもよい。 From step S904 to step S909, the tomographic image of the comparison target examination is displayed in the comparison target examination display area 822 using the scale set in step S903. The display method is the same as in steps S704 to S709. Note that the position of the scroll bar in step S908 may be set to the same position based on the layer boundary information of the tomographic image of the comparison source examination.
上述した本実施例によれば、断層画像撮影装置100の種別が異なる断層画像を比較表示する際に、複数の断層画像を同じ見た目で表示することができる。これにより、ユーザ操作することで表示を調整することなく、断層画像撮影装置100の種別の異なる複数の断層画像を同じ見た目で観察ができ非常に好ましかった。 According to the present embodiment described above, when comparing and displaying tomographic images of different types taken by the tomographic imaging device 100, multiple tomographic images can be displayed with the same appearance. This is highly desirable as it allows multiple tomographic images of different types taken by the tomographic imaging device 100 to be viewed with the same appearance without the need for user operation to adjust the display.
なおここでは、撮影サイズが同じ場合に限定したがこれに限らない。撮影サイズが異なる検査が選択された場合でも、ステップS906からステップS908で、断層画像の横方向も式2の深さ方向と同様の拡大縮小率を算出して断層画像をリスケールし、比較元の断層画像と同じ位置になるようにスクロールバーの位置を決定することで、同じ見た目で表示することができる。 Note that while this example is limited to the case where the imaging size is the same, this is not limiting. Even if examinations with different imaging sizes are selected, steps S906 to S908 calculate the same zoom ratio for the horizontal direction of the tomographic image as for the depth direction in equation 2, rescale the tomographic image, and determine the position of the scroll bar so that it is in the same position as the original tomographic image, allowing the images to be displayed with the same appearance.
また、本実施例では比較先の検査を表示する時のフローについて述べたが、比較元の表示スケールを変更した場合でも、スケールの種別を変更後のスケールでステップS902からステップS909を行うことで、比較先の断層画像の表示を同じ見た目にすることができる。さらには、比較先の表示スケールを変更した場合も、ステップS902からステップS909のフローを比較元と比較先を入れ替えて実施することで、比較元の断層画像の表示を同じ見た目にすることができる。 In addition, while this embodiment describes the flow for displaying the comparison target examination, even if the display scale of the comparison source is changed, the display of the comparison target tomographic image can be made to look the same by performing steps S902 to S909 with the scale type changed. Furthermore, even if the display scale of the comparison target is changed, the display of the comparison target tomographic image can be made to look the same by performing steps S902 to S909 with the comparison source and comparison target swapped.
加えて、本実施例では断層画像撮影装置の種別が異なる断層画像として、SS-OCTとSD-OCTの断層画像の比較を記載したが、これに限らない。SD-OCTの中でも、長い撮影深度のSD-OCTと短い撮影深度のSD-OCTそれぞれの断層画像を並べて表示する場合も、それぞれの撮影深度と比較元の断層画像の表示スケールの種別をもとに、比較先の断層画像のスケールを選定することで、複数の断層画像を同じ見た目で表示することができる。 In addition, while this embodiment describes a comparison of SS-OCT and SD-OCT tomographic images as images taken with different types of tomographic imaging devices, this is not limited to this. Even when displaying tomographic images from an SD-OCT device with a long imaging depth and an SD-OCT device with a short imaging depth side by side, multiple tomographic images can be displayed with the same appearance by selecting the scale of the tomographic image to be compared based on the imaging depth and the display scale type of the tomographic image to be compared.
<実施例3>
本実施例では、広画角で高深達な断層画像撮影装置100で撮影を行う時に、狭画角の断層画像を撮影する時の断層画像のプレビュー表示の例について説明する。SS-OCTなどの広画角で高深達な断層画像撮影装置100において、SD-OCTと同じ撮影パターンを用いた撮影を行う時、SD-OCTの撮影と同じ見た目で撮影できることが望ましい。
Example 3
In this embodiment, an example of a preview display of a tomographic image when a narrow-angle tomographic image is captured using a wide-angle, deep-penetration tomographic imaging apparatus 100 will be described. When capturing an image using the same capturing pattern as SD-OCT using a wide-angle, deep-penetration tomographic imaging apparatus 100 such as SS-OCT, it is desirable to be able to capture an image with the same appearance as SD-OCT.
なお、本実施例では、異なる種別の断層画像撮影装置で撮影された複数の断層画像の表示においても、断層構造の縦横比が似た状態で表示されることを同じ見た目であると表現するが、厳密に同じ見た目でなくてもよく、目視による断層構造の比較が行いやすい状態であればよい。 In this embodiment, when displaying multiple tomographic images taken with different types of tomographic imaging devices, the aspect ratios of the tomographic structures are similar, which is referred to as the same appearance. However, the images do not have to look exactly the same, as long as the tomographic structures are easy to compare visually.
(本実施例に係る断層画像比較表示画面)
図10を参照して本実施例の表示制御部430が表示する、断層画像を撮影する撮影画面の例を説明する。図10は断層画像撮影装置100から撮影制御部410を介して断層画像を撮影し、取得するための断層画像撮影画面1000である。
(Tomographic image comparison display screen according to this embodiment)
An example of an imaging screen for capturing a tomographic image, which is displayed by the display control unit 430 of this embodiment, will be described with reference to Fig. 10. Fig. 10 shows a tomographic image imaging screen 1000 for capturing and acquiring a tomographic image from the tomographic imaging apparatus 100 via the imaging control unit 410.
断層画像撮影画面1000は撮影パターン表示領域1010と撮影プレビュー表示領域1020を持つ。撮影パターン表示領域1010では左右眼や調整モード、スキャンモード、固視灯の種別等が示される。なお、ユーザはマウス等の入力部130を使って、スキャンモードや固視灯の種別を変更することができる。 The tomographic image capture screen 1000 has a capture pattern display area 1010 and a capture preview display area 1020. The capture pattern display area 1010 displays the left and right eyes, adjustment mode, scan mode, fixation light type, etc. The user can change the scan mode and fixation light type using the input unit 130, such as a mouse.
撮影プレビュー表示領域1020は、前眼プレビュー表示部1021、SLOプレビュー表示部1022、断層プレビュー表示領域1023を持ち、断層画像撮影装置100から取得される前眼プレビュー画像、SLOプレビュー画像、断層プレビュー画像をそれぞれの表示部にライブ画像としてリアルタイムに表示する。SLOプレビュー表示部1020では、断層画像の撮影パターン及び固視灯位置をSLOプレビュー画像上に表示する。 The imaging preview display area 1020 has an anterior eye preview display section 1021, an SLO preview display section 1022, and a tomographic preview display area 1023, and displays the anterior eye preview image, SLO preview image, and tomographic preview image acquired from the tomographic imaging device 100 as live images in real time on each display section. The SLO preview display section 1020 displays the imaging pattern and fixation light position of the tomographic image on the SLO preview image.
またユーザは入力部130を介して断層画像の撮影パターンのサイズや位置及び固視灯位置を変更することができる。撮影パターンが変更された場合、撮影制御部410は変更に合わせて断層画像撮影装置100の断層プレビュー画像の取得内容が変更され、変更後の断層プレビュー画像が断層プレビュー表示部1023に映し出される。 The user can also change the size and position of the imaging pattern of the tomographic image and the position of the fixation light via the input unit 130. When the imaging pattern is changed, the imaging control unit 410 changes the content of the tomographic preview image acquired by the tomographic imaging device 100 in accordance with the change, and the changed tomographic preview image is displayed on the tomographic preview display unit 1023.
(本実施例に係るSS-OCTで狭画角撮影する時の断層画像の表示フロー)
図11を用いて本実施例に係るSS-OCTのように広画角かつ高深さ範囲の断層画像を取得可能な断層画像撮影装置100で、SD-OCTと同じような狭画角の撮影を行う際の断層画像の表示フローについて説明する。図11は本実施例に係るSS-OCTの撮影で狭画角撮影時の断層画像表示のための動作のフローチャートを示す。
(Display flow of tomographic images when performing narrow-angle imaging with SS-OCT according to this embodiment)
The display flow of a tomographic image when narrow-angle imaging similar to SD-OCT is performed using the tomographic imaging apparatus 100 capable of acquiring wide-angle and deep-depth range tomographic images such as the SS-OCT according to this embodiment will be described with reference to Figure 11. Figure 11 shows a flowchart of the operation for displaying a tomographic image when narrow-angle imaging is performed using the SS-OCT according to this embodiment.
SS-OCTで狭画角の断層画像を撮影する場合、断層プレビュー表示領域1023には、狭画角で深さ方向が長く網膜部分が薄くなった断層画像が表示される。ここで、表示制御部430が狭画角撮影時に断層プレビュー画像のスケールを変更することで、SS-OCTでの撮影においてもSD-OCTでの断層プレビュー画像と同じ見た目で断層プレビュー画像を表示することができる。 When capturing a narrow-angle tomographic image using SS-OCT, the tomographic preview display area 1023 displays a tomographic image with a narrow angle of view, a depthwise long image with a thin retina portion. Here, the display control unit 430 changes the scale of the tomographic preview image during narrow-angle capture, allowing the tomographic preview image captured using SS-OCT to be displayed with the same appearance as the tomographic preview image captured using SD-OCT.
具体的には、ステップS1101でユーザは入力部130を介して撮影パターン表示領域1010上で撮影パターンを選択する。なお、撮影パターンの選択後にSLOプレビュー表示上で撮影パターンのサイズを変更することもできる。 Specifically, in step S1101, the user selects a shooting pattern in the shooting pattern display area 1010 via the input unit 130. Note that after selecting a shooting pattern, the size of the shooting pattern can also be changed on the SLO preview display.
ステップS1102では、表示制御部430がステップS1101で指定された撮影パターンの狭画角かどうかの判定を行う。例えば、画角がSD-OCTの撮影画角である10mm以下の場合は狭画角として判定する。 In step S1102, the display control unit 430 determines whether the imaging pattern specified in step S1101 has a narrow angle of view. For example, if the angle of view is less than 10 mm, which is the imaging angle of view for SD-OCT, it is determined to be a narrow angle of view.
ステップS1103では、表示制御部430がステップS1102の判定結果からスケールを決定する。狭画角の場合は2mm Depthスケールに設定し、狭画角でない場合はFitスケール表示を設定する。すなわち、狭画角で撮影された断層画像を表示させる場合には、断層画像のうち深さ方向の長さが短い部分画像を表示させる。このとき、縦横でそれぞれ撮影するCross撮影パターンの場合、それぞれで画角が異なる場合があるが、それぞれで狭画角の判定を行ってスケールを設定してもよいし、1つでも狭画角が判定された場合は全て狭画角でのスケールに統一して設定してもよい。 In step S1103, the display control unit 430 determines the scale based on the determination result of step S1102. If the angle of view is narrow, the 2 mm depth scale is set, and if the angle of view is not narrow, the fit scale display is set. In other words, when displaying a tomographic image captured with a narrow angle of view, a partial image of the tomographic image that is short in the depth direction is displayed. In this case, in the case of a cross imaging pattern in which images are captured vertically and horizontally, the angle of view may differ for each, but the scale may be set by determining whether each is a narrow angle of view, or if even one angle of view is determined to be narrow, all may be unified and set to the scale for a narrow angle of view.
ステップS1104では、表示制御部430が断層画像撮影装置100から取得される断層プレビュー画像の縦横の実寸長の確認をする。横方向の実寸長はステップ1101で設定した撮影パターンから、深さ方向の実寸長は断層画像撮影装置100の情報として予め記憶しているか、断層画像撮影装置100と通信して取得した情報を使用する。 In step S1104, the display control unit 430 checks the actual length and width of the tomographic preview image obtained from the tomographic imaging device 100. The actual length in the horizontal direction is determined from the imaging pattern set in step 1101, and the actual length in the depth direction is determined from information stored in advance in the tomographic imaging device 100 or from information obtained by communicating with the tomographic imaging device 100.
ステップS1105では、表示制御部430が断層プレビュー表示領域1023の縦横のピクセル数を確認する。 In step S1105, the display control unit 430 checks the number of pixels in both the vertical and horizontal directions of the tomographic preview display area 1023.
ステップS1106では、表示制御部430が断層画像取得装置100から取得される断層プレビュー画像の縦横のピクセル数を確認する。断層プレビュー画像の縦横のピクセル数は断層画像撮影装置100の情報として予め記憶しているか、断層画像撮影装置100と通信して取得した情報を使用する。 In step S1106, the display control unit 430 checks the number of vertical and horizontal pixels of the tomographic preview image acquired from the tomographic image acquisition device 100. The number of vertical and horizontal pixels of the tomographic preview image is either pre-stored as information from the tomographic image acquisition device 100, or information acquired by communicating with the tomographic image acquisition device 100 is used.
ステップS1107では、表示制御部430がステップS1103からステップS1106までで確認したスケール、断層プレビュー画像の実寸と表示領域のサイズ及び断層プレビュー画像のサイズから、断層プレビュー画像の縦横それぞれで拡大縮小倍率を算出する。算出手法はステップS706と同じ方法となる。 In step S1107, the display control unit 430 calculates the vertical and horizontal zoom ratios of the tomographic preview image from the scale confirmed in steps S1103 to S1106, the actual size of the tomographic preview image, the size of the display area, and the size of the tomographic preview image. The calculation method is the same as in step S706.
ステップS1108では、断層画像撮影装置100から撮影制御部410が画像取得部420を介して断層プレビュー画像を取得し、表示制御部430に渡す。 In step S1108, the imaging control unit 410 acquires a tomographic preview image from the tomographic imaging device 100 via the image acquisition unit 420 and passes it to the display control unit 430.
ステップS1109では、表示制御部430がS1107で求めた倍率で拡大・縮小された断層画像を生成する。ニアレストネイバー法やバイリニア法、バイキュービック法、機械学習による超解像などによって補間を行うことで、拡大・縮小された断層画像が生成される。 In step S1109, the display control unit 430 generates a tomographic image that has been enlarged or reduced at the magnification calculated in S1107. The enlarged or reduced tomographic image is generated by performing interpolation using the nearest neighbor method, bilinear method, bicubic method, super-resolution using machine learning, or the like.
ステップS1110では、S1107で求めた倍率が1以上の時、断層プレビュー画像のデフォルト位置を決定する。デフォルト位置として断層画像の中央が部分画像として表示される位置を指定する。なお断層画像は深さ方向に暗くなる傾向があるため、狭画角で網膜がはみ出ない範囲で明るい部分で撮影できる位置を設定してもよい。また、脈絡膜観察モードなど、撮影する対象によって位置が変更されてもよい。 In step S1110, if the magnification calculated in S1107 is 1 or greater, a default position for the tomographic preview image is determined. The default position is specified as a position where the center of the tomographic image is displayed as a partial image. Note that since tomographic images tend to become darker in the depth direction, a position may be set that allows for capturing a bright portion with a narrow angle of view without the retina being included. The position may also be changed depending on the subject being captured, such as in choroid observation mode.
なお、断層画像撮影装置100が断層画像を映し出す位置を自動的に決定する機能を持つ場合は、断層画像を映し出す位置が初期表示位置と合うようにしてもよいし、現在断層プレビュー表示領域1023が表示している位置にあうようにしてもよい。 Note that if the tomographic imaging device 100 has the function of automatically determining the position at which the tomographic image is displayed, the position at which the tomographic image is displayed may be set to match the initial display position, or to match the position currently displayed in the tomographic preview display area 1023.
ステップS1111では、表示制御部430が断層プレビュー表示領域1023内に、ステップS1109で生成した断層プレビュー画像をステップS1110で指定した位置で表示する。 In step S1111, the display control unit 430 displays the tomographic preview image generated in step S1109 in the tomographic preview display area 1023 at the position specified in step S1110.
表示制御部は断層プレビュー画像を断層画像撮影装置100から撮影制御部410及び画像取得部420を介して動画として連続して取得する間は、ステップ1109からS1111を繰り返す。その間、ステップS1110での表示位置は前の状態を維持する。ユーザによって表示位置が変更された場合も、変更後の位置を維持して断層プレビュー画像を表示する。 The display control unit repeats steps 1109 to S1111 while continuously acquiring tomographic preview images as a video from the tomographic imaging device 100 via the imaging control unit 410 and image acquisition unit 420. During this time, the display position in step S1110 remains in the previous state. Even if the display position is changed by the user, the tomographic preview image is displayed while maintaining the changed position.
上述した本実施例によれば、SS-OCTなどの深さ方向に長い断層画像を取得する断層画像撮影装置100の断層プレビュー表示を、SD-OCTで撮影する時と同じ見た目で表示することができる。これにより、被検眼の注目領域、例えば網膜の視認性を向上できる。 According to the present embodiment described above, the tomographic preview display of the tomographic imaging apparatus 100, which acquires tomographic images that are long in the depth direction, such as those obtained using SS-OCT, can be displayed in the same appearance as when images are captured using SD-OCT. This improves the visibility of the region of interest in the subject's eye, such as the retina.
さらに、狭画角判定時に、SD-OCTと同じSLOプレビュー画像の範囲にSLOプレビュー画像を拡大して表示することで、撮影パターンの位置調整などがより精度高く実施できるようになりユーザビリティが向上する。 Furthermore, when a narrow angle of view is determined, the SLO preview image is enlarged and displayed within the same range as SD-OCT, allowing for more precise adjustment of the position of the imaging pattern, improving usability.
なお、ステップS1102で撮影パターンの画角から狭画角の判定を行ったが、ステップS1101で選択する撮影パターンに予め狭画角のモードかどうかを設定しておき、設定によって判定する方法でもよい。 Note that in step S1102, a narrow angle of view was determined based on the angle of view of the shooting pattern. However, it is also possible to set in advance whether the shooting pattern selected in step S1101 is a narrow angle of view mode, and then determine the narrow angle of view based on the setting.
<実施例4>
本実施例の眼科システム10は、眼科検査装置の一例である断層画像撮影装置100によって取得される断層画像の画角に応じて、異なるスケールを適用して断層画像を表示することができる。
Example 4
The ophthalmologic system 10 of this embodiment can display a tomographic image by applying different scales depending on the angle of view of the tomographic image acquired by the tomographic imaging apparatus 100, which is an example of an ophthalmologic examination apparatus.
ここで、狭い画角で撮影された断層画像が選択された場合、断層画像の深さ方向における一部の領域のみ、すなわち部分画像を表示領域に表示するスケールで表示される。取得されたままの断層画像よりも深さ方向が短い部分画像を表示することで、注目領域、例えば網膜を視認しやすくすることができる。 When a tomographic image captured with a narrow angle of view is selected, only a portion of the depth of the tomographic image, i.e., a partial image, is displayed at a scale that displays it in the display area. By displaying a partial image that is shorter in the depth direction than the tomographic image as acquired, it is possible to make the area of interest, such as the retina, more visible.
断層画像撮影装置であるOCTによって取得される断層画像の深さ方向の長さ(撮影深度)は、被検眼に照射される測定光の性質と、干渉光を受光するセンサの性質とに依存する。取得される断層画像の深さ方向の長さを変更するためには、光源の変更やサンプリング速度の変更などの光学系の構成の煩雑な変更及び調整が必要であるため、深さ方向の長さは変更不可である場合がある。本実施例では、取得した断層画像を後処理することによって、光学系の構成の煩雑な変更及び調整をすることなく注目領域を視認しやすく表示させることができる。 The depth length (imaging depth) of a tomographic image acquired by an OCT tomographic imaging device depends on the properties of the measurement light irradiated onto the subject's eye and the properties of the sensor that receives the interference light. Changing the depth length of the acquired tomographic image requires complex changes and adjustments to the optical system configuration, such as changing the light source or sampling rate, so the depth length may not be changeable. In this embodiment, by post-processing the acquired tomographic image, the region of interest can be displayed in an easily visible manner without complex changes and adjustments to the optical system configuration.
装置構成は実施例1~3と同様であるため、説明を省略する。 The device configuration is the same as in Examples 1 to 3, so a detailed explanation will be omitted.
図12を用いて、断層画像撮影装置100によって広角と狭角とを切り替えて撮影を行う場合の断層画像の表示について説明する。 Using Figure 12, we will explain how tomographic images are displayed when capturing images using the tomographic imaging device 100 by switching between wide-angle and narrow-angle imaging.
断層画像撮影装置100、例えばSS-OCTを用いることで、図12(a)のような広画角かつ高深さ範囲の断層画像を撮影することが可能である。広画角かつ高深さ範囲の断層画像を取得することで、広い範囲の網膜を観察し黄斑部から離れた位置における異常を発見することができる。 By using a tomographic imaging device 100, such as an SS-OCT, it is possible to capture tomographic images with a wide field of view and a large depth range, as shown in Figure 12(a). By acquiring tomographic images with a wide field of view and a large depth range, it is possible to observe a wide area of the retina and discover abnormalities at locations far from the macula.
ここで、より狭い画角で断層画像を取得することで、広画角の断層画像よりも横方向の解像度の高い断層画像を取得する場合が考えられる。このとき、図12(a)の断層画像が表示される表示領域と同じ表示領域に、狭い画角かつ高深さ範囲の断層画像の全体を表示すると、深さ方向がつぶれてしまい、注目領域の一例である網膜が視認しづらくなる場合がある。 Here, it is conceivable that by acquiring a tomographic image with a narrower angle of view, a tomographic image with higher lateral resolution than a tomographic image with a wide angle of view can be acquired. In this case, if the entire tomographic image with a narrow angle of view and a wide depth range is displayed in the same display area as the tomographic image in Figure 12(a), the depth direction will be blurred, and it may be difficult to visually recognize the retina, which is an example of a region of interest.
本実施例では、図12(b)のように取得されたままの断層画像よりも深さ方向が短い部分画像を表示する。このとき、スクロールバー等によるユーザの指示に応じて、部分画像として表示されない領域を新たに表示させる構成であってもよい。また、部分画像として表示されない領域は予めトリミング処理する構成であってもよい。 In this embodiment, as shown in Figure 12(b), a partial image that is shorter in the depth direction than the tomographic image as acquired is displayed. At this time, a configuration may be adopted in which a region not displayed as a partial image is newly displayed in response to a user instruction using a scroll bar or the like. Furthermore, a configuration may be adopted in which a trimming process is performed in advance on the region not displayed as a partial image.
図13を用いて、断層画像撮影装置100を制御して断層画像を取得し、断層画像の画角に応じて表示スケールを異ならせるための動作フローを説明する。 Using Figure 13, we will explain the operational flow for controlling the tomography device 100 to acquire a tomographic image and changing the display scale depending on the angle of view of the tomographic image.
ステップS1301において、ユーザは撮影を行う撮影パターンの選択・変更を行う。撮影パターンは、画角を含む。撮影パターンとして、他にも、左右眼、撮影サイズ、撮影形式、X軸方向のスキャン数、Y軸方向のスキャン数、同一位置の繰り返し走査回数などの設定を行ってもよい。 In step S1301, the user selects or changes the shooting pattern for capturing images. The shooting pattern includes the angle of view. Other settings for the shooting pattern may include the left or right eye, shooting size, shooting format, number of scans in the X-axis direction, number of scans in the Y-axis direction, and number of repeated scans of the same position.
ステップS1302において、断層画像撮影装置100を制御し、S1301で設定された撮影パターンに基づく断層画像の取得を行う。続いて、ステップS1303において取得された断層画像の画角を確認する。このとき、断層画像に紐づけられた画角の情報を確認してもよいし、断層画像撮影装置100に設定された断層画像の画角を確認してもよい。 In step S1302, the tomographic imaging apparatus 100 is controlled to acquire a tomographic image based on the imaging pattern set in S1301. Next, in step S1303, the angle of view of the acquired tomographic image is confirmed. At this time, the information on the angle of view associated with the tomographic image may be confirmed, or the angle of view of the tomographic image set in the tomographic imaging apparatus 100 may be confirmed.
ステップS1304において、画角に応じた断層画像の表示スケールの決定を行う。このとき、狭い画角で撮影された断層画像が選択された場合、断層画像の深さ方向における一部の領域のみ、すなわち部分画像を表示領域に表示するスケールで表示させる。また、広い画角で撮影された断層画像が選択された場合は画像の全体を表示領域に表示させるスケールで表示させる。例えば、狭い画角の場合は2mm Depth、広い画角の場合はFitスケールのように設定してもよい。 In step S1304, the display scale of the tomographic image is determined according to the angle of view. At this time, if a tomographic image taken with a narrow angle of view is selected, it is displayed at a scale that displays only a portion of the depth direction of the tomographic image, i.e., a partial image, in the display area. On the other hand, if a tomographic image taken with a wide angle of view is selected, it is displayed at a scale that displays the entire image in the display area. For example, it may be set to 2 mm Depth for a narrow angle of view and Fit scale for a wide angle of view.
ステップS1305~S1310での画像処理及び表示の動作フローは、実施例1と同様であるため説明を省略する。 The image processing and display operation flow in steps S1305 to S1310 is the same as in Example 1, so a detailed description will be omitted.
なお、断層画像を表示させるレポートとして、図12のように異なる画角で取得された複数の断層画像を並べて表示させてもよいし、同じ画角の断層像のみを表示させてもよい。そのほかの複数の断層画像を表示させる場合の表示方法は実施例1と同様であるため、説明を省略する。 Note that a report displaying tomographic images may display multiple tomographic images acquired at different angles of view side by side, as shown in Figure 12, or may display only tomographic images acquired at the same angle of view. The display method for displaying multiple other tomographic images is the same as in Example 1, and therefore will not be described here.
<その他の実施例>
本明細書の実施例1~4は適宜組み合わせて実施されてもよい。
<Other Examples>
Examples 1 to 4 of this specification may be implemented in appropriate combination.
また、本明細書に開示される技術は、上述した様々な実施例の1以上の機能を実現するソフトウェア(プログラム)を、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータがプログラムを読出し実行する処理でも実現可能である。コンピュータは、1つ又は複数のプロセッサ若しくは回路を有し、コンピュータ実行可能命令を読み出し実行するために、分離した複数のコンピュータ又は分離した複数のプロセッサ若しくは回路のネットワークを含みうる。 The technology disclosed in this specification can also be realized by providing software (programs) that achieve one or more of the functions of the various embodiments described above to a system or device via a network or storage medium, and having the computer in that system or device read and execute the programs. The computer may have one or more processors or circuits, and may include multiple separate computers or a network of multiple separate processors or circuits to read and execute computer-executable instructions.
このとき、プロセッサ又は回路は、中央演算処理装置(CPU)、マイクロプロセッシングユニット(MPU)、グラフィクスプロセッシングユニット(GPU)、特定用途向け集積回路(ASIC)、又はフィールドプログラマブルゲートウェイ(FPGA)を含みうる。また、プロセッサ又は回路は、デジタルシグナルプロセッサ(DSP)、データフロープロセッサ(DFP)、又はニューラルプロセッシングユニット(NPU)を含みうる。 In this case, the processor or circuit may include a central processing unit (CPU), a microprocessing unit (MPU), a graphics processing unit (GPU), an application specific integrated circuit (ASIC), or a field programmable gateway (FPGA). The processor or circuit may also include a digital signal processor (DSP), a data flow processor (DFP), or a neural processing unit (NPU).
Claims (19)
前記被検眼の断層画像を取得する画角として、第1の画角と前記第1の画角よりも狭い第2の画角とを含む複数の画角のうちいずれかが選択された場合に、前記選択された画角で前記被検眼において前記測定光を走査する走査手段を制御する制御手段と、
前記第1の画角が選択された場合、前記第1の画角で取得された第1の断層画像を表示領域に表示させ、前記第2の画角が選択された場合、前記第2の画角で取得された第2の断層画像に含まれる部分画像であって前記第2の断層画像よりも被検眼における深さ方向の長さが短い部分画像を、前記表示領域に合わせるように表示させる表示制御手段と、
を備え、
前記部分画像の深さ方向の長さは、前記断層画像を取得した眼科検査装置とは異なる眼科検査装置で取得された断層画像の深さ方向の長さに基づいた長さであり、
前記断層画像を取得した眼科検査装置は、波長掃引光源によって測定光が照射された被検眼からの戻り光と参照光とを合波して得た干渉光を用いて前記被検眼の断層画像を取得するSS-OCTであり、
前記断層画像を取得した眼科検査装置とは異なる眼科検査装置は、分光器を介して取得される干渉光を用いるSD-OCTである情報処理装置。 1. An information processing device that acquires a tomographic image of a subject's eye using interference light obtained by combining return light from the subject's eye irradiated with measurement light and reference light,
a control means for controlling a scanning means for scanning the measurement light at the subject's eye at a selected angle of view when any of a plurality of angles of view including a first angle of view and a second angle of view narrower than the first angle of view is selected as an angle of view for acquiring a tomographic image of the subject's eye;
a display control means for displaying a first tomographic image acquired at the first angle of view in a display area when the first angle of view is selected, and for displaying a partial image included in a second tomographic image acquired at the second angle of view, the partial image having a length in a depth direction of the subject's eye shorter than that of the second tomographic image, in a manner that fits the display area when the second angle of view is selected;
Equipped with
the length in the depth direction of the partial image is a length based on the length in the depth direction of a tomographic image acquired by an ophthalmic examination apparatus different from the ophthalmic examination apparatus that acquired the tomographic image,
the ophthalmic examination apparatus that has acquired the tomographic image is an SS-OCT that acquires the tomographic image of the test eye using interference light obtained by combining return light from the test eye that has been irradiated with measurement light by a wavelength swept light source and reference light;
The information processing device is an SD-OCT that uses interference light acquired through a spectroscope, and the ophthalmic examination device that is different from the ophthalmic examination device that acquired the tomographic image is different from the SD-OCT that uses interference light acquired through a spectroscope.
前記被検眼の第1の断層画像と前記第1の断層画像の前記被検眼における深さ方向の長さよりも深さ方向の長さが長い第2の断層画像とを含む複数の断層画像のうち少なくとも一つを選択するユーザの指示に応じて、前記選択された断層画像を取得する取得手段と、
前記第1の断層画像が選択された場合、前記第1の断層画像を表示領域に表示させ、前記第2の断層画像が選択された場合、前記第2の断層画像に含まれる部分画像であって前記第2の断層画像よりも被検眼における深さ方向の長さが短い部分画像を前記表示領域に合わせるように表示させる表示制御手段と、
を備える情報処理装置。 1. An information processing device that acquires a tomographic image of a subject's eye using interference light obtained by combining return light from the subject's eye irradiated with measurement light and reference light,
an acquisition means for acquiring the selected tomographic image in response to a user's instruction to select at least one of a plurality of tomographic images including a first tomographic image of the subject's eye and a second tomographic image having a depth length longer than that of the first tomographic image in the depth direction of the subject's eye;
a display control means for displaying the first tomographic image in a display area when the first tomographic image is selected, and for displaying a partial image included in the second tomographic image, the partial image having a length in the depth direction of the subject's eye shorter than that of the second tomographic image, so as to fit the partial image in the display area when the second tomographic image is selected;
An information processing device comprising:
前記第1の断層画像が選択された場合、前記第1の断層画像を表示領域に表示させ、前記第2の断層画像が選択された場合、前記第2の断層画像に含まれる部分画像であって前記第2の断層画像よりも前記被検眼における深さ方向の長さが短い部分画像を前記表示領域に合わせるように表示させる表示制御手段と、
を備える情報処理装置。 an acquisition means for acquiring a selected tomographic image in response to a user's instruction to select at least one of a first tomographic image acquired by SD-OCT using interference light acquired through a spectroscope and a second tomographic image acquired by SS-OCT, which acquires a tomographic image of the subject's eye using interference light obtained by combining return light from the subject's eye irradiated with measurement light by a wavelength swept light source and reference light;
a display control means for displaying the first tomographic image in a display area when the first tomographic image is selected, and for displaying a partial image included in the second tomographic image, the partial image having a length in the depth direction of the subject's eye shorter than that of the second tomographic image, so as to fit the partial image in the display area when the second tomographic image is selected;
An information processing device comprising:
前記被検眼の断層画像を取得する画角として、第1の画角と前記第1の画角よりも狭い第2の画角とを含む複数の画角のうちいずれかが選択された場合に、前記選択された画角で前記被検眼において前記測定光を走査する走査手段を制御する制御手段と、
前記第1の画角が選択された場合、前記第1の画角で取得された第1の断層画像を表示領域に表示させ、前記第2の画角が選択された場合、前記第2の画角で取得された第2の断層画像に含まれる部分画像であって前記第2の断層画像よりも被検眼における深さ方向の長さが短い部分画像を、前記表示領域に合わせるように表示させる表示制御手段と、
を備え、
前記部分画像の深さ方向の長さは、前記断層画像を取得した眼科検査装置とは異なる眼科検査装置で取得された断層画像の深さ方向の長さに基づいた長さであり、
前記断層画像を取得した眼科検査装置は、波長掃引光源によって測定光が照射された被検眼からの戻り光と参照光とを合波して得た干渉光を用いて前記被検眼の断層画像を取得するSS-OCTであり、
前記断層画像を取得した眼科検査装置とは異なる眼科検査装置は、分光器を介して取得される干渉光を用いるSD-OCTである眼科検査装置。 An ophthalmic examination apparatus that acquires a tomographic image of a subject's eye by using interference light obtained by combining return light from the subject's eye irradiated with measurement light and reference light,
a control means for controlling a scanning means for scanning the measurement light at the subject's eye at a selected angle of view when any of a plurality of angles of view including a first angle of view and a second angle of view narrower than the first angle of view is selected as an angle of view for acquiring a tomographic image of the subject's eye;
a display control means for displaying a first tomographic image acquired at the first angle of view in a display area when the first angle of view is selected, and for displaying a partial image included in a second tomographic image acquired at the second angle of view, the partial image having a length in a depth direction of the subject's eye shorter than that of the second tomographic image, in a manner that fits the display area when the second angle of view is selected;
Equipped with
the length in the depth direction of the partial image is a length based on the length in the depth direction of a tomographic image acquired by an ophthalmic examination apparatus different from the ophthalmic examination apparatus that acquired the tomographic image,
the ophthalmic examination apparatus that has acquired the tomographic image is an SS-OCT that acquires the tomographic image of the test eye using interference light obtained by combining return light from the test eye that has been irradiated with measurement light by a wavelength swept light source and reference light;
The ophthalmic examination apparatus different from the ophthalmic examination apparatus that acquired the tomographic image is an SD-OCT ophthalmic examination apparatus that uses interference light acquired through a spectroscope.
前記被検眼の第1の断層画像と前記第1の断層画像の被検眼における深さ方向の長さよりも深さ方向の長さが長い第2の断層画像とを含む複数の断層画像のうち少なくとも一つを選択するユーザの指示に応じて、前記選択された断層画像を取得する取得手段と、
前記第1の断層画像が選択された場合、前記第1の断層画像を表示領域に表示させ、前記第2の断層画像が選択された場合、前記第2の断層画像に含まれる部分画像であって前記第2の断層画像よりも被検眼における深さ方向の長さが短い部分画像を前記表示領域に合わせるように表示させる表示制御手段と、
を備える眼科検査装置。 An ophthalmic examination apparatus that acquires a tomographic image of a subject's eye by using interference light obtained by combining return light from the subject's eye irradiated with measurement light and reference light,
an acquisition means for acquiring the selected tomographic image in response to a user's instruction to select at least one of a plurality of tomographic images including a first tomographic image of the subject's eye and a second tomographic image having a depth length longer than a depth length of the first tomographic image in the subject's eye;
a display control means for displaying the first tomographic image in a display area when the first tomographic image is selected, and for displaying a partial image included in the second tomographic image, the partial image having a length in the depth direction of the subject's eye shorter than that of the second tomographic image, so as to fit the partial image in the display area when the second tomographic image is selected;
An ophthalmic examination apparatus comprising:
前記被検眼の断層画像を取得する画角として、第1の画角と前記第1の画角よりも狭い第2の画角とを含む複数の画角のうちいずれかが選択された場合に、前記選択された画角で前記被検眼において前記測定光を走査する走査手段を制御する工程と、
前記第1の画角が選択された場合、前記第1の画角で取得された第1の断層画像を表示領域に表示させ、前記第2の画角が選択された場合、前記第2の画角で取得された第2の断層画像に含まれる部分画像であって前記第2の断層画像よりも被検眼における深さ方向の長さが短い部分画像を、前記表示領域に合わせるように表示させる工程と、
を含み、
前記部分画像の深さ方向の長さは、前記断層画像を取得した眼科検査装置とは異なる眼科検査装置で取得された断層画像の深さ方向の長さに基づいた長さであり、
前記断層画像を取得した眼科検査装置は、波長掃引光源によって測定光が照射された被検眼からの戻り光と参照光とを合波して得た干渉光を用いて前記被検眼の断層画像を取得するSS-OCTであり、
前記断層画像を取得した眼科検査装置とは異なる眼科検査装置は、分光器を介して取得される干渉光を用いるSD-OCTである眼科検査装置の制御方法。 A control method for an ophthalmic examination apparatus that acquires a tomographic image of a subject's eye by using interference light obtained by combining return light from the subject's eye irradiated with measurement light and reference light, comprising:
When one of a plurality of angles of view including a first angle of view and a second angle of view narrower than the first angle of view is selected as an angle of view for acquiring a tomographic image of the subject's eye, controlling a scanning unit that scans the subject's eye with the measurement light at the selected angle of view;
a step of displaying a first tomographic image acquired at the first angle of view in a display area when the first angle of view is selected, and displaying a partial image included in a second tomographic image acquired at the second angle of view, the partial image having a shorter length in a depth direction of the subject's eye than the second tomographic image, in a manner that fits the display area when the second angle of view is selected;
Including,
the length in the depth direction of the partial image is a length based on the length in the depth direction of a tomographic image acquired by an ophthalmic examination apparatus different from the ophthalmic examination apparatus that acquired the tomographic image,
the ophthalmic examination apparatus that has acquired the tomographic image is an SS-OCT that acquires the tomographic image of the test eye using interference light obtained by combining return light from the test eye that has been irradiated with measurement light by a wavelength swept light source and reference light;
A method for controlling an ophthalmic examination apparatus, wherein the ophthalmic examination apparatus different from the ophthalmic examination apparatus that acquired the tomographic image is an SD-OCT that uses interference light acquired via a spectroscope.
前記被検眼の第1の断層画像と前記第1の断層画像の被検眼における深さ方向の長さよりも深さ方向の長さが長い第2の断層画像とを含む複数の断層画像のうち少なくとも一つを選択するユーザの指示に応じて、前記選択された断層画像を取得する工程と、
前記第1の断層画像が選択された場合、前記第1の断層画像を表示領域に表示させ、前記第2の断層画像が選択された場合、前記第2の断層画像に含まれる部分画像であって前記第2の断層画像よりも被検眼における深さ方向の長さが短い部分画像を前記表示領域に合わせるように表示させる工程と、
を含む眼科検査装置の制御方法。 A control method for an ophthalmic examination apparatus that acquires a tomographic image of a subject's eye by using interference light obtained by combining return light from the subject's eye irradiated with measurement light and reference light, comprising:
acquiring the selected tomographic image in response to a user's instruction to select at least one of a plurality of tomographic images including a first tomographic image of the subject's eye and a second tomographic image having a depth length longer than a depth length of the first tomographic image in the subject's eye;
a step of displaying the first tomographic image in a display area when the first tomographic image is selected, and displaying a partial image included in the second tomographic image, the partial image having a length in a depth direction of the subject's eye shorter than that of the second tomographic image, so as to fit the partial image in the display area when the second tomographic image is selected;
A method for controlling an ophthalmic examination apparatus comprising:
前記第1の断層画像が選択された場合、前記第1の断層画像を表示領域に表示させ、前記第2の断層画像が選択された場合、前記第2の断層画像に含まれる部分画像であって前記第2の断層画像よりも前記被検眼における深さ方向の長さが短い部分画像を前記表示領域に合わせるように表示させる工程と、
を含む情報処理装置の制御方法。 a step of acquiring a selected tomographic image in response to a user's instruction to select at least one of a first tomographic image acquired by SD-OCT using interference light acquired through a spectroscope and a second tomographic image acquired by SS-OCT, which acquires a tomographic image of the subject's eye using interference light obtained by combining return light from the subject's eye irradiated with measurement light by a wavelength swept light source and reference light;
a step of displaying the first tomographic image in a display area when the first tomographic image is selected, and displaying a partial image included in the second tomographic image, the partial image having a length in a depth direction of the subject's eye shorter than that of the second tomographic image, so as to fit the partial image in the display area when the second tomographic image is selected;
A control method for an information processing device including:
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2021133354A JP7790891B2 (en) | 2021-08-18 | 2021-08-18 | Information processing device and ophthalmic examination device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2021133354A JP7790891B2 (en) | 2021-08-18 | 2021-08-18 | Information processing device and ophthalmic examination device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2023027961A JP2023027961A (en) | 2023-03-03 |
| JP7790891B2 true JP7790891B2 (en) | 2025-12-23 |
Family
ID=85331831
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2021133354A Active JP7790891B2 (en) | 2021-08-18 | 2021-08-18 | Information processing device and ophthalmic examination device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7790891B2 (en) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2017006436A (en) | 2015-06-23 | 2017-01-12 | キヤノン株式会社 | Image processing apparatus, control method therefor, and program |
| US20170228521A1 (en) | 2016-02-05 | 2017-08-10 | Carl Zeiss Meditec, Inc. | Report driven workflow for ophthalmic image data acquisition |
| JP2019150409A (en) | 2018-03-06 | 2019-09-12 | 株式会社ニデック | Oct apparatus |
| JP2020110256A (en) | 2019-01-09 | 2020-07-27 | キヤノン株式会社 | Ophthalmology photographing apparatus, its control device, control method, and program |
-
2021
- 2021-08-18 JP JP2021133354A patent/JP7790891B2/en active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2017006436A (en) | 2015-06-23 | 2017-01-12 | キヤノン株式会社 | Image processing apparatus, control method therefor, and program |
| US20170228521A1 (en) | 2016-02-05 | 2017-08-10 | Carl Zeiss Meditec, Inc. | Report driven workflow for ophthalmic image data acquisition |
| JP2019150409A (en) | 2018-03-06 | 2019-09-12 | 株式会社ニデック | Oct apparatus |
| JP2020110256A (en) | 2019-01-09 | 2020-07-27 | キヤノン株式会社 | Ophthalmology photographing apparatus, its control device, control method, and program |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2023027961A (en) | 2023-03-03 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7980697B2 (en) | Fundus oculi observation device and ophthalmic image display device | |
| US7370966B2 (en) | Opthalmologic apparatus | |
| US7566132B2 (en) | Fundus observation device | |
| US7641338B2 (en) | Fundus observation device | |
| JP4969925B2 (en) | Fundus observation device | |
| US8096658B2 (en) | Fundus oculi observation device and program for controlling the same | |
| US7784942B2 (en) | Fundus oculi observation device, a fundus oculi image display device and a fundus oculi image display method | |
| US7905596B2 (en) | Fundus observation device, an ophthalmologic image processing unit, an ophthalmologic image processing program, and an ophthalmologic image processing method | |
| US7828437B2 (en) | Fundus oculi observation device and fundus oculi image processing device | |
| JP4890878B2 (en) | Fundus observation device | |
| JP2017006179A (en) | OCT signal processing apparatus, OCT signal processing program, and OCT apparatus | |
| JP2012016620A (en) | Fundus observation device | |
| CN110811536A (en) | Ophthalmic device and control method thereof | |
| JP6976778B2 (en) | Information processing equipment, information processing methods and programs | |
| JP7306482B2 (en) | Image processing method, image processing apparatus, and program | |
| JP7790891B2 (en) | Information processing device and ophthalmic examination device | |
| JP7204345B2 (en) | Image processing device, image processing method and program | |
| JP2021058285A (en) | Image processing device, image processing method and program | |
| JP7387343B2 (en) | Image processing device, image processing program | |
| JP2019054990A (en) | Ophthalmic photographing apparatus, control method therefor, program, and recording medium | |
| JP7086708B2 (en) | Image processing equipment, image processing methods and programs | |
| JP2024052404A (en) | OCT device and OCT system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20231213 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20240606 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20241029 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20241030 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20241223 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20250204 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20250326 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20250701 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20250822 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20251111 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20251211 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7790891 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |