Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP4568038B2 - Medical image display system, medical image storage server, terminal device, and medical image display method - Google Patents
[go: Go Back, main page]

JP4568038B2 - Medical image display system, medical image storage server, terminal device, and medical image display method - Google Patents

Medical image display system, medical image storage server, terminal device, and medical image display method Download PDF

Info

Publication number
JP4568038B2
JP4568038B2 JP2004184865A JP2004184865A JP4568038B2 JP 4568038 B2 JP4568038 B2 JP 4568038B2 JP 2004184865 A JP2004184865 A JP 2004184865A JP 2004184865 A JP2004184865 A JP 2004184865A JP 4568038 B2 JP4568038 B2 JP 4568038B2
Authority
JP
Japan
Prior art keywords
medical image
image data
terminal device
data
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP2004184865A
Other languages
Japanese (ja)
Other versions
JP2006006449A (en
Inventor
賢一 丹羽
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Canon Medical Systems Corp
Original Assignee
Toshiba Corp
Toshiba Medical Systems Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp, Toshiba Medical Systems Corp filed Critical Toshiba Corp
Priority to JP2004184865A priority Critical patent/JP4568038B2/en
Publication of JP2006006449A publication Critical patent/JP2006006449A/en
Application granted granted Critical
Publication of JP4568038B2 publication Critical patent/JP4568038B2/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Landscapes

  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Processing Or Creating Images (AREA)

Description

本発明は、被検体から各種の検査装置、とくにX線CTスキャナ、超音波診断装置、磁気共鳴イメージング装置などの医用画像診断装置(モダリティ)で収集された医用画像を保管する医用画像保管サーバ、及び、この医用画像保管サーバにより保管されている医用画像を読み込んで表示して医師の読影に供するビューアなどの端末装置に係り、とくに、医用画像保管サーバから医用画像を読み込んで表示するまでの待ち時間を極力短縮する手段を備えた医用画像保管サーバ及び端末装置に関する。   The present invention relates to a medical image storage server for storing medical images collected from various types of examination apparatuses, in particular, medical image diagnostic apparatuses (modalities) such as an X-ray CT scanner, an ultrasonic diagnostic apparatus, and a magnetic resonance imaging apparatus, In addition, the present invention relates to a terminal device such as a viewer that reads and displays medical images stored by the medical image storage server and uses them for interpretation by doctors, and in particular, waits until a medical image is read and displayed from the medical image storage server. The present invention relates to a medical image storage server and a terminal device having means for shortening time as much as possible.

近年の医用診断にあっては、X線CTスキャナ、超音波診断装置、磁気共鳴イメージング装置などの医用画像診断装置(モダリティ)で被検体の画像データを収集することが非常に多くなっている。   In recent medical diagnoses, image data of a subject is often collected by a medical image diagnostic apparatus (modality) such as an X-ray CT scanner, an ultrasonic diagnostic apparatus, or a magnetic resonance imaging apparatus.

この画像データは、その場で観察・読影に供されることも多いが、一旦、医用画像保管サーバに保管し、このサーバから病院内外に設置したビューアと呼ばれる読影専用の端末装置に読み込んで専門の読影医が読影するというシステムも多くなっている。これらのシステムの例は、特許文献1や特許文献2に示されている。   This image data is often used for observation and interpretation on the spot, but once stored in a medical image storage server, it is read into a specialized terminal device called a viewer installed inside or outside the hospital. There are a lot of systems that interpreting doctors interpret. Examples of these systems are shown in Patent Document 1 and Patent Document 2.

特許文献1に記載のシステムの場合、院内LANシステムにより、医用画像診断装置、サーバ、端末装置などが通信可能に接続され、このシステムに公衆回線を通じて近隣病院などの端末装置が通信可能に接続されている。特許文献2に記載のシステムの場合も、同様に、複数のX線CT装置、サーバ、及がネットワーク化されており、画像データが端末装置で閲覧できるようになっている。   In the case of the system described in Patent Document 1, a medical image diagnostic device, a server, a terminal device, and the like are communicably connected by a hospital LAN system, and a terminal device such as a neighboring hospital is communicably connected to the system through a public line. ing. Similarly, in the case of the system described in Patent Document 2, a plurality of X-ray CT apparatuses, servers, and networks are networked so that image data can be viewed on a terminal device.

この種のネットワークシステムの場合、医用画像保管サーバは通常、病院内に置かれることが多く、このサーバから病院内外に置いたビューア(クライアントとしてコンピュータ)に医用画像データ(非圧縮のデータ又は圧縮されたデータ)を読み込ませて表示させる。これにより、ユーザは、ビューアに表示された医用画像に所望の画像処理などを施して読影作業をすることができる。この場合、ネットワークの負荷を軽減するため、医用画像データは一般的には圧縮データに変換された状態で伝送される。
特開2002−230165号公報 特開2003−102721号公報
In the case of this type of network system, the medical image storage server is usually placed in a hospital, and medical image data (uncompressed data or compressed) is sent from this server to a viewer (computer as a client) placed inside and outside the hospital. Read data) and display it. As a result, the user can perform an image interpretation operation by performing desired image processing or the like on the medical image displayed on the viewer. In this case, in order to reduce the load on the network, the medical image data is generally transmitted after being converted into compressed data.
JP 2002-230165 A Japanese Patent Laid-Open No. 2003-102721

しかしながら、上述したようにネットワークされた現状の診断システムの場合、サーバから端末装置に画像データを送信するときに以下のような不都合があった。   However, in the case of the current diagnostic system networked as described above, there are the following inconveniences when image data is transmitted from the server to the terminal device.

病院にある画像保管サーバからネットワークを介して端末装置が医用画像のデータを読み込んで表示するまでの間はユーザにとって待ち時間となる。この待ち時間の間、端末装置の画面には、端末装置の現在実行中の処理内容を示すマークを表示させることが多い。このマーカが表示されないシステムの場合、ユーザは端末装置が現在何を行っているのか分らないか又は分かり難い。ユーザにとっては、この待ち時間は実際の時間よりも長く感じられるのが普通であり、何とかこれを解消したいという潜在的な要求があった。   There is a waiting time for the user until the terminal device reads and displays the medical image data from the image storage server in the hospital via the network. During this waiting time, a mark indicating the processing content currently being executed by the terminal device is often displayed on the screen of the terminal device. In the case of a system in which this marker is not displayed, the user does not know or is difficult to understand what the terminal device is currently doing. For users, this waiting time is usually felt longer than the actual time, and there is a potential demand to somehow solve this.

また、端末装置の画面に上述のマークを表示させている場合でも、待ち時間が非常に長くなる場合、ユーザは端末装置(コンピュータ)が処理に失敗したのではないか、或いは、ネットワークシステムに何等かの異常が発生したのではないかなど、無用な勘違いを喚起して作業のスムーズは進行の阻害要因にさえなることもあった。とくに、サーバや端末装置の処理速度自体が遅い場合、サーバに掛かる負荷が大きい場合、ネットワークの容量が小さい場合など、そのようなイライラ感の募る事態の深刻度は大きかった。   Further, even when the above-mentioned mark is displayed on the screen of the terminal device, if the waiting time becomes very long, the user may have failed in the processing of the terminal device (computer) or something in the network system. The smoothness of the work sometimes even hindered the progress by raising unnecessary misunderstandings such as the occurrence of such abnormalities. In particular, when the processing speed of the server or the terminal device itself is slow, the load on the server is large, or the capacity of the network is small, such an irritating situation is serious.

その主な要因として画像サイズが大きいことが起因していることが多い。また、圧縮方法(その中のパラメータ)によっても展開時間が変化する。   The main factor is often the large image size. Further, the development time varies depending on the compression method (parameters therein).

本発明は、上述した状況に鑑みてなされたもので、サーバや端末装置のコンピュータ性能、ネットワーク環境、及び、画像データサイズ、圧縮法などの使用条件が同一であると仮定した場合に、医用画像データを保管しているサーバに端末装置から画像データの送信要求を出してから、端末装置に実際に画像が表示されるまでの待ち時間を短縮し、ユーザにとっての画像表示レスポンスが良い医用画像保管システムを提供することを、その目的とする。   The present invention has been made in view of the above-described situation. When it is assumed that the computer performance of the server and the terminal device, the network environment, and the use conditions such as the image data size and the compression method are the same, the medical image Medical image storage that improves the image display response for the user by shortening the waiting time from when the image data transmission request is sent from the terminal device to the server that stores the data until the image is actually displayed on the terminal device The purpose is to provide a system.

上述した目的を達成するために、本発明によれば、その第1の態様として、医用画像データを保管しているサーバと、このサーバから前記医用画像データを受信して表示する端末装置とを通信用のネットワークに接続した医用画像表示システムが提供される。このシステムは、前記端末装置に医用画像を表示させるときの所望の表示時間を設定する設定手段と、この設定手段により設定された表示時間に応じた、前記医用画像データに対する部分取得分のデータ量を演算する演算手段と、この演算手段により演算された部分取得分のデータ量に対応したデータ送信を前記端末装置から前記サーバに要求させる送信要求手段と、この送信要求手段により要求された部分取得分のデータ量の医用画像データを前記サーバから前記端末装置に送信させる送信手段と、この送信された医用画像データに基づいた表示を行う表示手段と、を備えたことを特徴とする。 In order to achieve the above-described object, according to the present invention, as a first aspect thereof, a server storing medical image data and a terminal device that receives and displays the medical image data from the server are provided. A medical image display system connected to a communication network is provided. This system includes a setting unit that sets a desired display time when displaying a medical image on the terminal device, and a data amount for partial acquisition of the medical image data according to the display time set by the setting unit Computing means for computing the data, transmission request means for requesting the server to send data corresponding to the amount of data for partial acquisition computed by the computing means, and partial acquisition requested by the transmission request means It is characterized by comprising a transmission means for transmitting medical image data of the amount of data from the server to the terminal device, and a display means for performing display based on the transmitted medical image data.

また、本発明によれば、その第2の態様として、医用画像データを保管しているサーバに通信用のネットワークを介して接続され且つ前記サーバから前記医用画像データを受信して表示する端末装置が提供される。この端末装置は、前記端末装置に医用画像を表示させるときの所望の表示時間を指定する指定手段と、この指定手段により指定された表示時間に応じた、前記医用画像データに対する部分取得分のデータ量を設定する設定手段と、この設定手段により設定された部分取得分のデータ量に対応したデータ送信を前記サーバに要求する送信要求手段と、この要求に応じて前記サーバから送信されてきた部分取得分の医用画像データに基づいた表示を行なう表示手段とを備えたことを特徴とする。 According to the present invention, as a second aspect, the terminal device is connected to a server storing medical image data via a communication network and receives and displays the medical image data from the server. Is provided. The terminal device includes a designation unit that designates a desired display time for displaying a medical image on the terminal device, and data for partial acquisition for the medical image data according to the display time designated by the designation unit. A setting means for setting the amount, a transmission request means for requesting the server to transmit data corresponding to the data amount for the partial acquisition set by the setting means, and a portion transmitted from the server in response to the request And display means for performing display based on the acquired medical image data.

さらに、本発明によれば、その第3の態様として、医用画像データを保管するとともに通信用のネットワークを介して端末装置に接続された医用画像保管サーバが提供される。このサーバは、前記端末装置に医用画像を表示させるときの所望の表示時間に応じた部分取得分のデータ量の前記医用画像データに対する送信要求を前記端末装置から受け付ける手段と、この送信要求があったときに、当該送信要求に応じた前記部分取得分のデータ量の前記医用画像データを前記端末装置に送信する送信手段とを備えたことを特徴とする。 Furthermore, according to the present invention, as a third aspect, there is provided a medical image storage server that stores medical image data and is connected to a terminal device via a communication network. The server includes a means for receiving a transmission request for the medical image data of a data amount for partial acquisition corresponding to a desired display time when displaying a medical image on the terminal device, and the transmission request. And transmitting means for transmitting the medical image data of the data amount for the partial acquisition corresponding to the transmission request to the terminal device.

さらに、本発明によれば、その第4の形態として、医用画像データを保管しているサーバから通信用ネットワークを介して前記医用画像データを端末装置に送信して表示させる医用画像表示方法が提供される。この表示方法は、前記端末装置に医用画像を表示させるときの所望の表示時間を設定し、この設定された表示時間に応じた、前記医用画像データに対する部分取得分のデータ量を演算し、この演算された部分取得分のデータ量に対応したデータ送信を前記端末装置から前記サーバに要求させ、この要求された部分取得分のデータ量の医用画像データを前記サーバから前記端末装置に送信させ、この送信された医用画像データに基づいた表示を前記端末装置に行なわせることを特徴とする。
Furthermore, according to the present invention, as a fourth embodiment, there is provided a medical image display method for transmitting and displaying the medical image data from a server storing medical image data to a terminal device via a communication network. Is done. The display method sets a desired display time when displaying a medical image on the terminal device, calculates a data amount for partial acquisition of the medical image data according to the set display time, Requesting the server to send data corresponding to the calculated amount of data for partial acquisition from the terminal device, causing the server to send medical image data of the requested amount of data for partial acquisition to the terminal device, The terminal device is caused to perform display based on the transmitted medical image data.

本発明に係る医用画像表示システム、端末装置、及び医用画像保管サーバによれば、端末装置に医用画像を表示させるときの所望の表示時間又はデータ量に応じた部分取得(パーシャルコンテント取得)に拠るデータ量の医用画像データを、要求に応じて、サーバから端末装置に送信させて表示させる。したがって、ネットワークの伝送速度の遅い環境、処理の遅いコンピュータでサーバや端末装置を構成する場合でも、ユーザの所望の表示時間又はデータ量に応じた最適な部分取得の医用画像を表示することができ、画像表示のレスポンスを上げることができる。   According to the medical image display system, the terminal device, and the medical image storage server according to the present invention, it is based on partial acquisition (partial content acquisition) corresponding to a desired display time or data amount when displaying a medical image on the terminal device. The medical image data of the data amount is transmitted from the server to the terminal device and displayed on demand. Therefore, even when a server or a terminal device is configured with an environment with a slow network transmission speed or a computer with slow processing, it is possible to display an optimal partial acquisition medical image according to a user's desired display time or data amount. The response of image display can be improved.

以下、図1〜8を参照して、本発明に係る医用画像保管サーバ、端末装置、及び当該サーバ及び端末装置を組み込んだ医用画像表示システムとして実施される医用画像収集保管システム(PACS)の一実施形態を説明する。   1 to 8, a medical image storage server (PACS) implemented as a medical image storage server, a terminal device, and a medical image display system incorporating the server and the terminal device according to the present invention will be described below. An embodiment will be described.

図1に、この実施形態に係る医用画像収集保管システムの全体構成を示す。同図に示すように、この医用画像収集保管システムは、病院内に設けられた病院内システム11と、この病院内システム11に通信回線(通信手段)として公衆網12を介して相互通信可能に接続された病院外システム13とを備える。   FIG. 1 shows the overall configuration of a medical image collection / storage system according to this embodiment. As shown in the figure, this medical image collection and storage system can communicate with an in-hospital system 11 provided in a hospital and a communication line (communication means) via the public network 12 to the in-hospital system 11. And a connected outside-hospital system 13.

このうち、病院内システム11は、図1に示すように、被検体から医用画像を収集する各種の医用画像診断装置(モダリティ:検査装置)21,22,23と、収集された医用画像のデータを、その付帯情報(患者情報、検査情報など)と共に保管する医用画像保管サーバ24と、1又は複数の読影用のビューア(端末装置)25,26と、アクセスルータ27と、それらの装置21〜27を通信可能に相互に接続するLAN(Local Area Network)28とを備える。   Among them, as shown in FIG. 1, the in-hospital system 11 includes various medical image diagnostic apparatuses (modalities: inspection apparatuses) 21, 22, and 23 that collect medical images from a subject, and collected medical image data. Medical image storage server 24 that stores the information together with the accompanying information (patient information, examination information, etc.), one or a plurality of interpretation viewers (terminal devices) 25 and 26, an access router 27, and those devices 21 to 21 And a local area network (LAN) 28 that interconnects the communication terminals 27 so that they can communicate with each other.

医用画像診断装置21〜23には、例えばX線CTスキャナ、磁気共鳴イメージング装置、DR(Digital Radiography)装置などが含まれ、これらの装置21〜23で収集されたデジタル画像データは、付帯情報と共に、LAN28を介して医用画像保管サーバ24に送られて保管される。   The medical image diagnostic apparatuses 21 to 23 include, for example, an X-ray CT scanner, a magnetic resonance imaging apparatus, a DR (Digital Radiography) apparatus, and the like, and the digital image data collected by these apparatuses 21 to 23 is accompanied with incidental information. The data is sent to and stored in the medical image storage server 24 via the LAN 28.

また、この医用画像保管サーバ24に保管されている画像データ(付帯情報を含む)は、ビューア25(26)の要求に応答して読み出され、LAN28を介してビューア25(26)に送信される。この送信のときに、送信対象の画像データのサイズ(あるいは画像表示(取得)時間など)が指定され、ビューアは必要な画質を保った画像を表示し観察できるようになっている。   The image data (including supplementary information) stored in the medical image storage server 24 is read in response to a request from the viewer 25 (26), and is transmitted to the viewer 25 (26) via the LAN 28. The At the time of this transmission, the size of the image data to be transmitted (or the image display (acquisition) time, etc.) is designated, and the viewer can display and observe an image with the required image quality.

医用画像保管サーバ24及びビューア25,26は、CPU及びメモリを有する専用のコンピュータで構成され、メモリに予め格納されている処理手順であるプログラムをCPUが順次実行することで、与えられたジョブを遂行できるようになっている。また、アクセスルータ27は、LAN28と公衆網12とを通信可能に繋ぐインターフェースとして機能する。   The medical image storage server 24 and the viewers 25 and 26 are configured by a dedicated computer having a CPU and a memory, and the CPU sequentially executes a program that is a processing procedure stored in advance in the memory so that a given job can be executed. It can be accomplished. The access router 27 functions as an interface that connects the LAN 28 and the public network 12 so that they can communicate with each other.

一方、病院外システム13には、医用画像診断装置及び医用画像保管サーバは設置されていないものの、上述の病院内システム11と同様に、1又は複数の読影用のビューア31,32と、アクセスルータなどのインターフェース33と、それらの装置31〜33を通信可能に相互に接続するLAN34とを備える。   On the other hand, although the medical image diagnostic apparatus and the medical image storage server are not installed in the outside hospital system 13, as in the above-mentioned hospital system 11, one or a plurality of interpretation viewers 31 and 32, and an access router And a LAN 34 that interconnects these devices 31 to 33 so as to communicate with each other.

この医用画像収集保管システムにおける各ビューア25(〜27,31,32:以下、符号「25」で代表させる)は、機能的には図2に示すように構成されている。すなわち、各ビューア25は、所定のプログラムをCPU(図示せず)に順次実行させることにより、入力器31A及び表示器31Bと協働して形成するユーザインターフェース31、情報処理部32、サイズ・時間設定部33、自動計算部34、サーバ側圧縮設定更新部35、及び画像データ取得部36を機能的に実現する。また、このビューア25には、通信インターフェース47が設けられている。   Each viewer 25 (˜27, 31, 32: hereinafter represented by reference numeral “25”) in this medical image collection / storage system is functionally configured as shown in FIG. That is, each viewer 25 causes a CPU (not shown) to sequentially execute a predetermined program, thereby forming a user interface 31, an information processing unit 32, a size / time formed in cooperation with the input device 31 </ b> A and the display device 31 </ b> B. The setting unit 33, automatic calculation unit 34, server side compression setting update unit 35, and image data acquisition unit 36 are functionally realized. The viewer 25 is provided with a communication interface 47.

ユーザインターフェース31はGUI(グラフィカルユーザインターフェース)ベースで構成されている。   The user interface 31 is configured on a GUI (graphical user interface) base.

そこで、ユーザは、インターフェース31の入力器31Aを通して表示や処理の指示をビューア25に与えることができる。ビューア25の処理結果は表示器31Bに表示されるので、ユーザはその表示画面で処理結果を確認できる。   Therefore, the user can give display and processing instructions to the viewer 25 through the input device 31A of the interface 31. Since the processing result of the viewer 25 is displayed on the display 31B, the user can check the processing result on the display screen.

情報処理部32は、ユーザからの指示内容をサイズ・時間設定部33に与えるとともに、このサイズ・時間設定部33に、かかる指示内容に応じた画像データの部分取得のためのサイズや表示時間の情報を設定させ、その情報を受け取る。情報処理部32は、かかる設定情報を自動計算部34に与えて画像データの部分取得量(以下、パーシャルコンテント量と呼ぶ)を自動的に計算させ、その計算結果を自動計算部34から受け取る。さらに、情報処理部32は、受け取ったパーシャルコンテント量に関する情報を画像データ取得部36に渡して、画像データ取得部36に、医用画像保管サーバ24から所望のパーシャルコンテント量の圧縮画像データを取得させる。これと共に、情報処理部32は、かかる圧縮画像データを受け取り、その圧縮画像データを復元パラメータで復元し、その復元された画像データをインターフェース31のモニタ31Bに表示させる。この復元パラメータは、情報処理部32にとって、パーシャルコンテント量の指定に応じて事前に分っている情報であるが、医用画像保管サーバ24側でパーシャルコンテント量の変更があったときには、対応する圧縮パラメータ(復元パラメータ)の変更情報がサーバ24からビューア25に伝えられる。   The information processing unit 32 gives the instruction content from the user to the size / time setting unit 33, and the size / time setting unit 33 is also informed of the size and display time for acquiring partial image data according to the instruction content. Set information and receive the information. The information processing unit 32 gives the setting information to the automatic calculation unit 34 to automatically calculate the partial acquisition amount (hereinafter referred to as partial content amount) of the image data, and receives the calculation result from the automatic calculation unit 34. Furthermore, the information processing unit 32 passes the received information on the partial content amount to the image data acquisition unit 36, and causes the image data acquisition unit 36 to acquire compressed image data of a desired partial content amount from the medical image storage server 24. . At the same time, the information processing unit 32 receives the compressed image data, restores the compressed image data with the restoration parameter, and displays the restored image data on the monitor 31B of the interface 31. This restoration parameter is information that the information processing unit 32 knows in advance according to the designation of the partial content amount, but when the partial content amount is changed on the medical image storage server 24 side, the corresponding compression is performed. Parameter (restoration parameter) change information is transmitted from the server 24 to the viewer 25.

自動計算部34は、画像データの取得サイズや表示時間の設定情報に応じたパーシャルコンテント量を自動的に計算するようになっている。また、画像データ取得部36は、情報処理部32からの指示に従って、指定量の圧縮画像データを通信インターフェース47を介して医用画像保管サーバ24から取得するようになっている。   The automatic calculation unit 34 automatically calculates a partial content amount according to image data acquisition size and display time setting information. The image data acquisition unit 36 acquires a specified amount of compressed image data from the medical image storage server 24 via the communication interface 47 in accordance with an instruction from the information processing unit 32.

なお、サーバ側圧縮設定更新部35は、必要に応じて、サーバ側の圧縮設定(圧縮パラメータ、復元パラメータ)を変更、追記する指令を通信インターフェース47を介して医用画像保管サーバ24に送信可能に構成されている。   The server-side compression setting updating unit 35 can transmit a command for changing and adding the server-side compression settings (compression parameters and restoration parameters) to the medical image storage server 24 via the communication interface 47 as necessary. It is configured.

一方、医用画像保管サーバ24は、機能的には図3に示すように構成されている。この医用画像保管サーバ24は、所定のプログラムをCPU(図示せず)に順次実行させることにより、入力器41A及び表示器41Bと協働して形成するユーザインターフェース41、サーバ情報処理部42、サーバ動作設定部43、サーバ固有情報記憶部44、画像データの圧縮設定情報記憶部45、及び画像データ送信部46を機能的に実現する。また、このサーバ24には、医用画像データをその付帯情報と共に保管している画像データ記憶装置47及びLAN28との通信用の通信インターフェース48が設けられている。   On the other hand, the medical image storage server 24 is functionally configured as shown in FIG. This medical image archiving server 24 has a user interface 41, a server information processing unit 42, a server formed in cooperation with the input device 41A and the display device 41B by causing a CPU (not shown) to sequentially execute a predetermined program. The operation setting unit 43, the server unique information storage unit 44, the image data compression setting information storage unit 45, and the image data transmission unit 46 are functionally realized. In addition, the server 24 is provided with an image data storage device 47 that stores medical image data together with the accompanying information and a communication interface 48 for communication with the LAN 28.

ユーザインターフェース41はGUI(グラフィカルユーザインターフェース)ベースで構成されている。ユーザは、このインターフェース41の入力器41Aを用いて、サーバ動作処理の指示をサーバ24に与えることができる。この指示内容や指示結果は表示器41Bに表示されるので、ユーザは確認することができる。   The user interface 41 is configured on a GUI (graphical user interface) basis. The user can give a server operation processing instruction to the server 24 using the input device 41A of the interface 41. Since this instruction content and instruction result are displayed on the display 41B, the user can confirm them.

サーバ情報処理部42は、ユーザからの指示内容に応じて画像データ圧縮設定部45、サーバ動作設定部43、及びサーバ固有情報記憶部44に指令を出して、各部に必要な処理を実行させる。圧縮設定情報記憶部45は、サーバ情報処理部42からの指示に基づいて、画像データの圧縮方法などの圧縮設定情報(圧縮パラメータ、復元パラメータ)を設定・更新できるように構成されている。この圧縮設定情報は、このサーバ24、すなわち画像データ記憶装置46が保管している画像データを圧縮するときに、それぞれの画像の条件に基づいて画像データを圧縮する圧縮パラメータ及び/又は圧縮画像を復元するための復元パラメータである。   The server information processing unit 42 issues a command to the image data compression setting unit 45, the server operation setting unit 43, and the server specific information storage unit 44 according to the content of the instruction from the user, and causes each unit to execute necessary processes. The compression setting information storage unit 45 is configured to set / update compression setting information (compression parameter, restoration parameter) such as a compression method of image data based on an instruction from the server information processing unit 42. The compression setting information includes compression parameters and / or compressed images for compressing image data based on the conditions of each image when compressing image data stored in the server 24, that is, the image data storage device 46. This is a restoration parameter for restoration.

圧縮パラメータは、サーバ24が画像を圧縮して保管するときに使用される。かかる圧縮画像を元のオリジナルの画像に戻す(復元する)ときに使用されるパラメータは復元パラメータであり、主に、ビューア25(クライアント)により使用される。なお、圧縮パラメータと復元パラメータとのパラメータ情報が一部重なっている場合、又は、圧縮パラメータと復元パラメータの両方が必要な場合、圧縮設定情報記憶部45は圧縮パラメータのみならず、復元パラメータをも設定・更新する。   The compression parameter is used when the server 24 compresses and stores the image. A parameter used when returning (restoring) such a compressed image to the original image is a restoration parameter, which is mainly used by the viewer 25 (client). When the parameter information of the compression parameter and the decompression parameter partially overlap, or when both the compression parameter and the decompression parameter are necessary, the compression setting information storage unit 45 includes not only the compression parameter but also the decompression parameter. Set / update.

また、サーバ動作設定部43は、サーバ情報処理部42からの指示に基づいて、サーバ24の動作の設定情報を変更可能になっている。   The server operation setting unit 43 can change the operation setting information of the server 24 based on an instruction from the server information processing unit 42.

画像データ記憶装置46は、ユーザインターフェース41又は通信インターフェース48を介して与えられる画像データ(付帯情報含む)を、圧縮設定情報記憶部45に設定されている圧縮情報に応じて圧縮して保管している。   The image data storage device 46 stores the image data (including incidental information) given through the user interface 41 or the communication interface 48 after being compressed according to the compression information set in the compression setting information storage unit 45. Yes.

画像データ送信部47は、サーバ情報処理部42の指示の下に、画像データ記憶装置46に保管されている画像データを読み出して通信インターフェース48を介して各ビューア25に送信可能になっている。   The image data transmission unit 47 can read the image data stored in the image data storage device 46 under the instruction of the server information processing unit 42 and transmit it to each viewer 25 via the communication interface 48.

(動作の概要)
次に、本実施形態に係る医用画像収集保管システムにおける医用画像保管サーバ24及び各ビューア25の動作の概要を説明する。
(Overview of operation)
Next, an outline of operations of the medical image storage server 24 and each viewer 25 in the medical image collection / storage system according to the present embodiment will be described.

まず、図4に示す概略フローチャートを参照して、医用画像保管サーバ24における画像データの圧縮を説明する。   First, image data compression in the medical image storage server 24 will be described with reference to a schematic flowchart shown in FIG.

この医用画像保管サーバ24において、画像データ記憶装置46は、各医用画像診断装置(モダリティ:検査装置)21から画像データを受信して、その画像データを各種の条件やモダリティなどの情報に応じて識別する(ステップS1,S2)。次いで、画像データ記憶装置46は、圧縮設定情報記憶部45から圧縮アルゴリズムの種類を含む各種の圧縮条件を読み込み、これらの圧縮条件に従う圧縮パラメータで画像データを圧縮して保管する(ステップS3,S4)。これにより、各種の圧縮条件による圧縮データが事前に画像データ記憶装置46に用意される。   In this medical image storage server 24, the image data storage device 46 receives image data from each medical image diagnostic device (modality: inspection device) 21, and uses the image data according to information such as various conditions and modalities. Identify (steps S1, S2). Next, the image data storage device 46 reads various compression conditions including the type of compression algorithm from the compression setting information storage unit 45, and compresses and stores the image data with the compression parameters according to these compression conditions (steps S3 and S4). ). As a result, compressed data based on various compression conditions is prepared in the image data storage device 46 in advance.

このときの圧縮アルゴリズムには、例えば、JPEG(Joint Photographic Experts Group)やJPEG2000(Joint Photographic Experts Group 2000)が使用される。また、圧縮条件は、医用画像データを収集するモダリティ又は画像発生装置の種別、対象画像マトリックスサイズ、被検体の画像収集部位、寝台位置、スライス間隔、画像のピクセルサイズ、画像表示拡大率、1ピクセルのデータの深さ(例えば2688×2688のサイズの画像の場合、JPEG2000のパラメータはそれ用のものになり、タイルの設定が2688x2688となる)、などのパラメータのうち、何れか1種類による条件、又は、複数種が組み合わされた条件として設定され、この各条件に応じて所望の圧縮アルゴリズムの圧縮パラメータが設定される。この圧縮パラメータは、すなわち、パーシャルコンテント量を指定する指標として機能する。   For example, JPEG (Joint Photographic Experts Group) or JPEG2000 (Joint Photographic Experts Group 2000) is used as the compression algorithm at this time. The compression conditions include the modality for collecting medical image data or the type of the image generation apparatus, the target image matrix size, the image collection part of the subject, the bed position, the slice interval, the pixel size of the image, the image display magnification, 1 pixel The depth of the data (for example, in the case of an image having a size of 2688 × 2688, the JPEG2000 parameter is for that, the tile setting is 2688 × 2688), etc. Alternatively, it is set as a condition in which a plurality of types are combined, and a compression parameter of a desired compression algorithm is set according to each condition. This compression parameter functions as an index for designating the partial content amount.

次に、図5に示す概略フローチャートを参照して、医用画像保管サーバ24が各ビューア25から送信要求に応えて画像データを送信する動作を説明する。   Next, an operation in which the medical image storage server 24 transmits image data in response to a transmission request from each viewer 25 will be described with reference to a schematic flowchart shown in FIG.

まず、ビューア25において、ユーザの指令(ユーザの所望のデータ量又は画像表示時間)に応じてパーシャルコンテント量が指定されると、この指定情報を含む送信要求がサーバ24に送られる(ステップS11)。   First, when the partial content amount is designated in the viewer 25 in accordance with a user command (user desired data amount or image display time), a transmission request including this designation information is sent to the server 24 (step S11). .

サーバ24では、この送信要求(パーシャルコンテント量を含む)を受信し、この送信要求に係るパーシャルコンテント量の圧縮画像データを読み出してビューア25に向けて送信する(ステップS12,S13)。このパーシャルコンテント量の画像データ及び復元パラメータを受信したビューア25は、そのデータ量を復元パラメータで画像データに復元し、この画像データを表示器31Bに表示する(ステップS14)。   The server 24 receives this transmission request (including the partial content amount), reads out the compressed image data of the partial content amount related to this transmission request, and transmits it to the viewer 25 (steps S12 and S13). The viewer 25 that has received the partial content image data and the restoration parameter restores the data amount to the image data using the restoration parameter, and displays the image data on the display 31B (step S14).

ビューア25では、さらに必要な画像データ(パーシャルコンテント量の画像データ)がユーザの手動入力に応じて又はプログラムによる自動起動に応じて指定され、この指定量の情報が追加分の画像データ量(パーシャルコンテント量)を含む送信要求としてサーバ24に送られる(ステップS15)。サーバ24は再び、この送信要求を受信し、この要求により指定されているパーシャルコンテント量の画像データを読み出してビューア25に向けて送信する(ステップS16,S17)。このパーシャルコンテント量の画像データを受信したビューア25は、既に取得して表示しているパーシャルコンテント量の画像データと今回取得したパーシャルコンテント量の画像データとを組み合わせて表示器31Bに表示する(ステップS18)。   In the viewer 25, further required image data (partial content amount image data) is designated in response to a user's manual input or in response to automatic activation by a program, and information on the designated amount is added to the additional image data amount (partial amount). A transmission request including the content amount is sent to the server 24 (step S15). The server 24 receives this transmission request again, reads out the image data of the partial content amount specified by this request, and transmits it to the viewer 25 (steps S16 and S17). The viewer 25 that has received the partial content amount image data displays the partial content amount image data already acquired and displayed in combination with the partial content amount image data acquired this time on the display 31B (step S31). S18).

以上の処理は、ユーザが指定する表示条件を満たすまで繰り返して実行される。   The above processing is repeatedly executed until the display condition specified by the user is satisfied.

次に、前述した図5の処理の中で実行される部分取得に係る画像データの設定を図6に基づいて説明する。   Next, setting of image data relating to partial acquisition executed in the above-described processing of FIG. 5 will be described with reference to FIG.

各ビューア25の情報処理部32(CPUで機能的に構成される)は、ユーザがインターフェース31を介して表示時間を指定しているか否かを判断し、かかる指定がある場合、その表示時間値を読み込む(ステップS21,S22)。ここで、表示時間とは、「ユーザがビューア25に所望の医用画像の表示開始を指令してから実際に表示されるまでの時間」を言う。この表示時間は例えば30秒、1分などの数値として指令される。   The information processing unit 32 (functionally configured by the CPU) of each viewer 25 determines whether or not the user has specified a display time via the interface 31, and if there is such specification, the display time value. Is read (steps S21 and S22). Here, the display time means “the time from when the user instructs the viewer 25 to start displaying a desired medical image until it is actually displayed”. This display time is commanded as a numerical value such as 30 seconds or 1 minute.

このように表示時間がユーザから指定されると、情報処理部32は自動計算部34を駆動させて、医用画像データのパーシャルコンテント量(サイズ)を表示時間の指定値に基づいて演算する(ステップS23)。これにより、所望の表示時間に相当する画像データ量が求められる。   When the display time is specified by the user in this way, the information processing unit 32 drives the automatic calculation unit 34 to calculate the partial content amount (size) of the medical image data based on the specified display time (step). S23). Thereby, an image data amount corresponding to a desired display time is obtained.

一方、表示時間が指定されていない場合(ステップS21,NO)、情報処理部32は、この画像データ量の所望値が指定されているか否かを判断し、指定されている場合には、その値を読み込むとともに、その読み込み値に応じた医用画像データのパーシャルコンテント量を演算する(ステップS24、S25)。ここで、画像データ量とは、ユーザが早期の表示を希望して任意に指定するデータ量を言う。このデータ量は、0.2MB、0.025MBなどのデータファイルのサイズ、又は、データ比率(%)であってもよい。   On the other hand, when the display time is not designated (step S21, NO), the information processing section 32 determines whether or not the desired value of the image data amount is designated. A value is read, and the partial content amount of medical image data corresponding to the read value is calculated (steps S24 and S25). Here, the amount of image data refers to the amount of data that is arbitrarily designated by the user for early display. This data amount may be the size of a data file such as 0.2 MB, 0.025 MB, or the data ratio (%).

上述したステップS24でNOの判断となるときは、表示時間や画像データ量の所望値がユーザから未だ指定されていないので、情報処理部32は、デフォルト値(例えば表示時間のデフォルト値)を設定するか否かの判断を、例えばユーザとのインターラクティブなやり取りを通じて行なう(ステップS26)。デフォルト値を指定する場合には、予め決めてあるデフォルト値(例えば表示時間の既定値)を内部メモリから読み出す。デフォルト値を望まない場合、情報処理部32の処理はステップS21に戻される。   If the determination in step S24 is NO, the information processing unit 32 sets a default value (for example, the default value of the display time) because the desired value of the display time and the amount of image data has not yet been specified by the user. Whether or not to do so is determined through, for example, interactive exchange with the user (step S26). When specifying a default value, a predetermined default value (for example, a default value of display time) is read from the internal memory. If the default value is not desired, the process of the information processing unit 32 returns to step S21.

このようにパーシャルコンテント量が決定されると、このコンテント量の画像データを部分取得すべく、画像データ取得部36を介して医用画像保管サーバ24に送信要求が出される(ステップS28)。この要求を受けたサーバ24では、前述したように、サーバ情報処理部42の指令を受けた画像送信部47が、画像データ記憶装置46から、その指定されたパーシャルコンテント量の圧縮画像データを読み出してビューア25に返送する。   When the partial content amount is determined in this way, a transmission request is issued to the medical image storage server 24 via the image data acquisition unit 36 in order to partially acquire image data of this content amount (step S28). In the server 24 that has received this request, as described above, the image transmission unit 47 that has received an instruction from the server information processing unit 42 reads out the compressed image data of the designated partial content amount from the image data storage device 46. To the viewer 25.

このため、ビューア25は、要求したパーシャルコンテント量の圧縮画像データを受信し、圧縮画像データを復元パラメータで復元し、その復元した画像データを表示することができる(ステップS29〜S31)。   For this reason, the viewer 25 can receive the compressed image data of the requested partial content amount, restore the compressed image data with the restoration parameter, and display the restored image data (steps S29 to S31).

ここで、ステップS23及びステップS25で実行されるパーシャルコンテント量の演算(設定)を詳述する。この演算(設定)は、部分取得するための各種のパラメータを用いて行なう。このパラメータは、上述したパーシャルコンテント量及びこれに関連する表示を規定する指標である。   Here, the calculation (setting) of the partial content amount executed in step S23 and step S25 will be described in detail. This calculation (setting) is performed using various parameters for partial acquisition. This parameter is an index that defines the partial content amount and the display related thereto.

(1)そのうちの第1のパラメータは、画質をなるべく保った状態で無駄なデータ量を予測して最速表示を目指すための部分取得のパラメータである。これには、モダリティ種別または画像発生装置、対象画像マトリックスサイズ、画像データの収集部位、寝台位置、スライス間隔、画像のピクセルサイズ、画像表示拡大率、1ピクセルのデータの深さ(bits/pixelで1ピクセルを表現するためのデータ量;例えばRGBだと24bits/pixel、CTなどは16bits/pixel)などである。これらのパラメータは、その1種類が単独で、又は、複数種が組み合わされて圧縮条件として設定され、この圧縮条件が送信要求の一部としてサーバ側に送信される。サーバ24では、送信されてきた送信要求の中の圧縮条件に合致した圧縮パラメータの医用画像データを読み出されてビューア25に送信される。   (1) Of these, the first parameter is a partial acquisition parameter for aiming for the fastest display by predicting a useless amount of data while maintaining image quality as much as possible. This includes modality type or image generator, target image matrix size, image data collection site, bed position, slice interval, image pixel size, image display magnification, 1 pixel data depth (bits / pixel A data amount for expressing one pixel; for example, RGB is 24 bits / pixel, CT is 16 bits / pixel), and the like. One of these parameters is set alone as a compression condition or a combination of a plurality of parameters, and the compression condition is transmitted to the server side as a part of the transmission request. In the server 24, the medical image data with the compression parameters matching the compression conditions in the transmitted transmission request is read and transmitted to the viewer 25.

(2)第2のパラメータは、部分取得により表示されている、現在の画像、サムネイル表示されている画像、画像めくりされている画像、シネ表示対象画像(ユーザーに見える順番)などから最初に取得する、あるいは、次に部分取得する画像データの順番である。   (2) The second parameter is acquired first from the current image displayed by partial acquisition, the image displayed as a thumbnail, the image being turned over, the cine display target image (in the order visible to the user), etc. Or the order of image data to be partially acquired next.

(3)第3のパラメータは、部分所得される画像データがある閾値まで到達したときに、3次元画像を作成開始する旨の閾値情報である。例えば、部分取得される3D画像作成用の夫々の画像データが所定の閾値、例えば10%に達した時点で、それまでの画像データを用いて3次元画像を作成開始するとし、このときの閾値=10%が、ここで言うパラメータである。   (3) The third parameter is threshold information indicating that the creation of a three-dimensional image is started when image data to be partially earned reaches a certain threshold. For example, when each piece of partially acquired 3D image creation image data reaches a predetermined threshold, for example, 10%, creation of a 3D image is started using the previous image data. = 10% is the parameter here.

(4)第4のパラメータは、ユーザのビューア操作に伴うイベント(例えば拡大、こま数の変更、画像めくりなど)である。   (4) The fourth parameter is an event (for example, enlargement, change of the number of frames, image turning, etc.) accompanying the user's viewer operation.

(5)第5のパラメータは、緊急フラグ(例えば、キー画像を示すフラグ、スライス間隔がある基準より小さいことを示すフラグ、ピクセルサイズがある基準より小さいことを示すフラグ)である。   (5) The fifth parameter is an urgent flag (for example, a flag indicating a key image, a flag indicating that the slice interval is smaller than a certain reference, and a flag indicating that the pixel size is smaller than a certain reference).

上述の(2)〜(5)のうち、(2)及び(3)のパラメータは部分取得する画像の優先順を決めるという性質を有するのに対し、(4)及び(5)のパラメータは優先順位を無視して強制的に割り込んで部分取得させるという性質を有する。また、(1)〜(5)のパラメータは、総じて、無駄なデータを省いた部分取得を行い、これにより、画像表示のレスポンスと画質とのバランスをとるために用いられる。   Among the above (2) to (5), the parameters (2) and (3) have the property of determining the priority order of the partially acquired images, whereas the parameters (4) and (5) have priority. It has the property of ignoring the rank and forcibly interrupting and partially acquiring. The parameters (1) to (5) are generally used to perform partial acquisition without useless data, and thereby balance the image display response with the image quality.

(6)第6のパラメータは、ユーザの要望を満たすという観点から画質と表示速度のバランスをとるためのパラメータに関する。具体的には、このパラメータは、複数画像のトータルサイズ(量)と対象画像表示時のマトリックスサイズであり、これに応じて、部分所得に係る画像データ量を規定する。ここで、対象画像表示時のマトリックスサイズとは、1コマの画像表示領域を言い、モニタ表示領域、アプリケーションの表示エリア、表示コマ数、及びモニタの解像度を勘案して計算される。   (6) The sixth parameter relates to a parameter for balancing the image quality and the display speed from the viewpoint of satisfying the user's request. Specifically, this parameter is a total size (amount) of a plurality of images and a matrix size at the time of displaying the target image, and the amount of image data related to partial income is defined accordingly. Here, the matrix size at the time of displaying the target image means an image display area of one frame, and is calculated in consideration of the monitor display area, the application display area, the number of display frames, and the monitor resolution.

一例を、図7を用いて説明する。ユーザがこのパーシャルコンテント量を0.4MBに設定し、対象画像表示時マトリックスサイズが500x500(モニタ表示領域が2500×2000(モニタの解像度はこれ以上)、アプリケーションの表示エリアが2000x2000、表示コマ数が2×2(1コマ分が1枚の画像表示エリア)であるとする。もし、各コマが各表示エリアに分けられたとすると、各表示エリアに割り当てられたパーシャルコンテント量は割り算により計算される(つまり、0.1MB)。また、そのうちの1コマがさらに4コマに分割されたとすると、0.1MBを4で割った値、すなわち、0.025MBのパーシャルコンテント量の画像データとなる。この画像データの表示エリアは500×500となる。   An example will be described with reference to FIG. The user sets this partial content amount to 0.4 MB, the target image display matrix size is 500 × 500 (monitor display area is 2500 × 2000 (monitor resolution is higher), application display area is 2000 × 2000, and the number of display frames is 2 × 2 (one frame is one image display area) If each frame is divided into each display area, the partial content amount allocated to each display area is calculated by division. (That is, 0.1 MB) If one of the frames is further divided into four frames, 0.1 MB is divided by four, that is, image data having a partial content amount of 0.025 MB. The display area for image data is 500 × 500.

また、別の例を図8に示す。この例は、コマ数では的確に表現できない表示態様を示しており、この場合には、表示エリアに対する割合でデータ取得量が求められる。例えば、図8に示すように、2種類の画像(CR画像、CT画像)のうち、一方の画像に対する対象画像表示時のマトリクスサイズがアプリケーションの表示エリアの50%を占め、もう一つの画像に対するそれは25%を示すとすると、両者の割合に応じて、パーシャルコンテント取得量は0.2MB(CR画像)、0.1MB(CT画像)とそれぞれ決められる。この場合、1枚(1コマ)当たりのパーシャルコンテント量は、0.1MBとなる。このように、ユーザの、どの位のデータ量で何枚表示したいかという要望に応えることができる。   Another example is shown in FIG. This example shows a display mode that cannot be accurately expressed by the number of frames. In this case, the data acquisition amount is obtained as a ratio to the display area. For example, as shown in FIG. 8, of two types of images (CR image, CT image), the matrix size at the time of displaying the target image for one image occupies 50% of the display area of the application, and for the other image If it indicates 25%, the partial content acquisition amount is determined to be 0.2 MB (CR image) and 0.1 MB (CT image), respectively, according to the ratio of both. In this case, the partial content amount per frame (one frame) is 0.1 MB. In this way, it is possible to meet the user's desire to display how many pieces of data with what amount of data.

(7)第7のパラメータは、複数画像の表示時間である。これは、上述した各パラメータの応用例に関する。   (7) The seventh parameter is a display time of a plurality of images. This relates to an application example of each parameter described above.

例えば、あるビューアで画像表示までの時間を1秒と設定すると、このビューアが1秒で取得できるパーシャルコンテント量(例えば1MBだとすると)から逆算して複数画像のトータルサイズを決定する(例えば1MB)手法のパラメータである。   For example, when the time to display an image is set to 1 second in a certain viewer, the total size of a plurality of images is determined (for example, 1 MB) by calculating backward from the partial content amount (for example, 1 MB) that the viewer can acquire in 1 second. Parameter.

このビューアでのデータ取得量は、テストプログラムなどを用いて、ある日(月や曜日ごと)のある時間の取得時間などをあらかじめ実測したり推測したりすることで求めてもよいし、マニュアルで設定できるようにしてもよい。   The amount of data acquired by this viewer can be obtained by measuring or estimating the acquisition time of a certain day (month or day of the week) in advance using a test program, etc. It may be settable.

さらに、画像を取得した後、このビューアが画像を表示するまでの時間をこの考えの中に取り込むこともできる。例えば、ユーザが画像表示までの時間を1秒とした場合、画像の展開時間などの誤差もテストプログラム(あるいは手動)で測定しておく。これにより、ユーザの設定に係る複数画像の表示時間が1秒であるとすると、この値から、ビューア上での画像の展開時間などを引いて計算すれば、ユーザが望む時間で1画面を表示することが可能になる。例えば、展開時間が0.4秒かかる場合、ユーザが指定した表示時間の設定値は0.6秒(=1秒−0.4秒)となるから、パーシャルコンテント量=0.6MBであると決定できる。   Further, the time from when the image is acquired until the viewer displays the image can be taken into this idea. For example, if the user takes 1 second to display an image, errors such as the image development time are also measured with a test program (or manually). As a result, if the display time of multiple images related to user settings is 1 second, one screen can be displayed at the time desired by the user by subtracting the image development time on the viewer from this value. It becomes possible to do. For example, if the development time takes 0.4 seconds, the display time setting value specified by the user is 0.6 seconds (= 1 second−0.4 seconds), so that the partial content amount is 0.6 MB. Can be determined.

このようなパーシャルコンテント量の設定法は、初期表示だけに応用し(図5、ステップS11における処理)、その後の表示は自動的に設定されるパーシャルコンテント量の画像データを表示するようにしてもよい。   Such a method of setting the partial content amount is applied only to the initial display (the process in step S11 in FIG. 5), and the subsequent display may display image data of the partial content amount that is automatically set. Good.

なお、上述した各種のパラメータのうち、第1及び第6のパラメータは本発明に係るパーシャルコンテント量を決める基本的なパラメータであり、第1及び第6のパラメータの何れか一方を単独で用いて又は両者を組み合わせて実施することができる。その他のパラメータは、基本的なパラメータで設定されたパーシャルコンテント量を調整する機能を有するので、基本的なパラメータと組み合わせて用いることが望ましい。   Of the various parameters described above, the first and sixth parameters are basic parameters that determine the amount of partial content according to the present invention, and any one of the first and sixth parameters is used alone. Or it can carry out combining both. Since the other parameters have a function of adjusting the partial content amount set by the basic parameters, it is desirable to use them in combination with the basic parameters.

なお、上述した実施形態の医用画像保管サーバ24にあっては、表示速度を上げるためのサーバ側の助力機能を発揮することができる。具体的には、サーバ24の圧縮設定情報記憶部45は、画像データ記憶装置46に圧縮・格納している画像データの圧縮に関する圧縮パラメータを各種の圧縮条件(1種類又は複数種のパラメータの組み合わせ)に応じて定期的に又は随時更新するようにすればよい。このパラメータとしては、前述と同様に、モダリティ又は画像発生装置の種別、対象画像マトリックスサイズ、部位、寝台位置、スライス間隔、画像のピクセルサイズ、画像表示拡大率、1ピクセルのデータの深さ(例えば2688×2688のサイズの画像の場合、JPEG2Kのパラメータはそれ用のものになり、タイルの設定が2688x2688となる)、などが挙げられる。これらに応じて圧縮パラメータの設定が設定される。   In the medical image storage server 24 of the above-described embodiment, a server-side assist function for increasing the display speed can be exhibited. Specifically, the compression setting information storage unit 45 of the server 24 sets compression parameters relating to compression of image data compressed and stored in the image data storage device 46 to various compression conditions (a combination of one type or a plurality of types of parameters). ) May be updated periodically or as needed. As described above, the parameters include the type of modality or the image generation device, the target image matrix size, the site, the bed position, the slice interval, the pixel size of the image, the image display magnification, and the pixel depth (for example, In the case of an image having a size of 2688 × 2688, the JPEG2K parameter is for that, and the tile setting is 2688 × 2688). The compression parameter settings are set accordingly.

以上のように、本実施形態に係る医用画像収集保管システムによれば、各ビューア25に医用画像を表示させるときの所望の表示時間又はデータ量に応じた部分取得(パーシャルコンテント取得)によるデータ量の医用画像データを、要求に応じて、医用画像保管サーバ24から各ビューア25に送信させて表示させる。このため、医用画像保管サーバ24や各ビューア25のコンピュータ性能、ネットワーク環境、及び、画像データサイズ、圧縮法などの使用条件が同一であると仮定した場合に、各ビューア25が医用画像保管サーバ24に画像データの送信を要求してから、実際に画像データが各ビューア25に表示するまでの待ち時間を確実に短縮でき、ユーザにとって画像表示レスポンスの良いシステムを提供することができる。   As described above, according to the medical image collection and storage system according to the present embodiment, the data amount by partial acquisition (partial content acquisition) corresponding to the desired display time or data amount when displaying the medical image on each viewer 25. The medical image data is transmitted from the medical image storage server 24 to each viewer 25 and displayed on demand. Therefore, when it is assumed that the medical image storage server 24 and each viewer 25 have the same computer performance, network environment, and usage conditions such as the image data size and the compression method, each viewer 25 has the medical image storage server 24. Thus, it is possible to reliably reduce the waiting time from when image data transmission is requested to when the image data is actually displayed on each viewer 25, and to provide a system with a good image display response for the user.

とくに、単に表示時間やデータ量に応じた部分取得をするのみならず、その部分取得に拠るデータ量、すなわちパーシャルコンテント量を、医用画像データの圧縮率に関連するパラメータ、現在観察中の医用画像から次に表示させる医用画像を決める順番に関するパラメータ、部分取得分の画像データを3次元表示させるときの閾値に関するパラメータ、部分取得分の画像データの表示に対するユーザ操作によるイベントに関するパラメータ、部分取得分の画像データの表示に対する緊急フラグ情報に関するパラメータなど、各種の条件に応じてきめ細かく調整できる。したがって、パーシャルコンテント量も多様な条件に合わせて調整でき、常に安定した画像表示レスポンスの良いシステムを提供できるので、ユーザの待ち時間短縮に因る作業効率の向上も期待できる。   In particular, not only partial acquisition according to the display time and data amount, but also the amount of data based on the partial acquisition, that is, the partial content amount, parameters related to the compression ratio of medical image data, the medical image currently being observed Next, parameters related to the order of determining the medical image to be displayed next, parameters related to the threshold when the image data for partial acquisition is displayed three-dimensionally, parameters related to an event by a user operation for displaying image data for partial acquisition, and partial acquisition Fine adjustment can be made according to various conditions such as parameters relating to emergency flag information for the display of image data. Therefore, the partial content amount can be adjusted according to various conditions, and a stable system with good image display response can be provided at all times. Therefore, improvement in work efficiency due to shortening of the waiting time of the user can be expected.

なお、上述した実施形態にあっては、パーシャルコンテント量の自動演算を各ビューア25の側で実行するようにしたが、このビューアは単にパーシャルコンテント量を演算するための条件を医用画像保管サーバ24に送るだけの構成とし、このサーバでパーシャルコンテント量の演算を行なうようにしてもよい。   In the embodiment described above, the automatic calculation of the partial content amount is executed on the side of each viewer 25. However, this viewer simply sets the condition for calculating the partial content amount as the medical image storage server 24. The partial content amount may be calculated by this server.

また、上述した実施形態の一つの変形例として、パーシャルコンテント量の指定情報としてユーザが入力した表示時間をシステム側で変更する構成を提供することができる。   In addition, as a modification of the above-described embodiment, it is possible to provide a configuration in which the display time input by the user as partial content amount designation information is changed on the system side.

例えば、図9に模式的に示すように、ユーザがビューア25にて1秒という表示時間を指定したとする。この場合、1秒に対応したパーシャルコンテント量の送信要求がビューア25からサーバ24に出される。これに応じて、サーバ24は、ユーザの要求に沿ったパーシャルコンテント量の圧縮画像データをサーチする。このとき、サーバ24は、ユーザ要求に一番近い量であって且つ処理し易いパーシャルコンテント量の圧縮画像データがある場合には、これを読み出す。これは、サーバ24で実行する処理のアルゴリズムを、かかる読出しを行なうように予め設定することにより可能となる。このようにサーバ24がパーシャルコンテント量を変更する場合、変更したパーシャルコンテント量に応じた新しい圧縮パラメータが決まる。この結果、表示時間も例えば2秒に変更される。このように、変更された表示時間を含む新しい圧縮パラメータは、圧縮画像データとともに、サーバ24からビューア25に送り返される。そこで、ビューア25は、返送されてきた圧縮パラメータ(つまり、復元パラメータ)を用いて圧縮画像データを復元して表示する。   For example, it is assumed that the user designates a display time of 1 second on the viewer 25 as schematically shown in FIG. In this case, a transmission request for the partial content amount corresponding to 1 second is issued from the viewer 25 to the server 24. In response to this, the server 24 searches the compressed image data of the partial content amount according to the user's request. At this time, if there is compressed image data having a partial content amount that is closest to the user request and easy to process, the server 24 reads the compressed image data. This is made possible by setting in advance an algorithm for processing executed by the server 24 so as to perform such reading. When the server 24 changes the partial content amount in this way, a new compression parameter is determined according to the changed partial content amount. As a result, the display time is also changed to 2 seconds, for example. Thus, the new compression parameter including the changed display time is sent back from the server 24 to the viewer 25 together with the compressed image data. Therefore, the viewer 25 restores and displays the compressed image data using the returned compression parameters (that is, restoration parameters).

この結果、必ずしもユーザが入力した表示時間に固執することなく、よりフレキシビリティの高いシステムを提供することができる。   As a result, a system with higher flexibility can be provided without necessarily sticking to the display time input by the user.

なお、本発明は、前述した実施形態やその変形例に限定されることなく、特許請求の範囲に記載の要旨の範囲内で更に様々な態様に変形して実行できる。   Note that the present invention is not limited to the above-described embodiments and modifications thereof, and can be implemented with various modifications within the scope of the gist of the claims.

本発明の一実施形態に係る医用画像表示システムを実施した医用画像収集保管システムの全体構成を示す概略ブロック図。1 is a schematic block diagram showing the overall configuration of a medical image collection / storage system that implements a medical image display system according to an embodiment of the present invention. 各ビューア(端末装置)の構成を示す概略ブロック図。The schematic block diagram which shows the structure of each viewer (terminal device). 医用画像保管サーバの構成を示す概略ブロック図。The schematic block diagram which shows the structure of a medical image storage server. 医用画像保管サーバで実行される医用画像データの圧縮処理を伴う保管処理を説明する概略フローチャート。6 is a schematic flowchart for explaining a storage process involving a compression process of medical image data executed by a medical image storage server. 医用画像保管サーバと各ビューアとの間で実行される医用画像データの部分取得(コンテントコンテント取得)の概要を説明するフローチャート。The flowchart explaining the outline | summary of the partial acquisition (content content acquisition) of the medical image data performed between a medical image storage server and each viewer. 実施形態において各ビューアで実行されるパーシャルコンテント量の設定及び画像データの部分取得の流れを説明するフローチャート。6 is a flowchart for explaining the flow of partial content setting and image data partial acquisition executed by each viewer in the embodiment. 部分取得された複数枚の画像のデータ量とモータ上の画像表示エリアの関係を例示する説明図。Explanatory drawing which illustrates the relationship between the data amount of the partially acquired image of several sheets, and the image display area on a motor. 部分取得された複数枚の画像のデータ量とモータ上の画像表示エリアの関係を例示する別の説明図。Another explanatory view illustrating the relationship between the data amount of a plurality of partially acquired images and the image display area on the motor. 変形例に係る部分取得の概要を説明する図。The figure explaining the outline | summary of the partial acquisition which concerns on a modification.

符号の説明Explanation of symbols

11 病院内システム
12 公衆網(通信ネットワーク)
13 病院外システム
24 医用画像保管サーバ
25,26,31,32 ビューア(端末装置)
31 ユーザインターフェース
32 情報処理部
33 サイズ・時間設定部
34 自動計算部
35 圧縮設定更新部
36 画像データ取得部
37 通信インターフェース
41 ユーザインターフェース
42 サーバ情報処理部
43 サーバ動作設定部
44 サーバ固有情報記憶部
45 圧縮情報記憶部
46 画像データ記憶部
47 画像データ送信部
48 通信インターフェース
11 Hospital system 12 Public network (communication network)
13 Out-of-hospital system 24 Medical image storage server 25, 26, 31, 32 Viewer (terminal device)
31 User interface 32 Information processing unit 33 Size / time setting unit 34 Automatic calculation unit 35 Compression setting update unit 36 Image data acquisition unit 37 Communication interface 41 User interface 42 Server information processing unit 43 Server operation setting unit 44 Server specific information storage unit 45 Compression information storage unit 46 Image data storage unit 47 Image data transmission unit 48 Communication interface

Claims (12)

医用画像データを保管しているサーバと、このサーバから前記医用画像データを受信して表示する端末装置とを通信用のネットワークに接続した医用画像表示システムにおいて、
前記端末装置に医用画像を表示させるときの所望の表示時間を設定する設定手段と、この設定手段により設定された表示時間に応じた、前記医用画像データに対する部分取得分のデータ量を演算する演算手段と、この演算手段により演算された部分取得分のデータ量に対応したデータ送信を前記端末装置から前記サーバに要求させる送信要求手段と、この送信要求手段により要求された部分取得分のデータ量の医用画像データを前記サーバから前記端末装置に送信させる送信手段と、この送信された医用画像データに基づいた表示を行う表示手段と、を備えたことを特徴とする医用画像表示システム。
In a medical image display system in which a server that stores medical image data and a terminal device that receives and displays the medical image data from the server are connected to a communication network.
Setting means for setting a desired display time when displaying a medical image on the terminal device, and calculation for calculating a data amount for partial acquisition of the medical image data according to the display time set by the setting means Means, a transmission request means for requesting the server to transmit data corresponding to the data amount for partial acquisition calculated by the calculation means, and a data amount for partial acquisition requested by the transmission request means A medical image display system comprising: transmission means for transmitting the medical image data from the server to the terminal device; and display means for performing display based on the transmitted medical image data.
医用画像データを保管しているサーバに通信用のネットワークを介して接続され且つ前記サーバから前記医用画像データを受信して表示する端末装置において、
前記端末装置に医用画像を表示させるときの所望の表示時間を指定する指定手段と、この指定手段により指定された表示時間に応じた、前記医用画像データに対する部分取得分のデータ量を設定する設定手段と、この設定手段により設定された部分取得分のデータ量に対応したデータ送信を前記サーバに要求する送信要求手段と、この要求に応じて前記サーバから送信されてきた部分取得分の医用画像データに基づいた表示を行なう表示手段とを備えたことを特徴とする端末装置。
In a terminal device connected to a server storing medical image data via a communication network and receiving and displaying the medical image data from the server,
A designation unit that designates a desired display time when displaying a medical image on the terminal device, and a setting that sets a data amount for partial acquisition of the medical image data according to the display time designated by the designation unit Means, a transmission request means for requesting the server to transmit data corresponding to the amount of data for partial acquisition set by the setting means, and a medical image for partial acquisition transmitted from the server in response to the request A terminal device comprising display means for performing display based on data.
前記指定手段は、前記表示時間をユーザの所望の値として指定する手段を備えたことを特徴とする請求項2に記載の端末装置。 The terminal device according to claim 2, wherein the specifying unit includes a unit that specifies the display time as a value desired by a user. 前記設定手段は、データ量の無駄を省いて画質と表示速度をバランスさせるための複数のパラメータのうち、少なくとも1つのパラメータを用いて設定された条件毎に、前記所望値の前記表示時間に応じた、前記医用画像データに対する部分取得分のデータ量を設定するよう構成され、
前記画質と表示速度をバランスさせるためのパラメータは、前記医用画像の複数枚を表示させるときの当該複数枚の医用画像のトータルのデータ量と当該複数枚の画像の表示マトリクスサイズとを含む、
ことを特徴とする請求項3記載の端末装置。
The setting means corresponds to the display time of the desired value for each condition set using at least one parameter among a plurality of parameters for eliminating waste of data amount and balancing image quality and display speed. Further, it is configured to set a data amount for partial acquisition for the medical image data,
The parameters for balancing the image quality and the display speed include a total data amount of the plurality of medical images and a display matrix size of the plurality of images when displaying a plurality of the medical images.
The terminal device according to claim 3.
前記設定手段は、前記条件毎に前記医用画像データの圧縮パラメータを設定する手段を含むことを特徴とする請求項4に記載の端末装置。 The terminal device according to claim 4, wherein the setting unit includes a unit that sets a compression parameter of the medical image data for each of the conditions. 前記画質と表示速度をバランスさせるためのパラメータは、前記医用画像データを収集するモダリティ又は画像発生装置の種別、当該医用画像データのマトリクスサイズ、当該医用画像データを収集した被検体の部位、当該医用画像データを収集したときの寝台位置、当該医用画像データを収集したときのスライス間隔、当該医用画像データのピクセルサイズ、当該医用画像データの表示拡大率、当該医用画像データの1ピクセルのデータ深さ、現在観察中の表示画像から次に取得する医用画像データのサムネイルの特定情報、及び、現在観察中の表示画像から次に取得する医用画像データの順番を示す情報のうちのいずれか1つを含むことを特徴とする請求項4に記載の端末装置。 The parameters for balancing the image quality and the display speed include the modality that collects the medical image data or the type of the image generation device, the matrix size of the medical image data, the part of the subject that collected the medical image data, the medical The bed position when the image data is collected, the slice interval when the medical image data is collected, the pixel size of the medical image data, the display magnification of the medical image data, and the data depth of one pixel of the medical image data Any one of the identification information of the thumbnail of the medical image data to be acquired next from the currently observed display image and the information indicating the order of the medical image data to be acquired next from the currently observed display image The terminal device according to claim 4, comprising: 前記画質と表示速度をバランスさせるためのパラメータは、現在観察中の前記医用画像から次に表示させる医用画像を決める順番に関するパラメータ、前記部分取得分の画像データを3次元表示させるときの閾値に関するパラメータ、前記部分取得分の画像データの表示に対するユーザ操作によるイベントに関するパラメータ、及び、前記部分取得分の画像データの表示に対する緊急フラグ情報に関するパラメータのうちの1つ又は複数を含むことを特徴とする請求項4に記載の端末装置。 The parameter for balancing the image quality and the display speed is a parameter related to the order of determining the medical image to be displayed next from the medical image currently being observed, and a parameter related to a threshold when the image data for partial acquisition is displayed three-dimensionally One or more of parameters relating to an event by a user operation for displaying the image data for partial acquisition and parameters relating to emergency flag information for displaying the image data for partial acquisition. Item 5. The terminal device according to Item 4. 前記画質と表示速度をバランスさせるためのパラメータは、前記医用画像の複数枚を表示させるときの表示時間の設定に関するパラメータを含むことを特徴とする請求項に記載の端末装置。 The terminal device according to claim 4 , wherein the parameter for balancing the image quality and the display speed includes a parameter related to setting a display time when a plurality of the medical images are displayed. 前記設定手段は、データ量の無駄を省いて画質と表示速度をバランスさせるための複数のパラメータのうち、少なくとも1つのパラメータを用いて設定された条件毎に、前記医用画像データの圧縮パラメータを設定する手段を含むことを特徴とする請求項2又は3に記載の端末装置。 The setting unit sets a compression parameter for the medical image data for each condition set using at least one parameter among a plurality of parameters for balancing the image quality and the display speed without waste of data amount. The terminal device according to claim 2, further comprising means for performing the processing. 医用画像データを保管するとともに通信用のネットワークを介して端末装置に接続された医用画像保管サーバにおいて、
前記端末装置に医用画像を表示させるときの所望の表示時間に応じた部分取得分のデータ量の前記医用画像データに対する送信要求を前記端末装置から受け付ける手段と、
この送信要求があったときに、当該送信要求に応じた前記部分取得分のデータ量の前記医用画像データを前記端末装置に送信する送信手段とを備えたことを特徴とする医用画像保管サーバ。
In a medical image storage server that stores medical image data and is connected to a terminal device via a communication network,
Means for receiving, from the terminal device, a transmission request for the medical image data with a data amount for partial acquisition corresponding to a desired display time when displaying a medical image on the terminal device;
A medical image storage server, comprising: a transmission unit configured to transmit the medical image data having a data amount for the partial acquisition corresponding to the transmission request to the terminal device when the transmission request is received.
前記医用画像データを圧縮して保管する保管手段を備え、前記送信手段は、データ量の無駄を省いて画質と表示速度をバランスさせるためのパラメータのうち、少なくとも1つのパラメータを用いて設定された条件毎に設定した圧縮パラメータで前記保管手段に保管されている前記医用画像データを圧縮する手段と、前記送信要求に対応した前記条件に基づく圧縮パラメータで圧縮されている前記医用画像データを前記保管手段から読み出して前記部分取得分のデータ量として前記端末装置に送信する手段と有することを特徴とする請求項10に記載の医用画像保管サーバ。 A storage unit configured to compress and store the medical image data, and the transmission unit is set using at least one parameter among parameters for balancing the image quality and the display speed without waste of data amount Means for compressing the medical image data stored in the storage means with a compression parameter set for each condition; and storing the medical image data compressed with a compression parameter based on the condition corresponding to the transmission request The medical image storage server according to claim 10 , further comprising means for reading from the means and transmitting to the terminal device as the data amount for the partial acquisition. 医用画像データを保管しているサーバから通信用ネットワークを介して前記医用画像データを端末装置に送信して表示させる医用画像表示方法において、
前記端末装置に医用画像を表示させるときの所望の表示時間を設定し、この設定された表示時間に応じた、前記医用画像データに対する部分取得分のデータ量を演算し、この演算された部分取得分のデータ量に対応したデータ送信を前記端末装置から前記サーバに要求させ、この要求された部分取得分のデータ量の医用画像データを前記サーバから前記端末装置に送信させ、この送信された医用画像データに基づいた表示を前記端末装置に行なわせることを特徴とする医用画像表示方法。
In the medical image display method for displaying the medical image data by transmitting the medical image data from the server storing the medical image data to the terminal device via the communication network,
A desired display time for displaying a medical image on the terminal device is set, a data amount for partial acquisition for the medical image data is calculated according to the set display time , and the calculated partial acquisition is calculated. The terminal device requests the server to transmit data corresponding to the amount of data, and causes the server to transmit medical image data of the requested partial acquisition amount of data to the terminal device. A medical image display method which causes the terminal device to perform display based on image data.
JP2004184865A 2004-06-23 2004-06-23 Medical image display system, medical image storage server, terminal device, and medical image display method Expired - Lifetime JP4568038B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004184865A JP4568038B2 (en) 2004-06-23 2004-06-23 Medical image display system, medical image storage server, terminal device, and medical image display method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004184865A JP4568038B2 (en) 2004-06-23 2004-06-23 Medical image display system, medical image storage server, terminal device, and medical image display method

Publications (2)

Publication Number Publication Date
JP2006006449A JP2006006449A (en) 2006-01-12
JP4568038B2 true JP4568038B2 (en) 2010-10-27

Family

ID=35774329

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004184865A Expired - Lifetime JP4568038B2 (en) 2004-06-23 2004-06-23 Medical image display system, medical image storage server, terminal device, and medical image display method

Country Status (1)

Country Link
JP (1) JP4568038B2 (en)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5048286B2 (en) 2006-08-09 2012-10-17 富士フイルム株式会社 Image transfer method, image transfer apparatus, and image transfer program
JP2008059250A (en) * 2006-08-31 2008-03-13 Toshiba Corp Image management system, image management method, and image management program
JP5562740B2 (en) 2009-07-15 2014-07-30 株式会社東芝 Medical image display system and medical image communication method
JP5730143B2 (en) 2010-07-13 2015-06-03 株式会社東芝 Medical image device and medical image storage device
JP6021653B2 (en) * 2013-01-18 2016-11-09 東芝メディカルシステムズ株式会社 Medical image information system and medical image server

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002282247A (en) * 2001-03-22 2002-10-02 Fuji Photo Film Co Ltd Medical image management system
JP4101023B2 (en) * 2002-11-05 2008-06-11 シャープ株式会社 Network scanner

Also Published As

Publication number Publication date
JP2006006449A (en) 2006-01-12

Similar Documents

Publication Publication Date Title
CN101246517B (en) Image diagnosis support device
JP4717313B2 (en) Image display method, apparatus and program
US8004516B2 (en) Image processing system for volume rendering
JP5040923B2 (en) Medical image management system
US9710598B2 (en) Information processor, image data optimization method and program
US20090287504A1 (en) Methods, systems and a platform for managing medical data records
JP4992912B2 (en) Medical image management system
JP5371703B2 (en) Medical image generation device, medical image storage device, medical image display device, and medical image display system
JP5537088B2 (en) Medical image display device and medical image management system
EP1477922A2 (en) Image management method, apparatus and program
JP2009011721A (en) Medical image management apparatus and program
JP4568038B2 (en) Medical image display system, medical image storage server, terminal device, and medical image display method
JP2021149227A (en) Medical exposure dose management device and program
JP2004194869A (en) Image displaying system, terminal for displaying, and image server
JP2006223465A (en) Medical image system and acquisition method of medical image
JP2009047873A (en) Image display method and apparatus, and image display program
JPWO2009063900A1 (en) Medical image display device and display control method
US20140059027A1 (en) Server device, client device, medical image processing system, and medical image processing method
JP2006312025A (en) Image management system, image management method, and program
JP2005327302A (en) Report generating system in network environment
JP2019220036A (en) Medical image display system
JPWO2006087895A1 (en) Medical imaging system
JP2007087285A (en) Interpretation report creation device and client terminal
JP2021177792A (en) Medical image management equipment and programs
JP7822738B2 (en) Information processing device, information processing method, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070612

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100427

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100628

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100713

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100806

R150 Certificate of patent or registration of utility model

Ref document number: 4568038

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130813

Year of fee payment: 3

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313117

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

EXPY Cancellation because of completion of term