JP6147079B2 - 顕微鏡システム、貼り合わせ領域の決定方法、及び、プログラム - Google Patents
顕微鏡システム、貼り合わせ領域の決定方法、及び、プログラム Download PDFInfo
- Publication number
- JP6147079B2 JP6147079B2 JP2013102271A JP2013102271A JP6147079B2 JP 6147079 B2 JP6147079 B2 JP 6147079B2 JP 2013102271 A JP2013102271 A JP 2013102271A JP 2013102271 A JP2013102271 A JP 2013102271A JP 6147079 B2 JP6147079 B2 JP 6147079B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- region
- area
- recommended
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/0004—Microscopes specially adapted for specific applications
- G02B21/002—Scanning microscopes
- G02B21/0024—Confocal scanning microscopes (CSOMs) or confocal "macroscopes"; Accessories which are not restricted to use with CSOMs, e.g. sample holders
- G02B21/008—Details of detection or image processing, including general computer control
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
- G02B21/365—Control or image processing arrangements for digital or video microscopes
- G02B21/367—Control or image processing arrangements for digital or video microscopes providing an output produced by processing a plurality of individual source images, e.g. image tiling, montage, composite images, depth sectioning, image comparison
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/69—Microscopic objects, e.g. biological cells or cellular parts
- G06V20/693—Acquisition
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
- G06V10/16—Image acquisition using multiple overlapping images; Image stitching
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Analytical Chemistry (AREA)
- Optics & Photonics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Chemical & Material Sciences (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Molecular Biology (AREA)
- Microscoopes, Condenser (AREA)
Description
従って、特許文献1に開示される技術を用いることで、高倍率対物レンズで取得する要素画像の枚数を減らすことができる。
顕微鏡システム1は、図1に示すように、共焦点顕微鏡本体100、表示装置120、入力装置130、及び、制御装置140を備えている。
以下、ユーザが図18に示す試料106を撮像した場合を例に、本実施例に係る顕微鏡システムで行われる貼り合わせ領域決定処理について説明する。
100 共焦点顕微鏡本体
101 レーザ光源
102 PBS
103 二次元走査部
104 1/4λ板
105 対物レンズ
106 試料
107、116 結像レンズ
108 ピンホール板
109 光検出器
110 AD変換器
111 レボルバ
114 X−Yステージ
115 白色光源
117 CCDカメラ
120 表示装置
130 入力装置
140 制御装置
141 CPU
142 メモリ
143 入出力I/F
144 外部記憶装置
145 可搬記録媒体駆動装置
146 可搬記録媒体
147 バス
151 表示制御部
152 推奨領域決定部
153 要素領域決定部
154 要素領域変更部
155 記憶部
160 マップ画像生成部
161 ライブ画像受信部
162 相対移動量算出部
164 撮影画像構築部
163 ライブ位置枠生成部
165 画像合成部
200 画面
201 画像表示領域
202 ライブ画像表示領域
203、204、207、208 操作部
205、211、212 ボタン
209 ドロップダウンリスト
210 ラジオボタン
F ライブ位置枠
C、C1 カーソル
D1、D2、D3、D4、D11、D12 領域
P1、P2、P3、P4、P5 ポイント
Pe 位置画像
Pm マップ画像
Ps 試料画像
Claims (14)
- 複数の要素画像を貼り合わせて貼り合わせ画像を生成するための顕微鏡システムであって、
試料の画像を取得する画像取得部と、
前記画像取得部の視野を前記試料に対して相対的に移動させる視野移動部と、
前記視野移動部によって移動する前記画像取得部の視野が移動可能な前記試料の領域である全体領域中から、ユーザの指示に応じて前記貼り合わせ画像として画像化すべき領域である推奨領域を決定する推奨領域決定部と、
前記推奨領域決定部で決定された前記推奨領域を満たすように前記推奨領域に格子状に配置された、各々が前記画像取得部の視野サイズを有し且つ前記推奨領域の少なくとも一部と重複する複数の領域を、前記複数の要素画像を取得する複数の要素領域として決定する要素領域決定部と、
前記画像取得部の現在の視野に対応する領域の最新の画像であって前記画像取得部で取得した前記試料の画像であるライブ画像と、前記全体領域中における前記画像取得部の現在の視野に対応する領域の位置と、を表示する表示部と、を備える
ことを特徴とする顕微鏡システム。 - 請求項1に記載の顕微鏡システムにおいて、
前記推奨領域決定部は、前記ユーザの指示に応じて円形または楕円形の前記推奨領域を
決定する
ことを特徴とする顕微鏡システム。 - 請求項1または請求項2に記載の顕微鏡システムにおいて、
前記推奨領域決定部は、前記ユーザによって指示された前記全体領域中の3点を通る円の内部を前記推奨領域として決定する
ことを特徴とする顕微鏡システム。 - 請求項1または請求項2に記載の顕微鏡システムにおいて、
前記推奨領域決定部は、前記ユーザによって指示された前記全体領域中の5点を通る楕円の内部を前記推奨領域として決定する
ことを特徴とする顕微鏡システム。 - 請求項1から請求項4のいずれか1項に記載の顕微鏡システムにおいて、さらに、
前記画像取得部は、前記試料を走査する走査部を有する光学系を備え、
前記要素領域決定部は、格子状に配置された前記複数の要素領域のうちの最も外側の列または行の少なくとも一方に配置された要素領域を、当該要素領域の一部の領域を前記走査部で走査して前記要素画像を取得するバンド走査領域として決定する
ことを特徴とする顕微鏡システム。 - 請求項1から請求項4のいずれか1項に記載の顕微鏡システムにおいて、さらに、
前記画像取得部は、前記試料を走査する走査部を有する光学系を備え、
前記要素領域決定部は、格子状に配置された前記複数の要素領域のうちの前記推奨領域外の領域を含む要素領域を、当該要素領域の一部の領域を前記走査部で走査して前記要素画像を取得するバンド走査領域として決定する
ことを特徴とする顕微鏡システム。 - 請求項5または請求項6に記載の顕微鏡システムにおいて、
前記画像取得部は、前記バンド走査領域と前記バンド走査領域ではない前記要素領域とで、同じ解像度の要素画像を取得する
ことを特徴とする顕微鏡システム。 - 請求項1に記載の顕微鏡システムにおいて、さらに、
前記要素領域決定部で決定された前記複数の要素領域から前記ユーザによって選択された要素領域を、要素領域ではない領域に変更する要素領域変更部を備える
ことを特徴とする顕微鏡システム。 - 請求項1に記載の顕微鏡システムにおいて、さらに、
要素領域ではない領域であって前記画像取得部の視野サイズを有する前記ユーザによって選択された領域を、前記要素領域へ変更する要素領域変更部を備える
ことを特徴とする顕微鏡システム。 - 請求項1に記載の顕微鏡システムにおいて、さらに、
前記推奨領域決定部は、ユーザの指示に応じて複数の前記推奨領域を決定し、
前記要素領域決定部は、前記推奨領域決定部で決定された前記複数の推奨領域の各々に対して、前記複数の要素領域を決定する
ことを特徴とする顕微鏡システム。 - 請求項1に記載の顕微鏡システムにおいて、さらに、
前記画像取得部は、
前記ライブ画像を取得するライブ画像取得部と、
前記要素画像を取得する要素画像取得部と、を備える
ことを特徴とする顕微鏡システム。 - 請求項11に記載の顕微鏡システムにおいて、
前記要素画像取得部は、前記試料を走査する走査部を有する光学系を備える
ことを特徴とする顕微鏡システム。 - 画像取得部と表示部とを備える、複数の要素画像を貼り合わせて貼り合わせ画像を生成する顕微鏡システムの貼り合わせ領域を決定する方法であって、
前記画像取得部の現在の視野に対応する領域の最新の画像であって前記画像取得部で取得した試料の画像であるライブ画像と、前記画像取得部の視野が移動可能な前記試料の領域である全体領域中における前記画像取得部の現在の視野に対応する領域の位置と、を表示部に表示させ、
前記全体領域中から、ユーザの指示に応じて前記貼り合わせ画像として画像化すべき領域である推奨領域を決定し、
決定された前記推奨領域を満たすように前記推奨領域に格子状に配置された、各々が前記画像取得部の視野サイズを有し且つ前記推奨領域の少なくとも一部と重複する複数の領域を、複数の要素領域として決定し、
前記複数の要素領域からなる領域を、前記貼り合わせ領域として決定する
ことを特徴とする方法。 - 画像取得部と表示部とを備える、複数の要素画像を貼り合わせて貼り合わせ画像を生成するための顕微鏡システムのプログラムであって、
前記画像取得部の現在の視野に対応する領域の最新の画像であって前記画像取得部で取得した試料の画像であるライブ画像と、前記画像取得部の視野が移動可能な前記試料の領域である全体領域中における前記画像取得部の現在の視野に対応する領域の位置とを表示部に表示させ、
前記全体領域中から、ユーザの指示に応じて前記貼り合わせ画像として画像化すべき領域である推奨領域を決定し、
決定された前記推奨領域を満たすように前記推奨領域に格子状に配置された、各々が前記画像取得部の視野サイズを有し且つ前記推奨領域の少なくとも一部と重複する複数の領域を、複数の要素領域として決定し、
前記複数の要素領域からなる領域を、前記貼り合わせ領域として決定する
処理をコンピュータに実行させることを特徴とするプログラム。
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2013102271A JP6147079B2 (ja) | 2013-05-14 | 2013-05-14 | 顕微鏡システム、貼り合わせ領域の決定方法、及び、プログラム |
| US14/263,976 US20140340475A1 (en) | 2013-05-14 | 2014-04-28 | Microscope system and stitched area decision method |
| EP14166240.3A EP2804145B1 (en) | 2013-05-14 | 2014-04-28 | Microscope system and stitched area decision method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2013102271A JP6147079B2 (ja) | 2013-05-14 | 2013-05-14 | 顕微鏡システム、貼り合わせ領域の決定方法、及び、プログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2014222320A JP2014222320A (ja) | 2014-11-27 |
| JP6147079B2 true JP6147079B2 (ja) | 2017-06-14 |
Family
ID=50543533
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2013102271A Active JP6147079B2 (ja) | 2013-05-14 | 2013-05-14 | 顕微鏡システム、貼り合わせ領域の決定方法、及び、プログラム |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US20140340475A1 (ja) |
| EP (1) | EP2804145B1 (ja) |
| JP (1) | JP6147079B2 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7444232B1 (en) | 2007-05-11 | 2008-10-28 | Mitsubishi Electric Corporation | Knock control apparatus for internal combustion engine |
Families Citing this family (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP6455829B2 (ja) * | 2013-04-01 | 2019-01-23 | キヤノン株式会社 | 画像処理装置、画像処理方法、およびプログラム |
| JP6509820B2 (ja) | 2013-05-01 | 2019-05-08 | バイオ−ラッド ラボラトリーズ インコーポレーティッド | 調節式デジタル顕微鏡ディスプレイ |
| JP6147080B2 (ja) * | 2013-05-14 | 2017-06-14 | オリンパス株式会社 | 顕微鏡システム、貼り合わせ領域の決定方法、及び、プログラム |
| US9721371B2 (en) * | 2015-12-02 | 2017-08-01 | Caterpillar Inc. | Systems and methods for stitching metallographic and stereoscopic images |
| JP2017134115A (ja) * | 2016-01-25 | 2017-08-03 | オリンパス株式会社 | 顕微鏡装置、及び画像表示プログラム |
| JP7023667B2 (ja) * | 2017-10-17 | 2022-02-22 | 株式会社キーエンス | 拡大観察装置 |
| EP4667997A2 (en) * | 2018-11-02 | 2025-12-24 | Hologic, Inc. | Digital imaging system and method |
| DE102020113454A1 (de) * | 2020-05-19 | 2021-11-25 | Carl Zeiss Microscopy Gmbh | Mikroskop und Verfahren zum Erzeugen eines aus mehreren mikroskopischen Einzelbildern zusammengesetzten Bildes |
| DE102020118500A1 (de) * | 2020-07-14 | 2022-01-20 | Carl Zeiss Microscopy Gmbh | Mikroskop und Verfahren zum Generieren eines aus mehreren mikroskopischen Teilbildern zusammengesetzten Bildes |
| EP4080265B1 (en) * | 2021-04-20 | 2025-02-12 | Leica Instruments (Singapore) Pte Ltd | Microscope system and corresponding method |
Family Cites Families (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3321197B2 (ja) * | 1992-06-22 | 2002-09-03 | オリンパス光学工業株式会社 | 顕微鏡静止画像伝送システム |
| AU3723697A (en) * | 1996-07-12 | 1998-02-09 | Erim International, Inc. | Mosaic construction, processing, and review of very large electronic micrograph composites |
| US6396941B1 (en) * | 1996-08-23 | 2002-05-28 | Bacus Research Laboratories, Inc. | Method and apparatus for internet, intranet, and local viewing of virtual microscope slides |
| JP2004101871A (ja) * | 2002-09-10 | 2004-04-02 | Olympus Corp | 顕微鏡画像撮影装置 |
| US7456377B2 (en) * | 2004-08-31 | 2008-11-25 | Carl Zeiss Microimaging Ais, Inc. | System and method for creating magnified images of a microscope slide |
| EP2288903A4 (en) * | 2008-05-16 | 2012-03-21 | Biomedical Photometrics Inc | IMAGING SYSTEM WITH OPTIMIZATION OF THE DYNAMIC RANGE |
| JP5286004B2 (ja) * | 2008-09-12 | 2013-09-11 | 株式会社日立ハイテクノロジーズ | 基板の検査装置、および、基板の検査方法 |
| US10139613B2 (en) * | 2010-08-20 | 2018-11-27 | Sakura Finetek U.S.A., Inc. | Digital microscope and method of sensing an image of a tissue sample |
| JP2014523545A (ja) * | 2011-06-30 | 2014-09-11 | ジーイー・ヘルスケア・バイオサイエンス・コーポレイション | 生体イメージングのための顕微鏡システム及び方法 |
| US20140160264A1 (en) * | 2012-12-10 | 2014-06-12 | The Johns Hopkins University | Augmented field of view imaging system |
-
2013
- 2013-05-14 JP JP2013102271A patent/JP6147079B2/ja active Active
-
2014
- 2014-04-28 EP EP14166240.3A patent/EP2804145B1/en not_active Not-in-force
- 2014-04-28 US US14/263,976 patent/US20140340475A1/en not_active Abandoned
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7444232B1 (en) | 2007-05-11 | 2008-10-28 | Mitsubishi Electric Corporation | Knock control apparatus for internal combustion engine |
Also Published As
| Publication number | Publication date |
|---|---|
| US20140340475A1 (en) | 2014-11-20 |
| JP2014222320A (ja) | 2014-11-27 |
| EP2804145B1 (en) | 2017-03-01 |
| EP2804145A1 (en) | 2014-11-19 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6147079B2 (ja) | 顕微鏡システム、貼り合わせ領域の決定方法、及び、プログラム | |
| JP6147080B2 (ja) | 顕微鏡システム、貼り合わせ領域の決定方法、及び、プログラム | |
| JP2012039255A (ja) | 画像処理装置、画像処理方法、撮像装置及びプログラム | |
| JP2014023083A (ja) | 表示装置、撮像装置及び画像編集プログラム | |
| CN109983766B (zh) | 图像处理装置、显微镜系统、图像处理方法、及程序 | |
| US9678324B2 (en) | Microscope system | |
| JP5047764B2 (ja) | 顕微鏡用撮影装置 | |
| US10721413B2 (en) | Microscopy system, microscopy method, and computer readable recording medium | |
| JP2010112969A (ja) | 共焦点顕微鏡 | |
| JP2014215582A (ja) | 共焦点顕微鏡装置 | |
| US10429632B2 (en) | Microscopy system, microscopy method, and computer-readable recording medium | |
| WO2016166871A1 (ja) | 顕微鏡観察システム、顕微鏡観察方法、及び顕微鏡観察プログラム | |
| JP2018194780A (ja) | 顕微鏡システム、制御方法、及び、プログラム | |
| JP7642022B2 (ja) | 計測装置、撮像装置、制御方法及びプログラム | |
| JP2017134115A (ja) | 顕微鏡装置、及び画像表示プログラム | |
| JP7197431B2 (ja) | 光学機器の調整方法、光学システム | |
| JP5730696B2 (ja) | 画像処理装置および画像表示システム | |
| JP2014030181A (ja) | 画像処理装置およびその制御方法、並びにプログラム | |
| JP2018017969A (ja) | 顕微鏡システム、情報提示方法、プログラム | |
| JP4878815B2 (ja) | 顕微鏡装置 | |
| JP2014224856A (ja) | レーザ走査型顕微鏡 | |
| JP2006153636A (ja) | 3次元計測方法および3次元計測方法をコンピュータに実行させるプログラム | |
| JP2006145857A (ja) | 走査型レーザ顕微鏡 | |
| JP6422761B2 (ja) | 顕微鏡システム、及び、z位置と補正装置の設定値との関係算出方法 | |
| JP5019279B2 (ja) | 共焦点顕微鏡及び合焦カラー画像の生成方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20151203 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20161014 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20161025 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20161212 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170418 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170516 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 6147079 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
| R371 | Transfer withdrawn |
Free format text: JAPANESE INTERMEDIATE CODE: R371 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
| R371 | Transfer withdrawn |
Free format text: JAPANESE INTERMEDIATE CODE: R371 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |