JP6945667B2 - 顕微鏡のためのコントローラ、対応する方法および顕微鏡システム - Google Patents
顕微鏡のためのコントローラ、対応する方法および顕微鏡システム Download PDFInfo
- Publication number
- JP6945667B2 JP6945667B2 JP2020020573A JP2020020573A JP6945667B2 JP 6945667 B2 JP6945667 B2 JP 6945667B2 JP 2020020573 A JP2020020573 A JP 2020020573A JP 2020020573 A JP2020020573 A JP 2020020573A JP 6945667 B2 JP6945667 B2 JP 6945667B2
- Authority
- JP
- Japan
- Prior art keywords
- sight
- wound
- microscope
- line
- controller
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/32—Micromanipulators structurally combined with microscopes
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
- G02B21/365—Control or image processing arrangements for digital or video microscopes
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/60—Analysis of geometric attributes
- G06T7/62—Analysis of geometric attributes of area, perimeter, diameter or volume
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/0004—Microscopes specially adapted for specific applications
- G02B21/0012—Surgical microscopes
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
- G06T2207/10012—Stereo images
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10028—Range image; Depth image; 3D point clouds
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10056—Microscopic image
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2210/00—Indexing scheme for image generation or computer graphics
- G06T2210/41—Medical
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Optics & Photonics (AREA)
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Theoretical Computer Science (AREA)
- Geometry (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Surgery (AREA)
- Signal Processing (AREA)
- Computer Graphics (AREA)
- Software Systems (AREA)
- Microscoopes, Condenser (AREA)
Description
102 入力インタフェース
104 出力インタフェース
106 プロセッサ
110 顕微鏡
112 光軸
130 イメージングデバイス
202 創傷
204 組織
206 布
208 開口部
210 創傷底部
212 視線
214 別の視線
216 障害物
302 組織を表すイメージデータを受け取ること
304 視線を決定すること
306 顕微鏡に対し自身の光軸を整列させるように命令すること
308 ループ
Claims (13)
- 顕微鏡(110)のためのコントローラ(100)であって、前記コントローラ(100)は、
創傷(202)を表すイメージデータを受け取り、
前記イメージデータを用いて、前記創傷(202)の底部(210)に向けられた視線(212、214)を決定し、
前記顕微鏡(110)のための制御信号を出力する、
ように構成されており、
前記制御信号は前記顕微鏡(110)に対し、自身の光軸(112)を前記視線(212、214)に整列させるように命令し、
前記イメージデータは、種々の方向に沿って撮影された前記創傷(202)の複数のイメージを有し、
前記コントローラ(100)は、
各イメージ内の前記創傷(202)の面積を計算し、
最大面積を有する創傷(202)を含む前記イメージに対応する方向に基づき、前記視線(212、214)を決定する、
ように構成されている、
コントローラ(100)。 - 前記コントローラ(100)は、前記イメージデータに基づき前記創傷(202)の空洞の3次元モデルを決定するように構成されている、
請求項1記載のコントローラ(100)。 - 顕微鏡(110)のためのコントローラ(100)であって、前記コントローラ(100)は、
創傷(202)を表すイメージデータを受け取り、
前記イメージデータを用いて、前記創傷(202)の底部(210)に向けられた視線(212、214)を決定し、
前記顕微鏡(110)のための制御信号を出力する、
ように構成されており、
前記制御信号は前記顕微鏡(110)に対し、自身の光軸(112)を前記視線(212、214)に整列させるように命令し、
前記コントローラ(100)は、前記イメージデータに基づき前記創傷(202)の空洞の3次元モデルを決定するように構成されており、
前記コントローラ(100)は、予め定められた判定基準を満たす前記空洞内の1つの軸に基づき、前記視線(212、214)を決定するように構成されている、
コントローラ(100)。 - 前記コントローラ(100)は、前記空洞の空洞重心軸に基づき、前記視線(212、214)を決定するように構成されている、
請求項3記載のコントローラ(100)。 - 前記コントローラ(100)は、前記空洞の底部(210)の可視面積を最大にする軸に基づき、前記視線(212、214)を決定するように構成されている、
請求項3または4記載のコントローラ(100)。 - 顕微鏡(110)のためのコントローラ(100)であって、前記コントローラ(100)は、
創傷(202)を表すイメージデータを受け取り、
前記イメージデータを用いて、前記創傷(202)の底部(210)に向けられた視線(212、214)を決定し、
前記顕微鏡(110)のための制御信号を出力する、
ように構成されており、
前記制御信号は前記顕微鏡(110)に対し、自身の光軸(112)を前記視線(212、214)に整列させるように命令し、
前記コントローラ(100)は、前記創傷(202)の前記底部(210)への別の視線(212、214)を、前記視線(212、214)を用いて生成された別のイメージデータに基づき決定するように構成されている、
コントローラ(100)。 - 顕微鏡システムであって、前記顕微鏡システムは、
請求項1から6のいずれか1項記載のコントローラ(100)と、
前記制御信号に基づき自身の光軸(112)を視線(212、214)に整列させるように構成された顕微鏡(110)と、
を有する顕微鏡システム。 - 前記顕微鏡システムはさらに、イメージデータを生成するように構成されたイメージングデバイス(130)を有する、
請求項7記載の顕微鏡システム。 - 前記イメージングデバイス(130)は、飛行時間型カメラ、ステレオカメラおよび3次元カメラのうちの1つである、
請求項8記載の顕微鏡システム。 - 顕微鏡を制御する方法であって、前記方法は、
創傷を表すイメージデータを受け取るステップ(302)と、
前記イメージデータを用いて、前記創傷の底部への視線を決定するステップ(304)と、
顕微鏡に対し自身の光軸を前記視線に整列させるように命令するステップ(306)と、
を有し、
視線を決定するステップ(304)は、
種々の方向に沿って撮影された前記創傷の複数のイメージの各イメージ内における前記創傷の面積を計算するステップと、
最大面積を有する創傷を含む前記イメージに対応する方向に基づき、前記視線を決定するステップ(304)と、
を有する、
方法。 - 前記方法はさらに、前記イメージデータに基づき前記創傷の空洞の3次元モデルを決定するステップを有する、
請求項10記載の方法。 - 顕微鏡を制御する方法であって、前記方法は、
創傷を表すイメージデータを受け取るステップ(302)と、
前記イメージデータを用いて、前記創傷の底部への視線を決定するステップ(304)と、
顕微鏡に対し自身の光軸を前記視線に整列させるように命令するステップ(306)と、
を有し、
前記方法は、
前記イメージデータに基づき前記創傷の空洞の3次元モデルを決定するステップと、
前記空洞の空洞重心軸に基づき、または、前記空洞の底部の可視面積を最大にする軸に基づき、前記視線を決定するステップ(304)と、
を有する、
方法。 - プログラムがプロセッサにおいて実行されたときに、請求項10から12までのいずれか1項記載の方法を実施するためのプログラムコードを有するコンピュータプログラム。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| EP19156648 | 2019-02-12 | ||
| EP19156648.8A EP3696593B1 (en) | 2019-02-12 | 2019-02-12 | A controller for a microscope, a corresponding method and a microscope system |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2020134940A JP2020134940A (ja) | 2020-08-31 |
| JP6945667B2 true JP6945667B2 (ja) | 2021-10-06 |
Family
ID=65520061
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2020020573A Active JP6945667B2 (ja) | 2019-02-12 | 2020-02-10 | 顕微鏡のためのコントローラ、対応する方法および顕微鏡システム |
Country Status (4)
| Country | Link |
|---|---|
| US (1) | US10962759B2 (ja) |
| EP (1) | EP3696593B1 (ja) |
| JP (1) | JP6945667B2 (ja) |
| CN (1) | CN111552068B (ja) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2023139660A1 (ja) * | 2022-01-18 | 2023-07-27 | ヤマハロボティクスホールディングス株式会社 | 三次元デジタル顕微鏡 |
Family Cites Families (27)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4621283A (en) * | 1984-08-27 | 1986-11-04 | Designs For Vision, Inc. | Head-mounted coaxial image system for surgeons |
| US4922338A (en) * | 1989-03-02 | 1990-05-01 | Arpino Ronald G | Line-of-sight inspection system |
| US4964708A (en) * | 1989-07-14 | 1990-10-23 | Mason Michael S | Microscope for medical surgery |
| US5299053A (en) * | 1990-10-26 | 1994-03-29 | American Cyanamid Company | Variable shutter illumination system for microscope |
| JPH10192333A (ja) * | 1996-12-27 | 1998-07-28 | Nidek Co Ltd | 眼科手術装置 |
| JP2004530485A (ja) * | 2001-06-13 | 2004-10-07 | ヴォリューム・インタラクションズ・プライヴェート・リミテッド | ガイドシステムおよびそのためのプローブ |
| JP3996359B2 (ja) * | 2001-07-12 | 2007-10-24 | 株式会社日立メディコ | 磁気共鳴イメージング装置 |
| DE102004022330B3 (de) * | 2004-05-06 | 2005-10-20 | Leica Microsystems Schweiz Ag | Mikroskop |
| CN101282687B (zh) * | 2005-10-14 | 2011-11-16 | 应用研究联盟新西兰有限公司 | 监测表面特征的方法和装置 |
| JP5159041B2 (ja) * | 2006-01-30 | 2013-03-06 | 株式会社東芝 | 超音波診断装置およびその画像処理プログラム |
| US20080013809A1 (en) * | 2006-07-14 | 2008-01-17 | Bracco Imaging, Spa | Methods and apparatuses for registration in image guided surgery |
| US8864652B2 (en) * | 2008-06-27 | 2014-10-21 | Intuitive Surgical Operations, Inc. | Medical robotic system providing computer generated auxiliary views of a camera instrument for controlling the positioning and orienting of its tip |
| EP2549943B1 (en) * | 2010-03-22 | 2018-01-31 | Brainlab AG | Controlling a surgical microscope |
| JP2013039148A (ja) * | 2011-08-11 | 2013-02-28 | Topcon Corp | 眼科手術用顕微鏡 |
| JP5767142B2 (ja) * | 2012-03-05 | 2015-08-19 | オリンパス株式会社 | 医療用観察システム |
| CN202631839U (zh) * | 2012-05-08 | 2012-12-26 | 吴立业 | 一种医疗用显微手术设备 |
| CN203204233U (zh) * | 2012-08-10 | 2013-09-18 | 上海西光实业有限公司 | 一种适于显微镜对焦的自动检测装置 |
| US9993273B2 (en) * | 2013-01-16 | 2018-06-12 | Mako Surgical Corp. | Bone plate and tracking device using a bone plate for attaching to a patient's anatomy |
| BR112015023547B8 (pt) * | 2013-03-15 | 2022-09-27 | Synaptive Medical Inc | Montagem de braço automatizado para uso usado durante um procedimento médico sobre uma parte anatômica |
| CN103558129B (zh) * | 2013-11-22 | 2016-02-24 | 晶格码(青岛)智能科技有限公司 | 一种探头式在线立体成像检测系统及方法 |
| US9597009B2 (en) * | 2013-12-19 | 2017-03-21 | Novartis Ag | Marker-based tool tracking |
| DE102014113935A1 (de) * | 2014-09-25 | 2016-03-31 | Carl Zeiss Meditec Ag | Operationsmikroskop und Betriebsverfahren dafür |
| CA2930738C (en) * | 2015-08-24 | 2017-05-02 | Synaptive Medical (Barbados) Inc. | A medical imaging system for illuminating tissue samples using three-dimensional structured illumination microscopy |
| CN105183169B (zh) * | 2015-09-22 | 2018-09-25 | 小米科技有限责任公司 | 视线方向识别方法及装置 |
| JP6841626B2 (ja) * | 2016-09-21 | 2021-03-10 | ソニー・オリンパスメディカルソリューションズ株式会社 | 医療用観察装置及び医療用観察システム |
| US11207139B2 (en) | 2016-10-31 | 2021-12-28 | Synaptive Medical Inc. | 3D navigation system and methods |
| CA3065436C (en) * | 2017-08-11 | 2023-03-07 | Brainlab Ag | Video based patient registration and tracking |
-
2019
- 2019-02-12 EP EP19156648.8A patent/EP3696593B1/en active Active
-
2020
- 2020-02-10 CN CN202010085347.6A patent/CN111552068B/zh active Active
- 2020-02-10 US US16/785,729 patent/US10962759B2/en active Active
- 2020-02-10 JP JP2020020573A patent/JP6945667B2/ja active Active
Also Published As
| Publication number | Publication date |
|---|---|
| CN111552068A (zh) | 2020-08-18 |
| JP2020134940A (ja) | 2020-08-31 |
| EP3696593A1 (en) | 2020-08-19 |
| US20200257104A1 (en) | 2020-08-13 |
| CN111552068B (zh) | 2022-06-10 |
| US10962759B2 (en) | 2021-03-30 |
| EP3696593B1 (en) | 2025-04-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20230266823A1 (en) | Robotic system providing user selectable actions associated with gaze tracking | |
| JP7170784B2 (ja) | 撮像装置及び入力コントロールを再芯出しするためのシステム及び方法 | |
| JP7086150B2 (ja) | 遠隔操作医療システムにおける器具の画面上での識別をレンダリングするためのシステム及び方法 | |
| US10588699B2 (en) | Intelligent positioning system and methods therefore | |
| EP3760389B1 (en) | Switching control of an instrument to an input device upon the instrument entering a display area viewable by an operator of the input device | |
| US20220096189A1 (en) | Image guided motion scaling for robot control | |
| CA2939262C (en) | Intelligent positioning system and methods therefore | |
| JP6766062B2 (ja) | 遠隔操作医療システムにおける器具の画面上での識別のためのシステム及び方法 | |
| US11980436B2 (en) | Medical system, method and computer program | |
| US20160158938A1 (en) | Method and device for defining a working range of a robot | |
| JP2019523663A (ja) | ロボット外科手術装置および視聴者適合型の立体視ディスプレイの態様を制御するためのシステム、方法、およびコンピュータ可読記憶媒体 | |
| CN102958464A (zh) | 具有改进的控制器的自动化外科手术系统 | |
| JP6945667B2 (ja) | 顕微鏡のためのコントローラ、対応する方法および顕微鏡システム | |
| EP3805834A1 (en) | Optical imaging system and corresponding apparatus, method and computer program | |
| JP5561037B2 (ja) | ロボット及びその制御方法 | |
| KR20170142896A (ko) | 컨버전스 매칭을 이용한 개인용 3차원 영상 제공 방법 및 장치 | |
| EP4342385A1 (en) | Medical device movement control apparatus | |
| US12259537B2 (en) | Method for operating a microscopy system, and microscopy system | |
| US20230293244A1 (en) | Systems and methods for hybrid motion planning | |
| KR20250107151A (ko) | 시야 한계를 고려하여, 의료 또는 수술 원격작동을 위한 로봇 시스템의 마스터 장치에 의해 제어되는 슬레이브 장치를 제어하는 방법, 및 관련 로봇 시스템 | |
| CN116421325A (zh) | 手术机器人协作系统及其标定方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200210 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210125 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210208 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210322 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210816 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210914 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6945667 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |