JP7551465B2 - 医療用画像処理装置及び医療用観察システム - Google Patents
医療用画像処理装置及び医療用観察システム Download PDFInfo
- Publication number
- JP7551465B2 JP7551465B2 JP2020191957A JP2020191957A JP7551465B2 JP 7551465 B2 JP7551465 B2 JP 7551465B2 JP 2020191957 A JP2020191957 A JP 2020191957A JP 2020191957 A JP2020191957 A JP 2020191957A JP 7551465 B2 JP7551465 B2 JP 7551465B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- green
- red
- component information
- image processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims description 119
- 238000002073 fluorescence micrograph Methods 0.000 claims description 63
- 230000005284 excitation Effects 0.000 claims description 49
- 238000003384 imaging method Methods 0.000 claims description 40
- 230000005540 biological transmission Effects 0.000 claims description 28
- 230000003595 spectral effect Effects 0.000 claims description 26
- 230000001678 irradiating effect Effects 0.000 claims description 4
- 238000004891 communication Methods 0.000 description 16
- 238000010586 diagram Methods 0.000 description 15
- 238000003780 insertion Methods 0.000 description 15
- 230000037431 insertion Effects 0.000 description 15
- 238000000034 method Methods 0.000 description 15
- 206010028980 Neoplasm Diseases 0.000 description 6
- 201000011510 cancer Diseases 0.000 description 6
- 238000012937 correction Methods 0.000 description 6
- 239000011159 matrix material Substances 0.000 description 6
- 230000003287 optical effect Effects 0.000 description 6
- KSFOVUSSGSKXFI-GAQDCDSVSA-N CC1=C/2NC(\C=C3/N=C(/C=C4\N\C(=C/C5=N/C(=C\2)/C(C=C)=C5C)C(C=C)=C4C)C(C)=C3CCC(O)=O)=C1CCC(O)=O Chemical compound CC1=C/2NC(\C=C3/N=C(/C=C4\N\C(=C/C5=N/C(=C\2)/C(C=C)=C5C)C(C=C)=C4C)C(C)=C3CCC(O)=O)=C1CCC(O)=O KSFOVUSSGSKXFI-GAQDCDSVSA-N 0.000 description 5
- 210000004027 cell Anatomy 0.000 description 5
- 229950003776 protoporphyrin Drugs 0.000 description 5
- 239000000126 substance Substances 0.000 description 5
- ZGXJTSGNIOSYLO-UHFFFAOYSA-N 88755TAZ87 Chemical compound NCC(=O)CCC(O)=O ZGXJTSGNIOSYLO-UHFFFAOYSA-N 0.000 description 4
- 238000003745 diagnosis Methods 0.000 description 4
- 239000004065 semiconductor Substances 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- MOFVSTNWEDAEEK-UHFFFAOYSA-M indocyanine green Chemical compound [Na+].[O-]S(=O)(=O)CCCCN1C2=CC=C3C=CC=CC3=C2C(C)(C)C1=CC=CC=CC=CC1=[N+](CCCCS([O-])(=O)=O)C2=CC=C(C=CC=C3)C3=C2C1(C)C MOFVSTNWEDAEEK-UHFFFAOYSA-M 0.000 description 3
- 229960004657 indocyanine green Drugs 0.000 description 3
- 238000002357 laparoscopic surgery Methods 0.000 description 3
- 210000003815 abdominal wall Anatomy 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005401 electroluminescence Methods 0.000 description 2
- 241001465754 Metazoa Species 0.000 description 1
- 150000001413 amino acids Chemical class 0.000 description 1
- 229960002749 aminolevulinic acid Drugs 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000002405 diagnostic procedure Methods 0.000 description 1
- 230000003902 lesion Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 210000003470 mitochondria Anatomy 0.000 description 1
- 238000002156 mixing Methods 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/043—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances for fluorescence imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00043—Operational features of endoscopes provided with output arrangements
- A61B1/00045—Display arrangement
- A61B1/0005—Display arrangement combining images e.g. side-by-side, superimposed or tiled
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00163—Optical arrangements
- A61B1/00186—Optical arrangements with imaging filters
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/045—Control thereof
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/046—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances for infrared imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0646—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements with illumination filters
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0661—Endoscope light sources
- A61B1/0684—Endoscope light sources using light emitting diodes [LED]
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Surgery (AREA)
- Engineering & Computer Science (AREA)
- Optics & Photonics (AREA)
- Physics & Mathematics (AREA)
- Biophysics (AREA)
- General Health & Medical Sciences (AREA)
- Pathology (AREA)
- Radiology & Medical Imaging (AREA)
- Veterinary Medicine (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Animal Behavior & Ethology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Public Health (AREA)
- Signal Processing (AREA)
- Microelectronics & Electronic Packaging (AREA)
- Endoscopes (AREA)
Description
ここで、蛍光画像は、励起光(例えば750nm~800nm程度の近赤外励起光)が観察対象に照射され、当該励起光によって励起された当該観察対象からの蛍光(例えば830nm近辺の波長帯域の蛍光)を撮像部にて撮像した画像である。
したがって、腹腔鏡下手術において無影灯に含まれる近赤外光の波長成分が腹壁を通り抜けて撮像部にて撮像されると、当該近赤外光の波長成分がノイズとなり、本来の蛍光を発している部位(蛍光物質が存在する部位)を判別することが難しくなる。すなわち、観察に適した画像を生成することができない、という問題がある。
図1は、実施の形態に係る医療用観察システム1の構成を示す図である。
医療用観察システム1は、医療分野において用いられ、被写体となる生体内(観察対象)を撮像(観察)するシステムである。この医療用観察システム1は、図1に示すように、挿入部2と、光源装置3と、ライトガイド4と、カメラヘッド5と、第1の伝送ケーブル6と、表示装置7と、第2の伝送ケーブル8と、制御装置9と、第3の伝送ケーブル10とを備える。
第1の光源31は、可視の波長帯域である通常光を出射(発光)する。本実施の形態では、第1の光源31は、白色光を発光するLED(Light Emitting Diode)で構成されている。なお、第1の光源31は、白色LEDに限定されることなく、赤色LED、緑色LED、及び青色LEDの各々が発光する光を合成することによって白色光を出射可能な構成であっても構わない。
なお、本実施の形態では、光源装置3は、制御装置9とは別体で構成されているが、これに限らず、当該制御装置9内部に設けられた構成を採用しても構わない。
なお、カメラヘッド5の詳細な構成については、後述する「カメラヘッドの構成」において説明する。
なお、第1の伝送ケーブル6を介したカメラヘッド5から制御装置9への撮像画像等の伝送は、当該撮像画像等を光信号で伝送してもよく、あるいは、電気信号で伝送しても構わない。第1の伝送ケーブル6を介した制御装置9からカメラヘッド5への制御信号、同期信号、クロックの伝送も同様である。
第2の伝送ケーブル8は、一端が表示装置7に着脱自在に接続され、他端が制御装置9に着脱自在に接続される。そして、第2の伝送ケーブル8は、制御装置9にて処理された映像信号を表示装置7に伝送する。
なお、制御装置9の詳細な構成については、後述する「制御装置の構成」において説明する。
第3の伝送ケーブル10は、一端が光源装置3に着脱自在に接続され、他端が制御装置9に着脱自在に接続される。そして、第3の伝送ケーブル10は、制御装置9からの制御信号を光源装置3に伝送する。
次に、カメラヘッド5の構成について説明する。
図2は、カメラヘッド5及び制御装置9の構成を示すブロック図である。
カメラヘッド5は、図2に示すように、レンズユニット51と、撮像部52と、通信部53とを備える。
レンズユニット51は、1または複数のレンズを用いて構成され、挿入部2にて集光された光(通常光や近赤外励起光及び蛍光)を撮像部52(撮像素子522)の撮像面に結像する。
ここで、カット帯域は、近赤外励起光の波長帯域の少なくとも一部を含む。本実施の形態では、カット帯域は、近赤外励起光の波長帯域の全てを含む。また、長波側透過帯域は、蛍光の波長帯域を含む。さらに、短波側透過領域は、通常光(白色光)の波長帯域を含む。
カラーフィルタ522aは、透過させる光(R(赤),G(緑),B(青))の波長帯域に応じてグループ分けされたR,G,及びBのフィルタ群が特定の形式(例えば、ベイヤ配列)で配列されたカラーフィルタである。
なお、R,G,Bの各フィルタ群522r,522g,522bは、図4に示すように、蛍光の波長帯域(例えば830nm近辺の波長帯域)において、略同一の分光特性を有する。そして、撮像素子522は、R,G,Bの波長帯域の光のみならず、蛍光の波長帯域に対しても感度を有する。
信号処理部523は、撮像素子522にて生成されたアナログ信号の撮像画像に対して信号処理を行ってデジタル信号の撮像画像を出力する。
次に、制御装置9の構成について図2を参照しながら説明する。
制御装置9は、図2に示すように、通信部91と、メモリ92と、観察画像生成部93と、制御部94と、入力部95と、出力部96と、記憶部97とを備える。
通信部91は、第1の伝送ケーブル6を介して、カメラヘッド5(通信部53)から出力される撮像画像を受信するレシーバとして機能する。この通信部91は、例えば、通信部53との間で、1Gbps以上の伝送レートで撮像画像の通信を行う高速シリアルインターフェースで構成されている。すなわち、通信部91は、本開示に係る蛍光画像取得部及び通常光画像取得部に相当する。
メモリ92は、例えば、DRAM(Dynamic Random Access Memory)等で構成されている。このメモリ92は、カメラヘッド5(通信部53)から順次、出力される撮像画像を複数フレーム分、一時的に記憶可能とする。
当該第1の画像処理としては、オプティカルブラック減算処理、ホワイトバランス調整処理、デモザイク処理、色補正マトリクス処理、ガンマ補正処理、RGB信号(通常光画像)を輝度色差信号(Y,Cb/Cr信号)に変換するYC処理等を例示することができる。
ここで、デモザイク処理後の通常光画像は、画素毎に、R,G,Bの各フィルタ群522r,522g,522bに対応するR,G,Bの成分情報(画素データ)を含む。以下では、当該Rの成分情報をr値と記載し、当該Gの成分情報をg値と記載し、当該Bの成分情報をb値と記載する。そして、通常光画像処理部932は、YC処理において、画素毎に、以下の式(1)により輝度信号(Y)を生成する。
〔数1〕
Y=t1×r値+u1×g値+v1×b値 ・・・(1)
ここで、t1、u1、及びv1は、t1+u1+v1=1を満たす値とする。
すなわち、通常光画像処理部932は、通常光画像の画素毎に、R,G,Bの各成分情報の重み付けを設定して、当該R,G,Bの各成分情報を組み合わせる。より具体的には、式(1)において、t1=0.33、u1=0.33、v1=0.33とし、通常光画像処理部932は、通常光画像の画素毎に、R,G,Bの各成分情報の重み付けを同一にした状態で、当該R,G,Bの各成分情報を組み合わせてもよく、あるいは、t1=0.3、u1=0.6、v1=0.1として当該R,G,Bの各成分情報を組み合わせても構わない。
当該第2の画像処理としては、上述した第1の画像処理と同様に、オプティカルブラック減算処理、ホワイトバランス調整処理、デモザイク処理、色補正マトリクス処理、ガンマ補正処理、RGB信号(蛍光画像)を輝度色差信号(Y,Cb/Cr信号)に変換するYC処理等を例示することができる。
ここで、蛍光画像処理部933は、デモザイク処理後の蛍光画像に対して実行するYC処理において、画素毎に、以下の式(2)により輝度信号(Y)を生成する。
〔数2〕
Y=t2×r値+u2×g値+v2×b値 ・・・(2)
ここで、t2、u2、及びv2は、t2<u2かつt2<v2かつt2+u2+v2=1を満たす値とする。
すなわち、蛍光画像処理部933は、蛍光画像の画素毎に、Gの成分情報とBの成分情報よりもRの成分情報の重み付けを低くした状態で、R,G,Bの各成分情報を組み合わせる。より具体的には、式(2)において、t2=0.5、u2=0.5、v2=0として、蛍光画像処理部933は、蛍光画像の画素毎に、Rの成分情報を削除し、Gの成分情報及びBの成分情報のみを組み合わせる。
ここで、当該重畳処理としては、以下に示す第1,第2の重畳処理を例示することができる。なお、以下では、蛍光画像において、輝度値が特定の閾値以上となる画素で構成される領域を蛍光領域と記載する。
第1の重畳処理は、通常光画像において、蛍光領域と同一の画素位置となる領域を蛍光画像における蛍光領域の画像に置き換える処理である。
第2の重畳処理は、蛍光画像の蛍光領域における各画素位置の輝度値に応じて、通常光画像における蛍光領域と同一の画素位置となる領域の各画素に付す蛍光を示す色の明るさを変更する処理(所謂、アルファブレンド処理)である。
出力部96は、スピーカやプリンタ等を用いて構成され、各種情報を出力する。
記憶部97は、制御部94が実行するプログラムや、制御部94の処理に必要な情報等を記憶する。
次に、上述した制御装置9の動作について説明する。
図5は、制御装置9の動作を示すフローチャートである。図6ないし図8は、制御装置9の動作を説明する図である。具体的に、図6は、1フレームの通常光画像WLIを示す図である。図7は、1フレームの蛍光画像IRを示す図である。なお、図7に示した蛍光画像IRは、グレースケールで表現されており、黒に近付くにしたがって撮像された蛍光成分の強度が高い(輝度値が高い)ものである。図8は、重畳画像生成部934にて生成された1フレームの重畳画像SIを示す図である。
ステップS5の後、蛍光画像処理部933及び通常光画像処理部932は、以下の処理を実行する(ステップS6)。
すなわち、通常光画像処理部932は、メモリコントローラ931によってメモリ92から順次、読み出された各通常光画像(例えば、図6に示した通常光画像WLI)に対して順次、第1の画像処理を実行する。
また、蛍光画像処理部933は、メモリコントローラ931によってメモリ92から順次、読み出された各蛍光画像(例えば、図7に示した蛍光画像IR)に対して順次、第2の画像処理を実行する。
上述したように、R,G,Bの各フィルタ群522r,522g,522bは、蛍光の波長帯域(例えば830nm近辺の波長帯域)において、略同一の分光特性を有する。そして、本実施の形態に係る制御装置9では、蛍光画像処理部933は、YC処理において、上述した式(2)により輝度信号(Y)を生成する。すなわち、蛍光画像処理部933は、蛍光画像の画素毎に、緑及び青の成分情報よりも赤の成分情報の重み付けを低くした状態で、赤、緑、及び青の各成分情報を組み合わせることで蛍光領域を表現する。
したがって、本実施の形態に係る制御装置9によれば、腹腔鏡下手術において無影灯に含まれる近赤外光の波長成分が腹壁を通り抜けて撮像部52にて撮像された場合であっても、当該近赤外光の波長成分に起因するノイズを少なくすることができる。すなわち、観察に適した画像を生成することができる。
ここまで、本開示を実施するための形態を説明してきたが、本開示は上述した実施の形態によってのみ限定されるべきものではない。
上述した実施の形態では、蛍光画像処理部933は、YC処理を実行する際に、蛍光画像の画素毎に、Gの成分情報とBの成分情報よりもRの成分情報の重み付けを低くした状態で、R,G,Bの各成分情報を組み合わせていたが、これに限らない。
例えば、ホワイトバランス調整処理において、R,G,Bの各画素値に乗算するゲインを適宜、調整する。これにより、蛍光画像の画素毎に、Gの成分情報及びBの成分情報よりもRの成分情報の重み付けを低くした状態でR,G,Bの各成分情報を組み合わせる。
また、例えば、色補正マトリクス処理において、蛍光画像に含まれるR,G,Bの各画素値を行列要素とする入力マトリクスに乗算する色補正マトリクスを適宜、調整する。これにより、蛍光画像の画素毎に、Gの成分情報及びBの成分情報よりもRの成分情報の重み付けを低くした状態でR,G,Bの各成分情報を組み合わせる。
当該光線力学診断では、例えば5-アミノレブリン酸(以下、5-ALAと記載)等の光感受性物質が用いられる。当該5-ALAは、元来、動植物の生体内に含まれる天然アミノ酸である。この5-ALAは、体内投与後に細胞内に取り込まれ、ミトコンドリア内でプロトポルフィリンに生合成される。そして、癌細胞では、当該プロトポルフィリンが過剰に集積する。また、当該癌細胞に過剰集積するプロトポルフィリンは、光活性を有する。このため、当該プロトポルフィリンは、励起光(例えば375nm~445nmの波長帯域の青色可視光)で励起すると、蛍光(例えば600nm~740nmの波長帯域の赤色蛍光)を発光する。このように、光感受性物質を用いて癌細胞を蛍光発光させる癌診断法を光線力学診断という。
そして、上述した実施の形態において、白色光を発光するLEDで第1の光源31を構成し、プロトポルフィリンを励起する励起光(例えば375nm~445nmの波長帯域の青色可視光)を発光する半導体レーザで第2の光源32を構成しても構わない。このように構成した場合であっても、上述した実施の形態と同様の効果を奏する。
上述した実施の形態において、カラーフィルタ522aを構成する各フィルタ群の分光特性は、図4に示した分光特性に限らず、その他の分光特性を有するカラーフィルタを採用しても構わない。
上述した実施の形態において、カメラヘッド5の一部の構成や制御装置9の一部の構成を例えばコネクタCN1やコネクタCN2に設けても構わない。
(1)観察対象に励起光が照射され、前記励起光によって励起された前記観察対象からの蛍光が撮像部にて撮像された蛍光画像を取得する蛍光画像取得部と、前記蛍光画像に対して画像処理を実行する蛍光画像処理部とを備え、前記撮像部の受光面には、互いに異なる分光特性を有する赤、緑、及び青の各フィルタ群が特定の形式で配列されたカラーフィルタが設けられ、前記蛍光画像は、前記赤、緑、及び青の各フィルタ群の分光特性にそれぞれ応じた赤、緑、及び青の各成分情報を含み、前記蛍光画像処理部は、前記蛍光画像の画素毎に、前記緑の成分情報及び前記青の成分情報よりも前記赤の成分情報の重み付けを低くした状態で、前記赤、緑、及び青の各成分情報を組み合わせる医療用画像処理装置。
(2)前記蛍光画像処理部は、前記蛍光画像の画素毎に、前記赤の成分情報を削除し、前記緑の成分情報及び前記青の成分情報のみを組み合わせる前記(1)に記載の医療用画像処理装置。
(3)前記蛍光画像処理部は、前記蛍光画像の画素毎に、前記赤、緑、及び青の各成分情報から輝度色差信号を生成するYC処理を実行する際に、前記緑の成分情報及び前記青の成分情報よりも前記赤の成分情報の重み付けを低くした状態で、前記赤、緑、及び青の各成分情報を組み合わせる前記(1)または(2)に記載の医療用画像処理装置。
(4)観察対象に可視の波長帯域である通常光が照射され、前記観察対象を介した通常光が前記撮像部にて撮像された通常光画像を取得する通常光画像取得部と、前記通常光画像に対して画像処理を実行する通常光画像処理部とをさらに備え、前記通常光画像処理部は、前記通常光画像の画素毎に、前記赤、緑、及び青の各成分情報の重み付けを同一にした状態で、前記赤、緑、及び青の各成分情報を組み合わせる前記(1)~(3)のいずれか一つに記載の医療用画像処理装置。
(5)前記通常光画像処理部は、前記赤、緑、及び青の各成分情報の重み付けを同一にした状態で、前記通常光画像の画素毎に、前記赤、緑、及び青の各成分情報を組み合わせる前記(4)に記載の医療用画像処理装置。
(6)観察対象に励起光が照射され、前記励起光によって励起された前記観察対象からの蛍光を撮像して蛍光画像を生成する撮像部、及び前記撮像部の受光面に設けられ、互いに異なる分光特性を有する赤、緑、及び青の各フィルタ群が特定の形式で配列されたカラーフィルタを有する撮像装置と、前記蛍光画像を処理する医療用画像処理装置とを備え、前記医療用画像処理装置は、前記蛍光画像を取得する蛍光画像取得部と、前記蛍光画像に対して画像処理を実行する蛍光画像処理部とを備え、前記撮像部の受光面には、互いに異なる分光特性を有する赤、緑、及び青の各フィルタ群が特定の形式で配列されたカラーフィルタが設けられ、前記蛍光画像は、前記赤、緑、及び青の各フィルタ群の分光特性にそれぞれ応じた赤、緑、及び青の各成分情報を含み、前記蛍光画像処理部は、前記蛍光画像の画素毎に、前記緑の成分情報及び前記青の成分情報よりも前記赤の成分情報の重み付けを低くした状態で、前記赤、緑、及び青の各成分情報を組み合わせる医療用観察システム。
2 挿入部
3 光源装置
4 ライトガイド
5 カメラヘッド
6 第1の伝送ケーブル
7 表示装置
8 第2の伝送ケーブル
9 制御装置
10 第3の伝送ケーブル
21 接眼部
31 第1の光源
32 第2の光源
51 レンズユニット
52 撮像部
53 通信部
91 通信部
92 メモリ
93 観察画像生成部
94 制御部
95 入力部
96 出力部
97 記憶部
521 励起光カットフィルタ
522 撮像素子
522a カラーフィルタ
522b Bフィルタ群
522g Gフィルタ群
522r Rフィルタ群
523 信号処理部
931 メモリコントローラ
932 通常光画像処理部
933 蛍光画像処理部
934 重畳画像生成部
935 表示制御部
941 光源制御部
942 撮像制御部
CB,CG,CR 曲線
CN1,CN2 コネクタ
IR 蛍光画像
SI 重畳画像
WLI 通常光画像
Claims (5)
- 観察対象に励起光が照射され、前記励起光によって励起された前記観察対象からの近赤外の波長帯域の蛍光が撮像部にて撮像された蛍光画像を取得する蛍光画像取得部と、
前記蛍光画像に対して画像処理を実行する蛍光画像処理部とを備え、
前記撮像部の受光面には、
互いに異なる分光特性を有する赤、緑、及び青の各フィルタ群が特定の形式で配列されたカラーフィルタが設けられ、
前記赤、緑、及び青の各フィルタ群は、
前記蛍光の波長帯域において、略同一の分光特性を有し、
前記赤のフィルタ群は、
前記蛍光よりも短い波長の近赤外の波長帯域において、前記緑のフィルタ群及び前記青のフィルタ群よりも大きな透過特性を有し、
前記蛍光画像は、
前記赤、緑、及び青の各フィルタ群の分光特性にそれぞれ応じた赤、緑、及び青の各成分情報を含み、
前記蛍光画像処理部は、
前記蛍光画像の画素毎に、前記赤、緑、及び青の各成分情報から輝度色差信号を生成するYC処理を実行する際に、前記緑の成分情報及び前記青の成分情報よりも前記赤の成分情報の重み付けを低くした状態で、前記赤、緑、及び青の各成分情報を組み合わせる医療用画像処理装置。 - 前記蛍光画像処理部は、
前記蛍光画像の画素毎に、前記赤の成分情報を削除し、前記緑の成分情報及び前記青の成分情報のみを組み合わせる請求項1に記載の医療用画像処理装置。 - 観察対象に可視の波長帯域である通常光が照射され、前記観察対象を介した通常光が前記撮像部にて撮像された通常光画像を取得する通常光画像取得部と、
前記通常光画像に対して画像処理を実行する通常光画像処理部とをさらに備え、
前記通常光画像処理部は、
前記通常光画像の画素毎に、前記赤、緑、及び青の各成分情報を組み合わせる請求項1に記載の医療用画像処理装置。 - 前記通常光画像処理部は、
前記赤、緑、及び青の各成分情報の重み付けを同一にした状態で、前記通常光画像の画素毎に、前記赤、緑、及び青の各成分情報を組み合わせる請求項3に記載の医療用画像処理装置。 - 観察対象に励起光が照射され、前記励起光によって励起された前記観察対象からの近赤外の波長帯域の蛍光を撮像して蛍光画像を生成する撮像部、及び前記撮像部の受光面に設けられ、互いに異なる分光特性を有する赤、緑、及び青の各フィルタ群が特定の形式で配列されたカラーフィルタを有する撮像装置と、
前記蛍光画像を処理する医療用画像処理装置とを備え、
前記医療用画像処理装置は、
前記蛍光画像を取得する蛍光画像取得部と、
前記蛍光画像に対して画像処理を実行する蛍光画像処理部とを備え、
前記撮像部の受光面には、
互いに異なる分光特性を有する赤、緑、及び青の各フィルタ群が特定の形式で配列されたカラーフィルタが設けられ、
前記赤、緑、及び青の各フィルタ群は、
前記蛍光の波長帯域において、略同一の分光特性を有し、
前記赤のフィルタ群は、
前記蛍光よりも短い波長の近赤外の波長帯域において、前記緑のフィルタ群及び前記青のフィルタ群よりも大きな透過特性を有し、
前記蛍光画像は、
前記赤、緑、及び青の各フィルタ群の分光特性にそれぞれ応じた赤、緑、及び青の各成分情報を含み、
前記蛍光画像処理部は、
前記蛍光画像の画素毎に、前記赤、緑、及び青の各成分情報から輝度色差信号を生成するYC処理を実行する際に、前記緑の成分情報及び前記青の成分情報よりも前記赤の成分情報の重み付けを低くした状態で、前記赤、緑、及び青の各成分情報を組み合わせる医療用観察システム。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2020191957A JP7551465B2 (ja) | 2020-11-18 | 2020-11-18 | 医療用画像処理装置及び医療用観察システム |
| US17/396,784 US20220151474A1 (en) | 2020-11-18 | 2021-08-09 | Medical image processing device and medical observation system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2020191957A JP7551465B2 (ja) | 2020-11-18 | 2020-11-18 | 医療用画像処理装置及び医療用観察システム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2022080732A JP2022080732A (ja) | 2022-05-30 |
| JP7551465B2 true JP7551465B2 (ja) | 2024-09-17 |
Family
ID=81588595
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2020191957A Active JP7551465B2 (ja) | 2020-11-18 | 2020-11-18 | 医療用画像処理装置及び医療用観察システム |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US20220151474A1 (ja) |
| JP (1) | JP7551465B2 (ja) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE102021203187B3 (de) * | 2021-03-30 | 2022-02-24 | Carl Zeiss Meditec Ag | Verfahren zum Bereitstellen einer Abbildung mittels eines Operationsmikroskops und Operationsmikroskop |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002336189A (ja) | 2001-04-04 | 2002-11-26 | Richard Wolf Gmbh | 組織の画像形成診断のための装置 |
| JP2011160848A (ja) | 2010-02-05 | 2011-08-25 | Olympus Corp | 画像処理装置、内視鏡システム、プログラム及び画像処理方法 |
| JP2015099104A (ja) | 2013-11-19 | 2015-05-28 | ソニー株式会社 | 画像処理装置および画像処理方法 |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3731814B2 (ja) * | 2001-05-07 | 2006-01-05 | 富士写真フイルム株式会社 | 蛍光画像表示装置 |
| US6899675B2 (en) * | 2002-01-15 | 2005-05-31 | Xillix Technologies Corp. | Fluorescence endoscopy video systems with no moving parts in the camera |
| CN102036599B (zh) * | 2008-03-18 | 2013-06-19 | 诺瓦达克技术公司 | 用于组合的全色反射和近红外成像的成像系统 |
| JP6076093B2 (ja) * | 2013-01-08 | 2017-02-08 | オリンパス株式会社 | 撮像装置 |
| US10165972B2 (en) * | 2013-07-12 | 2019-01-01 | Inthesmart Co., Ltd. | Apparatus and method for detecting NIR fluorescence at sentinel lymph node |
| JPWO2016084257A1 (ja) * | 2014-11-28 | 2017-10-05 | オリンパス株式会社 | 内視鏡装置 |
| JPWO2018008062A1 (ja) * | 2016-07-04 | 2019-04-18 | オリンパス株式会社 | 蛍光観察装置および蛍光観察内視鏡装置 |
-
2020
- 2020-11-18 JP JP2020191957A patent/JP7551465B2/ja active Active
-
2021
- 2021-08-09 US US17/396,784 patent/US20220151474A1/en not_active Abandoned
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002336189A (ja) | 2001-04-04 | 2002-11-26 | Richard Wolf Gmbh | 組織の画像形成診断のための装置 |
| JP2011160848A (ja) | 2010-02-05 | 2011-08-25 | Olympus Corp | 画像処理装置、内視鏡システム、プログラム及び画像処理方法 |
| JP2015099104A (ja) | 2013-11-19 | 2015-05-28 | ソニー株式会社 | 画像処理装置および画像処理方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2022080732A (ja) | 2022-05-30 |
| US20220151474A1 (en) | 2022-05-19 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7374600B2 (ja) | 医療用画像処理装置及び医療用観察システム | |
| US20240306883A1 (en) | Medical image processing apparatus and medical observation system | |
| JP6137892B2 (ja) | 撮像システム | |
| JP7551465B2 (ja) | 医療用画像処理装置及び医療用観察システム | |
| JP2025028292A (ja) | 医療用観察システム、医療用光源制御装置、及び医療用光源制御方法 | |
| US12213643B2 (en) | Learning device and medical image processing device | |
| JP2025028293A (ja) | 医療用制御装置、医療用制御方法、及び医療用観察システム | |
| US12075970B2 (en) | Medical control device and medical observation system | |
| US12295553B2 (en) | Medical image processing apparatus and medical observation system | |
| JP7281308B2 (ja) | 医療用画像処理装置及び医療用観察システム | |
| JP7235540B2 (ja) | 医療用画像処理装置及び医療用観察システム | |
| JP2021003347A (ja) | 医療用画像処理装置及び医療用観察システム | |
| JP2021146198A (ja) | 医療用画像処理装置及び医療用観察システム | |
| JP2021132812A (ja) | 医療用画像処理装置及び医療用観察システム | |
| US10918269B2 (en) | Medical light source apparatus and medical observation system | |
| WO2025244127A1 (ja) | 蛍光内視鏡装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20231002 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20240327 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240409 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240604 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240806 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240904 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7551465 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |