JP6840846B2 - 医療画像処理装置、内視鏡システム、診断支援装置、並びに医療業務支援装置 - Google Patents

Description

本発明は、医療画像を用いて、ユーザーに報知するための報知情報を提供する医療画像処理装置、内視鏡システム、診断支援装置、並びに医療業務支援装置に関する。

現在の医療分野においては、光源装置、内視鏡、及びプロセッサ装置を備える内視鏡システムなどのように、医療画像を用いる医療画像処理装置が普及している。また、近年においては、医療画像に画像解析を行うことによって、診断の対象となる注目領域を検出し、ユーザーに報知することも行われている。その他、被写体や医療画像に関するエラーや、被写体の観察状態、病変の有無、種類などを報知することも行われている。

以上のようなユーザーに報知するための報知情報をモニタに表示して提供する場合には、ユーザーによる医療画像の観察を極力阻害しないことが求められている。これに対して、例えば、特許文献１に示すように、親画面中の操作カーソルが子画面と重ならないようにする技術を参考にし、医療画像中の注目すべき領域と報知情報が重ならないようにすることが考えられる。また、特許文献２に示すように、時計などの必要情報の表示を一定時間経過後は非表示にする技術を参考にし、報知情報を一定時間経過後に非表示にすることが考えられる。また、特許文献３に示すように、異常の検出時は、通常画像から異常メッセージに切り替える技術を参考にし、エラー発生時には、医療画像の表示を停止し、報知情報のみを表示することが考えられる。

特開２０１１−９６０８４号公報 特開２００７−２４３２７５号公報 特公平７−２７４８１号公報

ユーザーに対して報知情報を提供する場合には、上記したように、ユーザーによる医療画像の観察を極力阻害しないことに加え、注目領域の見逃しの防止や観察時に要する注意を持続させることが必要である。したがって、特許文献２のように、報知情報を非表示にした場合には、注目領域を見逃したりするおそれがある。また、特許文献３のように、医療画像の表示を停止した場合にも、注目領域を見逃すおそれがある。なお、特許文献１に関しては、操作カーソルが位置する領域が必ずしも注目領域とは限らないため、報知情報を表示する子画面と注目領域が重なってしまうおそれがある。

本発明は、ユーザーによる医療画像の観察を阻害せず、且つ注目領域の見逃しを防止することができ、さらに、観察時に要する注意を持続させることができる医療画像処理装置、内視鏡システム、診断支援装置、並びに医療業務支援装置を提供することを目的とする。

本発明の医療画像処理装置は、被写体を含む医療画像を取得する画像取得部と、医療画像を第１の表示領域に表示する表示部と、ユーザーに報知するための報知情報を表示部において表示する制御、又は報知情報を表示部において非表示にする制御を行う表示制御部と、を有する。

表示制御部は、第１の表示領域と異なる第２の表示領域において、報知情報を表示する制御、又は表示中の報知情報を非表示にする制御を行うことが好ましい。表示制御部は、第１の条件を満たした場合に、第１の表示領域において報知情報を表示する制御を行い、第１の条件と異なる第２の条件を満たした場合に、第１の表示領域において表示中の報知情報を非表示にし、第１の表示領域と異なる第２の表示領域において、報知情報を表示する制御を行うことが好ましい。

医療画像から注目領域を検出する注目領域検出部を有し、第１の条件は、注目領域の面積が面積用閾値以下の場合であり、第２の条件は、注目領域の面積が面積用閾値を超える場合であることが好ましい。医療画像から注目領域を検出する注目領域検出部を有し、第１の条件は、注目領域の位置が第１の表示領域の中心範囲から外れている場合であり、第２の条件は、注目領域の位置が第１の表示領域の中心範囲に入っている場合であることが好ましい。

医療画像から注目領域を検出する注目領域検出部を有し、第１の条件は、注目領域の時間的変化量が変化量用閾値を超える場合であり、第２の条件は、注目領域の時間的変化量が変化量用閾値以下の場合であることが好ましい。医療画像から注目領域を検出する注目領域検出部を有し、第１の条件は、注目領域の輝度値が輝度値用閾値以下の場合であり、第２の条件は、注目領域の変化量が輝度値用閾値を超える場合であることが好ましい。

第１の条件は、第１の表示領域に報知情報を表示する第１の表示時間が表示制限時間以下であり、第２の条件は、第１の表示時間が表示制限時間を超えた場合であることが好ましい。第１の条件は、ユーザー入力により、報知情報を表示する領域が第１の表示領域に指定された場合であり、第２の条件は、ユーザー入力により、報知情報を表示する領域が第２の表示領域に指定された場合であることが好ましい。

医療画像から注目領域を検出する注目領域検出部を有し、第１の条件は、注目領域の面積、注目領域の位置、注目領域の時間的変化量、注目領域の輝度値、及び、第１の表示領域に報知情報を表示する第１の表示時間の少なくとも２つを組み合わせた組み合わせ情報が、組合せ用条件を満たす場合であり、第２の条件は、組み合わせ情報が、組合せ用条件を満たさない場合であることが好ましい。第１の条件は、注目領域の面積と注目領域の輝度値を組み合わせた面積輝度組合せ情報が、面積輝度用組合せ条件を満たす場合であり、第２の条件は、面積輝度組合せ情報が、面積輝度用組合せ条件を満たさない場合であることが好ましい。

表示制御部は、第１の条件及び第２の条件と異なる第３の条件を満たした場合に、第２の表示領域において、表示中の報知情報を非表示にする制御を行うことが好ましい。

表示制御部は、特定の条件を満たした場合に、第１の表示領域、第１の表示領域と異なる第２の表示領域、又は第１の表示領域及び第２の表示領域の両方のいずれかにおいて、報知情報を表示する制御、又は報知情報を非表示にする制御を行い、特定の条件を満たさない場合に、特定の条件を満たす場合と異なる表示領域において、報知情報を表示する制御、又は報知情報を非表示にする制御を行うことが好ましい。

表示制御部は、第１の表示領域において、報知情報を医療画像に重畳させて表示する制御を行うことが好ましい。

医療画像から注目領域を検出する注目領域検出部を有し、報知情報は、注目領域に関する情報を報知するための報知情報であることが好ましい。

被写体又は医療画像に関するエラーを検出するエラー検出部を有し、報知情報はエラーであることが好ましい。エラー検出部は、医療画像を解析してエラーを検出するエラー検出用画像解析部である。エラーは医療画像上に表れるブレであることが好ましい。エラーは被写体の汚れ度合いであることが好ましい。エラー検出部はエラー検出用のセンサであることが好ましい。

報知情報は被写体の観察状態であることが好ましい。観察状態は、被写体に対して照射する照明光に関する照明モード、医療画像に対して施す画像処理に関する画像処理モード、被写体を拡大する拡大観察、又は被写体を拡大しない非拡大観察のうち少なくともいずれかで表されることが好ましい。報知情報は、病変の有無、病変の種類、又は処置具の検出状況であることが好ましい。

報知情報は、医療画像に重畳して保存されることが好ましい。報知情報は、医療画像とひとつのデータ形式にまとめて保存されることが好ましい。報知情報と医療画像は、少なくとも２つの別データとして保存されることが好ましい。

本発明によれば、ユーザーによる医療画像の観察を阻害せず、且つ注目領域の見逃しを防止することができ、さらに、観察時に要する注意を持続させることができる。

内視鏡システムの外観図である。 内視鏡システムのブロック図である。 第１実施形態の画像処理部を示すブロック図である。 報知情報の一つであるバウンディングボックスを示す説明図である。 モニタにおける第１の表示領域Ａ１及び第２の表示領域Ａ２を示す画像図である。 （Ａ）は、注目領域の面積が小さい場合に報知情報としてバウンディングボックスを表示する画像図であり、（Ｂ）は、注目領域の面積が大きい場合に報知情報としてアイコンを表示する画像図である。 （Ａ）は、注目領域が中心範囲から外れている場合に報知情報としてバウンディングボックスを表示する画像図であり、（Ｂ）は、注目領域が中心範囲に入っている場合に報知情報としてアイコンを表示する画像図である。 （Ａ）は、注目領域の動きが遅い場合に報知情報としてアイコンを表示する画像図であり、（Ｂ）は、注目領域の動きが速い場合に報知情報としてバウンディングボックスを表示する画像図である。 報知情報の表示制御に関する一連の流れを示すフローチャートである。 第２実施形態の画像処理部を示すブロック図である。 報知情報として「ブレ発生」の文字情報を表示する画像図である。 第３実施形態の画像処理部を示すブロック図である。 報知情報として「白色光モード」の文字情報を表示する画像図である。 第４実施形態の画像処理部を示すブロック図である。 鑑別スコア値とシークバーを示す説明図である。 報知情報として鑑別スコア値及びシークバーを示す画像図である。

［第１実施形態］
図１に示すように、内視鏡システム１０は、内視鏡１２と、光源装置１４と、プロセッサ装置１６と、モニタ１８と、コンソール１９と、を備える。内視鏡１２は、観察対象である被写体に照明光を照射し、照明光で照射された被写体を撮像する。光源装置１４は、被写体に照射するための照明光を発生する。プロセッサ装置１６は、内視鏡システム１０のシステム制御及び画像処理等を行う。モニタ１８は、プロセッサ装置１６から出力された画像を表示する表示部である。コンソール１９は、キーボードなどのように、プロセッサ装置１６等への設定入力等を行う入力デバイスである。

内視鏡１２は、被検体内に挿入する挿入部１２ａと、挿入部１２ａの基端部分に設けた操作部１２ｂと、挿入部１２ａの先端側に設けた湾曲部１２ｃと、先端部１２ｄと、を有している。操作部１２ｂのアングルノブ１２ｅを操作することにより、湾曲部１２ｃが湾曲する。湾曲部１２ｃが湾曲することにより、先端部１２ｄが所望の方向に向く。先端部１２ｄには、被写体に向けて空気や水等を噴射する噴射口（図示しない）が設けられている。

また、操作部１２ｂには、アングルノブ１２ｅの他、ズーム操作部１３が設けられている。ズーム操作部１３を操作することによって、被写体を拡大または縮小して撮像することができる。また、挿入部１２ａから先端部１２ｄにわたって、処置具などを挿通するための鉗子チャンネル（図示しない）が設けられている。処置具は、鉗子入口１２ｆから鉗子チャンネル内に挿入される。

図２に示すように、光源装置１４は、光源部２０と、光源制御部２２と、を備える。光源部２０は、被写体を照明するための照明光を発光する。光源部２０は、１又は複数の光源を備えている。光源制御部２２は、光源部２０の駆動を制御する。光源制御部２２は、光源部２０を構成する光源の点灯または消灯のタイミング、及び、点灯時の発光量等をそれぞれ独立に制御する。その結果、光源部２０は、発光量や発光タイミングが異なる複数種類の照明光を発光することができる。

光源部２０が発光した照明光は、ライトガイド４１に入射する。ライトガイド４１は、内視鏡１２及びユニバーサルコード内に内蔵されており、照明光を内視鏡１２の先端部１２ｄまで伝搬する。ユニバーサルコードは、内視鏡１２と光源装置１４及びプロセッサ装置１６とを接続するコードである。なお、ライトガイド４１としては、マルチモードファイバを使用できる。一例として、コア径１０５μｍ、クラッド径１２５μｍ、外皮となる保護層を含めた径がφ０．３〜０．５ｍｍの細径なファイバケーブルを使用できる。

内視鏡１２の先端部１２ｄには、照明光学系３０ａと撮像光学系３０ｂが設けられている。照明光学系３０ａは、照明レンズ４５を有しており、この照明レンズ４５を介して照明光が被写体に向けて出射する。撮像光学系３０ｂは、対物レンズ４６、ズームレンズ４７、及びイメージセンサ４８を有している。イメージセンサ４８は、対物レンズ４６及びズームレンズ４７を介して、被写体から戻る照明光の反射光等（反射光の他、散乱光、被写体が発する蛍光、または、被写体に投与等した薬剤に起因した蛍光等を含む）を用いて被写体を撮像する。ズームレンズ４７は、ズーム操作部１３の操作をすることで移動し、イメージセンサ４８を用いて撮像する被写体を拡大または縮小する。

イメージセンサ４８は、例えば原色系のカラーフィルタを有するカラーセンサであり、青色カラーフィルタを有するＢ画素（青色画素）、緑色カラーフィルタを有するＧ画素（緑色画素）、及び、赤色カラーフィルタを有するＲ画素（赤色画素）の３種類の画素を備える。青色カラーフィルタは、主として紫色から青色の光を透過する。緑色カラーフィルタは、主として緑色の光を透過する。赤色カラーフィルタは、主として赤色の光を透過する。上記のように原色系のイメージセンサ４８を用いて被写体を撮像すると、最大で、Ｂ画素から得るＢ画像（青色画像）、Ｇ画素から得るＧ画像（緑色画像）、及び、Ｒ画素から得るＲ画像（赤色画像）の３種類の画像を同時に得ることができる。

なお、イメージセンサ４８としては、ＣＣＤ（Charge Coupled Device）センサや、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）センサを利用可能である。また、本実施形態のイメージセンサ４８は、原色系のカラーセンサであるが、補色系のカラーセンサを用いることもできる。補色系のカラーセンサは、例えば、シアンカラーフィルタが設けられたシアン画素、マゼンタカラーフィルタが設けられたマゼンタ画素、イエローカラーフィルタが設けられたイエロー画素、及び、グリーンカラーフィルタが設けられたグリーン画素を有する。補色系カラーセンサを用いる場合に上記各色の画素から得る画像は、補色−原色色変換をすれば、Ｂ画像、Ｇ画像、及びＲ画像に変換できる。また、カラーセンサの代わりに、カラーフィルタを設けていないモノクロセンサをイメージセンサ４８として使用できる。この場合、ＢＧＲ等各色の照明光を用いて被写体を順次撮像することにより、上記各色の画像を得ることができる。

プロセッサ装置１６は、制御部５２と、画像取得部５４と、画像処理部６１と、表示制御部６６と、記録制御部６８と、保存用メモリ６９と、を有する。制御部５２は、照明光の照射タイミングと撮像のタイミングの同期制御等の内視鏡システム１０の統括的な制御を行う。また、コンソール１９等を用いて、各種設定の入力等をした場合には、制御部５２は、その設定を、光源制御部２２、イメージセンサ４８、または画像処理部６１等の内視鏡システム１０の各部に入力する。

画像取得部５４は、イメージセンサ４８から、被写体を撮像した画像を取得する。この画像取得部５４で取得する画像は、内視鏡１２のような医療用装置により得られた画像であることから、医療画像と称する。画像取得部５４は、ＤＳＰ（Digital Signal Processor）５６と、ノイズ低減部５８と、変換部５９と、を有し、これらを用いて、取得した医療画像に必要に応じて各種処理を施す。ＤＳＰ５６は、取得した医療画像に対し、必要に応じて欠陥補正処理、オフセット処理、ゲイン補正処理、リニアマトリクス処理、ガンマ変換処理、デモザイク処理、及びＹＣ変換処理等の各種処理を施す。

欠陥補正処理は、イメージセンサ４８の欠陥画素に対応する画素の画素値を補正する処理である。オフセット処理は、欠陥補正処理を施した画像から暗電流成分を低減し、正確な零レベルを設定する処理である。ゲイン補正処理は、オフセット処理をした画像にゲインを乗じることにより各画像の信号レベルを整える処理である。リニアマトリクス処理は、オフセット処理をした画像の色再現性を高める処理であり、ガンマ変換処理は、リニアマトリクス処理後の画像の明るさや彩度を整える処理である。

なお、イメージセンサ４８がカラーセンサである場合には、デモザイク処理が行われる。デモザイク処理（等方化処理や同時化処理とも言う）は、欠落した画素の画素値を補間する処理であり、ガンマ変換処理後の画像に対して施す。欠落した画素とは、カラーフィルタの配列に起因して（イメージセンサ４８において他の色の画素を配置しているため）、画素値がない画素である。例えば、Ｂ画像はＢ画素において被写体を撮像して得る画像なので、Ｇ画素やＲ画素に対応する位置の画素には画素値がない。デモザイク処理は、Ｂ画像を補間して、イメージセンサ４８のＧ画素及びＲ画素の位置にある画素の画素値を生成する。ＹＣ変換処理は、デモザイク処理後の画像を、輝度チャンネルＹと色差チャンネルＣｂ及び色差チャンネルＣｒに変換する処理である。

ノイズ低減部５８は、輝度チャンネルＹ、色差チャンネルＣｂ及び色差チャンネルＣｒに対して、例えば、移動平均法またはメディアンフィルタ法等を用いてノイズ低減処理を施す。変換部５９は、ノイズ低減処理後の輝度チャンネルＹ、色差チャンネルＣｂ及び色差チャンネルＣｒを再びＢＧＲの各色の画像に再変換する。

画像処理部６１は、画像取得部５４が取得した医療画像に対して各種の画像処理を施す。本実施形態では、画像処理部６１において、ユーザーに報知するための報知情報を生成する。画像処理部６１は、報知情報と医療画像を表示制御部６６又は記録制御部６８に送る。画像処理部６１の詳細については後述する。

表示制御部６６は、画像処理部６１から送られる報知情報及び医療情報を用い、モニタ１８での表示に適した形式に変換してモニタ１８に出力する。これにより、モニタ１８には、医療画像と報知情報が少なくとも表示される。本実施形態では、表示制御部６６は、報知情報をモニタ１８に表示する制御、又は、報知情報をモニタ１８から非表示にする制御を行う。表示制御部６６の詳細については後述する。

記録制御部６８は、画像処理部６１から送られる報知情報及び医療画像を、保存用メモリ６９での保存に適した形式に変換して、保存用メモリ６９に記録する。記録制御部６８においては、表示制御部６６での制御に従って記録制御する場合と、表示制御部６６での制御に関わらず、記録制御する場合とがある。表示制御部６６での制御に従って記録制御する場合としては、例えば、表示制御部６６により報知情報が表示されたタイミングで、その時点での報知情報及び医療画像が、記録制御部６８によって保存用メモリ６９に保存される。一方、表示制御部６６での制御に関わらず、記録制御する場合としては、例えば、画像処理部６１において注目領域が検出されたタイミングで、その時点での報知情報及び医療画像が、記録制御部６８によって保存用メモリ６９に保存される。

なお、報知情報と医療画像を保存用メモリ６９に保存する場合には、報知情報を医療画像に重畳して保存用メモリ６９に保存するようにしてもよく、それら報知情報及び医療画像を少なくとも２つの別データとして保存用メモリ６９に保存するようにしてもよい。また、報知情報と医療画像とをひとつのデータにまとめて保存用メモリ６９に保存する場合には、ＰＮＧ、Ｅｘｉｆ、ＧＩＦ、ＭＰ４などのデータ形式にして保存することが好ましい。

図３に示すように、画像処理部６１は、注目領域検出部７０と、報知情報生成部７２とを備えている。注目領域検出部７０は、医療画像から検査または診断の対象として注目すべき注目領域を検出する。注目領域検出部７０では、例えば、医療画像に対してConvolutional Neural Networkを行うことの他、医療画像の色情報、画素値の勾配等で得られる特徴量を元に、注目領域の検出を行う。なお、画素値の勾配等は、例えば、被写体の形状（粘膜の大局的な起伏または局所的な陥凹もしくは隆起等）、色（炎症、出血、発赤、または萎縮に起因した白化等の色）、組織の特徴（血管の太さ、深さ、密度、もしくはこれらの組み合わせ等）、または、構造の特徴（ピットパターン等）等によって、変化が表れる。

なお、注目領域検出部７０で検出される注目領域は、例えば、がんに代表される病変部、良性腫瘍部、炎症部（いわゆる炎症の他、出血または萎縮等の変化がある部分を含む）、加熱による焼灼跡もしくは着色剤、蛍光薬剤等による着色によってマーキングしたマーキング部、または、生体検査（いわゆる生検）を実施した生検実施部を含む領域である。すなわち、病変を含む領域、病変の可能性がある領域、生検等の何らかの処置をした領域、クリップやかん子などの処置具、または、暗部領域（ヒダ（襞）の裏、管腔奥のため観察光が届きにくい領域）など病変の可能性にかかわらず詳細な観察が必要である領域等が注目領域になり得る。内視鏡システム１０においては、注目領域検出部７０は、病変部、良性腫瘍部、炎症部、マーキング部、または、生検実施部のうち少なくともいずれかを含む領域を注目領域として検出する。

報知情報生成部７２は、注目領域検出部７０で検出した注目領域を元に、注目領域に関する情報を報知するための報知情報を生成する。具体的には、図４に示すように、報知情報として、注目領域ＲＯＩを点線で覆う矩形上のバウンディングボックス７４を生成する。その他、報知情報として、注目領域を示す矢印や、注目領域を検出中であることを示すアイコン（図６のアイコン７６参照）などを生成するようにしてもよい。また、報知情報として、注目領域をその他の領域と区別できる色に関する色情報としてもよい。なお、報知情報生成部７２は、表示制御部６６での表示制御に応じて異なる報知情報を表示できるようにするため、表示制御に適した複数の報知情報を生成することが好ましい。

図５に示すように、表示制御部６６は、モニタ１８の第１の表示領域Ａ１に医療画像を表示する制御を行う。また、表示制御部６６は、報知情報をモニタ１８上に表示する制御と、表示中の報知情報をモニタ１８上から非表示にする制御を行う。具体的には、表示制御部６６は、第１の表示領域Ａ１に報知情報を表示し、表示中の報知情報を第１の表示領域から非表示にする制御を行う。また、表示制御部６６は、モニタ１８における第１の表示領域と異なる第２の表示領域Ａ２に報知情報を表示し、表示中の報知情報を非表示にする制御を行う。なお、報知情報を第１の表示領域Ａ１に表示する際は、医療画像に報知情報を重畳して表示することが好ましい。

また、表示制御部６６は、第１の表示領域Ａ１及び第２の表示領域Ａ２の両方に報知情報を表示し、表示中の報知情報を第１の表示領域Ａ１又は第２の表示領域Ａ２の少なくとも一方から非表示にする制御を行う。なお、表示制御部６６は、第１の表示領域Ａ１に報知情報を表示する場合には、第１の表示領域Ａ１に表示中の医療画像に報知情報を重畳して表示する制御を行う。

ここで、第１の表示領域Ａ１は、少なくとも内視鏡１２の前方にある被写体の像を含む領域である。第２の表示領域Ａ２は、少なくとも内視鏡１２の概ね側方または後方にある被写体を含む領域である。本実施形態においては、第１の表示領域Ａ１は樽型の領域であり、第２の表示領域Ａ２は、モニタ１８の全画面から樽型の第１の表示領域Ａ２を除いた領域である。

表示制御部６６は、報知情報の表示が注目領域の観察を阻害しないように、報知情報の表示制御を行う。具体的には、表示制御部６６は、第１の条件を満たした場合に、第１の表示領域Ａ１に報知情報を表示し、第１の条件と異なる第２の条件を満たした場合に、第１の表示領域に表示中の報知情報を非表示にし、且つ、第２の表示領域Ａ２に報知情報を表示するようにする。

例えば、第１の条件は、注目領域の面積が面積用閾値以下の場合であり、第２の条件は、注目領域の面積が面積用閾値を超える場合であってもよい。この場合、図６（Ａ）に示すように、表示制御部６６は、注目領域ＲＯＩの面積が面積用閾値以下となる場合（第１の条件を満たす場合）、報知情報として、注目領域ＲＯＩを囲むバウンディングボックス７４を第１の表示領域Ａ１に重畳して表示する制御を行う。このようにバウンディングボックス７４を重畳表示することにより、注目領域ＲＯＩが小さい場合であっても、ユーザーは、注目領域を確実に認識することができる。

その後、内視鏡１２の操作により、第１の表示領域Ａ１に表示される医療画像が変化すると、それに伴って注目領域の面積も変化する。この場合、医療画像上における注目領域が大きくなると、それに合わせてバウンディングボックス７４も大きくなるため、このように大きくなったバウンディングボックス７４が医療画像の観察を阻害する場合がある。そこで、図６（Ｂ）に示すように、表示制御部６６は、注目領域ＲＯＩの面積が面積用閾値を超える場合（第２の条件を満たす場合）、バウンディングボックス７４を第１の表示領域Ａ１から非表示にする。また、表示制御部６６は、報知情報として、注目領域ＲＯＩを検出中であることを示すアイコン７６を第２の表示領域Ａ２に表示する。これにより、第１の表示領域Ａ１からバウンディングボックス７４が非表示になっても、注目領域の見逃しを防ぐことができる。

また、第１の条件は、注目領域の位置が第１の表示領域Ａ１の中心範囲から外れている場合であり、第２の条件は、注目領域の位置が第１の表示領域Ａ１の中心範囲に入っている場合であってもよい。ここで、第１の表示領域Ａ１の中心範囲ＣＲとは、第１の表示領域の中心ＣＰから、予め設定した距離Ｌ１までの範囲のことをいう（図７（Ａ）参照）。図７（Ａ）に示すように、注目領域ＲＯＩの位置が中心範囲ＣＲから外れている場合（第１の条件を満たす場合）、ユーザーは注目領域ＲＯＩを認識し難いことから、報知情報として、注目領域ＲＯＩを囲むバウンディングボックス７４を重畳表示する。

その後、内視鏡１２の操作により、第１の表示領域Ａ１に表示される医療画像が変化すると、それに伴って注目領域の位置も変化する。この場合、中心範囲ＣＲから外れていた注目領域が中心範囲ＣＲに入ると、バウンディングボックス７４が無くても、ユーザーは注目領域を認識できるようになる。そこで、表示制御部６６は、図７（Ｂ）に示すように、注目領域ＲＯＩが中心範囲ＣＲに入った場合（第２の条件を満たす場合）、バウンディングボックス７４を第１の表示領域Ａ１から非表示にする。また、表示制御部６６は、報知情報として、注目領域ＲＯＩを検出中であることを示すアイコン７６を第２の表示領域Ａ２に表示する。これにより、第１の表示領域Ａ１からバウンディングボックス７４が非表示になっても、注目領域の見逃しを防ぐことができる。

また、第１の条件は、注目領域の時間的変化量が変化量用閾値を超える場合であり、第２の条件は、注目領域の時間的変化量が変化量用閾値以下の場合であってもよい。ここで、注目領域の時間的変化量とは、例えば、特定の時間内に注目領域が動いた移動量のことをいう。図８（Ａ）に示すように、表示制御部６６は、注目領域ＲＯＩの時間的変化量が変化量用閾値以下の場合（第２の条件を満たす場合）、報知情報として、注目領域ＲＯＩを検出中であることを示すアイコン７６を第２の表示領域Ａ２に表示する。このように注目領域の動きが遅い場合には、ユーザーは注目領域を把握することができるため、アイコン７６表示だけで注意を促したほうが好ましい。

そして、注目領域の動きが速くなった場合などには、図８（Ｂ）に示すように、表示制御部６６は、注目領域ＲＯＩの時間的変化量が変化量用閾値を超えることを契機に（第１の条件を満たす場合）、報知情報として、注目領域ＲＯＩを囲むバウンディングボックス７４を第１の表示領域Ａ１に表示する。これにより、注目領域の動きが速くなったとしても、ユーザーは、注目領域の位置を把握して、確実に診断を行うことができるようになる。

また、第１の条件は、注目領域の輝度値が輝度値用閾値以下の場合であり、第２の条件は、注目領域の輝度値が輝度値用閾値を超える場合であってもよい。ここで、注目領域の輝度値とは、例えば、注目領域に含まれる画素の画素値の平均値や、注目領域に含まれる画素の画素値から得られる画素値の最頻値などの代表値である。医療画像上に表示される注目領域を観察する際、注目領域の輝度値が低い場合には、ユーザーは注目領域を認識し難くなっている。そこで、表示制御部６６は、注目領域の輝度値が輝度値用閾値以下である場合（第１の条件を満たす場合）、報知情報として、注目領域を囲むバウンディングボックス（図６等のバウンディングボックス７４と同様）を第１の表示領域Ａ１に表示する。これにより、注目領域が暗い場合であっても、注目領域を認識して確実に診断を行うことができるようになる。

一方、注目領域の輝度値が高い場合には、ユーザーは、バウンディングボックスなどの注目領域の位置を報知する情報が無くとも、注目領域を認識することができる。このような場合、表示制御部６６は、注目領域の輝度値が輝度値用閾値を超える場合（第２の条件を満たす場合）、第１の表示領域Ａ１に表示中のバウンディングボックスを非表示にする。また、表示制御部６６は、報知情報として、注目領域を検出中であることを示すアイコン（図６等のアイコン７６と同様）を第２の表示領域Ａ２に表示する。これにより、第１の表示領域Ａ１からバウンディングボックス７４が非表示になっても、注目領域の見逃しを防ぐことができる。

また、注目領域の検出を契機に、報知情報を第１の表示領域Ａ１に表示する場合には、第１の条件を、報知情報を第１の表示領域Ａ１に表示する第１の表示時間が、予め設定した表示制限時間内である場合とし、第２の条件を、第１の表示時間が表示制限時間を超えた場合としてもよい。ここで、報知情報時間は、第１の表示領域Ａ１に報知情報の表示開始を契機にカウントされる。

表示制御部６６は、第１の表示時間が表示制限時間内である場合（第１の条件を満たす場合）、報知情報として、注目領域を囲むバウンディングボックス（図６等のバウンディングボックス７４と同様）を第１の表示領域Ａ１に表示する。また、表示制御部６６は、第１の表示時間が表示制限時間を超えた場合（第２の条件を満たす場合）、バウンディングボックスを第１の表示領域Ａ１から非表示とする。また、表示制御部６６は、報知情報として、注目領域を検出中であることを示すアイコン（図６等のアイコン７６と同様）を第２の表示領域Ａ２に表示する。これにより、一定時間の間、バウンディングボックスを表示すれば、ユーザーは注目領域を認識することができるため、一定時間経過後は、バウンディングボックスを非表示とすることで、医療画像の観察を阻害することがなくなる。また、第１の表示領域Ａ１からバウンディングボックス７４が非表示になっても、第２の表示領域Ａ２にアイコンを表示することで、注目領域の見逃しを防ぐことができる。

また、第１の条件は、ユーザー入力により、報知情報を表示する領域を第１の表示領域Ａ１に指定した場合であり、第２の条件は、ユーザー入力により、報知情報を表示する領域を第２の表示領域Ａ２に指定した場合であってもよい。ユーザー入力は、コンソール１９の他、内視鏡１２の操作部１２ｂに設けた表示領域指定部（図示しない）により行われる。表示制御部６６は、第１の表示領域Ａ１への指定が行われた場合（第１の条件を満たす場合）、注目領域の検出中であることを条件に、報知情報を第１の表示領域Ａ１に表示する。表示制御部６６は、第２の表示領域Ａ２への指定が行われた場合（第１の条件を満たす場合）、注目領域の検出中であることを条件に、報知情報を第２の表示領域Ａ２に表示する。この場合、第２の表示領域Ａ２への指定前に、第１の表示領域Ａ１に報知情報を表示している場合には、報知情報を第１の表示領域Ａ１から非表示にしてもよい。

なお、第１の条件としては、注目領域の面積、注目領域の位置、注目領域の時間的変化量、注目領域の輝度値、及び第１の表示時間の少なくとも２つを組み合わせた組み合わせ情報が、組合せ用条件を満たす場合とし、第２の条件として、前記の組み合わせ条件が、組合せ用条件を満たさない場合としてもよい。例えば、第１の条件として、注目領域の面積と注目領域の輝度値を組み合わせた面積輝度組合せ情報が、面積輝度用組合せ条件を満たす場合とし、第２の条件として、注目領域の面積と注目領域の輝度値を組み合わせた面積輝度組合せ情報が、面積輝度用組合せ条件を満たさない場合としてもよい。

ここで、面積輝度組合せ情報が面積輝度用組合せ条件を満たす場合（第１の条件を満たす場合）として、注目領域の面積が面積用閾値以下で、且つ注目領域の輝度値が輝度値用閾値以下とする。この場合には、表示制御部６６は、報知情報として、注目領域を囲むバウンディングボックス（図６等のバウンディングボックス７４と同様）を第１の表示領域Ａ１に表示する。

一方、面積輝度組合せ情報が面積輝度用組合せ条件を満たさない場合（第２の条件を満たす場合）として、注目領域の面積が面積用閾値を超え、且つ注目領域の輝度値が輝度値用閾値以下である場合、注目領域の面積が面積用閾値以下、且つ注目領域の輝度値が輝度値用閾値を超える場合、注目領域の面積が面積用閾値を超え、且つ注目領域の輝度値が輝度値用閾値を超える場合とする。この場合には、表示制御部６６は、バウンディングボックスを第１の表示領域Ａ１から非表示とする。また、表示制御部６６は、報知情報として、注目領域を検出中であることを示すアイコン（図６等のアイコン７６と同様）を第２の表示領域Ａ２に表示する。

表示制御部６６は、第１の条件と第２の条件を用いて、報知情報の表示制御を行う場合には、第１の条件及び第２の条件と異なる第３の条件を用いて、報知情報の表示制御を行うようにしてもよい。表示制御部６６は、第３の条件を満たす場合には、第２の表示領域Ａ２に表示中の報知情報を非表示にする制御を行う。ユーザーが注目領域を確実に認識できる状況下では、第１表示領域Ａ１及び第２表示領域Ａ２のいずれの領域においても、報知情報を非表示にすることで、報知情報が医療画像の観察の妨げになることを防止できる。なお、第３の条件としては、例えば、報知情報を第２の表示領域Ａ２に表示する第２の表示時間が表示制限時間を超えた場合がある。ここで、第２の表示時間は、報知情報が第２の表示領域Ａ２の表示開始を契機にカウントされる。

また、表示制御部６６は、特定の条件を満たす場合に、第１の表示領域Ａ１、第２の表示領域Ａ２、又は、第１の表示領域Ａ１及び第２の表示領域Ａ２の両方のいずれかにおいて、報知情報を表示する制御、又は報知情報を非表示にする制御を行うようにしてもよい。また、表示制御部６６は、特定の条件を満たさない場合には、特定の条件を満たす場合と異なる表示領域において、報知情報を表示する制御、又は報知情報を非表示にする制御を行うようにしてもよい。なお、特定の条件を満たす場合とは「第１の条件を満たす場合」とし、特定の条件を満たさない場合とは「第２の条件を満たす場合」としてもよい。

例えば、表示制御部６６は、特定の条件を満たす場合に、注目領域の検出中であることを条件に、第１の表示領域Ａ１において報知情報を表示し、且つ第２の表示領域Ａ２において報知情報を非表示にする。また、表示制御部６６は、特定の条件を満たさない場合に、注目領域の検出中であることを条件に、第２の表示領域Ａ２において報知情報を表示し、且つ第１の表示領域Ａ１において報知情報を非表示にする。なお、表示制御部６６は、特定の条件を満たさない場合には、注目領域の検出中であることを条件に、第１の表示領域Ａ１及び第２の表示領域Ａ２の両方において、報知情報を表示するようにしてもよい。なお、ユーザー入力は、上記したように、コンソール１９の他、内視鏡１２の操作部１２ｂに設けた表示領域指定部により行われる。

次に、表示制御部６６による報知情報の表示制御について、図９に示すフローチャートに沿って説明を行う。内視鏡１２は、被写体である被写体に照明光を照射し、被写体を撮像する。この被写体の撮像により医療画像が得られる。注目領域検出部７０は、医療画像から注目領域を検出する。注目領域が検出されると、注目領域に関する情報を報知するための報知情報を報知情報生成部７２で生成する。報知情報としては、例えば、注目領域を囲むバウンディングボックスが生成される。医療画像と報知情報は表示制御部６６に送られる。

表示制御部６６は、モニタ１８の第１の表示領域Ａ１に医療画像を表示する制御を行う。また、表示制御部６６は、報知情報をモニタ１８上に表示する制御と、表示中の報知情報をモニタ１８上から非表示にする制御を行う。表示制御部６６は、報知情報の表示が注目領域の観察を阻害しないように、報知情報の表示制御を行う。表示制御部６６は、注目領域の面積が小さいなど第１の条件を満たす場合には、第１の表示領域Ａ１において報知情報を医療画像に重畳する表示を行う。例えば、注目領域をバウンディングボックスで囲んで表示する。また、注目領域を特定の色で塗りつぶす、あるいは、注目領域に半透明の色を重畳して表示してもよい。その際、報知情報の内容に従って、重畳する色を変えてもよい。

これに対して、表示制御部６６は、注目領域の面積が大きいなど第２の条件を満たす場合には、第２の表示領域Ａ２に報知情報を表示するようにする。この場合、報知情報を第１の表示領域Ａ１に表示中である場合には、第１の表示領域Ａ１における報知情報を非表示にする。例えば、第１の表示領域Ａ１にバウンディングボックスを表示中であれば、第１の表示領域Ａ１からバウンディングボックスを非表示にする一方、第２の表示領域Ａ２に、注目領域を検出中であることを示すアイコンを表示する。これにより、バウンディングボックスを非表示にしても、注目領域の見逃しを防ぐことができる。なお、以上の表示制御部６６による報知情報の表示制御は、注目領域の観察を終了するまで繰り返し行われる。注目領域の観察の終了に関する指示は、コンソール１９等を操作することにより行われる。

［第２実施形態］
第２実施形態では、報知情報として、被写体像又は医療画像に関するエラーをモニタ１８に表示する。したがって、図１０に示すように、第２実施形態の画像処理部６１では、注目領域検出部７０に加えて、エラーを検出するエラー検出部として、医療画像からエラーを検出するエラー検出用画像解析部８０が設けられている。なお、エラー検出部としては、エラー検出用のセンサを用いて、エラーを検出するようにしてもよい。エラー検出用のセンサは、内視鏡１２の先端部１２ｄに設ける他、鉗子チャンネルに挿通する処置具に設けるようにしてもよい。また、第２の実施形態では、エラーを検出できれば、注目領域の検出を行わなくてもよいため、画像処理部６１では注目領域検出部７０を設けなくてもよい。

エラー検出用画像解析部８０では、エラーとして、医療画像上に表れるブレを検出する。このブレは、被写体又は内視鏡１２の先端部の少なくともいずれかが動くことによって発生する。ブレの検出方法としては、例えば、医療画像の高周波成分を算出し、高周波成分が一定値以下となった場合にブレが発生しているとする方法がある。また、エラー検出用画像解析部８０は、エラーとして、被写体の汚れ度合いを検出する。被写体の汚れとしては、残渣、残液などがある。被写体の汚れ度合いの検出方法としては、例えば、医療画像から色情報（例えば、Ｂ画像とＧ画像の比及びＧ画像とＲ画像の比）を算出し、算出した色情報と、被写体上の汚れに相当する汚れ色情報との比較によって、被写体の汚れ度合いを算出する方法がある。この場合、汚れ色情報と近ければ近いほど、被写体の汚れ度合いは大きくなる。

また、第２実施形態の報知情報生成部７２では、エラーを報知するための報知情報を生成する。報知情報としては、例えば、エラーが発生していること及びエラーの種類を示す文字情報がある。エラーが医療画像上に表れるブレである場合には、ブレが発生していることを示す「ブレ発生」の文字情報とすることが好ましい。また、エラーが被写体の汚れである場合には、汚れの発生及び汚れ度合いを示す「汚れ発生（中程度）」の文字情報とすることが好ましい。

表示制御部６６は、報知情報の表示が医療画像の観察を阻害しないように、報知情報の表示制御を行う。具体的には、図１１に示すように、表示制御部６６は、エラー検出用に用いられる特定の条件を満たした場合に、第２の表示領域Ａ２に報知情報（図１１では「ブレ発生」の文字情報）を表示する。ここで、特定の条件とは、第１実施形態で示した第１の条件、第２の条件のうちエラー検出に関する条件とすることが好ましい。

その後の状況の変化により、特定の条件を満たさない場合に、第２の表示領域Ａ２から報知情報を非表示するようにする。なお、特定の条件を満たさない場合であっても、エラーの検出が一定時間以上継続するなどの場合には、報知情報を第２の表示領域Ａ２に表示し続けるようにしてもよい。また、報知情報は、第２の表示領域Ａ２に代えて又は加えて、第１の表示領域Ａ１に表示するようにしてもよい。

［第３実施形態］
第３実施形態では、報知情報として、被写体の観察状態をモニタ１８に表示する。内視鏡システム１０を用いる被写体の観察状態は、種々挙げられる。例えば、内視鏡システム１０においては、波長などが異なる複数種類の照明光を被写体に照射することが可能である。したがって、照明光の種類が異なる複数の照明モードによって、被写体の観察状態は変化し得る。

また、内視鏡システム１０においては、被写体の撮像により得られた医療画像に対して、複数種類の画像処理を施すことが可能である。したがって、医療画像に施す画像処理の種類が異なる複数の画像処理モードによって、被写体の観察状態は変化し得る。また、内視鏡システム１０は、ズーム操作部１３の操作によって、被写体を拡大することが可能である。したがって、被写体を拡大しない非拡大観察又は被写体を拡大する拡大観察によって、被写体の観察状態は変化し得る。

第３実施形態の画像処理部６１では、図１２に示すように、注目領域検出部７０に加えて、被写体の観察状態を取得する観察状態取得部８１が設けられている。観察状態取得部８１は、プロセッサ装置１６だけでなく、内視鏡１２又は光源装置１４との通信が可能となっている。したがって、観察状態取得部８１は、被写体の観察状態として、現在、画像処理部６１で使用中の照明モード又は画像処理モードを取得する。また、観察状態取得部８１は、ズーム操作部１３による操作状況により、被写体の観察状態として、非拡大観察又は拡大観察を取得する。

また、第３実施形態の報知情報生成部７２では、被写体の観察状態を報知するための報知情報を生成する。報知情報としては、例えば、被写体の観察状態を示す文字情報がある。被写体の観察状態が照明モードで表される場合には、現在使用中の照明モードの文字情報（例えば、照明光として白色光を使用する場合であれば、「白色光モード」）とすることが好ましい。また、被写体の観察状態が画像処理モードで表される場合には、現在使用中の画像処理モードの文字情報（例えば、白色光で照明された被写体を撮像して得た白色画像を画像処理する場合には、「白色画像モード」）とすることが好ましい。また、被写体の観察状態が非拡大観察である場合には、「非拡大観察」の文字情報とし、被写体の観察状態が拡大観察である場合には、「拡大観察」の文字情報とすることが好ましい。

表示制御部６６は、報知情報の表示が医療画像の観察を阻害しないように、報知情報の表示制御を行う。具体的には、図１３に示すように、表示制御部６６は、特定の条件を満たした場合に、第２の表示領域Ａ２に報知情報（図１３では「白色光モード」の文字情報）を表示する。ここで、特定の条件とは、第１実施形態で示した第１の条件、第２の条件のうち被写体の観察状態に関する条件とすることが好ましい。

その後の状況の変化により、特定の条件を満たさなくなった場合に、第２の表示領域Ａ２から報知情報を非表示するようにする。なお、特定の条件を満たさない場合であっても、コンソール１９等の操作によりユーザーよる別途の指定がある場合には、報知情報を第２の表示領域Ａ２に表示し続けるようにしてもよい。また、報知情報は、第２の表示領域Ａ２に代えて又は加えて、第１の表示領域Ａ１に表示するようにしてもよい。また、被写体の観察状態が変わった場合に、報知情報の種類を切り替えるようにしてもよい。例えば、白色光モードから特定帯域の光を用いる特殊光モードに変わった場合には、報知情報を「白色光モード」から「特殊光モード」に切り替える。また、報知情報は一定時間の間表示を継続した後は非表示にしてもよい。

［第４実施形態］
第４実施形態では、報知情報として、病変の有無、病変の種類又は処置具の検出状況をモニタ１８に表示する。病変の有無及び病変の種類については、図１４に示すように、注目領域に含まれる特徴量を元に、鑑別処理部８２にて鑑別する。鑑別処理部８２では、Convolutional Neural Networkなどの鑑別処理を用いて、注目領域について病変の有無、病変の種類を算出する。また、処置具の検出については、注目領域に含まれる特徴量を元に、処置具検出部８６にて行う。処置具検出部８６についても、Convolutional Neural Networkなどの処置具検出処理を用いて、注目領域に処置具が含まれるか否かの検出を行う。

また、第４実施形態の報知情報生成部７２では、被写体の観察状態を報知するための報知情報を生成する。報知情報が病変の有無又は病変の種類である場合には、図１５に示すように、報知情報として、病変の進行度や病変らしさを示す鑑別スコア値８８と、鑑別スコア値８８に連動して動くシークバー９０を生成することが好ましい。鑑別スコア値８８は、スコア値が高ければ高いほど、病変の可能性が高いことを示している。シークバー９０は、鑑別スコア値８８が高ければ高いほど、長さＬｓが大きくなる。また、報知情報が処置具の有無である場合には、報知情報として、処置具の有無を示す文字情報（例えば、「処置具検出有り」など）を生成することが好ましい。

表示制御部６６は、報知情報の表示が医療画像の観察を阻害しないように、報知情報の表示制御を行う。具体的には、図１６に示すように、表示制御部６６は、特定の条件を満たした場合に、第２の表示領域Ａ２に報知情報（図１３では鑑別スコア値８８及びシークバー９０）を表示する。その後の状況の変化により、特定の条件を満たさなくなった場合に、第２の表示領域Ａ２から報知情報を非表示するようにする。なお、特定の条件を満たさない場合であっても、コンソール１９等の操作によりユーザーよる別途の指定がある場合には、報知情報を第２の表示領域Ａ２に表示し続けるようにしてもよい。また、報知情報は、第２の表示領域Ａ２に代えて又は加えて、第１の表示領域Ａ１に表示するようにしてもよい。

なお、ユーザーに報知するための報知情報として、第１実施形態で示した「注目領域に関する情報」、第２実施形態で示した「被写体又は医療画像に関するエラー」、第３実施形態で示した「被写体の観察状態」、第４実施形態で示した「病変の有無、病変の種類、処置具の検出状況」のうち２つ以上を組み合わせて、第１の表示領域Ａ１又は第２の表示領域に表示又は非表示する制御を行うようにしてもよい。

なお、第１〜第４実施形態では、内視鏡システム１０に対して本発明の適用を行っているが、内視鏡システム１０に限らず、医療画像を処理する医療画像処理装置に対して、本発明の適用は可能である。また、医療画像を用いてユーザーに診断支援を行うための診断支援装置に対しても本発明の適用は可能である。また、医療画像を用いて、診断レポートなどの医療業務を支援するための医療業務支援装置に対しても本発明の適用は可能である。

なお、第１〜第４実施形態で使用する医療画像としては、白色帯域の光、又は前記白色帯域の光として複数の波長帯域の光を照射して得られた通常光画像であることが好ましい。

また、第１〜第４実施形態で使用する医療画像としては、特定の波長帯域の光を照射して得た特殊光画像であることが好ましい。特定の波長帯域の光は白色帯域よりも狭い帯域であることが好ましい。特定の波長帯域は可視域の青色もしくは緑色帯域に含まれることが好ましい。特定の波長帯域はピークが３９０ｎｍ〜４５０ｎｍ、または５３０ｎｍ〜５５０ｎｍにあることが好ましい。

特定の波長帯域は可視域の赤色帯域に含まれることが好ましい。特定の波長帯域は、ピークが５８５ｎｍ〜６１５ｎｍ、または６１０ｎｍ〜７３０ｎｍにあることが好ましい。

特定の波長帯域は、ピークが、酸化ヘモグロビンと還元ヘモグロビンとで吸収係数の異なる帯域にあることが好ましい。特定の波長帯域は、ピークが４００±１０ｎｍ、４４０±１０ｎｍ、４７０±１０ｎｍ、又は６００ｎｍ〜７５０ｎｍにあることが好ましい。

また、第１〜第４実施形態で使用する医療画像としては、生体内を写した生体内画像であることが好ましい。生体内画像は、生体内の蛍光物質が発する蛍光の情報を有することが好ましい。蛍光は、ピークが３９０〜４７０ｎｍである励起光を前記生体内に照射して得られることが好ましい。

また、第１〜第４実施形態で使用する医療画像としては、生体内を写した生体内画像であることが好ましい。特定の波長帯域は赤外光の波長帯域であることが好ましい。特定の波長帯域は、ピークが７９０ｎｍ〜８２０ｎｍ、又は９０５ｎｍ〜９７０ｎｍにあることが好ましい。

また、第１〜第４実施形態で使用する医療画像を取得する画像取得部５４は、白色帯域の光、又は白色帯域の光として複数の波長帯域の光を照射して得られた通常光画像に基づいて、特定の波長帯域の信号を有する特殊光画像を取得する特殊光画像取得部を有することが好ましい。医療画像は特殊光画像であることが好ましい。特定の波長帯域の信号は、通常光画像に含まれるＲＧＢあるいはＣＭＹの色情報に基づく演算により得られることが好ましい。

また、第１〜第４実施形態で使用する医療画像は特徴量画像とすることが好ましい。この特徴量画像を生成する特徴量画像生成部は、白色帯域の光、又は前記白色帯域の光として複数の波長帯域の光を照射して得られた通常光画像と、特定の波長帯域の光を照射して得られる特殊光画像との少なくとも一方に基づく演算によって、特徴量画像を生成することが好ましい。

１０ 内視鏡システム（医療画像処理装置）
１２ 内視鏡
１２ａ 挿入部
１２ｂ 操作部
１２ｃ 湾曲部
１２ｄ 先端部
１２ｅ アングルノブ
１２ｆ 鉗子入口
１３ ズーム操作部
１４ 光源装置
１６ プロセッサ装置
１８ モニタ
１９ コンソール
２０ 光源部
２２ 光源制御部
３０ａ 照明光学系
３０ｂ 撮像光学系
４１ ライトガイド
４５ 照明レンズ
４６ 対物レンズ
４７ ズームレンズ
４８ イメージセンサ
５２ 制御部
５４ 画像取得部
５６ ＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）
５８ ノイズ低減部
５９ 変換部
６１ 画像処理部
６６ 表示制御部
６８ 記録制御部
６９ 保存用メモリ
７０ 注目領域検出部
７２ 報知情報生成部
７４ バウンディングボックス
７６ アイコン
８０ エラー検出用画像解析部
８１ 観察状態取得部
８２ 鑑別処理部
８６ 処置具検出部
８８ 鑑別スコア値
９０ シークバー

Claims (13)

1. 被写体を含む医療画像を取得する画像取得部と、
   前記医療画像を第１の表示領域に表示する表示部と、
   ユーザーに報知するための報知情報を前記表示部において表示にする制御、又は前記報知情報を前記表示部において非表示にする制御を行う表示制御部と、
   を有し、
   前記表示制御部は、前記第１の表示領域と異なる第２の表示領域において、前記報知情報を表示する制御、又は表示中の前記報知情報を非表示にする制御を行い、
   前記表示制御部は、第１の条件を満たした場合に、前記第１の表示領域において前記報知情報を表示する制御を行い、
   前記第１の条件と異なる第２の条件を満たした場合に、前記第１の表示領域において表示中の前記報知情報を非表示にし、前記第２の表示領域において、前記報知情報を表示する制御を行い、
   前記医療画像から注目領域を検出する注目領域検出部を有し、
   前記第１の条件は、前記注目領域の位置が前記第１の表示領域の中心範囲から外れている場合であり、
   前記第２の条件は、前記注目領域の位置が前記第１の表示領域の中心範囲に入っている場合である医療画像処理装置。
2. 被写体を含む医療画像を取得する画像取得部と、
   前記医療画像を第１の表示領域に表示する表示部と、
   ユーザーに報知するための報知情報を前記表示部において表示にする制御、又は前記報知情報を前記表示部において非表示にする制御を行う表示制御部と、
   を有し、
   前記表示制御部は、前記第１の表示領域と異なる第２の表示領域において、前記報知情報を表示する制御、又は表示中の前記報知情報を非表示にする制御を行い、
   前記表示制御部は、第１の条件を満たした場合に、前記第１の表示領域において前記報知情報を表示する制御を行い、
   前記第１の条件と異なる第２の条件を満たした場合に、前記第１の表示領域において表示中の前記報知情報を非表示にし、前記第２の表示領域において、前記報知情報を表示する制御を行い、
   前記医療画像から注目領域を検出する注目領域検出部を有し、
   前記第１の条件は、前記注目領域の面積が面積用閾値以下の場合であり、
   前記第２の条件は、前記注目領域の面積が前記面積用閾値を超える場合である医療画像処理装置。
3. 被写体を含む医療画像を取得する画像取得部と、
   前記医療画像を第１の表示領域に表示する表示部と、
   ユーザーに報知するための報知情報を前記表示部において表示にする制御、又は前記報知情報を前記表示部において非表示にする制御を行う表示制御部と、
   を有し、
   前記表示制御部は、前記第１の表示領域と異なる第２の表示領域において、前記報知情報を表示する制御、又は表示中の前記報知情報を非表示にする制御を行い、
   前記表示制御部は、第１の条件を満たした場合に、前記第１の表示領域において前記報知情報を表示する制御を行い、
   前記第１の条件と異なる第２の条件を満たした場合に、前記第１の表示領域において表示中の前記報知情報を非表示にし、前記第２の表示領域において、前記報知情報を表示する制御を行い、
   前記医療画像から注目領域を検出する注目領域検出部を有し、
   前記第１の条件は、前記注目領域の時間的変化量が変化量用閾値を超える場合であり、
   前記第２の条件は、前記注目領域の時間的変化量が前記変化量用閾値以下の場合である医療画像処理装置。
4. 被写体を含む医療画像を取得する画像取得部と、
   前記医療画像を第１の表示領域に表示する表示部と、
   ユーザーに報知するための報知情報を前記表示部において表示にする制御、又は前記報知情報を前記表示部において非表示にする制御を行う表示制御部と、
   を有し、
   前記表示制御部は、前記第１の表示領域と異なる第２の表示領域において、前記報知情報を表示する制御、又は表示中の前記報知情報を非表示にする制御を行い、
   前記表示制御部は、第１の条件を満たした場合に、前記第１の表示領域において前記報知情報を表示する制御を行い、
   前記第１の条件と異なる第２の条件を満たした場合に、前記第１の表示領域において表示中の前記報知情報を非表示にし、前記第２の表示領域において、前記報知情報を表示する制御を行い、
   前記医療画像から注目領域を検出する注目領域検出部を有し、
   前記第１の条件は、前記注目領域の面積、前記注目領域の位置、前記注目領域の時間的変化量、前記注目領域の輝度値、及び、前記第１の表示領域に前記報知情報を表示する第１の表示時間の少なくとも２つを組み合わせた組み合わせ情報が、組合せ用条件を満たす場合であり、
   前記第２の条件は、前記組み合わせ情報が、前記組合せ用条件を満たさない場合であり、
   前記第１の条件は、前記注目領域の面積と前記注目領域の輝度値を組み合わせた面積輝度組合せ情報が、面積輝度用組合せ条件を満たす場合であり、
   前記第２の条件は、前記面積輝度組合せ情報が、前記面積輝度用組合せ条件を満たさない場合である医療画像処理装置。
5. 被写体を含む医療画像を取得する画像取得部と、
   前記医療画像を第１の表示領域に表示する表示部と、
   ユーザーに報知するための報知情報を前記表示部において表示にする制御、又は前記報知情報を前記表示部において非表示にする制御を行う表示制御部と、
   を有し、
   前記表示制御部は、前記第１の表示領域と異なる第２の表示領域において、前記報知情報を表示する制御、又は表示中の前記報知情報を非表示にする制御を行い、
   前記表示制御部は、第１の条件を満たした場合に、前記第１の表示領域において前記報知情報を表示する制御を行い、
   前記第１の条件と異なる第２の条件を満たした場合に、前記第１の表示領域において表示中の前記報知情報を非表示にし、前記第２の表示領域において、前記報知情報を表示する制御を行い、
   前記医療画像から注目領域を検出する注目領域検出部を有し、
   前記第１の条件は、前記注目領域の面積、前記注目領域の位置、前記注目領域の時間的変化量、前記注目領域の輝度値、及び、前記第１の表示領域に前記報知情報を表示する第１の表示時間の少なくとも２つを組み合わせた組み合わせ情報が、組合せ用条件を満たす場合であり、
   前記第２の条件は、前記組み合わせ情報が、前記組合せ用条件を満たさない場合である医療画像処理装置。
6. 被写体を含む医療画像を取得する画像取得部と、
   前記医療画像を第１の表示領域に表示する表示部と、
   ユーザーに報知するための報知情報を前記表示部において表示にする制御、又は前記報知情報を前記表示部において非表示にする制御を行う表示制御部と、
   を有し、
   前記表示制御部は、前記第１の表示領域と異なる第２の表示領域において、前記報知情報を表示する制御、又は表示中の前記報知情報を非表示にする制御を行い、
   前記表示制御部は、第１の条件を満たした場合に、前記第１の表示領域において前記報知情報を表示する制御を行い、
   前記第１の条件と異なる第２の条件を満たした場合に、前記第１の表示領域において表示中の前記報知情報を非表示にし、前記第２の表示領域において、前記報知情報を表示する制御を行い、
   前記医療画像から注目領域を検出する注目領域検出部を有し、
   前記第１の条件は、前記注目領域の輝度値が輝度値用閾値以下の場合であり、
   前記第２の条件は、前記注目領域の輝度値が前記輝度値用閾値を超える場合である医療画像処理装置。
7. 前記表示制御部は、前記第１の条件及び前記第２の条件と異なる第３の条件を満たした場合に、前記第２の表示領域において、表示中の前記報知情報を非表示にする制御を行う請求項１記載の医療画像処理装置。
8. 前記表示制御部は、
   特定の条件を満たした場合に、前記第１の表示領域、前記第２の表示領域、又は前記第１の表示領域及び前記第２の表示領域の両方のいずれかにおいて、前記報知情報を表示する制御、又は前記報知情報を非表示にする制御を行い、
   前記特定の条件を満たさない場合に、前記特定の条件を満たす場合と異なる表示領域において、前記報知情報を表示する制御、又は前記報知情報を非表示にする制御を行う請求項１記載の医療画像処理装置。
9. 前記表示制御部は、前記第１の表示領域において、前記報知情報を前記医療画像に重畳させて表示する制御を行う請求項１ないし８いずれか１項記載の医療画像処理装置。
10. 白色帯域の光、又は前記白色帯域の光として複数の波長帯域の光を照射して得られた通常光画像と、特定の波長帯域の光を照射して得られる特殊光画像との少なくとも一方に基づく演算によって、特徴量画像を生成する特徴量画像生成部を有し、
    前記医療画像は前記特徴量画像である請求項１ないし９いずれか１項記載の医療画像処理装置。
11. 被写体を含む医療画像を取得する画像取得部と、
    前記医療画像を第１の表示領域に表示する表示部と、
    ユーザーに報知するための報知情報を前記表示部において表示にする制御、又は前記報知情報を前記表示部において非表示にする制御を行う表示制御部と、
    を有し、
    前記表示制御部は、前記第１の表示領域と異なる第２の表示領域において、前記報知情報を表示する制御、又は表示中の前記報知情報を非表示にする制御を行い、
    前記表示制御部は、第１の条件を満たした場合に、前記第１の表示領域において前記報知情報を表示する制御を行い、
    前記第１の条件と異なる第２の条件を満たした場合に、前記第１の表示領域において表示中の前記報知情報を非表示にし、前記第２の表示領域において、前記報知情報を表示する制御を行い、
    前記医療画像から注目領域を検出する注目領域検出部を有し、
    前記第１の条件は、前記注目領域の位置が前記第１の表示領域の中心範囲から外れている場合であり、
    前記第２の条件は、前記注目領域の位置が前記第１の表示領域の中心範囲に入っている場合である内視鏡システム。
12. 被写体を含む医療画像を取得する画像取得部と、
    前記医療画像を第１の表示領域に表示する表示部と、
    ユーザーに報知するための報知情報を前記表示部において表示にする制御、又は前記報知情報を前記表示部において非表示にする制御を行う表示制御部と、
    を有し、
    前記表示制御部は、前記第１の表示領域と異なる第２の表示領域において、前記報知情報を表示する制御、又は表示中の前記報知情報を非表示にする制御を行い、
    前記表示制御部は、第１の条件を満たした場合に、前記第１の表示領域において前記報知情報を表示する制御を行い、
    前記第１の条件と異なる第２の条件を満たした場合に、前記第１の表示領域において表示中の前記報知情報を非表示にし、前記第２の表示領域において、前記報知情報を表示する制御を行い、
    前記医療画像から注目領域を検出する注目領域検出部を有し、
    前記第１の条件は、前記注目領域の位置が前記第１の表示領域の中心範囲から外れている場合であり、
    前記第２の条件は、前記注目領域の位置が前記第１の表示領域の中心範囲に入っている場合である診断支援装置。
13. 被写体を含む医療画像を取得する画像取得部と、
    前記医療画像を第１の表示領域に表示する表示部と、
    ユーザーに報知するための報知情報を前記表示部において表示にする制御、又は前記報知情報を前記表示部において非表示にする制御を行う表示制御部と、
    を有し、
    前記表示制御部は、前記第１の表示領域と異なる第２の表示領域において、前記報知情報を表示する制御、又は表示中の前記報知情報を非表示にする制御を行い、
    前記表示制御部は、第１の条件を満たした場合に、前記第１の表示領域において前記報知情報を表示する制御を行い、
    前記第１の条件と異なる第２の条件を満たした場合に、前記第１の表示領域において表示中の前記報知情報を非表示にし、前記第２の表示領域において、前記報知情報を表示する制御を行い、
    前記医療画像から注目領域を検出する注目領域検出部を有し、
    前記第１の条件は、前記注目領域の位置が前記第１の表示領域の中心範囲から外れている場合であり、
    前記第２の条件は、前記注目領域の位置が前記第１の表示領域の中心範囲に入っている場合である医療業務支援装置。