WO2024185099A1 - 内視鏡検査支援装置、内視鏡検査支援方法、及び、記録媒体 - Google Patents

Abstract

内視鏡検査支援装置において、画像取得手段は、内視鏡によって撮影された内視鏡画像を取得する。識別情報取得手段は、患者の識別情報を取得する。位置推定手段は、大腸内における内視鏡の位置を推定する。記憶手段は、患者の識別情報と、前回の検査で病変が検出された位置と、前記病変の画像と、前記病変の情報と、を関連付けた前回検査情報を記憶する。検索手段は、取得された識別情報と、推定された内視鏡の位置と、に基づいて、前記記憶手段から、前記内視鏡の位置における前回検査情報を検索する。表示制御手段は、検索した前回検査情報が病変の情報を含む場合に、前回検査情報を表示装置に表示する。

Description

内視鏡検査支援装置、内視鏡検査支援方法、及び、記録媒体

　本開示は、内視鏡検査の支援に関する。

　医師は、内視鏡検査の際、「患者の過去の観察部位の状態」を知りたいことがある。例えば、医師は、過去に発見されたポリープや過去に切除したポリープの切除部位について、経過を観察したいことがある。また、炎症性腸疾患（以下、「ＩＢＤ（Ｉｎｆｌａｍｍａｔｏｒｙ Ｂｏｗｅｌ Ｄｉｓｅａｓｅ）」とも呼ぶ。）では、過去に炎症があった部位は、大腸がんの発症リスクが高いとされている。そのため、患者がＩＢＤである場合は、医師は、内視鏡検査中に、過去に炎症があった部位を知りたいことがある。しかし、「患者の過去の観察部位の状態」を知るためには、電子カルテの参照等が必要となるため、内視鏡検査中に「患者の過去の観察部位の状態」を知ることは困難であった。特許文献１では、内視鏡の現在の撮影部位における過去画像について、現在画像と比較できるように表示することが可能な内視鏡撮影部位特定装置を提案している。

特開２０１６－１８９８１２号公報

　しかし、特許文献１によっても、医師は、現在の観察部位に対応する過去の観察部位の状態を適切に表示できるとは限らない。

　本開示の１つの目的は、内視鏡検査において、現在の観察部位に対応する前回検査時の情報を表示することが可能な内視鏡検査支援装置を提供することにある。

　本開示の一つの観点では、内視鏡検査支援装置は、
　内視鏡によって撮影された内視鏡画像を取得する画像取得手段と、
　患者の識別情報を取得する識別情報取得手段と、
　大腸内における内視鏡の位置を推定する位置推定手段と、
　患者の識別情報と、前回の検査で病変が検出された位置と、前記病変の画像と、前記病変の情報と、を関連付けた前回検査情報を記憶した記憶手段と、
　取得された識別情報と、推定された内視鏡の位置と、に基づいて、前記記憶手段から、前記内視鏡の位置における前回検査情報を検索する検索手段と、
　検索した前回検査情報が病変の情報を含む場合に、前回検査情報を表示装置に表示する表示制御手段と、
　を備える。

　本開示の他の観点では、内視鏡検査支援方法は、
　内視鏡によって撮影された内視鏡画像を取得し、
　患者の識別情報を取得し、
　大腸内における内視鏡の位置を推定し、
　患者の識別情報と、前回の検査で病変が検出された位置と、前記病変の画像と、前記病変の情報と、を関連付けた前回検査情報を記憶し、
　取得された識別情報と、推定された内視鏡の位置と、に基づいて、前記記憶手段から、前記内視鏡の位置における前回検査情報を検索し、
　検索した前回検査情報が病変の情報を含む場合に、前回検査情報を表示装置に表示する。

　本開示のさらに他の観点では、記録媒体は、
　内視鏡によって撮影された内視鏡画像を取得し、
　患者の識別情報を取得し、
　大腸内における内視鏡の位置を推定し、
　患者の識別情報と、前回の検査で病変が検出された位置と、前記病変の画像と、前記病変の情報と、を関連付けた前回検査情報を記憶し、
　取得された識別情報と、推定された内視鏡の位置と、に基づいて、前記記憶手段から、前記内視鏡の位置における前回検査情報を検索し、
　検索した前回検査情報が病変の情報を含む場合に、前回検査情報を表示装置に表示する処理をコンピュータに実行させるプログラムを記録する。

　本開示によれば、内視鏡検査において、現在の観察部位に対応する前回検査時の情報を表示することが可能となる。

内視鏡検査システムの概略構成を示すブロック図である。 内視鏡検査支援装置のハードウェア構成を示すブロック図である。 第１実施形態に係る内視鏡検査支援装置の機能構成を示すブロック図である。 大腸の構造を模式的に示す。 第１実施形態に係る前回検査情報のデータ構造の一例を示す。 第１実施形態に係る表示装置による表示例を示す。 第１実施形態に係る表示装置による他の表示例を示す。 第１実施形態に係る内視鏡検査支援装置による画像表示処理のフローチャートである。 第２実施形態に係る内視鏡検査支援装置の機能構成を示すブロック図である。 第２実施形態に係る前回検査情報のデータ構造の他の例を示す。 炎症の進行状態の判定方法の一例を示す。 第２実施形態に係る表示装置による他の表示例を示す。 第２実施形態に係る表示装置による他の表示例を示す。 第２実施形態に係る表示装置による他の表示例を示す。 第２実施形態に係る内視鏡検査支援装置による画像表示処理のフローチャートである。 第３実施形態に係る内視鏡検査支援装置の機能構成を示すブロック図である。 第３実施形態に係る内視鏡検査支援装置による処理のフローチャートである。

　以下、図面を参照して、本開示の好適な実施形態について説明する。
　＜第１実施形態＞
　［システム構成］
　図１は、内視鏡検査システム１００の概略構成を示す。内視鏡検査システム１００は、内視鏡を利用した検査（治療を含む）の際に、大腸内にある内視鏡の位置を推定する。そして、内視鏡検査システム１００は、内視鏡の位置における前回の検査に関する情報（以下、「前回検査情報」とも呼ぶ。）をデータベースから検索する。このとき、内視鏡検査システム１００は、前回検査情報に病変に関連する病変情報が含まれる場合は、前回検査情報を表示装置に表示する。病変情報には、例えば、「ポリープあり」や「ポリープを切除した」などの情報がある。一方、内視鏡検査システム１００は、前回検査情報に病変情報が含まれない場合は、前回検査情報を表示装置に表示しない。

　このように、内視鏡検査システム１００は、前回の検査で病変が発見された位置や、前回の検査で処置をした位置に、内視鏡が到達すると、表示装置に前回検査情報を表示する。これにより、医師は、病変や処置後の経過を容易に把握することが可能となる。

　図１に示すように、内視鏡検査システム１００は、主に、内視鏡検査支援装置１と、表示装置２と、内視鏡検査支援装置１に接続された内視鏡スコープ３と、を備える。

　内視鏡検査支援装置１は、内視鏡検査中に内視鏡スコープ３が撮影する映像（即ち、動画。以下、「内視鏡映像Ｉｃ」とも呼ぶ。）を内視鏡スコープ３から取得し、内視鏡検査の検査者（医師）が確認するための表示データを表示装置２に表示させる。具体的に、内視鏡検査支援装置１は、内視鏡検査中に、内視鏡スコープ３により撮影された臓器内の動画を内視鏡映像Ｉｃとして取得する。また、医師は、内視鏡検査中に病変を見つけると、内視鏡スコープ３を操作して病変位置の撮影指示を入力する。内視鏡検査支援装置１は、医師による撮影指示に基づいて、病変位置を写した病変画像を生成する。具体的には、内視鏡検査支援装置１は、動画である内視鏡映像Ｉｃから、医師の撮影指示に基づいて静止画である病変画像を生成する。

　表示装置２は、内視鏡検査支援装置１から供給される表示信号に基づき所定の表示を行うディスプレイ等である。

　内視鏡スコープ３は、主に、医師が送気、送水、アングル調整、撮影指示などの入力を行うための操作部３６と、被検者の検査対象となる臓器内に挿入され、柔軟性を有するシャフト３７と、超小型撮像素子などの撮影部を内蔵した先端部３８と、内視鏡検査支援装置１と接続するための接続部３９とを有する。

　なお、以下では、主に大腸の内視鏡検査における処理を前提として説明を行うが、検査対象は、大腸に限らず、胃、食道、小腸、十二指腸などの消化管（消化器）であってもよい。

　［ハードウェア構成］
　図２は、内視鏡検査支援装置１のハードウェア構成を示す。内視鏡検査支援装置１は、主に、プロセッサ１１と、メモリ１２と、インターフェース１３と、入力部１４と、光源部１５と、音出力部１６と、データベース（以下、「ＤＢ」と記す。）１７と、を含む。これらの各要素は、データバス１９を介して接続されている。

　プロセッサ１１は、メモリ１２に記憶されているプログラム等を実行することにより、所定の処理を実行する。プロセッサ１１は、ＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）、ＧＰＵ（Ｇｒａｐｈｉｃｓ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）、ＴＰＵ（Ｔｅｎｓｏｒ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）などのプロセッサである。なお、プロセッサ１１は、複数のプロセッサから構成されてもよい。プロセッサ１１は、コンピュータの一例である。

　メモリ１２は、ＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）などの、作業メモリとして使用される各種の揮発性メモリ及び内視鏡検査支援装置１の処理に必要な情報を記憶する不揮発性メモリにより構成される。なお、メモリ１２は、内視鏡検査支援装置１に接続又は内蔵されたハードディスクなどの外部記憶装置を含んでもよく、着脱自在なフラッシュメモリやディスク媒体などの記憶媒体を含んでもよい。メモリ１２には、内視鏡検査支援装置１が本実施形態における各処理を実行するためのプログラムが記憶される。

　また、メモリ１２は、プロセッサ１１の制御に基づき、内視鏡検査において内視鏡スコープ３が撮影した一連の内視鏡映像Ｉｃを一時的に記憶する。また、メモリ１２は、内視鏡検査中に医師の撮影指示に基づいて撮影された病変画像を一時的に記憶する。これらの画像は、例えば、被検者の識別情報（例えば患者ＩＤ）、及び、タイムスタンプの情報等と関連付けられてメモリ１２に記憶される。

　インターフェース１３は、内視鏡検査支援装置１と外部装置とのインターフェース動作を行う。例えば、インターフェース１３は、プロセッサ１１が生成した表示データＩｄを表示装置２に供給する。また、インターフェース１３は、光源部１５が生成する照明光を内視鏡スコープ３に供給する。また、インターフェース１３は、内視鏡スコープ３から供給される内視鏡映像Ｉｃを示す電気信号をプロセッサ１１に供給する。インターフェース１３は、外部装置と有線又は無線により通信を行うためのネットワークアダプタなどの通信インターフェースであってもよく、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ　Ｓｅｒｉａｌ　Ｂｕｓ）、ＳＡＴＡ（Ｓｅｒｉａｌ　ＡＴ　Ａｔｔａｃｈｍｅｎｔ）などに準拠したハードウェアインターフェースであってもよい。

　入力部１４は、医師の操作に基づく入力信号を生成する。入力部１４は、例えば、ボタン、タッチパネル、リモートコントローラ、音声入力装置等である。光源部１５は、内視鏡スコープ３の先端部３８に供給するための光を生成する。また、光源部１５は、内視鏡スコープ３に供給する水や空気を送り出すためのポンプ等も内蔵してもよい。音出力部１６は、プロセッサ１１の制御に基づき音を出力する。

　ＤＢ１７は、被検者の前回検査情報を記憶している。前回検査情報は、病変が検出された位置、病変画像、及び、病変情報などを含む。ＤＢ１７は、内視鏡検査支援装置１に接続又は内蔵されたハードディスクなどの外部記憶装置を含んでもよく、着脱自在なフラッシュメモリなどの記憶媒体を含んでもよい。なお、ＤＢ１７を内視鏡検査システム１００内に備える代わりに、外部のサーバなどにＤＢ１７を設け、通信により当該サーバから前回検査情報を取得するようにしてもよい。

　［機能構成］
　図３は、第１実施形態に係る内視鏡検査支援装置１の機能構成を示すブロック図である。内視鏡検査支援装置１は、機能的には、前述の表示装置２と、ＤＢ１７と、に加えて、患者ＩＤ取得部１１１と、内視鏡映像取得部１１２と、位置判定部１１３と、前回検査情報検索部１１４と、表示データ生成部１１５と、を含む。

　内視鏡検査支援装置１には、入力部１４を通じて、被検者である患者の患者ＩＤが入力される。患者ＩＤは、患者を一意に識別する情報であり、患者毎に一意に付与したＩＤなどの他、マイナンバーなどの個人識別番号を利用してもよい。患者ＩＤ取得部１１１は、入力部１４を通じて入力された患者ＩＤを取得し、前回検査情報検索部１１４へ出力する。

　内視鏡検査支援装置１には、内視鏡スコープ３から内視鏡映像Ｉｃが入力される。内視鏡画像Ｉｃは、内視鏡映像取得部１１２に入力される。内視鏡映像取得部１１２は、入力された内視鏡映像Ｉｃを、位置判定部１１３と、表示データ生成部１１５へ出力する。

　位置判定部１１３は、内視鏡映像取得部１１２から入力された内視鏡映像Ｉｃに基づいて、内視鏡スコープ３の位置、即ち、内視鏡映像の撮影位置を判定する。例えば、図４に示すように、大腸は、直腸、Ｓ状結腸、下行結腸、横行結腸、上行結腸、盲腸、などの複数の部位により構成される。位置判定部１１３は、撮影位置が上記の各部位のいずれに属するかを判定する。

　具体的に、大腸の各部位の境界には、内視鏡スコープ３が腸壁に当たって折れ曲がる部分（以下、「ランドマーク」とも呼ぶ。）が存在する。位置判定部１１３は、ランドマークに基づいて、撮影位置が大腸のどの部位に属するかを判定することができる。例えば、位置判定部１１３は、ランドマークの画像と、大腸の部位と、が関連付けて登録されているＤＢを用いて、撮影位置を判定することができる。位置判定部１１３は、内視鏡映像から静止画（以下、「内視鏡画像」とも呼ぶ。）を抽出し、内視鏡画像と、ＤＢに登録されているランドマークの画像と、の類似度を計算していく。そして、位置判定部１１３は、内視鏡画像との類似度が所定の閾値以上であるランドマークの画像を検出した場合は、そのランドマークの画像に対応する大腸の部位をＤＢから取得する。位置判定部１１３は、ＤＢから取得した大腸の部位を撮影位置として、前回検査情報検索部１１４へ出力する。なお、位置判定部１１３は、内視鏡画像との類似度が所定の閾値以上であるランドマークの画像を検出しなかった場合は、撮影位置に変更がないとの結果を前回検査情報検索部１１４へ出力する。

　なお、位置判定部１１３は、予め用意された画像認識モデルなどを用いて、内視鏡映像の撮影位置を判定しても良い。この画像認識モデルは、内視鏡映像からランドマークを検出し、撮影位置を判定するように予め学習されたモデルである。

　前回検査情報検索部１１４は、患者ＩＤ取得部１１１から入力された患者ＩＤと、位置判定部１１３から入力された撮影位置と、を基に、ＤＢ１７から前回検査情報を検索する。

　図５は、ＤＢ１７に記憶されている前回検査情報のデータ構造の一例を示す。図示のように、ＤＢ１７には、患者ＩＤに対応付けて、位置と、前回検査情報と、が記憶されている。「位置」は、大腸の各部位（直腸、Ｓ状結腸、下行結腸、横行結腸、上行結腸、盲腸のいずれか）を示す情報である。「前回検査情報」は、前回病変情報と、前回画像情報と、を含む。「前回病変情報」は、見つかった病変や、病変に対して行った処置を示す。なお、「異常なし」は、その部位に病変がなかったことを示す。「前回画像情報」は、病変や処置をした部位（以下「処置部」とも呼ぶ。）などを撮影した内視鏡画像である。図５では、前回画像情報を画像データのファイル名で示している。なお、「‐（ハイフン）」は、その部位に病変や処置部がなく、その部位における内視鏡画像がないことを示す。また、図５の例では、大腸の１つの部位について１つの前回病変情報を示しているが、大腸の１つの部位について、複数の病変や複数の処置部がある場合は、複数の前回病変情報および複数の前回画像情報がＤＢ１７に記憶される。

　図３に戻り、前回検査情報検索部１１４は、患者ＩＤと撮影位置の組合せに対応する前回検査情報をＤＢ１７から取得する。前回検査情報検索部１１４は、撮影位置と、前回検査情報と、を表示データ生成部１１５へ出力する。

　表示データ生成部１１５は、内視鏡映像取得部１１２から入力された内視鏡映像Ｉｃと、前回検査情報検索部１１４から入力された撮影位置と、前回検査情報と、を用いて表示データＩｄを生成し、表示装置２へ出力する。なお、前回検査情報に病変や処置などの情報が含まれない（即ち、前回病変情報が「異常なし」である）場合は、表示データ生成部１１５は、内視鏡映像Ｉｃと、撮影位置と、を用いて表示データＩｄを生成し、表示装置２へ出力する。

　上記の構成において、患者ＩＤ取得部１１１は、識別情報取得手段の一例であり、内視鏡映像取得部１１２は、画像取得手段の一例であり、位置判定部１１３は位置推定手段の一例であり、前回検査情報検索部１１４は、検索手段の一例であり、表示データ生成部１１５は表示制御手段の一例である。

　［表示例］
　次に、表示装置２による表示例を説明する。図６は、表示装置２による表示例の一例を示す。図６の表示例では表示エリア２０内に、内視鏡映像２１と、大腸モデル２２と、撮影位置２３と、前回検査情報領域２４と、が表示されている。

　内視鏡映像２１は、検査中の内視鏡映像Ｉｃである。大腸モデル２２は、大腸の概略図を示す。大腸モデル２２上には、現在の撮影位置２３が黒の丸で示されている。図６では、大腸モデル２２のＳ状結腸に該当する部位に、撮影位置２３が示されている。前回検査情報領域２４は、撮影位置２３における前回の検査情報を表示する領域である。図６では、前回検査情報領域２４に、Ｓ状結腸における前回の検査情報として病変を含む内視鏡画像が表示されている。図６のような表示により、医師は、現在の撮影位置がＳ状結腸であり、前回の検査でＳ状結腸に病変が検出されたことを把握することが可能となる。

　なお、図６では、前回検査情報領域２４に１つの画像を表示しているが、１つの部位について２つ以上の病変や処置部がある場合、前回検査情報領域２４のスペースに応じて、２つ以上の画像を表示してもよい。また、表示装置を追加し、一方の画面に内視鏡映像２１を表示し、他方の画面に大腸モデル２２および前回検査情報領域２４を表示することで、前回検査情報領域２４の表示スペースを確保してもよい。

　図７は、表示装置２による表示の他の例を示す。図７の表示例では表示エリア２０ａ内に、内視鏡映像２１ａと、大腸モデル２２ａと、撮影位置２３ａと、前回検査情報領域２４ａと、が表示されている。図７では、図６の状態から検査が進んで、Ｓ状結腸から直腸に撮影位置が移動している。また、前回検査情報領域２４ａには前回の検査情報が表示されておらず、前回の検査では、直腸には病変や処置部などがなかったことを示している。

　このように、現在の撮影位置における前回の検査情報を表示することで、医師は、前回の検査情報と比較しながら内視鏡検査を行うことが可能となる。

　［画像表示処理］
　次に、上記のような表示を行う画像表示処理について説明する。図８は、内視鏡検査支援装置１による画像表示処理のフローチャートである。この処理は、図２に示すプロセッサ１１が予め用意されたプログラムを実行し、図３に示す各要素として動作することにより実現される。

　まず、内視鏡検査支援装置１には、入力部１４を通じて、被検者である患者の患者ＩＤが入力される。患者ＩＤ取得部１１１は、患者ＩＤを取得し、前回検査情報検索部１１４へ出力する（ステップＳ１１１）。次に、内視鏡検査支援装置１には、内視鏡スコープ３から内視鏡映像Ｉｃが入力される。内視鏡映像取得部１１２は、内視鏡画像Ｉｃを取得し、位置判定部１１３と、表示データ生成部１１５へ出力する（ステップＳ１１２）。

　次に、位置判定部１１３は、内視鏡映像取得部１１２から入力された内視鏡映像Ｉｃに基づいて、内視鏡映像の撮影位置が大腸の各部位（直腸、Ｓ状結腸、下行結腸、横行結腸、上行結腸、盲腸）のいずれに属するかを判定する。位置判定部１１３は、判定した撮影位置を前回検査情報検索部１１４へ出力する（ステップＳ１１３）。

　次に、前回検査情報検索部１１４は、患者ＩＤ取得部１１１から入力された患者ＩＤと、位置判定部１１３から入力された撮影位置と、の組合せに対応する前回検査情報をＤＢ１７から取得する。前回検査情報検索部１１４は、撮影位置と、前回検査情報と、を表示データ生成部１１５へ出力する（ステップＳ１１４）。

　表示データ生成部１１５は、内視鏡映像Ｉｃと、撮影位置と、前回検査情報と、を用いて表示データＩｄを生成し、表示装置２へ出力する（ステップＳ１１５）。なお、前回検査情報に病変や処置などの情報が含まれない場合は、表示データ生成部１１５は、内視鏡映像Ｉｃと、撮影位置と、を用いて表示データＩｄを生成し、表示装置２へ出力する。

　次に、内視鏡検査支援装置１は、検査が終了したか否かを判定する。内視鏡検査支援装置１は、例えば、医師が内視鏡検査支援装置１又は内視鏡スコープ３に対して検査終了の操作を行ったときに検査が終了したと判定する。また、内視鏡検査支援装置１は、内視鏡スコープ３による撮影画像の画像解析により、撮影画像が臓器外の画像になったときに自動的に検査が終了したと判定してもよい。検査が終了していないと判定された場合（ステップＳ１１６：Ｎｏ）、処理はステップＳ１１２へ戻る。一方、検査が終了したと判定された場合（ステップＳ１１６：Ｙｅｓ）、処理は終了する。

　［変形例］
　次に、第１実施形態の変形例を説明する。以下の変形例は、適宜組み合わせて第１実施形態に適用することができる。

　（変形例）
　第１実施形態では、位置判定部１１３は、内視鏡映像に基づいて、撮影位置を判定しているが、位置判定部１１３は、磁気コイルを用いて撮影位置を判定してもよい。内視鏡スコープ３の先端部３８に磁気コイルを内蔵することにより、位置判定部１１３は、磁気コイルから発生する磁気によって、内視鏡スコープ３の３次元の挿入形状を推定することができる。位置判定部１１３は、推定した挿入形状から、撮影位置が大腸の各部位のいずれに属するかを判定してもよい。さらに、位置判定部１１３は、内視鏡スコープ３の挿入形状に加えて、大腸内に挿入した内視鏡スコープ３の挿入長を用いて、撮影位置が大腸の各部位のいずれに属するかを判定してもよい。

　＜第２実施形態＞
　次に、第２実施形態について説明する。第２実施形態に係る内視鏡検査システムでは、今回の検査における大腸の炎症状態と、前回の検査における大腸の炎症状態と、を比較しながら検査を進めることができる点で、第１実施形態に係る内視鏡検査システム１００と異なる。なお、第２実施形態に係る内視鏡検査システムは、システム構成及びハードウェア構成については、第１実施形態に係る内視鏡検査システム１００と同様であるので、説明を省略する。

　［機能構成］
　図９は、第２実施形態に係る内視鏡検査支援装置１ａの機能構成を示すブロック図である。内視鏡検査支援装置１ａは、機能的には、前述の表示装置２と、ＤＢ１７と、に加えて、患者ＩＤ取得部１１１と、内視鏡映像取得部１１２と、位置判定部１１３と、表示データ生成部１１５と、炎症有無判定部１１６と、検査情報取得部１１７と、を含む。

　なお、患者ＩＤ取得部１１１と、内視鏡映像取得部１１２と、位置判定部１１３は、第１実施形態に係る内視鏡検査支援装置１の患者ＩＤ取得部１１１と、内視鏡映像取得部１１２と、位置判定部１１３と同様の構成であり、同様に動作するので、その説明は省略する。

　炎症有無判定部１１６には、内視鏡映像取得部１１２から内視鏡映像Ｉｃが入力される。炎症有無判定部１１６は、予め用意された画像認識モデルなどを用いて、内視鏡映像Ｉｃから炎症の有無を判定する。この画像認識モデルは、内視鏡画像を入力とし、炎症の有無を推定するように予め学習されたモデルであり、以下、炎症推定モデルとも呼ぶ。

　具体的に、炎症有無判定部１１６は、内視鏡映像から内視鏡画像を抽出し、内視鏡画像を炎症推定モデルに入力する。炎症推定モデルは、内視鏡画像から炎症の有無を推定し、信頼度スコアを出力する。信頼度スコアは、例えば０以上、１以下の数であり、信頼度スコアが１に近い数であるほど炎症している可能性が高い。炎症有無判定部１１６は、信頼度スコアが所定の閾値以上である場合は、炎症ありと判定する。一方、炎症有無判定部１１６は、信頼度スコアが所定の閾値未満である場合は、炎症なしと判定する。炎症有無判定部１１６は、炎症有無の判定結果を検査情報取得部１１７へ出力する。なお、炎症推定モデルとしては、炎症が生じている状態の多数の画像と炎症が生じていない状態の多数の画像について、炎症の有無をラベル付けして生成した学習データを用いて予め学習されたモデルを使用することができる。

　検査情報取得部１１７には、患者ＩＤ取得部１１１から患者ＩＤが入力され、位置判定部１１３から撮影位置が入力され、炎症有無判定部１１６から炎症有無の判定結果が入力される。

　図１０は、ＤＢ１７に記憶されている前回検査情報のデータ構造の一例を示す。図示のように、ＤＢ１７には、患者ＩＤに対応付けて、位置と、前回炎症情報と、前回検査情報と、が記憶されている。なお、「位置」は、図５に示す前回検査情報の「位置」と同様であるため、説明は省略する。「前回炎症情報」は、前回の検査における炎症の有無を示す情報である。図１０では、前回の検査で炎症があった場合は「有」、前回の検査で炎症がなかった場合は「無」が示されている。「前回検査情報」は、前回病変情報と、前回画像情報と、を含む。なお、「前回病変情報」は、図５に示す前回検査情報の「前回病変情報」と同様であるため、説明は省略する。「前回画像情報」は、病変や処置部、炎症などを撮影した内視鏡画像である。図１０では、前回画像情報を画像データのファイル名で示している。なお、「‐（ハイフン）」は、その部位に病変や処置部、炎症がなく、その部位における内視鏡画像がないことを示す。また、図１０の例では、大腸の１つの部位について１つの前回病変情報を示しているが、大腸の１つの部位について、複数の病変や複数の処置部がある場合は、複数の前回病変情報および複数の前回画像情報がＤＢ１７に記憶される。

　図９に戻り、検査情報取得部１１７は、ＤＢ１７から、患者ＩＤに対応する前回炎症情報を取得する。また、検査情報取得部１１７は、撮影位置と、炎症有無の判定結果と、前回炎症情報と、を基に、撮影位置における炎症の進行状態を判定する。

　図１１は、炎症の進行状態の判定方法の一例を示す。図１１では、炎症の進行状態を、「Ｐ１（活動期）」、「Ｐ２（寛解期）」、「Ｐ３（活動期）」、「Ｐ４（炎症無）」に分類している。検査情報取得部１１７は、ある大腸の部位について、今回の検査および前回の検査で炎症があった場合は、炎症の進行状態を「Ｐ１（活動期）」と判定する。検査情報取得部１１７は、ある大腸の部位について、今回の検査で炎症がなく、前回の検査で炎症があった場合は、炎症の進行状態を「Ｐ２（寛解期）」と判定する。検査情報取得部１１７は、ある大腸の部位について、今回の検査で炎症があり、前回の検査で炎症がなかった場合は、炎症の進行状態を「Ｐ３（活動期）」と判定する。検査情報取得部１１７は、ある大腸の部位について、今回の検査および前回の検査で炎症がなかった場合は、炎症の進行状態を「Ｐ４（炎症無）」と判定する。

　また、検査情報取得部１１７は、ＤＢ１７から、患者ＩＤと撮影位置の組合せに対応する前回検査情報を取得する。検査情報取得部１１７は、撮影位置と、炎症有無の判定結果と、前回炎症情報と、前回検査情報と、炎症の進行状態と、を表示データ生成部１１５へ出力する。

　表示データ生成部１１５は、内視鏡映像取得部１１２から入力された内視鏡映像Ｉｃと、検査情報取得部１１７から入力された撮影位置と、炎症有無の判定結果と、前回炎症情報と、前回検査情報と、炎症の進行状態と、を用いて表示データＩｄを生成し、表示装置２へ出力する。なお、前回検査情報に病変や処置、炎症などの情報が含まれない（即ち、前回病変情報が「異常なし」、かつ、前回炎症情報が「無」である）場合は、表示データ生成部１１５は、内視鏡映像Ｉｃと、撮影位置と、炎症有無の判定結果と、前回炎症情報と、炎症の進行状態と、を用いて表示データＩｄを生成し、表示装置２へ出力する。

　［表示例］
　次に、表示装置２による表示例を説明する。図１２は、表示装置２による表示例の一例を示す。図１２の表示例では表示エリア３０内に、内視鏡映像３１と、大腸モデル３２と、撮影位置３３と、前回検査情報領域３４と、炎症の進行状態３５と、が表示されている。

　内視鏡映像３１は、検査中の内視鏡映像Ｉｃである。大腸モデル３２は、大腸の概略図を示す。大腸の概略図の各部位（直腸、Ｓ状結腸、下行結腸、横行結腸、上行結腸、盲腸）は、前回の検査時に炎症があったか否かによって表示態様が異なる。図１２では、前回の検査で炎症があった部位は、斜めのハッチングにより示され、前回の検査で炎症がなかった部位は、白色により示されている。図１２の大腸モデル３２により、医師は、前回の検査では、Ｓ状結腸と、下行結腸と、横行結腸に炎症があったことを把握することができる。

　また、大腸モデル３２には、現在の撮影位置３３が示されている。撮影位置３３は、現在の撮影位置に炎症があるか否かによって表示態様が異なる。例えば、現在の撮影位置に炎症がある場合は、撮影位置３３は、黒の丸により示される。また、現在の撮影位置に炎症がない場合は、撮影位置３３は、白の丸により示される。図１２の大腸モデルおよび撮影位置３３により、医師は、現在の撮影位置が上行結腸であり、現在の上行結腸には炎症があることを把握することができる。

　また、前回検査情報領域３４は、現在の撮影位置３３における前回の検査情報を表示する領域である。なお、図１２では、前回検査情報領域３４には、前回の検査情報が表示されておらず、前回の検査では、上行結腸には病変や処置部、炎症などがなかったことを示している。

　炎症の進行状態３５は、撮影位置３３における炎症の進行状態を示す。図１２では、上行結腸における炎症の進行状態が「Ｐ３（活動期）」であることを示している。このような表示により、医師は、炎症の範囲が拡大していることを把握することができる。

　図１３は、表示装置２による表示の他の例を示す。図１３の表示例では表示エリア３０ａ内に、内視鏡映像３１ａと、大腸モデル３２ａと、撮影位置３３ａと、前回検査情報領域３４ａと、炎症の進行状態３５ａと、が表示されている。図１３では、図１２の状態から検査が進んで、上行結腸からＳ状結腸に撮影位置が移動している。

　図１３では、撮影位置３３ａは、白の丸であり、現在のＳ状結腸には炎症がないことを示している。また、前回検査情報領域３４ａには、前回の検査におけるＳ状結腸の内視鏡画像が表示されている。また、炎症の進行状態３５ａより、Ｓ状結腸における炎症の進行状態が「Ｐ２（寛解期）」であることを示している。このような表示により、医師は、Ｓ状結腸は前回の検査時に炎症があった部位であり、注意して観察する必要があることを把握することができる。

　図１４は、表示装置２による表示の他の例を示す。図１４は、今回の検査結果と、前回の検査結果とを、比較したレポートであり、内視鏡を利用した検査の終了後に出力される。図１４の表示例では表示エリア４０内に、前回の検査結果４１と、今回の検査結果４２と、が表示されている。

　前回の検査結果４１は、前回の検査結果を示す。前回の検査結果４１は、大腸モデル４１ａと、詳細情報４１ｂと、を含む。

　大腸モデル４１ａは、大腸の概略図を示す。図１４では、大腸モデル４１ａの各部位に１から６の数字が表示されており、１は直腸、２はＳ状結腸、３は下行結腸、４は横行結腸、５は上行結腸、６は盲腸を示す。また、大腸モデル４１ａの各部位について、前回の検査で炎症があった部位は、斜めのハッチングにより示され、前回の検査で炎症がなかった部位は、白色により示されている。図１４の大腸モデル４１ａでは、２のＳ状結腸、３の下行結腸、４の横行結腸が、斜めのハッチングにより示されている。

　詳細情報４１ｂは、前回の検査結果の詳細を示す。詳細情報４１ｂには、炎症があった部位の割合と、各部位の信頼度スコアと、が表示されている。図１４の詳細情報４１ｂでは、信頼度スコアを、０％以上、１００％以下の数で表し、信頼度スコアが所定の閾値以上である部位を炎症があった部位として、太字および下線で示している。図１４の詳細情報４１ｂより、前回の検査で炎症があった部位の割合は６部位中３部位であり、前回の検査で炎症があった部位は、Ｓ状結腸、下行結腸および横行結腸であることが把握できる。

　今回の検査結果４２は、今回の検査結果を示す。今回の検査結果４２は、大腸モデル４２ａと、詳細情報４２ｂと、を含む。

　今回の検査結果４２では、大腸モデル４２ａの各部位について、今回の検査で炎症があった部位は、斜めのハッチングにより示され、今回の検査で炎症がなかった部位は、白色により示されている。図１４の大腸モデル４２ａでは、２のＳ状結腸、３の下行結腸が、斜めのハッチングにより示されている。

　詳細情報４２ｂは、今回の検査結果の詳細を示す。詳細情報４２ｂには、炎症があった部位の割合と、各部位の信頼度スコアと、が表示されている。図１４の詳細情報４２ｂより、今回の検査で炎症があった部位の割合は６部位中２部位であり、今回の検査で炎症があった部位は、Ｓ状結腸および下行結腸であることが把握できる。

　図１４のような表示により、医師は、前回の検査結果と今回の検査結果を容易に比較することが可能となる。

　［画像表示処理］
　図１５は、内視鏡検査支援装置１ａによる画像表示処理のフローチャートである。この処理は、図２に示すプロセッサ１１が予め用意されたプログラムを実行し、図９に示す各要素として動作することにより実現される。なお、ステップＳ２１１～Ｓ２１３、及びＳ２１８の処理は、図８に示す第１実施形態のステップＳ１１１～Ｓ１１３及びＳ１１７の処理と同様であるので、説明を省略する。

　炎症有無判定部１１６には、内視鏡映像取得部１１２から内視鏡映像Ｉｃが入力される。炎症有無判定部１１６は、炎症推定モデルを用いて、内視鏡映像Ｉｃから炎症の有無を判定する。そして、炎症有無判定部１１６は、炎症有無の判定結果を検査情報取得部１１７へ出力する（ステップＳ２１４）。

　検査情報取得部１１７には、患者ＩＤ取得部１１１から患者ＩＤが入力され、位置判定部１１３から撮影位置が入力され、炎症有無判定部１１６から炎症有無の判定結果が入力される。検査情報取得部１１７は、ＤＢ１７から、患者ＩＤに対応する前回炎症情報を取得する。また、検査情報取得部１１７は、ＤＢ１７から、患者ＩＤと撮影位置の組合せに対応する前回病変情報および前回画像情報を取得する（ステップＳ２１５）。

　次に、検査情報取得部１１７は、炎症の進行状態を判定する。具体的に、検査情報取得部１１７は、撮影位置と、炎症有無の判定結果と、前回炎症情報と、を基に、炎症の進行状態を判定する。検査情報取得部１１７は、撮影位置と、炎症有無の判定結果と、前回炎症情報と、前回病変情報と、前回画像情報と、炎症の進行状態と、を表示データ生成部１１５へ出力する（ステップＳ２１６）。

　次に、表示データ生成部１１５は、内視鏡映像取得部１１２から入力された内視鏡映像Ｉｃと、検査情報取得部１１７から入力された撮影位置と、炎症有無の判定結果と、前回炎症情報と、前回検査情報と、炎症の進行状態と、を用いて表示データＩｄを生成し、表示装置２へ出力する（ステップＳ２１７）。なお、前回検査情報に病変や処置、炎症などの情報が含まれない場合は、表示データ生成部１１５は、内視鏡映像Ｉｃと、撮影位置と、炎症有無の判定結果と、前回炎症情報と、炎症の進行状態と、を用いて表示データＩｄを生成し、表示装置２へ出力する。

　＜第３実施形態＞
　図１６は、第３実施形態の内視鏡検査支援装置の機能構成を示すブロック図である。内視鏡検査支援装置３００は、画像取得手段３１１と、識別情報取得手段３１２と、位置推定手段３１３と、記憶手段３１４と、検索手段３１５と、表示制御手段３１６と、を備える。

　図１７は、第３実施形態の内視鏡検査支援装置による処理のフローチャートである。画像取得手段３１１は、内視鏡によって撮影された内視鏡画像を取得する（ステップＳ３１１）。識別情報取得手段３１２は、患者の識別情報を取得する（ステップＳ３１２）。位置推定手段３１３は、大腸内における内視鏡の位置を推定する（ステップＳ３１３）。記憶手段３１４は、患者の識別情報と、前回の検査で病変が検出された位置と、前記病変の画像と、前記病変の情報と、を関連付けた前回検査情報を記憶する（ステップＳ３１４）。検索手段３１５は、取得された識別情報と、推定された内視鏡の位置と、に基づいて、前記記憶手段から、前記内視鏡の位置における前回検査情報を検索する（ステップＳ３１５）。表示制御手段３１６は、検索した前回検査情報が病変の情報を含む場合に、前回検査情報を表示装置に表示する（ステップＳ３１６）。

　第３実施形態の内視鏡検査支援装置３００によれば、内視鏡検査において、現在の観察部位に対応する前回検査時の情報を表示することが可能となる。

　上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。

　（付記１）
　内視鏡によって撮影された内視鏡画像を取得する画像取得手段と、
　患者の識別情報を取得する識別情報取得手段と、
　大腸内における内視鏡の位置を推定する位置推定手段と、
　患者の識別情報と、前回の検査で病変が検出された位置と、前記病変の画像と、前記病変の情報と、を関連付けた前回検査情報を記憶した記憶手段と、
　取得された識別情報と、推定された内視鏡の位置と、に基づいて、前記記憶手段から、前記内視鏡の位置における前回検査情報を検索する検索手段と、
　検索した前回検査情報が病変の情報を含む場合に、前回検査情報を表示装置に表示する表示制御手段と、
　を備える内視鏡検査支援装置。

　（付記２）
　大腸が炎症状態であるか否かを判定する炎症有無判定手段を備え、
　前記表示制御手段は、大腸全体を示すモデル画像上に、内視鏡の位置および前記内視鏡の位置における炎症の有無を示す情報を表示する付記１に記載の内視鏡検査支援装置。

　（付記３）
　前記前回検査情報は、患者の識別情報と、前回の検査で炎症が検出された位置と、前記炎症の画像と、を関連付けた情報を含み、
　前記表示制御手段は、検索した前回検査情報が炎症の画像を含む場合に、前回検査情報を表示装置に表示する付記２に記載の内視鏡検査支援装置。

　（付記４）
　前記検索手段は、患者の識別情報を基に、前回検査情報を検索し、
　前記表示制御手段は、前記前回検査情報を基に、前回炎症が検出された位置と、前回炎症が検出されなかった位置と、を識別可能な態様で大腸全体を示すモデル画像を生成し、
　前記表示制御手段は、前記大腸全体を示すモデル画像上に、現在の内視鏡の位置および前記内視鏡の位置における炎症の有無を示す情報を表示する付記３に記載の内視鏡検査支援装置。

　（付記５）
　前記検索手段は、炎症有無の判定結果と、前回検査情報と、を基に、炎症の進行状態を判定し、
　前記表示制御手段は、炎症の進行状態を表示装置に表示する付記４に記載の内視鏡検査支援装置。

　（付記６）
　前記位置推定手段は、前記内視鏡画像から、大腸内における内視鏡の位置を推定する付記１に記載の内視鏡検査支援装置。

　（付記７）
　前記位置推定手段は、内視鏡に内蔵された磁気コイルから、大腸内における内視鏡の位置を推定する付記１に記載の内視鏡検査支援装置。

　（付記８）
　内視鏡によって撮影された内視鏡画像を取得し、
　患者の識別情報を取得し、
　大腸内における内視鏡の位置を推定し、
　患者の識別情報と、前回の検査で病変が検出された位置と、前記病変の画像と、前記病変の情報と、を関連付けた前回検査情報を記憶した記憶手段から、取得された識別情報と、推定された内視鏡の位置と、に対応する、前回検査情報を検索し、
　検索した前回検査情報が病変の情報を含む場合に、前回検査情報を表示装置に表示する内視鏡検査支援方法。

　（付記９）
　内視鏡によって撮影された内視鏡画像を取得し、
　患者の識別情報を取得し、
　大腸内における内視鏡の位置を推定し、
　患者の識別情報と、前回の検査で病変が検出された位置と、前記病変の画像と、前記病変の情報と、を関連付けた前回検査情報を記憶した記憶手段から、取得された識別情報と、推定された内視鏡の位置と、に対応する、前回検査情報を検索し、
　検索した前回検査情報が病変の情報を含む場合に、前回検査情報を表示装置に表示する処理をコンピュータに実行させるプログラムを記録した記録媒体。

　以上、実施形態及び実施例を参照して本開示を説明したが、本開示は上記実施形態及び実施例に限定されるものではない。本開示の構成や詳細には、本開示のスコープ内で当業者が理解し得る様々な変更をすることができる。

　１　内視鏡検査支援装置
　２　表示装置
　３　内視鏡スコープ
　１１　プロセッサ
　１２　メモリ
　１７　データベース（ＤＢ）
　１００　内視鏡検査システム
　１１１　患者ＩＤ取得部
　１１２　内視鏡映像取得部
　１１３　位置判定部
　１１４　前回検査情報検索部
　１１５　表示データ生成部
　１１６　炎症有無判定部
　１１７　検査情報取得部

Claims (9)

1. 　内視鏡によって撮影された内視鏡画像を取得する画像取得手段と、
   　患者の識別情報を取得する識別情報取得手段と、
   　大腸内における内視鏡の位置を推定する位置推定手段と、
   　患者の識別情報と、前回の検査で病変が検出された位置と、前記病変の画像と、前記病変の情報と、を関連付けた前回検査情報を記憶した記憶手段と、
   　取得された識別情報と、推定された内視鏡の位置と、に基づいて、前記記憶手段から、前記内視鏡の位置における前回検査情報を検索する検索手段と、
   　検索した前回検査情報が病変の情報を含む場合に、前回検査情報を表示装置に表示する表示制御手段と、
   　を備える内視鏡検査支援装置。
2. 　大腸が炎症状態であるか否かを判定する炎症有無判定手段を備え、
   　前記表示制御手段は、大腸全体を示すモデル画像上に、内視鏡の位置および前記内視鏡の位置における炎症の有無を示す情報を表示する請求項１に記載の内視鏡検査支援装置。
3. 　前記前回検査情報は、患者の識別情報と、前回の検査で炎症が検出された位置と、前記炎症の画像と、を関連付けた情報を含み、
   　前記表示制御手段は、検索した前回検査情報が炎症の画像を含む場合に、前回検査情報を表示装置に表示する請求項２に記載の内視鏡検査支援装置。
4. 　前記検索手段は、患者の識別情報を基に、前回検査情報を検索し、
   　前記表示制御手段は、前記前回検査情報を基に、前回炎症が検出された位置と、前回炎症が検出されなかった位置と、を識別可能な態様で大腸全体を示すモデル画像を生成し、
   　前記表示制御手段は、前記大腸全体を示すモデル画像上に、現在の内視鏡の位置および前記内視鏡の位置における炎症の有無を示す情報を表示する請求項３に記載の内視鏡検査支援装置。
5. 　前記検索手段は、炎症有無の判定結果と、前回検査情報と、を基に、炎症の進行状態を判定し、
   　前記表示制御手段は、炎症の進行状態を表示装置に表示する請求項４に記載の内視鏡検査支援装置。
6. 　前記位置推定手段は、前記内視鏡画像から、大腸内における内視鏡の位置を推定する請求項１に記載の内視鏡検査支援装置。
7. 　前記位置推定手段は、内視鏡に内蔵された磁気コイルから、大腸内における内視鏡の位置を推定する請求項１に記載の内視鏡検査支援装置。
8. 　内視鏡によって撮影された内視鏡画像を取得し、
   　患者の識別情報を取得し、
   　大腸内における内視鏡の位置を推定し、
   　患者の識別情報と、前回の検査で病変が検出された位置と、前記病変の画像と、前記病変の情報と、を関連付けた前回検査情報を記憶した記憶手段から、取得された識別情報と、推定された内視鏡の位置と、に対応する、前回検査情報を検索し、
   　検索した前回検査情報が病変の情報を含む場合に、前回検査情報を表示装置に表示する内視鏡検査支援方法。
9. 　内視鏡によって撮影された内視鏡画像を取得し、
   　患者の識別情報を取得し、
   　大腸内における内視鏡の位置を推定し、
   　患者の識別情報と、前回の検査で病変が検出された位置と、前記病変の画像と、前記病変の情報と、を関連付けた前回検査情報を記憶した記憶手段から、取得された識別情報と、推定された内視鏡の位置と、に対応する、前回検査情報を検索し、
   　検索した前回検査情報が病変の情報を含む場合に、前回検査情報を表示装置に表示する処理をコンピュータに実行させるプログラムを記録した記録媒体。