CN111182836A - 信息处理装置、信息处理方法、信息处理系统和程序 - Google Patents

Abstract

信息处理装置被配置为从数据库获取第一医学图像和第二医学图像，并且控制显示单元上的显示，使得在正在接收信号的时段内在显示单元上显示所述第二医学图像，所述信号是指示在显示单元上显示所述第二医学图像的指令的信号并且在操作者正在执行一个输入操作的时段内被传输，并且在没有接收所述信号的时段内在显示单元上显示所述第一医学图像。

Description

信息处理装置、信息处理方法、信息处理系统和程序

技术领域

本公开涉及医学图像信息处理装置、信息处理方法、信息处理系统和程序。

背景技术

在医学治疗中，医生可以观察多个医学图像并比较它们。PTL 1公开了通过叠加两个血管图像来产生叠加的灌注图像、并且根据由操作者发出的请求来切换显示的图像使得包括叠加的灌注图像和两个血管图像的三个图像中的一个被显示的技术。

引文列表

专利文献

PTL 1：日本专利特开No.2010-213863

发明内容

在本发明的一方面，信息处理装置包括：获取部件，被配置为获取第一医学图像和第二医学图像；以及显示控制部件，被配置为控制显示单元上的显示，使得在正在对被配置为接受由操作者执行的操作的接受单元执行一个操作的时段内在显示单元上显示所述第二医学图像，但是当对用户操作接受单元的所述一个操作结束时在显示单元上显示所述第一医学图像来代替所述第二医学图像。

根据本发明的一方面，信息处理装置允许操作者(诸如医生)仅通过执行一个操作来改变在任意时段内显示在显示单元上的医学图像。

附图说明

图1是图示光声图像、超声图像以及光声图像和超声图像的叠加图像的示例的图。

图2是图示根据本发明的实施例的信息处理装置的功能配置的示例的图。

图3是图示根据本发明的实施例的信息处理装置执行的处理的示例的流程图。

图4是图示根据本发明的实施例的信息处理装置显示的画面的示例的图。

图5是图示根据本发明的实施例的信息处理装置显示的画面的示例的图。

图6是图示根据本发明的实施例的信息处理装置显示的画面的示例的图。

图7是图示根据本发明的实施例的信息处理装置的硬件配置的示例的图。

图8是图示根据本发明的实施例的信息处理装置执行的处理的示例的流程图。

图9A是图示根据本发明的实施例的信息处理装置显示的画面的示例的图。

图9B是图示根据本发明的实施例的信息处理装置显示的画面的示例的图。

图9C是图示根据本发明的实施例的信息处理装置显示的画面的示例的图。

图10A是图示根据本发明的实施例的信息处理装置显示的画面的示例的图。

图10B是图示根据本发明的实施例的信息处理装置显示的画面的示例的图。

图10C是图示根据本发明的实施例的信息处理装置显示的画面的示例的图。

具体实施方式

下面参考附图描述本发明的实施例。

[第一实施例]

在本说明书中，光声波是指由当用光照亮被检体时在被检体中出现的膨胀而产生的声波。超声波是指从换能器传输的声波或在被检体内部反射的传输的声波的反射波(回波)。光声波和超声波统称为声波。

作为用于对被检体内部的状态进行微创成像的方法，已知在成像中使用超声波或光声波。在下文中，将通过使用超声波形成的图像称为超声图像，并且将使用光声波形成的图像称为光声图像。已知光声图像可以被用于例如基于血红蛋白的光学特性来观察血管。

在医学治疗中，在一些情况下，医生获取检查中的患者的多个医学图像，并在比较它们的同时观察所述多个医学图像。在观察中，各种医学图像可以显示在医生用于观察的终端的显示单元上，并且显示图像的时间段可能变化。例如，取决于医生当前正在观察的内容，医生想要从要被显示以进行比较的另一个医学图像读取的信息是不同的，因此在显示另一个医学图像的时段上出现差异。

图1图示了通过叠加多个医学图像而获得的叠加图像的示例。在这个示例中，通过叠加光声图像600和超声图像700获得叠加图像800。从光声图像600，获得血管601的位置信息等，而从超声图像700，获得肿瘤702的位置信息等。在一些医学治疗中，在比较多个医学图像的同时执行观察，并且将从相应的医学图像获得的不同条信息组合。在用于进行比较的方法的示例中，多个医学图像被叠加。在图1中所示的示例中，叠加可以提供关于肿瘤与血管之间的位置关系的信息。

取决于光声图像600与超声图像700之间的亮度值的差异，在叠加图像800中的血管图像801的可见性上可能出现降低。例如，在超声图像700包括大的斑点噪声并且在图像的大部分中亮度值高的情况下，可能出现这种可见性的降低。在另一个示例中，光声图像600的叠加可能造成叠加图像800的对比度的降低，因此可能造成叠加图像800的肿瘤图像802的可见性的降低。如在上述示例中那样，两个图像的亮度彼此影响，作为结果，在从每个图像获得的信息的可见性上可能出现降低。

观察通过叠加多个医学图像而获得的叠加图像并且组合从相应的医学图像获得的信息是有用的方法中的一个。然而，取决于叠加在一起的每个医学图像的状态，在不考虑亮度平衡的情况下使用叠加图像进行比较可能不总是提供良好的结果。每次显示单元上显示的医学图像被切换时执行输入操作对于医生而言可能是麻烦的。提供根据第一实施例的信息处理装置100的目的是要使得医生能够在不降低多个医学图像中的每一个的可见性的情况下容易地比较多个医学图像。信息处理装置100被配置为使得当在正在执行对第一医学图像的图像解读时操作者(诸如医生)需要第二医学图像时，如果操作者执行一个输入操作，那么在期望的时段内在显示单元上显示第二医学图像。

由信息处理装置100在显示单元110上显示的医学图像是使用例如磁共振图像医学装置、超声图像医学装置、光学超声成像装置、放射线摄影图像医学装置、计算机断层摄影图像医学装置、或正电子发射断层摄影装置的医疗器械捕获的图像。医学图像可以是体数据。医学图像可以包括指示感兴趣的区域(ROI)等的注释信息。近年来，通过上述各种医疗器械获得的医学图像、以及在医学检查中使用的其它医学图像并且还有与医学检查相关的各种信息已被数字化。例如，DICOM(医学数字成像和通信)标准通常用于成像装置和连接到该成像装置的各种装置之间的信息协作。DICOM是定义医学图像的格式并定义处置这些图像的装置之间的通信协议的标准。根据DICOM，处置图像、元数据和图像数据。元数据包括例如关于患者、检查、序列和图像的信息。元数据由称为DICOM数据元素的数据元素的集合组成。用于识别数据元素的标签被添加到每个DICOM数据元素。例如，在DICOM数据元素中，指示图像数据的标签被添加到作为像素数据的图像数据。在第一实施例中，医学图像和由信息处理装置100执行的处理符合DICOM。关于各种处理所必要的信息，使用包括在医学图像的元数据中的信息或通过根据DICOM查询外部装置而获得的信息。

图2是图示信息处理装置100的功能配置的示例的图。信息处理装置100经由通信网络103连接到用于存储医学图像101的数据库102。数据库102是例如PACS(图片存档及通信系统)。信息处理装置100包括存储单元104、图像获取单元105和显示控制单元108。信息处理装置100连接到输入单元109和显示单元110。

存储单元104存储由图像获取单元105从数据库102获取的多个医学图像101。图像获取单元105从数据库102获取医学图像。在另一个示例中，图像获取单元105可以从也被称为医疗器械的医学成像装置(未示出)获取医学图像。图像获取单元105可以对医学图像101执行图像处理。图像处理是例如用于在两个图像之间对准特征的配准处理、叠加两个配准图像的处理以及对于体数据的最大强度投影(MIP)。在下文中，通过叠加两个图像而获得的图像被称为叠加图像，并且经由最大强度投影处理而产生的图像被称为投影图像。

图像获取单元105获取至少两个医学图像以供操作者在比较和观察中使用。在本文中，它们分别被称为第一医学图像106和第二医学图像107。第二医学图像107是与第一医学图像106不同的医学图像。第一医学图像106和第二医学图像107中的每一个可以是从数据库102获取的医学图像，或者是经由由图像获取单元105执行的图像处理获得的诸如投影图像的医学图像。图像获取单元105可以将获取的医学图像存储在数据库102中。从这个观点看，图像获取单元105是获取第一医学图像和第二医学图像的获取部件的示例。

显示控制单元108控制显示单元110上的显示，使得在显示单元110上显示第一医学图像106或第二医学图像107。更具体地，显示控制单元108接收从输入单元109传输的信号。显示控制单元108控制显示单元110上的显示，使得在正在从输入单元109接收指示显示第二医学图像107的指令的信号的时间段内在显示单元110上显示第二医学图像107。另一方面，显示控制单元108控制显示单元110上的显示，使得在没有从输入单元109接收指示显示第二医学图像107的指令的信号的时段内在显示单元110上显示第一医学图像106。即，显示控制单元108控制显示单元110上的显示，使得第一医学图像106被显示在显示单元110上，并且仅在正在接收来自输入单元109的信号的时段内显示第二医学图像107。从这个观点看，显示控制单元108是显示控制部件的示例，该显示控制部件控制显示单元110上的显示，使得在正在接收只要操作者的一个输入操作继续就传输的信号的时段内在显示单元110上显示第二医学图像，但是在没有接收信号的时段内显示第一医学图像。

输入单元109将由操作者给出的指令输入到信息处理装置100。输入单元109是例如键盘、鼠标、操纵杆、触摸面板、开关盒、被配置为接收包括语音的声音的麦克风、或被配置为接受特定手势的装置。从输入单元109作为接受控制显示单元110上的显示使得第二医学图像107被显示在显示单元110上的指令的装置来操作的观点看，输入单元109用作瞬时开关。在输入单元109用作交替开关的情况下，假定操作者执行发出指令的操作，这可能是麻烦的。输入单元109作为瞬时开关的功能允许操作者通过执行简单的输入操作来输入仅在期望的时段内显示第二医学图像107的指令。在这个方面，输入单元109是被配置为接受由操作者执行的操作的接受单元的示例。

图7是图示信息处理装置100的硬件配置的示例的图。信息处理装置100是例如计算机。信息处理装置100包括CPU 111、ROM 112、RAM 113、存储装置114、USB 115、通信电路116和图形板117。这些经由BUS彼此连接使得它们可以彼此通信。BUS用于在连接的硬件之间传输和接收数据以及将指令从CPU 111传输到另一个硬件。

CPU(中央处理单元)111是控制电路，该控制电路整体地控制信息处理装置100和与其连接的每个单元。CPU 111通过执行存储在ROM 112中的程序来执行控制。CPU 111执行显示驱动程序(其是用于控制显示单元110的软件)，并且对显示单元110执行显示控制。此外，CPU 111对输入单元109执行输入/输出控制。

ROM(只读存储器)112存储其中描述要由CPU 111执行的控制过程的程序，并且还存储数据。ROM 112存储信息处理装置100的引导程序和各种初始数据。ROM 112还存储用于实现在信息处理装置100中执行的处理的各种程序。

RAM(随机存取存储器)113在CPU 111根据指令程序执行控制时提供工作存储区域。RAM 113具有堆栈和工作区域。RAM 113存储用于在信息处理装置100以及连接到信息处理装置100的各种单元中执行处理的程序，并且还存储在图像处理中使用的各种参数。RAM113存储要由CPU 111执行的控制程序，并且在CPU 111执行各种控制时临时存储各种数据。

存储装置114是辅助存储装置，该辅助存储装置存储诸如第一医学图像106、第二医学图像107等的各种数据。存储装置114是例如HDD(硬盘驱动器)或SSD(固态驱动器)。

USB(通用串行总线)115是用于连接到输入单元109的连接单元。

通信电路116是用于与连接到通信网络103的各种外部装置通信的电路。通信电路116将信息输出到外部装置，使得要输出的信息被存储传送分组，并且使用诸如TCP/IP的通信技术经由通信网络103被输出到外部装置。信息处理装置100可以包括多个通信电路以适应期望的通信模式。

图形板117包括GPU(图形处理单元)和视频存储器。GPU执行例如与用于从光声信号产生光声图像的重构处理相关的操作。

HDMI(注册商标)(高清多媒体接口)118是用于连接到显示单元110的连接单元。

CPU 111和GPU是处理器的示例。ROM 112、RAM 113和存储装置114是存储器的示例。信息处理装置100可以包括多个处理器。在第一实施例中，信息处理装置100的每个单元的功能由信息处理装置100的处理器通过执行存储在存储器中的程序来实现。

此外，信息处理装置100可以包括专用于特定处理的CPU、GPU和ASIC(专用集成电路)。信息处理装置100可以包括其中特定处理或所有处理被编程的FPGA(现场可编程门阵列)。

图3是图示根据第一实施例的信息处理装置100执行的处理的示例的流程图。

(S200：选择医学图像的步骤)

在步骤S200中，图像获取单元105基于由操作者发出的指令选择第一医学图像和第二医学图像。在第一实施例中，通过示例的方式，针对操作者(诸如医生)选择多个医学图像作为要被比较和观察的目标图像的情况给出解释。从比较多个医学图像的观点看，在步骤S200中选择可以彼此配准的多个医学图像的组合。可以对准的医学图像的组合的示例是例如针对被检体的同一区域或重叠区域捕获的医学图像的这种组合。图像获取单元105从数据库102或存储单元104获取选择的医学图像。

医生可以执行被称为图像解读的操作，在该图像解读中在一个画面上显示第一医学图像和第二医学图像等，并且医生观察显示的图像。信息处理装置100可以提供用于图像解读的功能。用于图像解读的功能包括例如根据由用户执行的输入操作来叠加第一医学图像和第二医学图像的功能、改变在画面上显示图像的模式的功能。因此，在实施例的示例中，假设已预先配准了第一医学图像与第二医学图像。配准是对准两个图像使得相应的图像的特征彼此一致的处理。可以通过procrates方法、ICP(迭代最近点)算法、基于两个图像的浓度特性的算法、使用物理模型的算法等来执行配准，并且可以使用任何约束。在第一医学图像和第二医学图像分别是用一个探测器获得的超声图像和光声图像的情况下，可以基于探测器相对于被检体的位置来执行配准。

(S201：执行图像处理的步骤)

在步骤S201中，当在步骤S200中选择的医学图像是例如投影图像或叠加图像时，图像获取单元105产生它。在步骤S200中选择的医学图像不需要任何特定的图像处理的情况下，可以不执行步骤S201中的处理。

在步骤S200中选择投影图像的情况下，图像获取单元105对从数据库102或存储单元104获取的医学图像执行图像投影处理。在步骤S200中选择叠加图像的情况下，图像获取单元105使用从数据库102或存储单元104获取的医学图像来产生叠加图像。在叠加图像的产生中，图像获取单元105根据由操作者发出的指令来增加医学图像中的一个的透明度。这使得能够降低叠加在一起的多个医学图像的亮度彼此影响的可能性，这导致从每个医学图像获得的信息的可见性的降低。

(S202：显示第一医学图像的步骤)

在第一实施例中，在从输入单元109没有接收信号的时段期间显示的图像表示第一医学图像，而在从输入单元109接收信号的时段期间显示的图像表示第二医学图像。

在步骤S202中，因为从输入单元109没有接收信号，所以显示控制单元108控制显示单元110上的显示，以便在显示单元110上显示第一医学图像。更具体地，显示控制单元108控制显示单元110上的显示，以便显示在步骤S200中被选择为第一医学图像的体数据中包括的切片图像，或者在显示单元110上显示在步骤S201中产生的投影图像或叠加图像作为第一医学图像。

(S203：开始信号接收的步骤)

在步骤S203中，信息处理装置100开始从输入单元109接收信号。经由直到步骤S203的处理，第一医学图像已经显示在显示单元110上。在这种状态下，操作者(诸如医生)经由输入单元109向信息处理装置100输入在显示单元110上显示第二医学图像的指令。该指令通过由操作者执行的一个输入操作发出。输入单元109在执行一个输入操作的时段中将信号传输到信息处理装置100。响应于操作者开始一个输入操作，从输入单元109传输信号，并且信息处理装置100开始接收指示在显示单元110上显示第二医学图像的指令的信号。

(S204：将显示的图像切换为第二医学图像的步骤)

在步骤S204中，显示控制单元108控制显示单元110显示第二医学图像。根据由操作者(诸如医生)经由输入单元109发出的显示第二医学图像的指令，显示单元110将显示的图像从第一医学图像改变为第二医学图像。在操作者继续输入的同时，持续地执行第二医学图像的显示。

(S205：结束对输入单元的输入的步骤)

在步骤S205中，信息处理装置100结束从输入单元109接收信号。经由直到步骤S205的处理，第二医学图像已经显示在显示单元110上，并且操作者结束发出在显示单元110上显示第二医学图像的指令。响应于结束在步骤S203中开始的一个输入操作，执行发出指令的结束。即，操作者在从步骤S203到步骤S205的处理中开始和结束一个输入操作。作为结果，输入单元109停止将信号传输到信息处理装置100。

(S206：将显示的图像切换为第一医学图像的步骤)

在步骤S206中，显示控制单元108控制显示单元110上的显示，以便显示第一医学图像。即，因为操作者已完成经由输入单元109输入显示第二医学图像的指令，所以没有信号从输入单元109传输到信息处理装置100。显示控制单元108控制显示，使得显示单元110上的图像显示从第二医学图像切换为第一医学图像。除非再次向输入单元109输入指令，否则第一医学图像持续地显示在显示单元110上。

当再次向输入单元109输入指令并且信息处理装置100开始接收指示指令的信号时，处理前进到步骤S203，并且重复直到步骤S206的处理。这使得能够将显示的图像从第一医学图像切换为第二医学图像，并且仅在操作者预期的时段内持续地显示第二医学图像。这使得能够将显示的图像从第一医学图像切换为第二医学图像，并且仅在操作者预期的时段内持续地显示第二医学图像。

在从在期望的时间段内显示在显示单元110上的第二医学图像读取必要的信息之后，如果医生完成输入显示第二医学图像的指令，那么显示的图像迅速改变为第一医学图像。因此，能够在从第二医学图像读取的信息(诸如关于病变的位置和形状、信号强度等的信息)正在被存储时观察第一医学图像。由于显示的图像在第一医学图像和第二医学图像之间切换，因此医生可以以良好的可见性观察第一医学图像和第二医学图像两者。

医生可以通过执行简单的输入操作来在第一医学图像和第二医学图像之间切换，并且可以在期望的时段内观察显示的图像。在医生使用例如交替开关来指示在第一医学图像和第二医学图像之间切换显示的图像的情况下，医生必须分别在开始切换时和在结束切换时执行两个输入操作，这可能是麻烦的。在根据第一实施例的示例中，假定医生使用瞬时开关仅执行一个输入操作以发出用于切换的指令。根据第一实施例的信息处理装置在操作者正在对被配置为接受由操作者执行的操作的接受单元执行一个操作的时段内(例如，在保持按下瞬时开关的时段内)持续地在显示单元110上显示第二医学图像。根据第一实施例的信息处理装置在操作者正在对被配置为接受由操作者执行的操作的接受单元执行一个操作的时段内(例如，在保持按下瞬时开关的时段内)持续地在显示单元110上显示第二医学图像。这允许医生容易地且重复地在第一医学图像和第二医学图像之间切换显示的图像。例如，操作者可以发出迅速切换显示的图像(例如在5秒内大约10次)的指令，并且信息处理装置100可以根据指令执行切换显示的图像。通过以上述方式重复执行切换显示的图像，医生可以在忘记之前检查并组合从第一医学图像读取的信息和从第二医学图像读取的信息，这允许医生以高效的方式观察医学图像。

[第一具体示例]

下面针对第一医学图像和第二医学图像两者是包括在体数据中的二维图像(所谓的切片图像)的情况描述具体示例。

图4是图示根据第一具体示例的在显示单元110上显示的画面的示例的图。在这个示例中，第一医学图像是光声图像600，并且第二医学图像是超声图像700。如上所述，显示单元110在光声图像600中包括的切片图像和超声图像700中包括的切片图像之间切换显示的图像。假设光声图像600和超声图像700已经受对准处理。

下面将具体描述图3中通过示例的方式图示的流程图中的每个处理。

(S200：选择医学图像的步骤)

在步骤S200中，图像获取单元105根据由操作者发出的指令选择光声图像600的体数据作为第一医学图像和超声图像700的体数据作为第二医学图像。由于这里选择的医学图像不需要特定的图像处理，因此不执行步骤S201中的处理。

(S202：显示第一医学图像的步骤)

在步骤S202中，显示控制单元108控制显示单元110上的显示，以便显示作为第一医学图像的光声图像600的体数据中由操作者指定的切片图像。允许操作者任意改变在显示单元110上显示的切片图像的位置。操作者可以从被选择为第一医学图像的光声图像600观察血管图像601。

(S203：开始对输入单元的输入的步骤)

在操作者想要在显示单元110上显示作为第二医学图像的超声图像700的情况下，操作者经由输入单元109将指令输入到信息处理装置100。在操作者开始对输入单元109的输入之后，操作者将输入保持一时段，在该时段中，操作者想要持续地显示第二医学图像。信息处理装置100开始接收指示指令的信号。输入单元109用作瞬时开关。在操作者开始按压鼠标按钮或特定的键盘按钮之后，操作者保持按压。

(S204：将显示的图像切换为第二医学图像的步骤)

在步骤S204中，显示控制单元108控制显示单元110上的显示，以便在正在接收指示指令的信号的时段内显示第二医学图像。即，在操作者正在输入指令时，从第一医学图像切换的第二医学图像被保持显示在显示单元110上。显示控制单元108控制显示单元110上的显示，以便显示与当从输入单元109输入指示指令的信号时在显示单元110上显示的光声图像600的切片图像对应的位置处的超声图像700的切片图像。在正在显示第二医学图像时，允许操作者任意改变显示的切片图像的位置。操作者可以从被选择为第二医学图像的超声图像700观察肿瘤图像702。

(S205：结束对输入单元的输入的步骤)

当期望在已从第二医学图像的超声图像700的切片图像获得信息之后将显示的图像再次切换为第一医学图像时，对输入单元109的输入结束。操作者结束鼠标按钮或特定的键盘按钮的继续按压。即，操作者结束一个操作。

(S206：将显示的图像切换为第一医学图像的步骤)

在步骤S206中，响应于来自输入单元109的指示指令的信号的接收的结束，显示控制单元108控制显示单元110上的显示，以便显示被选择为第一医学图像的光声图像600的切片图像。显示控制单元108控制显示单元110上的显示，以便显示与当来自输入单元109的信号停止时显示超声图像700的切片图像的位置对应的位置处的光声图像600的切片图像。

注意的是，在操作者进行的用于在显示单元110上显示第二医学图像的一个操作继续的时段中第二医学图像中包括的二维图像(切片图像)的位置被改变的情况下，基于例如与配准相关的信息来确定在步骤S206中在显示单元110上显示的第一医学图像的位置。第一医学图像和第二医学图像被预先配准，并且它们就其坐标而言彼此相关联。在步骤S206中，在与在步骤S204中显示的切片图像(例如，XY平面中的二维图像)的切片位置(Z轴上的位置)对应的切片位置(第一医学图像的Z轴上的位置)处显示第一医学图像。

在步骤S204中已改变第二医学图像的切片图像的位置的情况下，如果在步骤S205中用于显示第二医学图像的一个操作结束之后显示与步骤S202中相同的第一医学图像的切片图像，那么显示的图像被切换为与紧接着之前医生观察的切片图像不对应的切片图像。这种情形可能造成医生观察第一医学图像和第二医学图像的效率降低可能被降低。根据第一具体示例，在步骤S206中在显示单元110上显示与紧接着之前显示在显示单元110上的切片图像对应的位置处的第一医学图像的切片图像，因此医生可以高效地观察医学图像。

通过在第一医学图像和第二医学图像之间切换显示的图像，操作者(诸如医生)可以通过容易地组合关于肿瘤图像702的信息和关于血管图像601的信息来观察第一医学图像和第二医学图像。

[第二具体示例]

在下面描述的具体示例中，第一医学图像和第二医学图像两者或其中的一个是投影图像。

图5是图示根据第二具体示例的在显示单元110上显示的画面的示例的图。在这个示例中，第一医学图像是光声图像600的投影图像610，并且第二医学图像是超声图像700。如上所述，在显示单元110上显示的图像在投影图像610和超声图像700中包括的切片图像之间切换。假设光声图像600和超声图像700已经受对准处理。

下面将具体描述图3中通过示例的方式图示的流程图中的每个处理。

(S200：选择医学图像的步骤)

在步骤S200中，图像获取单元105根据由操作者发出的指令选择光声图像600的投影图像作为第一医学图像和超声图像700的体数据作为第二医学图像。

(S201：执行图像处理的步骤)

在步骤S201中，图像获取单元105对光声图像600执行最大强度投影处理，由此产生投影图像610。如果光声图像被显示为厚度约为0.1mm的薄切片图像，那么在一些情况下，血管图像以点状图像的形式显示，这可能使得难以辨识血管的连接。作为最大强度投影处理的结果，出现在相应的切片图像中的血管图像被整合到投影图像610中，这使得能够容易地辨识血管的连接和形状。

(S202：显示第一医学图像的步骤)

在步骤S202中，显示控制单元108作为第一医学图像选择由操作者发出的指令指定的投影范围内的光声图像600的投影图像610，并控制显示单元110上的显示以便显示选择的图像。允许操作者任意改变投影图像610的投影范围。操作者可以从被选择为第一医学图像的投影图像610观察血管图像611。

(S203：开始对输入单元的输入的步骤)

在操作者想要在显示单元110上显示作为第二医学图像的超声图像700的情况下，操作者经由输入单元109向信息处理装置100输入显示第二医学图像的指令。在操作者开始对输入单元109的输入之后，操作者将输入保持一时段，在该时段中，操作者想要持续地显示第二医学图像。信息处理装置100开始接收指示指令的信号。输入单元109用作瞬时开关。在操作者开始按压鼠标按钮或特定的键盘按钮之后，操作者保持按压。

(S204：将显示的图像切换为第二医学图像的步骤)

在步骤S204中，显示控制单元108控制显示单元110上的显示，以便在正在接收指示指令的信号的时段内显示第二医学图像。即，在操作者正在输入指令时，从第一医学图像切换的第二医学图像被保持显示在显示单元110上。显示控制单元108控制显示单元110上的显示，以便显示当从输入单元109输入指示指令的信号时在显示单元110上显示的投影图像610的投影范围中包括的位置处的超声图像700的切片图像。在正在显示第二医学图像时，允许操作者任意改变显示的切片图像的位置。操作者可以从被选择为第二医学图像的超声图像700观察肿瘤图像702。

(S205：结束对输入单元的输入的步骤)

在操作者从被选择为第二医学图像的超声图像700的切片图像获取信息之后，如果操作者想要将显示的图像改变为第一医学图像，那么操作者停止对输入单元109的输入操作。操作者停止例如鼠标按钮或特定的键盘按钮的继续按压。

(S206：将显示的图像切换为第一医学图像的步骤)

在步骤S206中，响应于来自输入单元109的指示指令的信号的接收的结束，显示控制单元108控制显示单元110上的显示，以便显示作为第一医学图像的投影图像610。在显示单元110上显示与来自输入单元109的信号结束时显示的超声图像700的切片图像对应的位置处的投影范围中的投影图像610。

通过在第一医学图像和第二医学图像之间切换显示的图像，操作者(诸如医生)可以通过容易地组合关于肿瘤图像702的信息和关于血管图像611的信息来观察第一医学图像和第二医学图像。

[第三具体示例]

在下面描述的具体示例中，第一医学图像和第二医学图像两者是叠加图像。

图6是图示根据第三具体示例的在显示单元110上显示的画面的示例的图。在这个示例中，第一医学图像和第二医学图像中的每一个是通过叠加光声图像和超声图像而获得的叠加图像。在这个示例中，第一医学图像和第二医学图像中的每一个是通过叠加光声图像和超声图像而获得的叠加图像。

在以下的描述中，假设第一医学图像是通过将具有增加的透明度的超声图像叠加在光声图像上而获得的叠加图像1900，而第二医学图像是通过将具有增加的透明度的光声图像叠加在超声图像上而获得的叠加图像2000。

在这个示例中，第一医学图像和第二医学图像中的每一个是通过叠加光声图像和超声图像而获得的叠加图像。注意的是，对于叠加图像，可以使用投影图像代替切片图像。

下面将具体描述图3中通过示例的方式图示的流程图中的每个处理。

(S200：选择医学图像的步骤)

在步骤S200中，图像获取单元105对于第一医学图像和第二医学图像中的每一个选择通过叠加光声图像和超声图像而获得的叠加图像。

(S201：执行图像处理的步骤)

图像获取单元105作为第一医学图像通过将具有增加的透明度的超声图像叠加在光声图像上产生叠加图像1900。此外，图像获取单元105作为第二医学图像通过将具有增加的透明度的光声图像叠加在超声图像上产生叠加图像2000。在这个示例中，通过以80％至20％的叠加比率叠加光声图像和超声图像获得作为第一医学图像给出的叠加图像1900。另一方面，通过以30％至70％的叠加比率叠加光声图像和超声图像获得作为第二医学图像给出的叠加图像2000。

(S202：显示第一医学图像的步骤)

在步骤S202中，显示控制单元108控制显示单元110上的显示，以便显示作为第一医学图像的叠加图像1900中包括的切片图像。允许操作者任意改变显示的叠加图像1900的切片图像的位置。

在显示使用投影图像的叠加图像的情况下，允许操作者任意改变投影图像的投影范围。

在图6中所示的示例中，第一医学图像主要包含光声图像的信息，并且操作者(诸如医生)可以从叠加图像1900观察血管图像1901。

(S203：开始对输入单元的输入的步骤)

当操作者想要在显示单元110上显示作为第二医学图像的叠加图像2000时，操作者经由输入单元109向信息处理装置100输入显示第二医学图像的指令。在操作者开始对输入单元109的输入之后，操作者将输入保持一时段，在该时段中，操作者想要持续地显示第二医学图像。信息处理装置100开始接收指示指令的信号。输入单元109用作瞬时开关。在操作者开始按压鼠标按钮或特定的键盘按钮之后，操作者保持按压。

(S204：将显示的图像切换为第二医学图像的步骤)

在步骤S204中，显示控制单元108控制显示单元110上的显示，以便在正在接收指示指令的信号的时段内显示第二医学图像。即，在操作者正在输入指令时，从第一医学图像切换的第二医学图像被保持显示在显示单元110上。在显示控制单元108的控制下，显示单元110显示与当从输入单元109输入指示指令的信号时在显示单元110上显示的叠加图像1900的切片图像对应的位置的叠加图像2000的切片图像。在正在显示第二医学图像时，允许操作者任意改变显示的切片图像的位置。

在第一医学图像是基于投影图像的叠加图像的情况下，以与第二具体示例中相同的方式在显示单元110上显示投影图像的投影范围中包括的位置处的叠加图像2000的切片图像。

在图6中所示的示例中，第二医学图像主要包含超声图像的信息，并且操作者(诸如医生)可以从叠加图像2000观察肿瘤图像2002。

(S205：结束对输入单元的输入的步骤)

在操作者从被选择为第二医学图像的叠加图像2000获取信息之后，如果操作者想要将显示的图像改变为第一医学图像，那么操作者停止对输入单元109的输入操作。操作者停止例如鼠标按钮或特定的键盘按钮的继续按压。

(S206：将显示的图像切换为第一医学图像的步骤)

在步骤S206中，响应于来自输入单元109的指示指令的信号的接收的结束，显示控制单元108控制显示单元110上的显示，以便显示作为第一医学图像的叠加图像1900。显示单元110显示与当来自输入单元109的指示指令的信号结束时在显示单元110上显示的叠加图像2000的切片图像对应的位置处的叠加图像1900的切片图像。

通过在第一医学图像和第二医学图像之间切换显示的图像，操作者(诸如医生)可以通过容易地组合关于肿瘤图像2002的信息和关于血管图像1901的信息来观察第一医学图像和第二医学图像。

在第三具体示例中，由于第一医学图像和第二医学图像两者使用叠加图像，因此存在即使在切换显示的医学图像之后也可以观察从先前显示的图像读取的信息的可能性。例如，当操作者观察第二医学图像时，能够观察与第一医学图像的血管图像1901对应的血管图像2001。另一方面，当操作者观察第一医学图像时，能够观察与第二医学图像的肿瘤图像2002对应的肿瘤图像1902。

[第一实施例的修改]

上面已通过示例的方式针对显示的图像在两个医学图像之间切换的情况描述了实施例，但是显示的图像可以在三个或更多个医学图像之间切换。例如，取决于切换医学图像的模式，信息处理装置100可以包括多个输入单元。更具体地，信息处理装置100可以在光声图像、超声图像和核磁共振立体图像之间切换显示的图像。信息处理装置100可以从输入单元A接收指示在光声图像和超声图像之间切换的信号，可以从不同于输入单元A的输入单元B接收指示在光声图像和核磁共振图像之间切换的信号，并且可以从不同于输入单元A和B的输入单元C接收指示在超声图像和核磁共振图像之间切换的信号。在这种情况下，可以关于当没有从任何输入单元接收信号时要在显示单元110上显示的医学图像的类型预先进行确定。

上面已通过示例而非限制的方式针对显示控制单元108接收从输入单元109传输的信号的情况描述了实施例。替代地，例如，信息处理装置100可以包括接收部件(未示出)，该接收部件是不同于显示控制单元108的模块并且被配置为接收从输入单元109传输的信号。

在上述实施例中，已通过示例的方式针对超声图像或光声图像被用作第一医学图像和/或第二医学图像的情况给出了解释。然而，在本发明中，可以使用通过任意的医疗器械(图像捕获装置)获取的医学信息，并且第一医学图像和第二医学图像可以与医学信息任意组合。医疗器械的示例包括数字放射线摄影、X射线CT装置、MRI装置、SPECT装置、SPECT/CT装置、PET装置、PET/CT装置、PET/MRI装置、超声成像装置、光声成像装置、眼底相机、OCT装置。在上面实施例中通过示例的方式使用超声图像和光声图像的组合的情况下，这些图像可以例如通过被配置为使得发射超声波的功能、发射光的功能和接收超声波(反射波和声波)的功能全部由单个探测器提供的医疗器械来获得。这个配置使得能够在同一检查中获取同一被检体的超声图像和光声图像两者，这可以导致配准误差的降低。此外，超声图像和光声图像提供被检体中的不同结构的图像，因此超声图像和光声图像提供互补的信息。

[第二实施例]

根据第二实施例的信息处理装置具有与上面参考图2和图7描述的类似的功能配置和类似的硬件配置。上面已经描述了与第一实施例中相同的配置的部分，因此省略其进一步的详细描述。在下文中，将描述与第一实施例的不同。

显示控制单元108控制显示单元110上的显示，以便显示第一医学图像106和第二医学图像107中的至少一个。此外，根据来自输入单元109的信号，在显示单元110上显示第一医学图像106和第二医学图像107，使得每个图像的亮度随时间改变。更具体地，显示控制单元108接收从输入单元109传输的信号。这个信号指示由操作者发出的在显示单元110上显示第二医学图像107的指令。响应于从输入单元109接收到信号，显示控制单元108控制显示单元110上的显示，以便显示第二医学图像107。显示控制单元108随时间随时间改变在显示单元110上显示的第二医学图像107的亮度。更具体地，第二医学图像107的亮度在预设的时间段内降低。当显示第二医学图像107时，显示控制单元108停止显示第一医学图像106或可以降低其亮度，并且随着第二医学图像107的亮度降低可以增加第一医学图像106的亮度。即，显示控制单元108可以随时间改变第一医学图像106的亮度。假设显示控制单元108使用CPU 111的时钟信号来改变医学图像的亮度。显示控制单元108可以包括定时器，并且可以使用定时器来改变医学图像的亮度。在这个方面，显示控制单元108是显示控制部件的示例。

输入单元109将由操作者给出的指令输入到信息处理装置100。输入单元109是例如键盘、鼠标、操纵杆、触摸面板、开关盒、被配置为接收包括语音的声音的麦克风、或被配置为接受特定手势的装置。在这个方面，显示控制单元109是供操作者使用以执行输入操作的输入部件的示例。

图8是图示根据第二实施例的信息处理装置100执行的处理的示例的流程图。

(S800：选择医学图像的步骤)

在步骤S800中，图像获取单元105基于由操作者发出的指令选择第一医学图像和第二医学图像。在第二实施例中，描述了其中操作者(诸如医生)选择要被比较和观察的多个医学图像的示例。从比较多个医学图像的观点看，在步骤S800中选择可以彼此配准的多个医学图像的组合。可以彼此配准的医学图像的组合的示例是例如针对被检体的同一区域或重叠区域捕获的医学图像的这种组合。图像获取单元105从数据库102或存储单元104获取选择的医学图像。

(S801：执行图像处理的步骤)

在步骤S801中，当在步骤S800中选择的医学图像是例如投影图像或叠加图像时，图像获取单元105产生它。在步骤S800中选择的医学图像不需要任何特定的图像处理的情况下，可以不执行步骤S801中的处理。

在步骤S800中选择投影图像的情况下，图像获取单元105对从数据库102或存储单元104获取的医学图像执行图像投影处理。在步骤S800中选择叠加图像的情况下，图像获取单元105使用从数据库102或存储单元104获取的医学图像产生叠加图像。在叠加图像的产生中，图像获取单元105根据由操作者发出的指令降低医学图像中的一个的亮度。这使得能够降低叠加在一起的多个医学图像的亮度彼此影响的可能性，这导致从每个医学图像获得的信息的可见性的降低。

(S802：显示第一医学图像的步骤)

在步骤S802中，显示控制单元108控制显示单元110上的显示，以便显示第一医学图像106。更具体地，在步骤S800中，显示控制单元108控制显示单元110上的显示，以便显示被选择为第一医学图像106的体数据中包括的切片图像，或者显示控制单元108控制显示单元110上的显示，以便显示作为第一医学图像106的在步骤S801中产生的投影图像或叠加图像。

(S803：从输入单元接收信号的步骤)

在步骤S803中，信息处理装置100从输入单元109接收信号。经由直到步骤S803的处理，第一医学图像106已经显示在显示单元110上。在这种状态下，操作者(诸如医生)经由输入单元109向信息处理装置100输入在显示单元110上显示第二医学图像107的指令。输入单元109向信息处理装置100传输信号。

(S804：显示第二医学图像的步骤)

在步骤S804中，显示控制单元109控制在显示单元1100上的显示，以便在显示单元110上显示第二医学图像107。在这种情形下，显示控制单元108可以保持第一医学图像106显示在显示单元110上，或者可以将显示的图像从第一医学图像106切换为第二医学图像107。当显示控制单元108控制显示单元110上的显示以便显示第二医学图像107时，显示控制单元108开始对显示第二医学图像107的时间进行计数。

(S805：改变第二医学图像的亮度的步骤)

在步骤S805中，根据预设随时间改变显示在显示单元110上的第二医学图像107的亮度。在实施例中，显示控制单元108根据预设随时间改变第一医学图像106的亮度。例如，响应于从输入单元109接收到信号(步骤S803)，显示控制单元108将显示在显示单元110上的图像从第一医学图像106切换为第二医学图像107，并且显示控制单元108开始对显示第二医学图像107的时间进行计数(步骤S804)。显示控制单元108在预设的时间段期间降低第二医学图像107的亮度。同时，显示控制单元108根据预设的时间安排增加没有显示在显示单元110上的第一医学图像106的亮度。即，当操作者观看显示单元110时，第二医学图像107淡出(fade out)，并且代替地，第一医学图像106淡入(fade in)。当由显示控制单元108改变亮度的方式被表达为函数时，该函数可以是线性、非线性、指数、对数、阶梯状或其组合。改变第一医学图像106的亮度的方式与改变第二医学图像107的亮度的方式可以相同或可以不同。显示控制单元108改变第一医学图像106的亮度的时间段与改变第二医学图像107的亮度的时间段可以相同或可以不同。在实施例中，改变亮度的时间段被设置为几秒钟，使得操作者被允许记忆在图像切换时显示的第二医学图像107，并被允许平滑地重新开始对再次显示在显示单元110上的第一医学图像的图像解读。

(S806：将显示的图像切换为第一医学图像的步骤)

在步骤S806中，显示控制单元108控制显示单元110上的显示，以便仅显示第一医学图像106。例如，当在步骤S805中设置的时间已经过时，在显示单元110上显示的第二医学图像的亮度变为0％，并且第一医学图像106的亮度变为100％。即，在步骤S806中，将显示在显示单元110上的图像从第二医学图像107切换为第一医学图像106，并且除非显示第二医学图像107的指令再次被输入到输入单元109，否则维持显示单元110上的第一医学图像106的显示。

当指令被再次输入到输入单元109并且信息处理装置100开始接收指示指令的信号时，处理前进到步骤S803，并且重复处理直到步骤S806。这使得能够维持仅在操作者预期的时段内在显示单元110上显示第二医学图像107。操作者可以通过简单的操作输入来发出在显示单元110上显示第二医学图像107的指令。

医生在期望的定时将第二医学图像显示在显示单元110上，并读取必要的信息。此后，当预定的时间经过时，环境自动过渡到允许仅观察第一医学图像106的状态。因此，能够在从第二医学图像107读取的信息(诸如关于病变的位置和形状、信号强度等的信息)正在被存储时观察第一医学图像106。由于显示的图像在操作者期望的定时在第一医学图像106和第二医学图像107之间切换，因此医生可以以良好的可见性观察第一医学图像和第二医学图像两者。

医生可以通过执行简单的操作在期望的定时显示第一医学图像106和第二医学图像107。这允许医生容易地重复显示第一医学图像106和第二医学图像107。通过重复地显示第一医学图像106和第二医学图像107，医生可以在忘记之前检查并组合从第一医学图像106读取的信息和从第二医学图像107读取的信息，这允许医生以高效的方式观察医学图像。

下面针对第一医学图像和第二医学图像两者或其中的一个是投影图像的情况描述具体示例。

图9是图示根据本具体示例的在显示单元110上显示的画面的示例的图。在这个示例中，第一医学图像106是图9A中通过示例的方式图示的光声图像的投影图像610，而第二医学图像107是图9A中通过示例的方式图示的超声图像700。如上所述，在显示单元110上，显示投影图像610和包括在超声图像700中的切片图像。注意的是，假设投影图像610的光声图像和超声图像700已经受配准处理。

图9B是图示本具体示例中的第一医学图像106和第二医学图像107中的每一个的亮度的时间变化的图。图9B中所示的图上的点906至910表示从时间T1起每秒绘制的时间。在图9C中，箭头指示与显示相应的图像901至905的时间对应的图中的位置。

图9C是图示从图9B中所示的时间T1到时间T2在显示单元110上显示的一系列画面的示例的图。即，图9C示出了第一医学图像106和第二医学图像107被显示同时它们相应的亮度随时间改变的方式。画面901至905是当时间在从时间T1到时间T2的时段中经过时顺次显示的画面的示例。

下面针对每个步骤具体描述图8的流程图中通过示例的方式示出的处理。

(S800：选择医学图像的步骤)

在步骤S800中，图像获取单元105根据由操作者发出的指令选择光声图像作为第一医学图像和超声图像700的体数据作为第二医学图像。

(S801：执行图像处理的步骤)

在步骤S801中，图像获取单元105对光声图像执行最大强度投影处理，由此产生投影图像610。当光声图像被显示为厚度约为0.1mm的薄切片图像时，血管图像可能是点状图像，并且在这种情况下，可能难以理解作为血管的连接。作为最大强度投影处理的结果，出现在相应的切片图像中的血管图像被整合到投影图像610中，这使得能够容易地识别血管的连接和形状。

(S802：显示第一医学图像的步骤)

在步骤S802中，显示控制单元108控制显示单元110上的显示，以便显示第一医学图像106。步骤S802与例如图9B的图中从时间T0到时间T1对应，并且显示在显示单元110上的第一医学图像106的亮度是100％。在步骤S802中，第二医学图像107没有显示在显示单元110上。即，第二医学图像107的亮度为0％。

(S803：从输入单元接收信号的步骤)

在步骤S803中，图像处理装置100从输入单元109接收信号。当操作者想要在显示单元110上显示超声图像700时，操作者对输入单元109执行输入操作。响应于输入操作，输入单元109向图像处理装置100传输信号。

(S804：显示第二医学图像的步骤)

在步骤S804中，显示控制单元108控制显示单元110上的显示，以便显示超声图像700的切片图像。步骤S804与图9B中的时间T1对应。在本具体示例中，在时间T1，如图9B中所示，第一医学图像106的亮度变为0％并且第二医学图像107的亮度变为100％。在这个具体示例中，图9C中的画面901被显示在显示单元110上。这里显示的超声图像700的切片图像是紧接在操作者对输入单元109执行输入操作的时间T1之前显示在显示单元110上的投影图像610的投影范围中包括的位置处的切片图像。即，切片图像是同一区域中的图像。

(S805：改变第二医学图像的亮度的步骤)

在步骤S805中，显示控制单元108控制在显示单元110上显示的第二医学图像的亮度，使得亮度随时间改变。更具体地，显示控制单元108在预定时间内将第二医学图像的亮度降低到0％。显示控制单元108可以改变在显示单元110上显示的第一医学图像的亮度，使得亮度在预定时间段内随时间改变。例如，显示控制单元108在预定时间段内将第一医学图像的亮度增加到100％。

在本具体示例中，显示控制单元108在图9B中从时间T1到T2的时间段中改变第一医学图像106的亮度和第二医学图像107的亮度。允许操作者任意设置从时间T1到时间T2的时间段，即，显示控制单元108改变第二医学图像107的亮度的时间段。在本具体示例中，例如，从T1到T2的时间段被设置为5秒。在实施例的示例中，改变第二医学图像107的亮度的时间段被允许任意设置在从几秒到10秒的范围内。

图9C图示了在步骤S805中显示在显示单元110上的画面的改变的示例。图9C包括画面901至905，作为在从时间T1到时间T2的时间段中显示的一系列画面的示例。在本具体示例中，从时间T1到时间T2的时间段是5秒，并且画面901至905在5秒期间每隔一秒顺次显示。画面901至905被显示的时间由图9B中所示的图上的箭头指示。在本具体示例中，第一医学图像106和第二医学图像107中的每一个的亮度被线性地改变。即，在画面901至905中，第一医学图像106的亮度分别是0％、25％、50％、75％和100％，并且第二医学图像107的亮度分别是100％、75％、50％、25％和0％。

允许操作者任意设置改变第二医学图像107的亮度的方式。还允许操作者任意设置改变第一医学图像106的亮度的方式。此外，允许操作者任意设置第二医学图像107的亮度和第一医学图像106的亮度是否并行地改变。改变第一医学图像106的亮度的方式和改变第二医学图像107的亮度的方式可以相同或可以不同。

(S806：返回到显示第一医学图像的处理的步骤)

在步骤S806中，显示控制单元108控制显示单元110上的显示，以便显示第一医学图像106。更具体地，在显示单元110上显示的第一医学图像106的亮度为100％。第二医学图像107没有显示在显示单元110上，即，第二医学图像107的亮度为0％。即，仅第一医学图像106显示在显示单元110上。步骤S806与图9B中的时间T2对应。

在步骤S805和S806中，允许操作者改变在显示单元110上显示的第一医学图像106的位置和第二医学图像107的位置。该位置可以是三维医学图像中的切片位置或同一切片图像中的位置或投影图像中的位置。即，显示控制单元108控制显示单元110上的显示，以便显示根据改变位置的输入操作而改变的位置处的第一医学图像106和第二医学图像107。在实施例的示例中，第一医学图像106和第二医学图像107被显示在显示单元110上，使得在相应的对应位置处显示它们。

如上所述，允许操作者在任意定时执行输入操作，使得第二医学图像107被显示在显示单元110上。在上述实施例的示例中，响应于输入操作，将显示图像从第一医学图像106切换为第二医学图像107，并且在设定的时间段内显示的第二医学图像107淡出而且第一医学图像106淡入。因此，操作者可以容易地观察例如第二医学图像107中的肿瘤图像702的位置和形状。此外，将显示的图像再次切换为第一医学图像106使得操作者能够容易地掌握肿瘤图像702与血管图像611之间的位置关系。通过在显示单元110上显示第一医学图像106和第二医学图像107同时改变每个图像的亮度，操作者可以在他/她的头脑中将肿瘤图像702叠加在第一医学图像106上。当期望在对第一医学图像106执行图像解读时知道形态信息(诸如肿瘤的位置和尺寸)时，第二实施例的一个示例可能是有用的。基于通过观察第一医学图像106获得的关于血管图像611的信息和关于肿瘤图像702的信息，操作者可以容易地知道它们之间的位置关系。

[第三实施例]

在第三实施例中，在图8中所示的步骤S805中，仅第二医学图像107的亮度改变。

图10是图示根据第三具体示例的在显示单元110上显示的画面的示例的图。在这个示例中，第一医学图像106是图10A中通过示例的方式图示的光声图像的投影图像610，而第二医学图像107是超声图像700。如上所述，在显示单元110上，显示投影图像610和包括在超声图像700中的切片图像。注意的是，假设投影图像610的光声图像和超声图像700已经受配准处理。

在下文中，将描述与第二实施例的不同。即，将描述图8中所示的步骤S804和步骤S805中的处理。关于用于执行与第二实施例中相同的处理的步骤，上面已经给出了其描述，因此省略其进一步的详细描述。

(S804：显示第二医学图像的步骤)

在步骤S804中，显示控制单元108控制显示单元110上的显示，以便显示超声图像700的切片图像。步骤S804与图9B中的时间T1对应。在第三实施例中，如图10B中所示，在时间T1，第一医学图像106的亮度和第二医学图像107的亮度两者变为100％。在显示单元110上，显示图10C中所示的画面1001。这里显示的超声图像700的切片图像是紧接在操作者对输入单元109执行输入操作的时间T1之前显示在显示单元110上的投影图像610的投影范围中包括的位置处的切片图像。即，切片图像是同一区域中的图像。

(S805：改变显示的图像的亮度的步骤)

在步骤S805中，显示控制单元108控制显示在显示单元110上的第二医学图像107的亮度，使得亮度随时间改变。更具体地，显示控制单元108在预定时间内将第二医学图像的亮度降低到0％。然而，显示控制单元108不改变第一医学图像106的亮度。即，显示控制单元108控制显示单元110上的显示，以便显示第二医学图像107和第一医学图像106。在第三实施例中，显示控制单元108控制显示单元110上的显示，使得第一医学图像106和第二医学图像107的叠加图像被显示在显示单元110上。

图10B是第一医学图像106和第二医学图像107的亮度的时间变化的示例。显示控制单元108在从时间T1到时间T2的时间段中改变第二医学图像107的亮度。这里，假设第二医学图像107的亮度被改变的时间段先前由操作者设置为5秒。图上的点1006至1010表示从时间T1起每秒绘制的时间。

图10C图示了在步骤S805中显示在显示单元110上的画面的改变的示例。图10C图示了包括在从时间T1到时间T2的时间段中顺次显示的画面1001至1005的画面的示例。在本具体示例中，从时间T1到时间T2的时间段是5秒，并且画面1001至1005在5秒内每隔一秒顺次显示。图10B中所示的图上的箭头指示分别显示画面1001至1005的时间。在第三实施例中，第二医学图像107的亮度线性地改变。即，在画面1001至1005中，第二医学图像107的亮度分别为100％、75％、50％、25％和0％。

在时间T1，在显示单元110上显示画面1001，并且各自具有100％的亮度的第一医学图像106和第二医学图像107被叠加并显示。在画面1001上，例如，超声图像700包括许多亮区域，这可能造成投影图像610的可见性的降低。然而，第二医学图像107随时间淡出，因此操作者可以观察肿瘤图像702和血管图像611。

允许操作者任意设置改变第二医学图像107的亮度的方式。还允许操作者任意设置改变第一医学图像106的亮度的方式。在时间T1，如果第一医学图像106和第二医学图像107之间的叠加造成可见性的降低，那么可以将第二医学图像107的亮度范围设置为低于100％。例如，第二医学图像107的亮度可以在从80％到0％的范围内改变。

如上所述，允许操作者在任意定时执行输入操作，使得第二医学图像107被显示在显示单元110上。例如，操作者可以在他/她的头脑中将肿瘤图像702叠加在第一医学图像106上。基于通过观察第一医学图像106获得的关于血管图像611的信息和关于肿瘤图像702的信息，操作者可以容易地知道它们之间的位置关系。

在第三实施例中，允许操作者在观察第二医学图像107的同时观察第一医学图像106的血管图像611的时间段比第二实施例中长。即，当血管图像611在脉管的形式上或在脉管延伸的方式上具有特定特征时，第三实施例的示例是有用的，并且在执行图像解析时特别注意这种特征。

[第二实施例和第三实施例的修改]

上面已通过示例的方式针对第一医学图像106和第二医学图像107中的至少一个的亮度改变的情况描述了实施例。换句话说，在这个示例中可以认为透明度被改变。即，可以认为降低医学图像的亮度的处理是增加该医学图像的透明度的处理，并且增加医学图像的亮度的处理是降低该医学图像的透明度的处理。此外，停止显示医学图像的处理可以被认为是将该医学图像的透明度设置为100％的处理。

显示控制单元108可以控制显示单元110上的显示，使得以组合根据第二实施例的显示方法和根据第三实施例的显示方法的方式在显示单元110上显示第一医学图像106和第二医学图像107。例如，当期望在对第一医学图像106执行图像解读的同时检查肿瘤图像702的位置时，显示控制单元108可以执行根据第二实施例的处理。另一方面，例如，当期望在某种程度上已掌握肿瘤位置之后对与肿瘤图像702相关的血管图像611的形状执行详细的图像解读时，显示控制单元108可以执行根据第三实施例的处理。

在第一医学图像106和第二医学图像107都被显示在显示单元110上的情况下，显示控制单元108可以控制显示单元110上的显示，使得第一医学图像106和第二医学图像107的叠加图像被显示在显示单元110上，或者第一医学图像106和第二医学图像107以允许比较它们的方式在显示单元110上被显示。允许比较第一医学图像106和第二医学图像107的显示方法的一个示例是并排显示第一医学图像106和第二医学图像107。

如上所述，当操作者想要显示第二医学图像107时，操作者对输入单元109执行输入操作。输入单元109可以是交替开关。在这种情况下，允许操作者简单地通过仅按下一次开关就在显示单元110上显示第二医学图像107。

输入单元109可以是瞬时开关。在这种情况下，只要操作者保持按压开关，输入单元109就将指示正在执行输入操作的信号传输到图像处理装置100。图像处理装置100接收这个信号作为指示在显示单元110上显示第二医学图像107的指令的信号。图9和图10中通过示例的方式示出的时间T1与开始接收来自输入单元109的信号的时间点对应。在操作者在预定时间段内(在根据上述实施例的示例中，在5秒内))结束对瞬时开关的输入操作的情况下，显示控制单元108可以在来自输入单元109的信号的接收结束时停止显示第二医学图像107，并且可以仅显示第一医学图像106。在这种情况下，来自输入单元109的信号的接收结束的时间点与图9和图10中通过示例的方式示出的时间T2对应。在操作者对瞬时开关的输入操作继续比预定时间段长的时间段的情况下，显示控制单元108可以在预定时间段已经过时切换显示模式，使得仅显示第一医学图像106，如上述实施例中那样。在另一个示例中，当预定时间段已经过时，第二医学图像107可以再次显示在显示单元110上，如在时间T1处执行的那样。只要操作者继续对瞬时开关的输入操作，显示控制单元108就可以从时间T1到时间T2重复显示图像，即，图9中通过示例的方式图示的画面901至905或图10中通过示例的方式图示的画面1001至1005。

上面已通过示例而非限制的方式针对显示控制单元108接收从输入单元109传输的信号的情况描述了实施例。替代地，例如，信息处理装置100可以包括接收部件(未示出)，该接收部件是不同于显示控制单元108的模块并且被配置为接收从输入单元109传输的信号。

在上述实施例中，通过示例的方式，亮度线性地改变。然而，本发明不限于此。例如，显示控制单元108可以根据指数函数、对数函数或任意非线性函数来改变第一医学图像或第二医学图像的亮度。

[第一至第三实施例的修改]

本发明还可以被实现为使得实现上述实施例的一个或多个功能的程序经由网络或存储介质被供给到系统或装置，并且该系统或装置的计算机中的一个或多个处理器读取并执行程序。本发明还可以通过实现一个或多个功能的电路(例如，ASIC)来实现。

根据上述实施例中的一个的信息处理装置可以被实现为单个装置，或者可以以多个装置可通信地组合以执行上述处理的形式来实现。注意的是，这些修改中的任何一个都落入本发明的实施例的范围内。可以通过公共服务器设备或服务器组来执行上述处理。信息处理装置和构成信息处理系统的多个装置仅需要能够以预定的通信速率进行通信，并且不需要位于同一设施中或同一国家中。

本发明的实施例包括将实现上述实施例的功能的软件程序供给到系统或装置并且该系统或装置的计算机读取并执行所供给的程序的实施例。

即，为了实现根据任何实施例的处理而安装在计算机中的程序代码本身也落入本发明的实施例的范围内。此外，实施例的功能还可以由在计算机上运行的OS等通过根据包括在由计算机读取的程序中的指令执行实际处理的部分或全部来实现。

通过实施例的任意组合实现的实施例均落入本发明的实施例的范围内。本发明不限于上述实施例，而是在不脱离本发明的精神和范围的情况下各种改变和修改都是可能的。为了使本发明的范围公开，附上以下权利要求。

本申请要求基于2017年9月1日提交的日本专利申请No.2017-168461和2017年9月19日提交的日本专利申请No.2017-179106的优先权，这两个日本专利申请特此通过引用整体并入。

Claims (28)

1.一种信息处理装置，包括：

获取部件，被配置为获取第一医学图像和第二医学图像；以及

显示控制部件，被配置为控制显示单元上的显示，使得在正在对被配置为接受由操作者执行的操作的接受单元执行一个操作的时段内在显示单元上显示所述第二医学图像，但是当对用户操作接受单元的所述一个操作结束时在显示单元上显示所述第一医学图像来代替所述第二医学图像。

2.根据权利要求1所述的信息处理装置，还包括

改变部件，被配置为改变第二二维图像的在所述第二医学图像中的位置，所述第二二维图像是包括在所述第二医学图像中的二维图像，

其中所述显示控制部件控制显示单元上的显示，使得当所述一个操作结束时，在显示单元上显示第一二维图像，所述第一二维图像是包括在所述第一医学图像中并且与其位置在正在执行所述一个操作的时段中已由所述改变部件改变的第二二维图像的位置对应的图像。

3.根据权利要求2所述的信息处理装置，其中

所述第一二维图像是所述第一医学图像的切片图像，并且所述第二二维图像是所述第二医学图像的切片图像，并且

所述显示控制部件控制显示单元上的显示，使得当所述一个操作结束时，与进行改变的所述第二医学图像中的被检体中的方向对应的、所述第一医学图像中的被检体中的方向上改变的位置处的所述第一二维图像。

4.根据权利要求1至3中的一项所述的信息处理装置，其中

所述显示控制部件控制显示单元上的显示，使得仅在正在执行所述一个操作的时段内在显示单元上显示所述第二医学图像。

5.根据权利要求1至4中的一项所述的信息处理装置，其中

所述接受单元是瞬时开关，并且所述一个操作是所述瞬时开关的按下。

6.根据权利要求5所述的信息处理装置，其中

所述接受单元被配置为响应于所述瞬时开关的按下而传输信号和响应于所述瞬时开关的按下的结束而结束传输信号，并且正在执行所述一个操作的时段由所述接受单元正在传输信号的时段来定义。

7.一种信息处理装置，包括：

获取部件，被配置为获取第一医学图像和第二医学图像，

所述信息处理装置被配置为使得响应于由操作者执行的输入操作，在显示单元上显示所述第二医学图像并且在预定的时间段内降低显示的第二医学图像的亮度，以及响应于所述输入操作，降低所述第一医学图像的亮度并且增加所述第一医学图像的降低的亮度。

8.根据权利要求7所述的信息处理装置，其中

所述显示控制部件控制显示单元上的显示，使得在显示单元上显示所述第一医学图像，并且响应于所述输入操作被执行，在显示单元上显示所述第二医学图像。

9.根据权利要求7所述的信息处理装置，其中

所述显示控制部件控制显示单元上的显示，使得在显示单元上显示所述第一医学图像，然后响应于所述输入操作的发生，停止所述第一医学图像的显示，并且在显示单元上显示所述第二医学图像，以及此后在预定的时间段内降低显示的第二医学图像的亮度并在所述预定的时间段内增加所述第一医学图像的亮度，由此在显示单元上显示所述第一医学图像。

10.根据权利要求7所述的信息处理装置，其中

所述显示控制部件控制显示单元上的显示，使得在显示单元上显示所述第一医学图像，然后响应于所述输入操作的发生，在显示单元上显示所述第二医学图像同时维持所述第一医学图像的亮度，并且此后在维持所述第一医学图像的亮度的同时，在预定的时间段内降低所述第二医学图像的亮度。

11.根据权利要求1至10中的一项所述的信息处理装置，其中

所述获取部件获取所述第一医学图像和与所述第一医学图像配准的所述第二医学图像，并且

所述显示控制部件控制显示单元上的显示，使得在显示单元上显示与所述第一医学图像对应的位置处的所述第二医学图像。

12.根据权利要求11所述的信息处理装置，其中

所述显示控制部件控制显示单元上的显示，以便显示与在执行所述输入操作的时间点在显示单元上显示的所述第一医学图像对应的位置处的所述第二医学图像。

13.根据权利要求1至12中的一项所述的信息处理装置，其中

所述第一医学图像和第二医学图像各自是基于来自被检体的声波的医学图像。

14.根据权利要求1至13中的一项所述的信息处理装置，其中

所述第一医学图像和第二医学图像中的至少一个是经由对三维图像的最大强度投影处理而获得的投影图像。

15.根据权利要求1至14中的一项所述的信息处理装置，其中

所述第一医学图像和第二医学图像中的至少一个是通过叠加基于来自被检体的声波的多个医学图像而获得的叠加图像。

16.根据权利要求1至15中的一项所述的信息处理装置，其中

所述第一医学图像是光声图像，所述光声图像是基于通过用光照射被检体而获得的光声波的图像，并且所述第二医学图像是超声图像，所述超声图像是基于作为施加到被检体的声波在被检体内部的反射的结果而出现的反射波的图像。

17.一种信息处理装置，包括：

获取部件，被配置为获取第一医学图像和第二医学图像；以及

显示控制部件，被配置为控制显示单元上的显示，使得在正在接收信号的时段内在显示单元上显示所述第二医学图像，所述信号是指示在显示单元上显示所述第二医学图像的指令的信号并且在操作者执行一个输入操作的时段内被传输，

而在没有接收所述信号的时段内在显示单元上显示所述第一医学图像。

18.一种信息处理装置，包括：

获取部件，被配置为获取第一医学图像和第二医学图像；以及

显示控制部件，被配置为控制显示单元上的显示，使得在显示单元上显示所述第一医学图像和第二医学图像中的至少一个；

改变部件，被配置为使得在在正在显示单元上显示所述第二医学图像的时间段中、发出指令以改变作为包括在所述第二医学图像中的二维图像的第二二维图像的在所述第二医学图像中的位置的情况下，

所述改变部件将包括在所述第一医学图像中的第一二维图像的位置改变为与所述第二医学图像的改变后的位置对应的位置。

19.一种信息处理系统，包括：

获取部件，被配置为获取第一医学图像和第二医学图像；以及

显示控制部件，被配置为控制显示单元上的显示，使得在正在对被配置为接受由操作者执行的操作的接受单元执行一个操作的时段内在显示单元上显示所述第二医学图像，但是当对用户操作接受单元的所述一个操作结束时在显示单元上显示所述第一医学图像来代替所述第二医学图像。

20.一种信息处理系统，包括：

获取部件，被配置为获取第一医学图像和第二医学图像；以及

显示控制部件，被配置为控制显示单元上的显示，使得在正在接收信号的时段内在显示单元上显示所述第二医学图像，所述信号是指示在显示单元上显示所述第二医学图像的指令的信号并且在操作者执行一个输入操作的时段内被传输，

而在没有接收所述信号的时段内在显示单元上显示所述第一医学图像。

21.根据权利要求20所述的信息处理系统，还包括

接受单元，被配置为接受由操作者执行的操作。

22.一种信息处理系统，包括：

获取部件，被配置为获取第一医学图像和第二医学图像；并且

所述信息处理装置被配置为使得响应于由操作者执行的输入操作，在显示单元上显示所述第二医学图像并且在预定的时间段内降低显示的第二医学图像的亮度，以及响应于所述输入操作，降低所述第一医学图像的亮度并且增加所述第一医学图像的降低的亮度。

23.一种信息处理方法，包括以下步骤：

获取第一医学图像和第二医学图像；以及

控制显示单元上的显示，使得在正在对被配置为接受由操作者执行的操作的接受单元执行一个操作的时段内在显示单元上显示所述第二医学图像，但是当对所述接受单元的所述一个操作结束时在显示单元上显示所述第一医学图像来代替所述第二医学图像。

24.一种信息处理方法，包括以下步骤：

获取第一医学图像和第二医学图像；并且

显示控制部件，被配置为控制显示单元上的显示，使得在正在接收信号的时段内在显示单元上显示所述第二医学图像，所述信号是指示在显示单元上显示所述第二医学图像的指令的信号并且在操作者执行一个输入操作的时段内被传输，以及

在没有接收所述信号的时段内在显示单元上显示所述第一医学图像。

25.一种信息处理方法，包括以下步骤：

获取第一医学图像和第二医学图像；

控制显示单元上的显示，使得在显示单元上显示所述第一医学图像；

接收指示在显示单元上显示所述第二医学图像的指令并且在操作者正在执行一个输入操作的时间段内被传输的信号；

控制显示单元上的显示，使得在正在接收所述信号的时段内在显示单元上显示所述第二医学图像；以及

控制显示单元上的显示，使得当所述信号的接收结束时在显示上显示所述第一医学图像。

26.一种信息处理方法，包括以下步骤：

获取第一医学图像和第二医学图像；

在显示单元上显示包括在所述第一医学图像中的第一二维图像；

用包括在所述第二医学图像中的第二二维图像替换显示在显示单元上的所述第一二维图像；

接受所述第二二维图像的在所述第二医学图像中的位置的改变；

在显示单元上显示改变后的位置处的所述第二二维图像；

将所述第一二维图像的位置改变为与所述第二医学图像中的改变后的位置对应的位置；以及

用改变后的位置处的所述第一二维图像替换显示在显示单元上的所述第二二维图像。

27.一种信息处理方法，包括以下步骤：

获取第一医学图像和第二医学图像；

控制显示单元上的显示，使得在显示单元上显示所述第一医学图像；

响应于由操作者执行的输入操作，在显示单元上显示所述第二医学图像，并且停止所述第一医学图像的显示；

在预定的时间段内降低显示的第二医学图像的亮度，并且在所述预定的时间段内增加所述第一医学图像的亮度，以及在显示单元上显示所述第一医学图像；以及

当所述预定的时间段经过时，停止显示所述第二医学图像并且在显示单元上显示所述第一医学图像。

28.一种用于使计算机执行根据权利要求23至27中的一项所述的信息处理方法的程序。

Images