CN116616894A - 一种外科手术虚拟图像演练方法、系统及存储介质 - Google Patents
一种外科手术虚拟图像演练方法、系统及存储介质 Download PDFInfo
- Publication number
- CN116616894A CN116616894A CN202310605040.8A CN202310605040A CN116616894A CN 116616894 A CN116616894 A CN 116616894A CN 202310605040 A CN202310605040 A CN 202310605040A CN 116616894 A CN116616894 A CN 116616894A
- Authority
- CN
- China
- Prior art keywords
- dimensional
- image
- dimensional image
- virtual
- module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/10—Computer-aided planning, simulation or modelling of surgical operations
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/10—Computer-aided planning, simulation or modelling of surgical operations
- A61B2034/101—Computer-aided simulation of surgical operations
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/10—Computer-aided planning, simulation or modelling of surgical operations
- A61B2034/101—Computer-aided simulation of surgical operations
- A61B2034/105—Modelling of the patient, e.g. for ligaments or bones
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/10—Computer-aided planning, simulation or modelling of surgical operations
- A61B2034/107—Visualisation of planned trajectories or target regions
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30096—Tumor; Lesion
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Surgery (AREA)
- Life Sciences & Earth Sciences (AREA)
- Medical Informatics (AREA)
- Biomedical Technology (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Animal Behavior & Ethology (AREA)
- Computer Graphics (AREA)
- Geometry (AREA)
- Software Systems (AREA)
- Molecular Biology (AREA)
- Heart & Thoracic Surgery (AREA)
- Robotics (AREA)
- Radiology & Medical Imaging (AREA)
- Quality & Reliability (AREA)
- Apparatus For Radiation Diagnosis (AREA)
Abstract
本发明提供了一种外科手术虚拟图像演练方法、系统及存储介质,包括获取病变体部位多个方向的CT断层扫描图像信息形成相应的病变体位三维图像;获取病变体部位多方位的B超扫描图像信息形状特征信息;比对在预设范围的CT值情况下的病变体位三维图像;获得最终病变体位三维图像;根据所述最终病变体位三维图像构建病变体位三维模型,对病变体位三维模型构建具备生物力学特征的虚拟人体组织;对虚拟人体组织产生力学变形并输出视觉反馈,辅助规划手术路径。通过B超扫描图像信息获取病变体部的形状特征信息来对预设范围的CT值情况下的所述病变体位三维图像进行比对验证;可以增加图像生成的精准性,使得自动建模的过程中生成精度高的目标模型。
Description
技术领域
本发明涉及一种手术仿真技术领域,具体涉及一种外科手术虚拟图像演练方法、系统及存储介质。
背景技术
近年来医学治疗有了飞速的发展,经历了由显微到微创内科,由二维影像到三维成像,以及神经导航和术中监测广泛应用等不同阶段。有的手术难度系数非常高,要求医师十分精细熟练,对人体各部位构造有清晰的认识,更要有精准的操作技能。然而目前培训过程大多是依赖图谱、模型、动物、尸体、现场观摩,或者由高年资医师带教完成。这些培训方式都存在一定的缺陷,图谱缺乏立体感,模型缺乏真实感,而动物的解剖结构多有变异,而且尸体价格昂贵且缺乏可重复性,没有实际操作经验,增加感染发生率及患者风险等问题。人均学习资源的减少也是一个不可忽视的外部因素,手术技能培训的过程中,患者对医院、医生缺乏信任,不愿意让新人在自己身上练手。对于各科手术而言,由于多采用局部麻醉,且手术上台的人数有限,因而与大系统相比这一问题更加突出,其结果是住院手术机会越来越少。而且传统的手术方式很难在手术前观测手术中和手术后可能出现的风险和副作用现象,也无法提前观察手术过程医疗器械与患者身体的交互过程。
为了提高手术的成功概率,通常需要提前对手术进行模拟,手术仿真应需而生。
发明内容
本发明提供一种外科手术虚拟图像演练方法、系统及存储介质,以解决现有模拟手术系统实验沉浸感不强且不便于寻找手术切入点的缺陷。
根据本发明的一个方面提供一种外科手术虚拟图像演练方法,包括以下步骤:
获取病变体部位多个方向的CT断层扫描图像信息;
根据所述CT断层扫描图像信息获取空间的物理属性,根据所述物理属性重构出多幅断层二维图像;
根据多幅断层二维图像构建初步三维图像;
根据病变体位特性,选定CT值的范围,在所述初步三维图像中形成相应的病变体位三维图像;
获取病变体部位多方位的B超扫描图像信息;
根据B超扫描图像信息获取病变体部的形状特征信息;
根据形状特征信息比对在预设范围的CT值情况下的所述病变体位三维图像;
当比对的重合度超过阈值时,则导出该CT值情况下的所述病变体位三维图像,并作为最终病变体位三维图像;
根据所述最终病变体位三维图像构建病变体位三维模型,对病变体位三维模型构建具备生物力学特征的虚拟人体组织;并对所述虚拟人体组织进行表面半透明化处理;
确认虚拟手术器械与虚拟人体组织发生碰撞,基于虚拟人体组织在软组织形变及穿刺过程中对虚拟手术器械反馈的作用力,对虚拟人体组织产生力学变形并输出视觉反馈,辅助规划手术路径。
根据上述技术,CT断层扫描图像信息获取空间的物理属性,进行图像重建重构出多幅断层二维图像,再通过B超扫描图像信息获取病变体部的形状特征信息来对预设范围的CT值情况下的所述病变体位三维图像进行比对验证;可以增加图像生成的精准性,使得自动建模的过程中生成精度高的目标模型。将病变体人体组织建模,进行半透明化处理,从而方便操作者在模拟手术时,可直观看到病变体周围的虚拟人体组织结构,以准确找到穿刺点,提高手术成功概率。
在一种可能的设计中,对构建成的病变体位三维模型进行网格化处理。网格化处理增加模型的后期的力反馈仿真性能。
在一种可能的设计中,构建具备生物力学特征的虚拟人体组织的方法是:
构建弹簧质点模型,基于弹簧质点模型所构建的模型质点,计算出当前质点的位移量,并将位移量至反馈在虚拟人体软组织上。
在一种可能的设计中,根据多幅断层二维图像构建三维图像之前,对所述多幅断层二维图像进行预处理,所述预处理包括,测量图像距离和角度,根据图像距离和角度对图像进行局部放大和移动以及对图像进行分割和图像配准。通过对图像进行预处理,其中测量图像距离和角度,根据图像距离和角度对图像进行局部放大和移动以及对图像进行分割和图像配准,可以提高图像与现实的匹配度,增加模型的精准性。
在一种可能的设计中,所述CT断层扫描图像信息是螺旋CT的断层扫描图像信息。
本发明第二方面提供了一种外科手术虚拟图像演练系统,包括,
CT断层扫描图像信息获取模块,用于获取病变体部位多个方向的CT断层扫描图像信息,并将CT断层扫描图像信息传给断层二维图像构建模块;
断层二维图像构建模块,用于接收所述CT断层扫描图像信息获取模块传来的CT断层扫描图像信息并根据所述CT断层扫描图像信息获取空间的物理属性,根据所述物理属性重构出多幅断层二维图像,并将多幅所述断层二维图像传给三维图像构建模块;
三维图像构建模块,用于接收断层二维图像构建模块传来的多幅所述断层二维图像并根据多幅断层二维图像构建初步三维图像;并将初步三维图像传给三维图像处理模块;
三维图像处理模块,用于接收所述三维图像构建模块传来的初步三维图像,根据病变体位特性,选定CT值的范围,在所述初步三维图像中形成相应的病变体位三维图像;
B超扫描图像信息获取模块,用于获取病变体部位多方位的B超扫描图像信息,并将B超扫描图像信息传给形状特征提取模块;
形状特征提取模块,用于接收B超扫描图像信息获取模块传来的B超扫描图像信息,并根据B超扫描图像信息获取病变体部的形状特征信息,并将形状特征信息传给特征比对模块;
特征比对模块,用于接收形状特征提取模块传来的形状特征信息,并根据形状特征信息比对在预设范围的CT值情况下的所述病变体位三维图像,然后输出比对结果信息,并将比对结果信息传给最终病变体位三维图像生成模块;
最终病变体位三维图像生成模块,接收特征比对模块传来的比对结果信息,并根据比对结果信息判断重合度是否超过阈值,当比对的重合度超过阈值时,则导出该CT值情况下的所述病变体位三维图像,并作为最终病变体位三维图像,并将最终病变体位三维图像传给病变人体组织构建模块;
三维组织模型构建模块,用于接收最终病变体位三维图像生成模块传来的最终病变体位三维图像,并根据所述最终病变体位三维图像构建病变体位三维模型,构建人体三维组织及病变体,并将两者结合构成完整的病变人体三维组织模型;
生物力学处理模块,用于对所述病变人体三维组织模型构建具备生物力学特征的虚拟人体组织,并用于将所述的虚拟人体组织的表面进行半透明化处理的可视化处理模块;和
力学交互反馈模块,用于确认虚拟手术器械与虚拟人体组织发生碰撞,基于虚拟人体组织在软组织形变及穿刺过程中对虚拟手术器械反馈的作用力,对虚拟人体组织产生力学变形并输出视觉反馈,辅助规划手术路径。
在一种可能的设计中,三维组织模型构建模块还用于对构建成的病变体位三维模型进行网格化处理。
在一种可能的设计中,所述的力学交互反馈模块还用于构建弹簧质点模型,基于弹簧质点模型所构建的模型质点,计算出当前质点的位移量,并将位移量至反馈在虚拟人体软组织上。
在一种可能的设计中,还包括断层二维图像调整模块,所述断层二维图像调整模块用于在多幅断层二维图像构建三维图像之前,对所述多幅断层二维图像进行预处理,所述预处理包括,测量图像距离和角度,根据图像距离和角度对图像进行局部放大和移动以及对图像进行分割和图像配准。
本发明提三方面提供了一种电子设备,包括存储器和处理器,所述存储器与处理器之间通过总线相互连接;所述存储器存储计算机执行指令;所述处理器执行存储器存储的计算机执行指令,使得处理器执行如本发明第一方面以及第一方面中任意一项可能的设计中所述的外科手术虚拟图像演练方法。
有益效果:
本申请提出一种外科手术虚拟图像演练方法,CT断层扫描图像信息获取空间的物理属性,进行图像重建重构出多幅断层二维图像,再通过B超扫描图像信息获取病变体部的形状特征信息来对预设范围的CT值情况下的所述病变体位三维图像进行比对验证;可以增加图像生成的精准性,使得自动建模的过程中生成精度高的目标模型。将病变体人体组织建模,进行半透明化处理,从而方便操作者在模拟手术时,可直观看到病变体周围的虚拟人体组织结构,以准确找到穿刺点,提高手术成功概率。
附图说明
图1为本发明第一方面提供的一种外科手术虚拟图像演练方法流程图;
图2为本发明第二方面提供的一种外科手术虚拟图像演练系统模块图。
具体实施方式
下面结合附图和实施例,对本发明的具体实施方式作进一步详细描述。以下实施例用于说明本发明,但不用来限制本发明的范围。
三维重建的目的是为了对所重建的物体有一个空间形状和位置的认识,因此,旨在对某个器官或所需要的地方进行重建。在获得的二维图像数据中预先把这些部分的特征提取出来,从而进行重建。在重建之前,可以输入阈值的范围,从而使得在该范围的图像重建来,而该阈值范围之外的部分则不能显示出来,这样就可以根据需要显示不同的组织和范围。本实施例采用的是Marching Cubes算法,可以根据要求来设置一些参数,生成不同的图形。
为了详细说明本发明的技术方案,如图1所示,一种外科手术虚拟图像演练方法,包括以下步骤:
获取病变体部位多个方向的CT断层扫描图像信息;
根据所述CT断层扫描图像信息获取空间的物理属性,根据所述物理属性重构出多幅断层二维图像;
根据多幅断层二维图像构建初步三维图像;
根据病变体位特性,选定CT值的范围,在所述初步三维图像中形成相应的病变体位三维图像;
获取病变体部位多方位的B超扫描图像信息;
根据B超扫描图像信息获取病变体部的形状特征信息;
根据形状特征信息比对在预设范围的CT值情况下的所述病变体位三维图像;
当比对的重合度超过阈值时,则导出该CT值情况下的所述病变体位三维图像,并作为最终病变体位三维图像;
根据所述最终病变体位三维图像构建病变体位三维模型,对病变体位三维模型构建具备生物力学特征的虚拟人体组织;并对所述虚拟人体组织进行表面半透明化处理;
确认虚拟手术器械与虚拟人体组织发生碰撞,基于虚拟人体组织在软组织形变及穿刺过程中对虚拟手术器械反馈的作用力,对虚拟人体组织产生力学变形并输出视觉反馈,辅助规划手术路径。
CT断层扫描图像信息获取空间的物理属性,进行图像重建重构出多幅断层二维图像,再通过B超扫描图像信息获取病变体部的形状特征信息来对预设范围的CT值情况下的所述病变体位三维图像进行比对验证;可以增加图像生成的精准性,使得自动建模的过程中生成精度高的目标模型。将病变体人体组织建模,进行半透明化处理,从而方便操作者在模拟手术时,可直观看到病变体周围的虚拟人体组织结构,以准确找到穿刺点,提高手术成功概率。
在一种可能的实施方式中,对构建成的病变体位三维模型进行网格化处理。网格化处理增加模型的后期的力反馈仿真性能。在网格化处理过程中,优选采用二次边折叠简化算法(Quadricedgecollapsedecimation)和三步拉普拉斯平滑滤波算法进行处理。
在一种可能的实施方式中,构建具备生物力学特征的虚拟人体组织的方法是:
构建弹簧质点模型,基于弹簧质点模型所构建的模型质点,计算出当前质点的位移量,并将位移量至反馈在虚拟人体软组织上。
在一种可能的实施方式中,根据多幅断层二维图像构建三维图像之前,对所述多幅断层二维图像进行预处理,所述预处理包括,测量图像距离和角度,根据图像距离和角度对图像进行局部放大和移动以及对图像进行分割和图像配准。通过对图像进行预处理,其中测量图像距离和角度,根据图像距离和角度对图像进行局部放大和移动以及对图像进行分割和图像配准,可以提高图像与现实的匹配度,增加模型的精准性。
在一种可能的实施方式中,所述CT断层扫描图像信息是螺旋CT的断层扫描图像信息。
在速度上,螺旋CT比传统CT快8~10倍,这对于接受扫描有困难的老人、儿童及病情严重的病人十分有利。而且,由于扫描能在屏一口气的时间内完成,几乎完全避免了由呼吸引起的图像错位,这就有可能检测出在传统CT扫描中所检测不到的小病灶。这些小病灶由于病人的呼吸而在扫描断层上出出进进,因而很难被传统CT检测到。另一方面,速度的提高不仅减少了图像的运动伪影,而且可以在组织增强剂浓度达到顶峰时进行成像,这无疑将提高病灶的早期诊断率。速度的提高还使双向成像成为可能,对于肝脏和胰腺病人来说,就有可能获得两组独立的扫描图像,一组是组织增强早期的动脉图,另一组是后来的门静脉图。体数据获取是螺旋CT另一个引人注目的优点。螺旋CT的可回顾性重建特性使得X射线束通过任何病灶的中心,且可以任意调节重建的切片位置、厚度及数目。高质量的体数据集极大的扩展了三维立体成像的范围,相对于传统CT的以骨结构为主的三维重建(因为它们为静态的,与周围的软组织密度相差较大),螺旋CT所支持得体重建可以构建一个虚拟现实的环境,因此螺旋CT的使用和所提供的数据为进行计算机三维重建提供了极大的帮助。
如图2所示,本发明第二方面提供了一种外科手术虚拟图像演练系统,包括
CT断层扫描图像信息获取模块,用于获取病变体部位多个方向的CT断层扫描图像信息,并将CT断层扫描图像信息传给断层二维图像构建模块;
断层二维图像构建模块,用于接收所述CT断层扫描图像信息获取模块传来的CT断层扫描图像信息并根据所述CT断层扫描图像信息获取空间的物理属性,根据所述物理属性重构出多幅断层二维图像,并将多幅所述断层二维图像传给三维图像构建模块;
三维图像构建模块,用于接收断层二维图像构建模块传来的多幅所述断层二维图像并根据多幅断层二维图像构建初步三维图像;并将初步三维图像传给三维图像处理模块;
三维图像处理模块,用于接收所述三维图像构建模块传来的初步三维图像,根据病变体位特性,选定CT值的范围,在所述初步三维图像中形成相应的病变体位三维图像;
B超扫描图像信息获取模块,用于获取病变体部位多方位的B超扫描图像信息,并将B超扫描图像信息传给形状特征提取模块;
形状特征提取模块,用于接收B超扫描图像信息获取模块传来的B超扫描图像信息,并根据B超扫描图像信息获取病变体部的形状特征信息,并将形状特征信息传给特征比对模块;
特征比对模块,用于接收形状特征提取模块传来的形状特征信息,并根据形状特征信息比对在预设范围的CT值情况下的所述病变体位三维图像,然后输出比对结果信息,并将比对结果信息传给最终病变体位三维图像生成模块;
最终病变体位三维图像生成模块,接收特征比对模块传来的比对结果信息,并根据比对结果信息判断重合度是否超过阈值,当比对的重合度超过阈值时,则导出该CT值情况下的所述病变体位三维图像,并作为最终病变体位三维图像,并将最终病变体位三维图像传给病变人体组织构建模块;
三维组织模型构建模块,用于接收最终病变体位三维图像生成模块传来的最终病变体位三维图像,并根据所述最终病变体位三维图像构建病变体位三维模型,构建人体三维组织及病变体,并将两者结合构成完整的病变人体三维组织模型;
生物力学处理模块,用于对所述病变人体三维组织模型构建具备生物力学特征的虚拟人体组织,并用于将所述的虚拟人体组织的表面进行半透明化处理的可视化处理模块;和
力学交互反馈模块,用于确认虚拟手术器械与虚拟人体组织发生碰撞,基于虚拟人体组织在软组织形变及穿刺过程中对虚拟手术器械反馈的作用力,对虚拟人体组织产生力学变形并输出视觉反馈,辅助规划手术路径。
在一种可能的实施方式中,三维组织模型构建模块还用于对构建成的病变体位三维模型进行网格化处理。
在一种可能的实施方式中,所述的力学交互反馈模块还用于构建弹簧质点模型,基于弹簧质点模型所构建的模型质点,计算出当前质点的位移量,并将位移量至反馈在虚拟人体软组织上。
在一种可能的实施方式中,还包括断层二维图像调整模块,所述断层二维图像调整模块用于在多幅断层二维图像构建三维图像之前,对所述多幅断层二维图像进行预处理,所述预处理包括,测量图像距离和角度,根据图像距离和角度对图像进行局部放大和移动以及对图像进行分割和图像配准。
本发明提三方面提供了一种电子设备,包括存储器和处理器,所述存储器与处理器之间通过总线相互连接;所述存储器存储计算机执行指令;所述处理器执行存储器存储的计算机执行指令,使得处理器执行如本发明第一方面以及第一方面中任意一项可能的实施方式中所述的外科手术虚拟图像演练方法。具体举例的,所述存储器可以但不限于包括随机存取存储器(Random-Access Memory,RAM)、只读存储器(Read-Only Memory,ROM)、闪存(Flash Memory)、先进先出存储器(First Input First Output,FIFO)和/或先进后出存储器(First Input Last Output,FILO)等等;所述处理器可以不限于采用型号为X86、Internet系列的处理器的或其他微处理器;所述收发器可以但不限于为有线收发、无线保真(Wireless Fidelity,WiFi)无线收发器、蓝牙无线收发器、通用分组无线服务技术(General Packet Radio Service,GPRS)无线收发器和/或紫蜂协议(基于IEEE802.15.4标准的低功耗局域网协议,ZigBee)无线收发器等。此外,所述电子设备还可以但不限于包括有电源模块、显示屏和其它必要的部件。
在第四方面,本发明提供了一种存储介质,所述存储介质上存储有指令,当所述指令在计算机上运行时,执行如第一方面或第一方面中任意一项可能的实施方式中所述的外科手术虚拟图像演练方法。其中,所述计算机可读存储介质是指存储数据的载体,可以但不限于包括软盘、光盘、硬盘、闪存、优盘和/或记忆棒(Memory Stick)等,所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。
本实施例第四方面提供的前述计算机可读存储介质的工作过程、工作细节和技术效果,可以参见如上第一方面或第一方面中任意一种可能的实施方式中所述的交互方法,于此不再赘述。
本实施例第五方面提供了一种包含指令的计算机程序产品,当所述指令在计算机上运行时,使所述计算机执行如在第一方面或第一方面中任意一种可能的实施方式中所述的外科手术虚拟图像演练方法。其中,所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。
以上所描述的实施例仅仅是示意性的,若涉及到作为分离部件说明的单元,其可以是或者也可以不是物理上分开的;若涉及到作为单元显示的部件,其可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
最后,本申请的方法仅为较佳的实施方案,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (10)
1.一种外科手术虚拟图像演练方法,其特征在于:其包括以下步骤,
获取病变体部位多个方向的CT断层扫描图像信息;
根据所述CT断层扫描图像信息获取空间的物理属性,根据所述物理属性重构出多幅断层二维图像;
根据多幅断层二维图像构建初步三维图像;
根据病变体位特性,选定CT值的范围,在所述初步三维图像中形成相应的病变体位三维图像;
获取病变体部位多方位的B超扫描图像信息;
根据B超扫描图像信息获取病变体部的形状特征信息;
根据形状特征信息比对在预设范围的CT值情况下的所述病变体位三维图像;
当比对的重合度超过阈值时,则导出该CT值情况下的所述病变体位三维图像,并将该CT值情况下的所述病变体位三维图像作为最终病变体位三维图像;
根据所述最终病变体位三维图像构建病变体位三维模型,对病变体位三维模型构建具备预设的生物力学特征的虚拟人体组织;并对所述虚拟人体组织进行表面半透明化处理;
当虚拟手术器械与虚拟人体组织发生碰撞时,基于虚拟人体组织在软组织形变及穿刺过程中对虚拟手术器械反馈的作用力,对虚拟人体组织产生力学变形处理并输出视觉反馈,辅助规划手术路径。
2.如权利要求1所述的外科手术虚拟图像演练方法,其特征在于:根据所述最终病变体位三维图像构建病变体位三维模型后,还对构建成的病变体位三维模型进行网格化处理,对网格化处理后的病变体位三维模型构建具备预设的生物力学特征的虚拟人体组织。
3.如权利要求2所述的一种外科手术虚拟图像演练方法,其特征在于:构建具备预设的生物力学特征的虚拟人体组织的方法是:
基于网格化处理后的病变体位三维模型构建弹簧质点模型,基于弹簧质点模型所构建的模型质点,计算出当前质点的位移量,并将位移量至反馈在虚拟人体软组织上。
4.如权利要求1所述的一种外科手术虚拟图像演练方法,其特征在于:根据多幅断层二维图像构建三维图像之前,所述方法还包括:对所述多幅断层二维图像进行预处理,所述对所述多幅断层二维图像进行预处理包括:测量二维图像距离和角度,根据二维图像距离和角度对图像进行局部放大和移动以及对图像进行分割和图像配准。
5.如权利要求1所述的一种外科手术虚拟图像演练方法,其特征在于:所述CT断层扫描图像信息是螺旋CT的断层扫描图像信息。
6.一种外科手术虚拟图像演练系统,其特征在于:其包括,
CT断层扫描图像信息获取模块,用于获取病变体部位多个方向的CT断层扫描图像信息,并将CT断层扫描图像信息传给断层二维图像构建模块;
断层二维图像构建模块,用于接收所述CT断层扫描图像信息获取模块传来的CT断层扫描图像信息并根据所述CT断层扫描图像信息获取空间的物理属性,根据所述物理属性重构出多幅断层二维图像,并将多幅所述断层二维图像传给三维图像构建模块;
三维图像构建模块,用于接收断层二维图像构建模块传来的多幅所述断层二维图像并根据多幅断层二维图像构建初步三维图像;并将初步三维图像传给三维图像处理模块;
三维图像处理模块,用于接收所述三维图像构建模块传来的初步三维图像,根据病变体位特性,选定CT值的范围,在所述初步三维图像中形成相应的病变体位三维图像;
B超扫描图像信息获取模块,用于获取病变体部位多方位的B超扫描图像信息,并将B超扫描图像信息传给形状特征提取模块;
形状特征提取模块,用于接收B超扫描图像信息获取模块传来的B超扫描图像信息,并根据B超扫描图像信息获取病变体部的形状特征信息,并将形状特征信息传给特征比对模块;
特征比对模块,用于接收形状特征提取模块传来的形状特征信息,并根据形状特征信息比对在预设范围的CT值情况下的所述病变体位三维图像,然后输出比对结果信息,并将比对结果信息传给最终病变体位三维图像生成模块;
最终病变体位三维图像生成模块,接收特征比对模块传来的比对结果信息,并根据比对结果信息判断重合度是否超过阈值,当比对的重合度超过阈值时,则导出该CT值情况下的所述病变体位三维图像,并作为最终病变体位三维图像,并将最终病变体位三维图像传给病变人体组织构建模块;
三维组织模型构建模块,用于接收最终病变体位三维图像生成模块传来的最终病变体位三维图像,并根据所述最终病变体位三维图像构建病变体位三维模型,构建人体三维组织及病变体,并将两者结合构成完整的病变人体三维组织模型;
生物力学处理模块,用于对所述病变人体三维组织模型构建具备生物力学特征的虚拟人体组织,并用于将所述的虚拟人体组织的表面进行半透明化处理的可视化处理模块;和
力学交互反馈模块,用于确认虚拟手术器械与虚拟人体组织发生碰撞,基于虚拟人体组织在软组织形变及穿刺过程中对虚拟手术器械反馈的作用力,对虚拟人体组织产生力学变形并输出视觉反馈,辅助规划手术路径。
7.如权利要求6所述的一种外科手术虚拟图像演练系统,其特征在于:三维组织模型构建模块还用于对构建成的病变体位三维模型进行网格化处理。
8.如权利要求7所述的一种外科手术虚拟图像演练系统,其特征在于:所述的力学交互反馈模块还用于构建弹簧质点模型,基于弹簧质点模型所构建的模型质点,计算出当前质点的位移量,并将位移量至反馈在虚拟人体软组织上。
9.如权利要求6所述的一种外科手术虚拟图像演练系统,其特征在于:还包括断层二维图像调整模块,所述断层二维图像调整模块用于在多幅断层二维图像构建三维图像之前,对所述多幅断层二维图像进行预处理,所述预处理包括,测量图像距离和角度,根据图像距离和角度对图像进行局部放大和移动以及对图像进行分割和图像配准。
10.一种存储介质,其特征在于:所述存储介质上存储有指令,当所述指令在计算机上运行时,执行如权利要求2至5任意一项所述的外科手术虚拟图像演练方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310605040.8A CN116616894A (zh) | 2023-05-25 | 2023-05-25 | 一种外科手术虚拟图像演练方法、系统及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310605040.8A CN116616894A (zh) | 2023-05-25 | 2023-05-25 | 一种外科手术虚拟图像演练方法、系统及存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN116616894A true CN116616894A (zh) | 2023-08-22 |
Family
ID=87637799
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202310605040.8A Pending CN116616894A (zh) | 2023-05-25 | 2023-05-25 | 一种外科手术虚拟图像演练方法、系统及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN116616894A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN119626060A (zh) * | 2024-12-19 | 2025-03-14 | 中国人民解放军陆军军医大学第二附属医院 | 一种互动性穿刺活检术教学系统 |
Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2015087203A1 (en) * | 2013-12-13 | 2015-06-18 | Koninklijke Philips N.V. | Imaging systems and methods for monitoring treatment of tissue lesions |
| CN106781941A (zh) * | 2016-11-24 | 2017-05-31 | 北京理工大学 | 一种用于模拟微创穿刺手术的方法及其系统 |
| CN108109682A (zh) * | 2018-01-19 | 2018-06-01 | 大连外国语大学 | 一种医学影像识别系统及其方法 |
| CN109389669A (zh) * | 2017-08-04 | 2019-02-26 | 阿里健康信息技术有限公司 | 虚拟环境中人体三维模型构建方法及系统 |
| CN110310364A (zh) * | 2019-06-27 | 2019-10-08 | 王寅 | 一种心脏3d打印系统及其打印方法 |
| CN111821032A (zh) * | 2019-04-16 | 2020-10-27 | 上银科技股份有限公司 | 医疗影像对位方法 |
| CN115454254A (zh) * | 2022-09-23 | 2022-12-09 | 艾瑞迈迪医疗科技(北京)有限公司 | 内窥镜引导下的经鼻腔虚拟仿真手术方法及装置 |
| CN115457008A (zh) * | 2022-09-23 | 2022-12-09 | 艾瑞迈迪医疗科技(北京)有限公司 | 腹腔实时穿刺虚拟仿真培训方法及装置 |
| CN115624383A (zh) * | 2022-12-21 | 2023-01-20 | 湖南医科医工科技有限公司 | 一种手术部位三维建模系统 |
-
2023
- 2023-05-25 CN CN202310605040.8A patent/CN116616894A/zh active Pending
Patent Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2015087203A1 (en) * | 2013-12-13 | 2015-06-18 | Koninklijke Philips N.V. | Imaging systems and methods for monitoring treatment of tissue lesions |
| CN106781941A (zh) * | 2016-11-24 | 2017-05-31 | 北京理工大学 | 一种用于模拟微创穿刺手术的方法及其系统 |
| CN109389669A (zh) * | 2017-08-04 | 2019-02-26 | 阿里健康信息技术有限公司 | 虚拟环境中人体三维模型构建方法及系统 |
| CN108109682A (zh) * | 2018-01-19 | 2018-06-01 | 大连外国语大学 | 一种医学影像识别系统及其方法 |
| CN111821032A (zh) * | 2019-04-16 | 2020-10-27 | 上银科技股份有限公司 | 医疗影像对位方法 |
| CN110310364A (zh) * | 2019-06-27 | 2019-10-08 | 王寅 | 一种心脏3d打印系统及其打印方法 |
| CN115454254A (zh) * | 2022-09-23 | 2022-12-09 | 艾瑞迈迪医疗科技(北京)有限公司 | 内窥镜引导下的经鼻腔虚拟仿真手术方法及装置 |
| CN115457008A (zh) * | 2022-09-23 | 2022-12-09 | 艾瑞迈迪医疗科技(北京)有限公司 | 腹腔实时穿刺虚拟仿真培训方法及装置 |
| CN115624383A (zh) * | 2022-12-21 | 2023-01-20 | 湖南医科医工科技有限公司 | 一种手术部位三维建模系统 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN119626060A (zh) * | 2024-12-19 | 2025-03-14 | 中国人民解放军陆军军医大学第二附属医院 | 一种互动性穿刺活检术教学系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN114170128B (zh) | 基于深度学习的骨骼分割方法和系统 | |
| US10453360B2 (en) | Ultrasound simulation methods | |
| US9697639B2 (en) | Three-dimensional model data generation device, method and program | |
| CN103295455B (zh) | 基于ct影像模拟与定位的超声培训系统 | |
| JP5474342B2 (ja) | 3−d画像および表面マッピングによる解剖学的モデル化 | |
| TWI535423B (zh) | 胸部四維電腦斷層掃描的模擬方法 | |
| CN106236133B (zh) | 用于显示超声图像的方法和设备 | |
| JP6238651B2 (ja) | 超音波診断装置及び画像処理方法 | |
| Kalra | Developing fe human models from medical images | |
| CN110570515A (zh) | 一种利用ct图像进行人体骨骼三维建模的方法 | |
| CN107374705A (zh) | 一种x光和术前ct引导下的肺穿刺手术定位方法 | |
| JP2012503501A (ja) | 医用画像診断のシミュレーション | |
| TW202122038A (zh) | 決定輻射參數的系統和方法 | |
| CN107789056B (zh) | 一种医学影像匹配融合方法 | |
| CN111369675B (zh) | 基于肺结节脏层胸膜投影的三维可视模型重建方法及装置 | |
| AU2022312475A1 (en) | Ultrasound simulation | |
| CN109820594A (zh) | 一种利用超声波原始数据引导制作心脏局部3d打印模型的方法 | |
| Advincula et al. | Development and future trends in the application of visualization toolkit (VTK): the case for medical image 3D reconstruction | |
| CN108198239A (zh) | 一种实现血管动态仿真的三维可视化方法 | |
| CN101203889B (zh) | 对弯曲拉长结构的剖面进行显象的方法 | |
| CN116616894A (zh) | 一种外科手术虚拟图像演练方法、系统及存储介质 | |
| Selmi et al. | 3D interactive ultrasound image deformation for realistic prostate biopsy simulation | |
| Freitas et al. | Automatic multi-view pose estimation in focused cardiac ultrasound | |
| CN115880326A (zh) | 医用图像的轮廓获取方法、终端及存储介质 | |
| Kohout et al. | Automatic reconstruction of the muscle architecture from the superficial layer fibres data |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |