1、模型引导疗法和 DICOM的外科作用 Heinz U. Lemke博士 第 24工作组 “外科 DICOM”组长 目录 1. 介绍(问题和解决方案) 2. 采用 TIMMS的模型指导疗法 3. 分类和模型类 4. 虚拟人体模型的范例 5. 结论 用于处理内窥镜 MISS问题的计算机辅助数字手术室套件:多重 数据源 有助于 MISS操作的数字内窥镜手术室套件 MD 人员 注册护士, 技术人员 EMG监视 C形臂透视检查 MRI图像 - PACS C形臂图像图像管理程序 报告内窥镜检查法视屏 监视器 EEG监视 手术室的左侧 图像查看窗口 远程会议 远程外科 激光发生器 承蒙 John Chiu博
2、士提供 模型指导疗法和具体患者模型 模型指导疗法( MGT) 是通过采用附加的、具体患 者重要数据对图像指导疗法( IGT) 进行补充的一 套方法。 通过该方法,治疗患者时,可以实现更精确 的诊断、对于预后的更准确评估、以及对于 具体疗法的更加个体化的策划、执行和验证 。 顾名思义,模型指导疗法以 具体患者模型 ( PSM ) 为基础,允许通过采用 治疗性工作流 实行具体患 者干涉。 模型指导疗法和数据结构 为了实现基于具体患者建模的模型指导疗法,需 要采用适当的 IT构架和数据结构。 对于 PSM, 通过 原型 和 模板 ,可以分别实现不同 级别的通用化和专业化。 生物传感器 (生理学 ,
3、新 陈 代 谢 , 血清 , 组织等 ) 组学 EMR模态(X光 ,CT, US, MR,SPECT, PET,OI) 基于模型的患者治疗 EBM 工作流 IHE 模型创建和诊断 (数据融合 , CAD等 ) 模型维护和干涉 (模拟 , 决策支持 , 验证等 ) 数据库 (图谱 , P2P储存库 , 数据网格等 ) 机电一体化 (导航 , 消融等 ) IT通信基础设施 目录 1. 介绍(问题和解决方案) 2. 采用 TIMMS的模型指导疗法 3. 分类和模型类 4. 虚拟人体模型的范例 5. 结论 IT模型 -中央世界视图 干涉 座舱 /SAS模块 建模 模型(被模 拟对象) 疗 法成像和模型
4、管理系 统 ( TIMMS) 供患者模型引导疗法的数据、图像、模型和工具通信用的 ICT基础设施(基于 DICOM-X ) 模拟 WF和 K+D管理内核 可视化 储存库管理器 干涉 验证 储存库 引擎 数据交换 控制 IO成像和 生物传感器 图像和信号 建模工具 计算工具 WF和 K+D 工具 储存库工具 装置 / 机电一体化 工具 验证工具 WF,EBM, ”案例 ” 数据和信息 模型和 干涉记录 疗 法成像和模型管理系 统 ( TIMMS) 采用 TIMMS的模型指导疗法 对于一次治疗干涉,我们假定人体、机电一体 化、放射或药品能够与模型互动。 模型指导疗法为一次准确、透明和可重复的干 涉
5、提供了科学基础,还可提供验证及其他服务 。 TIMMS是一个 IT元构架,可以实现多种代理 的互用性,促进模型指导疗法干涉。 模型指导疗法 基本的 TIMMS患者模型必须具有以下特点: 1. TIMMS患者模型中必须包含能够将患者显示为一个 n维 和多刻度(时间上和空间上)数据集的组件。 2. TIMMS患者模型必须易于与外科医生及其他手术人员 、 TIMMS引擎、 TIMMS储存库和 IT基础设施进行沟通 和连接。 3. TIMMS患者模型必须能够以一种准确、有意义的方式 将这些组件(包括动态组件和静态组件)联系起来。 4. 对于动态组件, TIMMS患者模型必须能够处理形态数 据和生理数据
6、,并执行必要的数学功能,以便使模型保 持在可及时更新的状态下。 模型指导疗法 5. TIMMS患者模型应能并入到 TIMMS执行工作流之中,并且能够对其 变更作出响应。 6. TIMMS患者模型必须能够通过现时可用的、标准化的信息方法进行 开发。这些工具可能包括 UML、 XML、 Visio、 方框图、工作流图、 MATLAB、 Simulink、 DICOM( 包括外科 DICOM)、 Physiome, CDISC SDTM、 openEHR以及其他类似的产品和工具 。 7. TIMMS患者模型必须符合软件工程标准,例如,应符合开发式标准 和面向服务的构架,以便实现多专业的信息交换。 8
7、. TIMMS患者模型应能扩展,以便加入分子医疗成像、基因 组 学、 蛋 白质组学和表观遗传学中的发展。 9. TIMMS患者模型必须能够被用于临床试验、预示建模、个人健康记 录,并且在长期范围内为基于模型的医疗证据( Model Based Medical Evidence/ EBME )方法做出贡献。 IT模型 -中央世界视图 干涉 座舱 /SAS模块 建模 模型(被模 拟对象) 疗 法成像和模型管理系 统 ( TIMMS) 供患者模型引导疗法的数据、图像、模型和工具通信用的 ICT基础设施(基于 DICOM-X ) 模拟 WF和 K+D管理内核 可视化 储存库管理器 干涉 验证 储存库
8、引擎 数据交换 控制 IO成像和 生物传感器 图像和信号 建模工具 计算工具 WF和 K+D 工具 储存库工具 装置 / 机电一体化 工具 验证工具 WF,EBM, “案例 ” 数据和信息 模型和 干涉记录 疗 法成像和模型管理系 统 ( TIMMS) n-维建模工具 普通工具和针对具体患者的工具 几何建模 假体建模 细胞和组织的属性 分节和再造 生物力学 和伤害 组织生长 组织移位 生物材料 的属性 . 建模工具 模型指导疗法 以其最简单的实例化而言,模型指导疗法是 三维像素的 一个组合、一个子集或一个单一的三维像素,代表患者 体内的多个位置。从这一点来看,该疗法是从图像(像 素)指导疗法(
9、 IGT) 到模型(三维像素)指导疗法的一 个扩展。模型指导疗法的范例包括: a) 一个 三维像素的一个子集之内的干涉,例如细胞、 细胞器、分子等。 b) 一个 三维像素之内的干涉,例如一个器官或损伤的 小组织部分等。 c) 一组 三维像素之内的干涉,例如器官、 器官成分、软 组织和损伤的功能性结构的部分。 模型指导疗法 1. 1D信号(例如: EEG ) 2. 2D投影和 层析图像 3. 3D再造 4. 时间变化 5. 组织 /细胞类型 6. 器官、损伤、系统、假体、慢性病症等的所有权。 7. 空间占据 /空间扩展 8. 渗透性(血 脑 屏障) 9. 流(例如:电子、热、液体、 灌注、扩散等
10、 ) 在一个简单的 PSM中,三维像素可能 与数据的几个维度联系起来 模型指导疗法 10. 充氧 等级(例如缺氧等级) 11. 药动 学( 例如:组织对药品、流参数、到达峰值时 间等的影响 ) 12. 药 效学( 药品对于组织、 消融 参数的影响 ) 13. 生物标志物的类型(体外和 /或体内 分子光谱 ) 14. 参考坐标系统(例如 Schaltenbrand/Warren, Talaraich/Tourneaux ) 15. 价值(生命 攸关( life critical)到生命威胁( life threatening ) ) 16. 临近关系(例如 3 、 5 、 7等) 17 在一个简
11、单的 PSM中,三维像素可能 与数据的几个维度联系起来 范例: ENT模型元素 来源: G. Strauss 类 子类 模式 静态 形态学 图谱 功能性 图像 工作空间 X射线转换 声音图谱中耳 流图谱内鼻 流图谱下咽部 -喉部 -气管 解剖图谱岩骨 闪烁扫描法 范例: ENT模型元素 来源: G. Strauss 动态 功能性 图像 图像 传感器 形态学 荧光素 EMG迷走神经 跟踪数据 超声波 显微镜检查法 内窥镜检查法 接触式内窥镜检查法 激光反射 超声波 温度计 电子阻抗 轴坐标测量仪器 诱发电位( ERA) 微振动听骨链 EMG面部 目录 1. 介绍(问题和解决方案) 2. 采用 T
12、IMMS的模型指导疗法 3. 分类和模型类 4. 虚拟人体模型的范例 5. 结论 多刻度建模的策略 对于了解人体特性的相关知识(例如解剖学、生理学、 新陈代谢、基因组学、蛋白质组学、药动学等)来说, 建模是非常关键的一点。 由于集成这些不同特点的相关知识相当困难,因此,根 据提出的问题和需要提供的答案,一个人体的模型必须 在不同的等级上实现(空间和时间上的多刻度),并带 有不同的本体。 在大型系统模型之内使用简化形式的组件,可能存在的 问题主要源自他们的有效性十分有限。 来源: J. Bassingthwaighte 快速解决 方案 高保真度 更加简单,但适 应性下降 组合式模型 复杂性 增加
13、 详细的模 块 具体患者和相关的建模功能 在模型 -中央世界视图中,与患者相关的大量的各种信息 可以与众多图像及其派生物融合在一起,从而提供关于患 者的全面和和正确的看法。 默认情况下,需要考虑的不同类型干涉 /外科工作流的 光 谱越宽,设计适当多刻度 PSM和相关服务时付出的努力 会越大。 具体患者和相关的建模功能 n维、多分辨率学识(生物连续统一体在时间和 空间上的模型)的管理是一个研发上的挑战。 如果能够成功解决这一问题的话,它将能使外科 手术具备更坚实的科学基础。 目录 1. 介绍(问题和解决方案) 2. 采用 TIMMS的模型指导疗法 3. 分类和模型类 4. 虚拟人体模型的范例 5
14、. 结论 针对具体患者的 CMB 可视人体 解剖模板 器官表面网格 多形式成像 (MRI, CT, Angio,DT-MRI) PKPDSpitzer 2006虚拟解剖学 FEM网格 (Roberts JHU) 人体激光扫描 (CAESAR DB) Roberts JHU 肺 大脑 心脏 肾 尿 骨 胸腺 肌肉 胃 脾 代谢物 内脏 胰 肝 内腔 皮肤 脂肪 粪便 静脉血 动脉血 目录 1. 介绍(问题和解决方案) 2. 采用 TIMMS的模型指导疗法 3. 分类和模型类 4. 虚拟人体模型的范例 5. 结论 解决方案和研究重点 ( 医疗) 图像指导疗法到模型指导疗法的转换(例如:通过工作 流
15、和使用案例选择 /创建 /储存库) 论述的一个多刻度领域中的针对具体患者的模型的概念 和规范 一组规范的低级外科功能的概念和设计 原型化方法 IT模型 -中央世界视图 干涉 座舱 /SAS模块 建模 模型(被模 拟对象) 疗 法成像和模型管理系 统 ( TIMMS) 供患者模型引导疗法的数据、图像、模型和工具通信用的 ICT基础设施(基于 DICOM-X ) 模拟 WF和 K+D管理内核 可视化 储存库管理器 干涉 验证 储存库 引擎 数据交换 控制 IO成像和 生物传感器 图像和信号 建模工具 计算工具 WF和 K+D 工具 储存库工具 装置 / 机电一体化 工具 验证工具 WF,EBM,
16、”案例 ” 数据和信息 模型和 干涉记录 疗 法成像和模型管理系 统 ( TIMMS) 原型化方法 解决方案和研究重点 ( 技术 ) 针对具体患者的模型的概念和数据结构设计(例如通过 原型 和 模 板 )。 开放式构架的模型管理(例如 SOA ) 通过储存库、引擎、 LLM和 HLM进行 SOA模块化 作为适应(认识 /智能)代理的 LLM 作为应用模块的 HLM( 竞争差异化) 可能作为开放源的 LLM 适应工作流和 K+D 管理的内核(引擎和储存库) 用于构建引擎和储存库的合作性和竞争性 R+D框架 基于开放式标准(例如: S-DICOM )的疗法 从 CAD建模到 CAT建模的转换 IT
17、模型 -中央世界视图 干涉 座舱 /SAS模块 建模 模型(被模 拟对象) 疗 法成像和模型管理系 统 ( TIMMS) 供患者模型引导疗法的数据、图像、模型和工具通信用的 ICT基础设施(基于 DICOM-X ) 模拟 WF和 K+D管理内核 可视化 储存库管理器 干涉 验证 储存库 引擎 数据交换 控制 IO成像和 生物传感器 图像和信号 建模工具 计算工具 WF和 K+D 工具 储存库工具 装置 / 机电一体化 工具 验证工具 WF,EBM, ”案例 ” 数据和信息 模型和 干涉记录 疗 法成像和模型管理系 统 ( TIMMS) 原型和模板 解决方案和研究重点 ( 医疗和技术) 图像指导
18、疗法到模型指导疗法的转换(例如:通过工作流和使用 案例选择 /创建 /储存库) 选定干涉的适应工作流、异常处理和 K+D管理的使用案例 用于低级 ( 开放源) 和高级 ( 竞争差异化) 外科功能电脑化的合 作性和竞争性 R+D框架 从诊断(例如 CAD) 到 CAT( 即,专业间合作) 第 24工作组 “外科 DICOM”内部对与患者建模相关标准的开发 IT模型 -中央世界视图 干涉 座舱 /SAS模块 建模 模型(被模 拟对象) 疗 法成像和模型管理系 统 ( TIMMS) 供患者模型引导疗法的数据、图像、模型和工具通信用的 ICT基础设施(基于 DICOM-X ) 模拟 WF和 K+D管理
19、内核 可视化 储存库管理器 干涉 验证 储存库 引擎 数据交换 控制 IO成像和 生物传感器 图像和信号 建模工具 计算工具 WF和 K+D 工具 储存库工具 装置 / 机电一体化 工具 验证工具 WF,EBM, ”案例 ” 数据和信息 模型和 干涉记录 疗 法成像和模型管理系 统 ( TIMMS) 开源 第 24工作组 “外科中的 DICOM” 的项目小组 项目小组 1 WF/MI 神 经 外科 项目小组 2 WF/MI ENT和 CMF外科 项目小组 3 WF/MI 整形外科 项目小组 4 WF/MI 心血管 外科 项目小组 5 WF/MI 胸腹 外科 项目小组 6 WF/MI 干涉放射学
20、 项目小组 7 WF/MI 麻醉法 项目小组 8 S-PACS功能 项目小组 9 WFMS工具 项目小组 10 图像处理和显示 项目小组 11 外科中的 超声波 医学数字成像与通信标准 外科工作流( S-WF) 的定义 喉部 显 微 外科( MLS ) (项目小组 2 ENT/CMF) 异物切除 (项目小组 2 ENT/CMF) 全 髋 关 节 置 换 外科 (项目小组 3 整形外科 ) 全内窥镜冠状动脉搭桥术( TECAB ) (项目小组 4 心血管 ) 二尖瓣再造 术 ( MVR ) (项目小组 4心血管 ) 腹腔 镜 脾切除 术 (项目小组 5 胸腹 ) 腹腔 镜 胆囊切除 术 (项目小
21、组 5 胸腹 ) 腹腔 镜肾 切除 术 左 (项目小组 5 胸腹 ) 采用 PTA 和支架( Stent )的 血管造影术 (项目小组 6 干涉放射学 ) 肝 肿 瘤射 频 消融 术 (项目小组 6 干涉放射学 ) 颈静脉肝内门体分流术 (项目小组 6 干涉放射学 ) CARS / SPIE / EuroPACS 第 9次联合专题讨论会 外科 PACS和数字手术室 2008年 6月 28日,巴塞罗那 DICOM第 24工作组 “外科 DICOM” 第 12次会议 2008年 6月 28日,巴塞罗拿 CARS 2008 计算机辅助放射学和外科 http:/www.cars-int.org 国际光
22、学工程学会 主编: (美国) Michael W. Vannier,芝加哥,美国 主编: (美国以外地区) Heinz U. Lemke, 柏林,德国 国际计算机辅助放射学和外科 学报 介绍最新创建的 CARS学报 关于图像指导诊断和疗法的跨专业研究、发展和应用 的学报 科学的语言 请在以下网址处订阅 征集论文中 第 24工作组 “外科 DICOM” 书记: Howard Clark, NEMA 秘书: Franziska Schweikert, CARS/CURAC办公室 fschweikertcars-int.org 主席: Heinz U. Lemke, ISCAS/CURAC, 德国 副主席: Ferenc Jolesz, 哈佛医学院 , 波士顿 (外科 /放射学 ) 副主席: 待定 (行业 )