(一)定义
作为一种新型的手术机器人类型,“自主手术机器人”目前这 一术语尚且没有明确的定义。这个术语中包括三个部分:自主、手 术和机器人。其中“手术”和“机器人”是相对比较容易理解和大 家熟知的。相对来讲,“自主”的概念比较模糊,尤其是需要和经 常用到的“自动”的概念作对比。 为了方便理解,我们以“自主系统”和“自动系统”两个概念 说明“自主”和“自动”的区别与联系。“自主系统”的定义: “自主系统通常指具有一定程度的自主决策和执行任务的能力。这 可能包括对环境的感知、分析信息、做出决策并执行相应的任务。 自主系统的能力取决于其设计和编程,以及其对环境和任务的适应 性。在人工智能领域,自主系统可能涉及到机器学习、深度学习等 技术,使系统能够从经验中学习和适应新的情境。” “自动系统”的定义:“自动系统通常指能够执行预定任务或操作而无需人工干 预的系统。这可能包括简单的机械设备或更复杂的计算机系统。自 动系统执行任务的程度可能取决于其编程和设计,但它通常缺乏对 环境和任务的灵活适应性。自动系统不一定具有自主决策的能力, 它们可能是基于预定规则或程序进行操作的。”
通过上述的对比容易发现,“自主系统”相对“自动系统”最 大的不同是具备了环境感知和自主决策的能力,而不仅仅是单一任 务的简单重复的执行。因此基于对手术机器人和自主系统的理解, 这里尝试给出一个概括性的定义:“自主手术机器人是一种具备一 定程度自主决策和执行手术任务的机械系统。这种机器人通常集成 了先进的视觉感知、运动控制等人工智能技术,以在手术过程中进 行环境感知、信息处理和任务执行。自主手术机器人的设计可能旨 在提高手术的精确性、安全性和效果,减少对医生的直接手动操作 的依赖。” 类比人类,自主手术机器人需要具备:(1)感知环境的感知系 统,类似的人的视觉,触觉等;(2)分析获取的信息并给决策的决 策系统,类似人的大脑;(3)根据决策进行动作的执行系统,类似 人的手。综上,自主手术机器人需要有自己的“眼”“脑”“手”, 即感知系统、决策系统和执行系统。
(二)主要组成部分
根据上一节的分析可知,一个具备自主性的手术机器人系统主 要感知系统、决策系统和执行系统三大部分组成。

其中,决策系统就是自主手术机器人的“大脑”,其主要作用 是根据所获取的信息规划机器人下一步的操作动作,同时需要对一 些紧急的情况进行处理,比如重新规划动作,等待外科医生确认授 权等;执行系统就是自主手术机器人的“手”,根据决策系统的规 划动作对应的指令执行动作,同时将手术过程中执行系统获取的力 和位姿信息反馈给决策系统;感知系统主要是手术机器人系统的 “眼睛”,主要是指用于获取手术环境的相机,或是一些为了获取 手术视野部分目标位姿变化使用的传感器,同时也可以是进行手术 实时引导的医学影像等。自主手术机器人系统的作用对象就是病人, 环境是指手术操作的主要目标组织和周边的环境,比如心跳、呼吸等的影响。
自主手术机器人在得到外科医生的确认和授权后会进入手术任 务自主进行的阶段。该阶段将产生如下的信息传递: 信息 1——决策系统根据获取的信息进行动作规划,并将规划路 径对应的指令信息传递给执行系统。 信息 2——执行系统的动作会直接作用于环境,比如在手术中执 行系统对组织进行缝合动作。 信息 3——有时为了获取全部的或者适应动态变化的手术视野, 决策系统会根据需要向感知系统发送指令从而调整感知系统的位姿 等信息。 信息 4——执行系统对环境组织进行操作的同时,组织会对执行 系统产生力的作用,使得执行系统发生形变等反作用。 信息 5——执行系统对目标组织进行操作的同时,组织对执行系 统的力和位姿的影响通过传感技术反馈给决策系统从而调整规划实 现执行系统更加精确的运动控制。 信息 6 和 7——感知系统通过相机或者其他感知技术获取手术视 野中目标组织和执行系统的位姿等信息。信息 8——感知系统获取的信息实时或者执行系统每次执后传递 给决策系统。
相对自主性等级 4 级和 5 级的手术机器人系统,现阶段的自主手 术机器人系统的目的是更好的帮助医生分担简单重复、负担重的手 术子任务,而并不是去取代医生。因此,具有3级自主化的自主手术 机器人系统是当下的研究和实现的目标[2]。也就是,在获取医生的授 权后可以自主进行手术子任务,但是医生可以根据手术机器人的执 行情况随时将自主手术术式变成遥操作的手术术式。这样可以保证 手术机器人系统在遇到解决不了的问题时手术仍然可以顺利进行。 当自主手术机器人系统在自主进行手术的过程中遇到不能解决 的或者突发的情况,外科医生会拿回手术的主导权通过遥操作的方 式继续进行手术(信息 10)。此时,外科医生直接通过交互界面获 取感知系统的信息(8′)和执行系统反馈的信息(5′),同时, 医生会根据需要调整感知系统的位姿(3′)和执行系统的执行动作 (1′)。
(三)自主化等级划分
与汽车自动驾驶领域一样,自主手术机器人也需要采用等级划 分的方式来描述手术机器人的自主化的程度。目前,对手术机器人 从完全主从式控制到完全的自主手术的不同自主性程度的分类的研 究有很多[3-5]。其中,匈牙利 Óbuda 大学的 Haidegger[3]对每个自主性 级别的定义进行了基于所执行任务的类型或数量的经验性评价,并 通过具体的指标对连续的自主性等级进行了恰当的描述和解释。该分类方法遵循 ISO/IEC1 的标准,根据手术机器人系统中人类与机器 人在规划生成、规划执行、规划监测和规划选择四个方面发挥的作 用确定机器人自主性的等级。
具体的自主性等级描述如下[3]: 0 级——机器人没有自主性:机器人系统的所有的动作,规划 生成、规划执行、规划监测和规划选择都是医生完成,可以理解为 没有机器人辅助的手术形式。 1 级——机器人辅助:手术机器人只执行特定的、低水平的功能, 例如遥操作机器人系统、震颤过滤等。 2 级——任务自主性:系统可以自主地完成某些任务或子任务, 例如图像引导的骨钻孔,伤口闭合等。3 级——有监督的自主性:系统可以自主地完成大部分的手术过 程,同时做出低层次的认知决定。所有的行动都在人类的监督下进 行。 4 级——高水平的自主性:机器人系统根据人类批准的手术计划 执行完整的手术操作,而人类只可以紧急停止机器人系统。即使是 在人类未能对干预的请求作出适当的回应,机器人也能完成任务。 5 级——完全自主:机器人系统可以处理所有环境变化和不利条 件。该系统在即使是技术最好的人类失败的情况下也能取得成功, 因此将不再需要人类任何形式的参与。
实际上,不论是从技术的角度还是制度伦理的角度来看,5 级甚 至是 4 级的自主性手术机器人还处于理想阶段。相反,如果可以使 手术机器人系统达到 3 级自主性程度,并且同时赋予外科医生随时 通过主从式控制的方式拿回手术决策权的能力,这样的自主性手术 机器人系统就是一种具备一定自主性的辅助机器人。外科医生会根 据手术进展情况决定是否将决策权交给机器人,并且医生有随时终 止机器人自主手术进程的能力。因此,对一台手术来讲,主要决策 者和责任人还是外科医生,这样就不会与现有的制度伦理相违背, 从而在使用自主机器人提高手术质量和稳定性的同时,降低医生的 疲劳问题。
目前,在手术机器人领域已有的自主手术机器人系统基本属于 3 级自主性程度。其目标手术场景包括伤口缝合、肠道吻合等。总体来看,国外在自主手术机器人领域的发展是领先于国内该领域的发 展。
(一)国外研究现状
国外在手术机器人领域,比如最具代表性的腹腔镜达芬奇手术 机器人,在全球范围内仍然处于领先地位。在自主手术机器人的探 索中亦是如此。目前,国外的自主手术机器人的典型代表---智能组 织吻合手术机器人,已发展至动物实验阶段。该智能组织吻合手术 机器人主要应用于软组织吻合的手术场景,具备3级自主化的程度。 该机器人也具备进一步提升自主化程度的条件。
(1)STAR 系统研究
所谓的 STAR 系统(Smart Tissue Anastomosis Robot)最早由美 国国家儿童医学中心谢赫-扎耶德小儿外科创新研究所的 Leonard 等 人[34]于 2014 年提出。当时,STAR 只是一个智能组织吻合机器人的 概念,尚未能够执行自主的组织吻合手术。然而,随着近年来相关 技术的不断进步,STAR 系统逐渐得到完善。本文将通过回顾其发展 历程,探讨自主手术机器人技术的关键进展。 2022 年,美国北卡罗来纳大学威明顿分校的 Saeidi 等人[12]在机 器 人 领 域 顶 级 期 刊 《 Science Robotics 》 上 发 表 了 一 篇 题 为 “Autonomous robotic laparoscopic surgery for intestinal anastomosis”的研究论文。在这篇文章中,他们将提出的机器人系统命名为 STAR (Smart Tissue Anastomosis Robot)。该论文的发表点燃了科研界对 手术自主化发展的热情,并推动了自主手术机器人系统的发展,具 有里程碑式的意义。 STAR 系统的相对完整的雏形于 2016 年由美国谢赫-扎耶德小儿 外科创新研究所的 Shademan 等人[9]提出,并将研究成果发表在 《Science Translational Medicine》上。该论文通过利用新型全光学 3D 和近红外荧光成像(NIRF,Near-Infrared Fluorescent Imaging)系 统以及自主缝合算法,实现了在动态手术环境中对目标组织的跟踪, 并自主完成复杂的手术任务。
2016 年,Shademan 等人[9]设计了一套名为 STAR 的自主肠道吻 合手术机器人系统。该 系统集成了两种成像方式:一种是光场相机,用于手术场景的表面 三维重建[10];另一种是近红外荧光成像[11],通过在肠道特定位置注 射荧光剂来确定肠道的位置。两种图像融合后,可以获得肠道在空 间中的位置以及缝合的轨迹信息。
基于上述成果,Saeidi 等人[12]对 STAR 手术机器人系统进行了进 一步改进和升级。在运动空间和视觉受 到限制的条件下,文章展示了机器人在非结构化、动态环境中完成 腹腔镜自主软组织肠道吻合手术的能力。研究开发了先进的成像系 统和机器学习技术,并设计了实时控制策略,测试了系统在跟踪组 织形变和位置、执行复杂手术规划、与人类交互以及自适应执行手 术计划等方面的能力。
首先,该研究对成像系统进行了小型化设计,以便采用微创术 式进行手术[13]。同时,采用荧光剂注射的方法在一定程度上降低了机器人系统的自主性,因此引入了基于级联 U-net 网络的标记点检测 方法。此外,系统还增加了对手术过程中呼吸等运动影响的考虑, 采用基于卷积神经网络的方法实时检测标记点的运动规律和位置, 从而提高缝合动作的精度。与遥操作机器人辅助手术和传统腹腔镜 手术方式相比,该自主系统在离体组织实验和动物实验中表现出更 优异的缝合指标,例如缝合线间距等。

该 STAR 系统具有较高的自主性程度,可以定级为 3 级,但仍 然存在一些问题。比如,每次缝合结束时需要将多余的线拉到组织 的缝合针一侧,通常因为刚开始缝合的时候缝合线较长,而该系统 只有一个缝合工具,如果一直拉线整个缝合工具就会退出到腹腔外 面,显然这样是不可行的。因此,在每次缝合结束都需要医生辅助 拉线到一定的位置方便机器人进行下一步的缝合动作。 这实际上很大程度削弱了该系统的自主程度。为了解决该问题,该 团队的 Leonard 等人[14]另外增加了一个携带有腹腔镜抓钳的机械臂用于辅助缝合拉线,从而替代上述医生的辅助拉线,进一步提高系统 的自主性程度。
该 STAR系统具有较高的自主性,可以定为 3级。但该系统仍存 在一些问题。例如,每次穿针后,需要将缝合线拉紧。由于缝合线 较长,单纯依靠缝合工具拉线,效率低并且影响缝合工具的位置精 度。因此,每次穿针后都需要医生将缝合线拉紧到合适位置,以便 机器人进行下一步缝合操作。这在很大程度上削弱了系 统的自主性。为了解决这一问题, Leonard 等人[14]引入了一个带有腹 腔镜抓钳的机械臂来执行拉线动作,从而取代医生的辅助操作,进 一步提高了系统的自主性。 上述工作呈现的过程中,使用到的成像系统是实现手术机器人 感知的关键部分。该团队在该方面的研究也有深远的技术积累。
机器人进行自动化手术需要具备强大的视觉定位能力。然而, 手术光线不足,器官组织的相似性,和手术视野易受到血液或组织 遮挡的影响都给视觉定位带来挑战。美国国家儿童医学中心谢赫-扎 耶德小儿外科创新研究所的 Shademan 等人[21]研究了近红外(Nearinfrared, NIR)荧光标记成像的可行性。由于近红 外光谱在穿透深层组织方面具有很好的性能,因此研究人员选用了 一种生物兼容的近红外荧光染料——吲哚青绿(ICG)。研究结果表 明,近红外标记在人工组织和尸体组织上都具有良好的可视性。即 使标记位置被3毫米厚的组织遮挡,系统仍能准确追踪到标记位置, 误差小于1毫米。该研究证明了近红外标记在追踪方面的可行性和精 度,为 STAR 系统手术自主化的感知部分奠定了基础。
为将近红外荧光标记和追踪的技术应用到 STAR 机器人系统中, 下一步需要确定近红外荧光标记点在整个手术视野中的位置,为 STAR 系统的自主缝合做进一步的准备。同样来自美国国家儿童医学 中心谢赫-扎耶德小儿外科创新研究所的 Leonard 等人[22]通过将荧光标记点叠加到 RGB图像中,表征标记点在 RGB图像全局中的位置。
进一步,该研究团队的 Leonard 等人[23]提出了一种环形缝合工具, 并对 STAR 系统进行了平面模型上的初步缝合实验。该缝合工具是 根据 Endo360 °自主缝合器设计而来,该工具与定制的电机平台和 STAR 监督控制架构相连,使机器人系统能够自主跟踪并缝合切口。该研究在平面模型上进行了实验验证。结果表明, STAR 系统比使用最先进手术机器人系统的外科医生更准确、更一致, 比使用手动 Endo360 °的外科医生快四倍,比使用手动腹腔镜工具 的外科医生快九倍。该工作提出了 STAR 机器人系统执行部分的设 计并对整个系统的手术自主化进行了平面模型上的可行性验证,为 后续工作做好了充分的准备工作。
在上述工作中,视觉系统只能对平面模型的缝合伤口进行识别 和跟踪,显然这在实际的手术场景中是不能使用的,因此该团队的 研究人员进一步对视觉追踪系统进行了研究。来自美国国家儿童医 学中心谢赫-扎耶德小儿外科创新研究所的 Decker 等人[24]对光场相机 进行研究,并对临床环境中的相机集成和性能进行了 严格评估。该工作讨论了光场相机的校准和设置,评估了临床背景 下光场相机的成像技术。实验结果表明,光场相机在深度信息获取 上的平均精度为 0.90 mm。该研究工作提供了一种深度信息获取的可 行方案。视觉定位系统中的三维信息的精确获取是 STAR 机器人系 统手术自主化又一个关键技术。
2017 年,来自同一研究机构的 Decker 等人[25]融合了光场相机和 近红外相机技术,开发了一套三维信息跟踪系统,实现了对工具和 目标组织的三维跟踪。同时也克服了非结构化、动态手术中血液和 组织遮挡的问题。
(2)STAR 系统其他感知技术探索
手术场景的三维信息感知是手术机器人自主化一个很重要的技 术,直白讲就是机器人需要知道目标组织位置点的实时空间信息, 机器人精确的到达位置并进行自主的手术操作。 三维信息感知的关键是手术视野的深度信息的获取,现有的深 度信息获取方法包括:立体视觉(Stereoscopy)、飞行时间(Timeof-flight ) 、 结 构 光 ( Structured illumination ) 、 和 全 光 成 像 (Plenoptic imaging)等方法。上述 STAR 系统就是使用的全光成像 的技术。STAR 系统研究团队也对其他的三维信息获取技术进行了尝 试。
2018 年,来自约翰霍普金斯大学电子与计算机工程系的 Hanh 等 人[26]提出了一种基于内窥镜的结构光方法进行生物组织三维重建的 成像系统。他们为三维组织重建提供了一种具有独特的梯度灰度编 码模式,通过从低频到高频网格模式序列的相位计算来解决物体的 不连续性问题,从而最大限度地降低彩色编码照明的成本。该系统能够在吻合手术过程中对猪肠进行三维重建 (三维深度信息感知)。实验结果显示景深为 20 mm 时精度为 0.25 mm。
2019 年,来自美国马里兰大学机械工程系的 Saeidi 等人[27]提出 了一种使用条纹投影轮廓法的结构光三维重建技术。使用该技术研究人员通过实验测试了所开发系统的准确 性和一致性,并将其与外科医生的手动缝合进行了比较。在缝合模 型上的测试结果表明,与人工方法相比,STAR 的缝合间距一致性提 高了 2.9 倍。
2023 年,来自约翰霍普金斯大学机械工程系的 Kam 等人[28]提出 了一种基于 DeepLabCut [29]的机器人阴道袖带闭合术中自主无标记软 组织跟踪的技术。DeepLabCut 是一种深度卷积网络,它结合了 DeeperCut[30]的深度残差神经网络 (ResNet)[31]和用于特征识别的去 卷积层。组织标记点是通过找到网络输出的相应概率分数图[29]的峰 值来预测的。通过 STAR 系统对 模型组织进行了端对端阴道袖带缝合,并与经验丰富的外科医生通 过传统腹腔镜和机器人辅助方法进行的缝合结果进行了比较。比较 结果表明,通过使用建议的规划方案,STAR 的准确性和一致性优于 传统的腹腔镜和机器人辅助方法,从而实现了更高的自主缝合成功 率。
(3)STAR 系统发展历程
在上述两个章节中,以 STAR 自主缝合机器人系统的发展为主 线进行了文献调研。其中,提到的每个研究工作都存在着一定的逻辑关系。
对自主手术机器人来讲,主要包括三个部分:感知系统、决策 系统、和执行系统。值得强调的是,对一个智能系统来讲,所有的 决策都是在感知到信息的基础上做出的,目前准确的感知是最关键 的。并且,对现在所能实现的低层次的自主化来讲,尤其是对单一 任务的自主化来讲,比如缝合操作自主化,决策相对比较简单。因 此目前的决策系统取决于机器人执行的手术类型和感知系统获取的 信息,具有灵活性和不确定性,因此这里主要是从感知系统和执行 系统两个方面展示 STAR系统的发展历程。在 STAR系统中,执行系 统是基于商用环形缝合器进行的电动化设计,在整个发展历程中变 化较小。因此,感知系统及其发展历程是最主要的部分,也是自主 手术机器人系统核心竞争力的体现。
(4)其他自主手术机器人
上述 STAR 系统的执行系统是在商用缝合工具的基础上进行改 进的,并且该商用缝合工具是环形的,只需要一个动作就能缝合一 针。但该工具的缺点是尺寸比较大,并且工具只能将缝合组织环绕 后才能执行缝合的动作,不适用于平面组织的缝合。因此,传统的 双臂协作缝合工具具有更好的适用范围。
Pedram 等人[6]提出一种基于线驱动的 Raven-IV 机器人平台的双 臂自主伤口缝合机器人系统。该工作设计了一种缝 合针的夹持装置,可以保证缝合针在使用的过程中不发生滑动,确 保缝合的精度;同时,夹持装置上设有位置固定的色块方便通过立 体视觉系统对缝合针中心位置和方向进行确定。仿体上伤口的相关 参数是通过轮廓检测算法和立体视觉系统识别模型上提前标记的红 点进行确定。最后根据这些参数对缝合场景进行参数化,通过非线 性优化的方法进行缝合路径规划,并且方便缝合效果的定量评估[7]。 该系统达到了 2.07 mm 的位置精度和 4.29∘ 的方向精度。从自主性等 级上看该系统达到了 2 级或者 3 级,但是误差较大,并同样存在模型 场景简单的问题。

(二)国内研究现状
国内关于自主手术机器人的研究比较少,但是也存在一些比较 典型的包括了感知系统,决策系统和执行系统的研究工作。这些工作逻辑和结构比较简单,但是便于理解自主手术机器人系统主要的 三个组成部分。这些工作选择的手术场景相对单一,周边环境具备 很好的一致性和确定性,极大的简化了自主手术机器人面对的手术 任务。因此自主化程度可以做到比较好,能达到 3级自主甚至是 4级 自主化。下面将列举两个代表性工作。
Su 等人[18]设计了一套应用于手术过程中组织表面血液移除的自 主型手术机器人系统。该系统的移除血液的 装置是由吸管、气管,气泵和容器组成,通过吸管前段与组织之间 形成负压将血液吸引到容器中。该血液移除机器人的关键是对组织 上的血液轮廓进行检测,该系统采用了面部区域卷积神经网络[19] (Mask R-CNN)。获取血液轮廓后,通过规划器进行血液移除的路 径规划,同时考虑有多处血液区域时的血液移除的逻辑等。该系统 在猪皮组织上进行了血液移除的实验,吸管末端的定位精度在 1.37 mm 左右[18]。理论上讲,该系统可以到达很高的自主程度(4 级), 但同样只是实验模型阶段的验证,缺少实际手术环境的验证。
Wang 等人[20]提出了一套自主钉皮伤口闭合的机器人系统,同时 该系统也集成了拆钉器的功能。该系统有两 个双目相机,其中脱离系统单独固定的双目相机用于整个系统的闭 环控制,实现机械臂末端执行器精确定位的功能;另外一个固定于 机械臂末端的双目相机用于伤口检测和钉检测。该系统的控制器或 者规划器会根据检测的结果进行钉皮或者拆钉的逻辑和路径规划, 最后由钉皮模块和拆钉模块执行动作完成任务。实验结果表明该系 统具有很高的精度(位置精度 0.21 mm,方向精度 0.65∘)。理论上 该系统达到了 3 级自主性程度,但是该工作只是基于简单模型进行 了实验验证,缺少临床的验证。
(三)国内外自主手术机器人研究团队
本报告主要是以智能组织吻合机器人(STAR)为主线,阐述当 前自主手术机器人的发展现状和发展历程。因此,相关的研究团队, 主要来自国外。国内也有自主手术机器人相关的研究团队。
值得注意的是,国外团队都是与智能组织吻合机器人 STAR 相 关的,他们在 STAR 机器人系统的发展过程中都做出了重要贡献, 尽管 STAR只有 3级的自主化程度,但是该系统进行了多例动物实验 验证,这间接证明了 STAR 系统的临床应用价值。国内团队的自主 手术机器人系统也能达到 3 级或者更高的(4 级)自主化程度,但是 这些系统只是在理想的模型上进行了简单验证,不能体现其临床应 用的可行性。
手术机器人在整个医疗机器人领域内是比较复杂的一种类型。 其主要原因是,手术机器人所面临的手术环境,比如软组织操作, 液体环境等,是非常复杂和多变的。而其他的医疗机器人,比如自 主超声机器人和自主放射治疗机器人,所面对的环境就相对稳定和 单一,并且也不会对病人产生非常直接的伤害。因此,目前手术自 主化的自主化程度是比较低的(3 级),而自主超声机器人和自主放 射治疗机器人的自主程度是比较高的(4 级)。下面将对两种自主机 器人进行研究现状概述。
(一)自主超声机器人
Muradore 等人[15]在欧洲 FR7 项目资助下设计一套智能外科手术 机器人,命名为I-SUR。该项目的主要目标是证明自主手术机器人系 统能够有效地执行简单的手术任务,并且不需要外科医生过多的干 预。该团队设计的是超声实时引导的自主冷冻消融的手术机器人系 统。该系统由两部分组成,一是携带超声探 头的 UR5 机械臂,主要用于冷冻针穿刺过程中 提供实时的超声影像;二是 I-SUR 机器人系统, 该系统采用宏观和微观结构设计方法[16],包括两个相互解耦合的部 分,宏观部分是采用三角洲机器人设计用于冷冻针的粗定位,微观 部分是采用连续体结构设计用于冷冻针的精确定位。该系统首先进 行注册,然后考虑机器人避障和重要组织器官的避障问题进行冷冻针的穿刺规划,最后系统根据 I-SUR 上的力传感器和实时的超声图 像信息自动检测冷冻针的穿刺情况,根据一定的逻辑进行实时调整 针或者重新穿刺,如果检测到超出机器人能够处理的情况或者外科 医生觉得有必要进行干预的时候,可以随时将自主手术模型转化成 遥操作的模式继续进行手术,同时避免中间模式切换存在的冷冻针 和主控器相对位姿不匹配的问题。
理论上来讲,该系统达到了已知人体模型结构的 4 级自主性程 度,但是该工作只是进行了人体模型实验,真实的在体实验仍然需 要进一步验证。
(二)自主放射治疗机器人
自主化程度最好的放射外科机器人是 CyberKnife 立体定向放射 外科系统(Accuray Inc. USA) 。它将图像引导与机器人定位相结合: 直线加速器安装在库卡 KR 240 工业机械手上。CyberKnife的主要用途是照射脑肿瘤和脊柱肿瘤。X 射线照相机用于跟踪病人 的空间位移,并对呼吸等引起的任何运动进行补偿。为提高精确度, 可在 CT 扫描前几天在肿瘤区域附近植入不透射线的靶标,以便通过 X 射线摄像机跟踪治疗计划。另外还有一个定制开发的软件工具, 可在周期性检测到的靶标位置与放置在胸部的光学跟踪标记的实时 位置之间建立相关模型,以跟踪肿瘤位置。它利用四维 CT(结合 CT 的扫描 时间)测量呼吸组织的运动变形,并考虑到照射时位移的 影响[33]。CyberKnife 实现了高度自主的实时图像引导放疗操作,一 旦治疗计划(由系统设计)获得人类批准,外科医生只需要监督手 术进程,必要时急停系统。
因此该机器人系统具有4级自主化程度。如果再增加计算机监控 模块和自动化病人管理环境,则可归类为 5 级自主化。
自主手术机器人主要包括三个部分:感知部分,决策部分和执 行部分。决策部分的主要作用是根据感知部分获取的信息,进行任 务决策,生成任务执行方案,并将执行方案的指令传递给执行部分 进行手术操作。因此,决策部分是取决于感知、执行部分和自主手 术机器人的目标手术任务的。所以本部分行业调研将不包括决策部 分。下面将对 STAR 系统中的感知部分和执行部分的关键技术进行 行业调研。
(一)感知部分行业调研
感知部分主要是通过一些比如相机等设备获取手术场景中目标 的三维位置信息及动态变化的情况,其中目标的深度信息是最重要 的也是比较难获取的。上述的 STAR 机器人系统主要采用了光场相 机作为感知部分的设备,因此这里将对光场相机进行行业调研。 实际上,传统的腹腔镜也可用于深度估计,比如双目内镜深度 估计或单目内镜深度估计等方法。该部分内容属于深度估计算法层 面的技术,这里便不再做相应的行业调研。
光场相机行业调研
光场相机是一种能够记录光线方向和强度信息的新型相机,可以 在拍摄后对焦点、视角等进行调整,实现单次拍摄多次利用。其核心 技术是光场相机采用微透镜阵列、光传感器、计算摄影等关键技术, 通过记录光线方向和强度实现光场信息采集。光场相机的核心是一个叫做微透镜阵列的装置,它位于传感器 和镜头之间。这个阵列由许多微小的透镜组成,每个透镜都能捕捉 到不同方向的光线。当光线通过镜头进入相机时,会被微透镜阵列 分成许多微小的光斑,每个光斑对应着不同方向的光线。在拍摄完 成后,通过计算每个光斑的位置和角度,就可以重建出整个场景中 的光线分布情况。这样一来,就可以在后期处理中模拟出不同焦距、 不同景深的效果,实现一些传统相机无法实现的功能。光场相机在 数字影像、安防监控、工业检测、医疗诊断、AR/VR 等领域具有广 泛应用前景。

市场需求将以 31.3%的复合增长率增长
2022 年全球光场相机市场规模达到 3.2 亿美元,预计到 2027 年将 达到 12.5 亿美元,年复合增长率为 31.3%。目前光场相机市场参与者 主要包括 Lytro、Raytrix、富士胶片、佳能、尼康等企业。Lytro是光 场相机先驱,2018 年被 Google 收购。在国内相关公司比较少,目前 做的比较好的是奕目(上海)科技有限公司。
最早获得光场相机专利的公司是 Lytro。这家公司由斯坦福大学 的 Ren Ng 创办,旨在商业化他作为研究生时开发的光场相机。Lytro 的光场相机使用微透镜阵列,放置在传统图像传感器前,以感知光 的强度、颜色和方向信息,并使用软件将这些数据转化为可显示的 2D或 3D图像。Lytro 在 2012年推出了全球首款面向消费者市场的光 场相机。
高分辨率、小型轻量化发展
光场相机主要的发展趋势有以下几点。高分辨率化:光场相机 分辨率不断提升,新一代产品分辨率可达1亿像素以上,成像质量大 幅提高。小型轻量化:得益于光学及传感器技术进步,光场相机头 越来越小型化,更便于集成应用。视频拍摄能力增强:除静态图像 外,光场相机延时摄影、高速摄影等视频拍摄能力不断增强。计算 摄影算法优化:通过优化光场数据处理算法,光场相机成像速度加 快,景深范围扩大,功能更加丰富。
发展挑战及未来前景
受核心器件及加工工艺限制,光场相机成本较高,价格昂贵, 一定程度上限制了其推广应用。另外,光场相机拍摄及后期处理需 要一定的专业知识,对使用者技能要求较高。最后,围绕光场相机 的硬件配件、软件工具等配套设施仍不完善,使用体验有待提升。 但随着技术不断成熟,器件成本有望进一步降低,光场相机有 望实现规模化应用。同时,随着 5G、人工智能等新技术发展,光场 相机与之融合将催生更多创新性应用场景。在高端影像创作、立体显示、体验设计等领域,光场相机独特的光场采集特性将发挥重要作 用。 总之,光场相机作为一种前沿的成像技术,市场前景广阔。随 着相关技术不断发展成熟,有望在多个领域得到革命性的应用,未 来发展值得期待。
(二)执行部分行业调研
执行部分是指自主机器人系统中机器人本体结构及其驱动、控 制系统。STAR 系统的执行部分是在商业自动缝合器的基础上进行改 进的。本章节首先对自动缝合工具进行行业调研。其次,自主化程 度处在1级的腹腔镜手术机器人系统是进一步自主化的坚实基础,因 此本章节也将对腹腔镜手术机器人系统进行行业调研。
(1)自动缝合器行业调研
STAR 系统的执行部分是在现有的 Endo360 °的自动缝合器的基 础上进行改进的。该工具的稳定可靠性是 STAR 系统成功执行每一 步操作的关键。 自动缝合器是一种医疗设备,用于自动完成伤口缝合。它通常 由机器臂、针线和控制系统组成,能够实现快速、精准的缝合,提 高了手术效率和伤口愈合速度,同时减少了感染风险。
市场规模大且将以 6.81%复合增长率增长
2023 年全球自动缝合器市场规模为 25.3 亿美元。预计到 2030 年, 该市场将达到 37.4 亿美元,2024 年至 2030 年的预测期间复合年增长 率为 6.81%[36]。该增长的主要因素包括全球手术数量和事故伤害病 例数量的增加。例如,根据英国皇家外科学院 2021 年 5 月公布的数 据,英国有约495万人等待手术,这将在预测期内推动市场增长。此 外,根据世界卫生组织 2021 年 6 月发布的数据,大约有 20 至 5000 万人因道路交通事故遭受非致命伤害,其中大多数需要手术治疗, 这也将推动市场增长。另外,2022 年 1 月,Endo Tools Therapeutics 公司开发的内窥镜医用缝合装置 Endomina 获得了美国食品和药物管 理局的批准,这可能会进一步推动市场增长。然而,市场增长可能 会受到产品可用性降低、熟练专业人员缺乏以及设备成本高等因素 的影响。
北美市场在全球市场中仍占据重要份额
预计北美将在市场中占据重要份额,并且在预测期内也将保持 其重要地位。由于对手术设备监管的改善以及人们在面对受伤和慢 性疾病问题时接受手术的意识不断增强,预计北美市场将在整个预 测期内持续占据主导地位。美国每年有近 3500 万人次住院,因此住 院和手术的增加预计将推动市场的增长。此外,美国因交通事故导 致的伤害数量不断上升,这也导致了外科手术数量的增加,进而增 加了缝合器的使用。根据 2022 年 3 月发布的 ASIRT 数据,每年有 440 万美国人因受伤严重而需要医疗护理。因此,上述因素预计将在 预测期内继续推动北美市场的增长。
一次性细分市场预计将在自动缝合设备市场中占据重要份额。 随着外科手术数量的不断增加,一次性自动缝合设备在市场中的占 比也在不断上升。2021 年 6 月发表在创新杂志上的一篇文章探讨了 一次性自动缝合紧固件相对于手动打结缝合线的优势,研究表明使 用 COR-KNOT 等一次性自动缝合紧固件能够缩短手术时间,对外科 医生极具帮助。预测期内,这类一次性设备的使用预计将继续增加, 从而推动市场中一次性自动缝合设备细分市场的增长。一些关于自 动缝合设备的研究和开发计划正在进行中,例如,2021 年 12 月,新 南威尔士大学医疗机器人实验室的研究人员开发出智能缝线,可以 加速伤口愈合过程,并在无需人工干预的情况下自动收紧伤口。这 些创新有望推动自动缝合设备市场的增长。因此,预计上述因素将 推动市场细分的增长。
国外公司占据主要市场份额
由于全球和区域性运营的公司存在,自动缝合设备市场规模相 对较小。竞争格局主要存在于一些拥有市场份额并且 知名的公司,其中包括美敦力(Medtronic)、施乐辉公司(Smith Nephew, Inc.)、波士顿科学公司(Boston Scientific Corporation)、 Sutrue Limited、B. Braun SE 等等。
国内在自主缝合器方面的生成厂商较少,代表企业有英特姆 (武汉)医疗科技有限公司和邦尼医疗科技(常州)有限公司。相对国 外的医疗器械公司,国内的公司相较年轻,尽管在自主缝合器上具 有中国自主知识产权,但是跟国外相比,还是不能突破技术壁垒。 市场方面,国内公司只能跟抢占些许国内市场。在产品竞争力和市 场占有率上仍然大幅落后于国外医疗器械公司。
(2)腹腔镜手术机器人行业调研
1 级自主手术机器人的存在是自主手术机器人行业发展的另一个 潜在条件。自动缝合器虽然是整个手术机器人系统的重要组成部分, 但其尺寸较大,且受限于特定缝合场景的应用。由于自动缝合器本 身较为刚性,因此无法适用于柔性内窥镜的器械通道,而其尺寸也 不能满足使用条件。因此,对于自主手术机器人的发展前景,我们 需要关注目前处于1级自主化的手术机器人的进展情况。其中最具代 表性的手术机器人就是腹腔镜手术机器人。
腹腔镜手术机器人基本组成
腔镜手术机器人是当前医疗领域中一项具有巨大商业潜力的技 术,被广泛运用于泌尿外科、妇科、普外科及胸外科等手术领域。 以达芬奇为例,这类手术机器人通常由医生控制台、机械臂和影像 系统组成。

1. 医生控制台:它由两个主控制器和脚踏板构成,通过计算系 统将医生的动作转化为机械臂的动作。重要的技术参数包括主控制 器的力反馈、机械臂与控制器之间的动作延迟,以及为防止误操作 而采取的安全性措施。 2. 影像系统:这包括三维内窥镜、摄像机、处理器和显示系统 等设备。三维内窥镜置于机械臂的持镜臂上,而显示屏则位于医生 控制台上。关键技术要素包括成像清晰度、定位系统和术中荧光显 影。医生团队可通过影像系统实时监视手术进程,以提升手术安全 性。3. 机械臂:这是手术机器人的核心组成部分,由 4个固定于可移 动基座上的机械臂组成,通常包括持镜臂、左右手和能量器械臂。 通过不同的手术器械,如抓持钳( Endowrist 系列)、吻合器 (Sureform 系列)和能量平台等,几乎可以完成所有腔镜手术操作。
腹腔镜手术机器人分类:多孔和单孔
多孔机器人通过多个切口进行手术治疗,操作方便,视野广阔。 相比之下,单孔手术机器人采用一条高度集成的机械臂,上面搭载 了四个机械手,模拟了多孔机器人的四肢设计。单孔机器人只需一 个切口,因此创伤较小、康复速度更快。在高度集中的狭小空间内 进行手术时,单孔机器人具有更大的优势。 多孔腔镜手术机器人的构型相对统一,通常由体外机械臂和长 杆状手术工具组成。手术工具末端通过增加腕关节以提高操作的灵 活性,常见的腕关节机构包括滑轮钢丝机构、连杆驱动机构、连续 体机构和窄带变形机构等,它们负责实现腕关节的运动。体外机械 臂能够满足远心运动约束,保证直杆手术工具始终通过一个切口进 入病患的身体,从而避免对病患腹腔壁造成拉扯。实现远心运动的 机构包括平行四边形机构、同步带等效平行四边形机构、平行四边 形和并联机构、球面连杆机构、纯并联机构和空间导轨机构等。机 器人系统通常配备 3D 腹腔镜,同时通过选配体感操作和力反馈系统 可提高操作的准确度。相较之下,单孔腔镜手术机器人的研制更为 困难,其中腔镜直径是设计的关键因素。通过单个切口,需放置一个视觉模块和 2至 3 支手术臂,视觉模块必须集成照明功能,而手术 臂则需要具备足够的强度和工作空间。
腹腔镜手术机器人企业
在腔镜手术机器人领域,达芬奇目前基本上处于全球的垄断地 位。近年来,随着国内企业的大力投入,国产腔镜机器人在技术和 产品形态上开始不断创新,并实现了多样化。相较于达芬奇,国产 腔镜手术机器人在机械臂数量、单孔多孔、力反馈和 3D 显示等方面 存在差异。例如,达芬奇的四代机械臂通常包含 4 臂(1 镜 3 操作 臂),而国产机器人则可能拥有不同的配置,如 3 臂(1 镜 2 操作 臂)、单臂(含 1 镜 3 操作臂)或者 4 个独立的手术执行系统(1 镜 3 操作臂),展现出多样化的产品形态。表 4-3 列举介绍了国内外腹 腔镜手术机器人系统及特点。
尽管国产腹腔镜手术机器人近几年发展迅速,但是从产品的竞 争力和市场占有率上来讲,直觉外科的达芬奇手术机器人仍然占据 主导地位。直觉外科自 2000 年前后第一代达芬奇手术机器人问世以 来,就掌握着腹腔镜手术机器人领域绝大多数的知识产权。随着知 识产权逐渐超过保护期,目前全球仍然处于腹腔镜手术机器人研究 的快速发展期,尤其是中国新兴的医疗公司。相信在国家的支持下, 我国的医疗机器人可以追赶并达到世界顶尖水平。
自主手术机器人在整个手术机器人领域是比较新颖的方向,同 近些年发展迅速的自动驾驶汽车一样都依赖于先进的传感器技术、 实时数据处理和复杂的决策算法。它们都需要在复杂和不确定的环 境中做出实时决策,以执行精细和关键的任务。相对低层次的单一 任务自主化来讲,复杂的手术全流程或者多手术任务的自主化对决 策系统的要求更高,这也是未来实现真正自主化的关键所在。另外, 两个领域的自主化也面临着类似的挑战,如对技术的可靠性和安全 性的要求、对法规和伦理的考量,以及对用户或患者接受程度的影 响等。
虽然自主手术机器人和自动驾驶汽车在技术应用领域存在相似 之处,但在其应用的环境和需求上存在明显差异。手术室内的环境 通常更加受限且精确,而且对机器人的精准性、安全性和可靠性要 求更高。因此,自主手术机器人的研发和应用往往需要更高水平的 技术、认证和法规标准。 尽管自主手术机器人在未来的临床应用中具有巨大的潜力,但 它们也面临着重大挑战,如技术成本、医疗法规的限制、患者隐私 保护、责任主体等。这些问题也是现在自主手术机器人系统难以拿 到资质认证并真正进入临床应用的根本原因。但是,随着技术的不 断进步和对机器人临床应用的研究,可以预期自主手术机器人将在 未来发挥更加重要的作用,改善医疗服务质量并提升患者治疗体验。
自主手术机器人(Autonomous Surgical Robot)
自主手术机器人是一种集成了先进的计算机视觉、感知、运动 控制和人工智能技术的机器人系统,旨在实现对手术过程中的环境 感知、信息处理和任务执行,提高手术的精确性、安全性和效率, 减少对医生直接手动操作的依赖。
小肠吻合手术(Enteroanastomosis)
小肠吻合手术是一种外科手术,用于连接小肠的两段或小肠与 其他消化道器官(如胃或大肠)。这种手术通常在需要绕过受损或 阻塞的肠段、切除病变部分、或在其他疾病如肠梗阻、肿瘤、炎症 性肠病(如克罗恩病)情况下进行。吻合方式可以是端端吻合(直接连接两段肠子末端)、侧侧吻合(连接肠子侧面)或端侧吻合 (将一段肠末端连接到另一段肠侧面)。手术的目的是恢复消化道 的连续性,确保食物和消化液的正常通过。手术可以通过传统的开 腹手术或腹腔镜手术(微创手术)进行。
智能组织吻合机器人(Smart Tissue Anastomosis Robot,STAR)
STAR 是由美国北卡罗来纳大学威明顿分校研发的一款自主手术 机器人系统,其集成了光学相机、近红外荧光成像等多源感知技术, 以及基于深度学习的组织识别与跟踪算法,可实现对手术环境的实 时感知;并采用基于规则的智能规划算法,对缝合等关键手术步骤 实现自主操控。
近红外荧光成像(Near-Infrared Fluorescence Imaging,NIRF)
近红外荧光成像是一种医学影像技术,通过注射特定的荧光染 料,并使用特殊的近红外光源和成像设备,可以在手术过程中实时 观察和追踪特定组织或器官的位置和形态,从而为手术机器人的感 知和控制提供精准的导航信息。
自动缝合器(Automatic Suturing Device)
自动缝合器是一种医疗设备,由医护人员手动操作,用于在手 术中进行缝合。它通常由一个手柄或握把组成,操作者通过手柄上 的按钮或控制器来控制缝合器的动作。自动缝合器通过机械装置将 针和线传递到目标组织上,并执行缝合操作。
光场相机(Light Field Camera)
光场相机是一种能够同时记录光线方向和强度信息的新型相机, 通过采用微透镜阵列、光传感器等关键技术,可以在拍摄后对焦点、 视角等进行调整,实现单次拍摄多次利用。这种相机可为手术机器 人提供更丰富、更精准的三维环境感知能力。
(本文仅供参考,不代表我们的任何投资建议。如需使用相关信息,请参阅报告原文。)