(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210996195.4 (22)申请日 2022.08.19 (71)申请人 汉凰 （上海） 医疗科技有限公司 地址 201400 上海市奉贤区奉浦工业区奉 浦大道111号7楼5167室 (72)发明人 王文胜　许春生　胡双琴　李箐　 (74)专利代理 机构 南京鑫之航知识产权代理事 务所(特殊普通 合伙) 32410 专利代理师 汪庆朋 (51)Int.Cl. G16H 20/40(2018.01) G16H 40/20(2018.01) G16H 40/60(2018.01) G06N 3/04(2006.01) G06N 3/08(2006.01)G06N 20/00(2019.01) (54)发明名称 一种用于手术室的多维度、 多功能技术指导 智能机器人 (57)摘要 本发明公开了一种用于手术室的多维度、 多 功能技术指导智能机器人， 包括用于医疗信息分 析处理的医疗 人工智能支持系统、 用于供用户医 疗信息交互的客户端和用于获取网络中医疗信 息的RPA机器人平台； 本发明结合人工智能中相 应的技术， 分析了手术室操作各单元的差异性， 并根据手术运作时的实际情况， 综合了操作人 员、 设备和器械硬件、 环境因素、 病人个体差异等 的多方面的因素， 能够更加精确的地提高手术室 设备及器械的使用精准度、 安全性； 能即时准确 指导处理各类术式， 以及设备操作可能出现的不 良状况， 保证手术安全， 顺利进行， 具有很好的医 疗信息获取分析效果， 有利于在智慧医疗培训或 自主学习中进行使用。 权利要求书4页 说明书11页 附图3页 CN 115312154 A 2022.11.08 CN 115312154 A 1.一种用于手术室的多维度、 多功能技术指导智能机器人， 其特征在于， 包括用于 医疗 信息分析处理的医疗 人工智能支持系统 （101） 、 用于供用户医疗信息交互的客户端 （102） 和 用于获取网络中 医疗信息的RPA机器人平台 （201） ； 所述医疗人工智能支持系统 （101） 包括专家知识库分析系统 （1011） 、 专家知识库 （1012） 和修正优化系统 （1013） ， 所述专家知识库 分析系统 （1011） 包括数据获取模块、 查找 模块、 比对模块、 关联保存模块、 传输模块和反馈模块， 所述数据获取模块与所述专家知识 库 （1012） 连接， 用于建立智能专家知识库， 所述专家知识库 （1012） 与所述专家知识库分析 系统 （1011） 中的查找模块、 比对模块和关联保存模块分别建立连接， 且专家知识库 （1012） 连接修正优化系统 （1013） ， 所述修正优化系统 （1013） 包括人工规则制定模块、 统计分析模 块、 搜索模块和优化模块； 其中， 通过所述RPA机器人平台 （201） 实时采集各网络平台的医疗数据， 同时通过客户 端 （102） 将用户对话信息中的医疗数据， 进行数据采集规整后进行标准化录入至专家知识 库 （1012） 中， 对 所述专家知识库 （1012） 输入的医疗 数据进行训练、 识别、 定位和方案输出的 整合， 并通过修正优化系统 （1013） 进行医疗信息的修正优化操作， 通过客户端 （102） 询问后 生成相应医疗问题的解决方案 。 2.如权利要求1所述的一种用于手术室的多维度、 多功能技术指导智能机器人， 其特征 在于， 所述 RPA机器人平台 （201） 包括文字 分析识别模块、 语音识别模块和图像识别模块， 所 述RPA机器人平台 （201） 基于网络获取网络平台 中关联医疗信息， 整理补充到专 家知识库。 3.如权利要求2所述的一种用于手术室的多维度、 多功能技术指导智能机器人， 其特征 在于， 所述医疗信息包括有关手术及相关设备、 仪器、 器械的知识文章、 技术资料、 视频演示 和视频讲座， 具体如下： 对于文字信息， RPA机器人平台 （201） 的机器人使用文字分析识别模块， 根据关键字词 对这些文字信息进行进一步识别是否含有技术步骤或者传授的知识要点信息， 通过专家知 识库分析系统 （1011） 中的查找模块和比对模块， 分别归类整理到所述专家知识库 （1012） 中； 对于图片信息， RPA机器人平台 （201） 的机器人利用图像识别模块， 即OCR图像识别扫描 图片， 提取图片中的文字， 如果没有文字信息， 又不是通过关键字词收集到的图片， RPA机器 人平台 （201） 的机器人需要重新到原网页内容中分析图片元素的上下文信息， 查找图片有 关的关联信息并与关键字词比对判断， 决定图片的归类， 或者机器人通过卷积神经网络比 对知识库里的图片将其划归为相似图片一类， 通过专家知识库分析系统 （1011） 中的查找模 块、 比对模块和关联保存模块， 将相应的关键字词关联后保存到所述专家知识库 （1012） 中； 如果没有文字信息， 而且是通过关键字词收集到的图片， 则根据数据收集时的关键字词将 其关联、 归类整理到所述专家知识库 （1012） 中， 如果有文字信息， 则分析图片中这些文字信 息的是否含有技术步骤或者传授的知识要点信息； 如果有就提取出来并与相关图片、 关键 字词进行关联后保存到所述专家知识库 （1012） 中， 如果没有则将该段文字信息和收集时的 关键字词将其归类整理保存到所述专 家知识库 （1012） 中； 对于语音信息， RPA机器人平台 （201） 的机器人使用语音识别模块， 将语音转换为文字 并与相关语音、 关键字词进行关联后保存到所述专家知识库 （1012） 中， 再通过分析文字中 是否含有技术步骤或者传授的知识要点信息， 如果有就提取出来保存并与相关语音、 关键权　利　要　求　书 1/4 页 2 CN 115312154 A 2字词进行关联后保存到所述专 家知识库 （1012） 中； 对于视频信息， RPA机器人平台 （201） 的机器人将视频处理成的单独的语音和单独的无 音轨视频； 再对语音信息进行上述通过语音识别模块对语音信息的识别操作步骤并将视频 也关联上保存到所述专 家知识库 （1012） 中。 4.如权利要求1所述的一种用于手术室的多维度、 多功能技术指导智能机器人， 其特征 在于， 所述RPA机器人平台 （201） 的机器人在收集到医疗数据后或使用后， 对专家知识库 （1012） 会在相同的解决方案归类中， 通过修正优化系统 （1013） 进 行修正和优化； 具体地， 对 于至少一种 解决方案， RPA机器人平 台 （201） 的机器人将先按照通过人工规则制定模块， 优 先提供规则进行排序， 在经过提供解决方案给用户选择使用后， 机器人将根据用户是否选 择了推荐的方案或者对推荐方案的满意度和采纳度， 通过统计分析模块进行统计分析， 即 不同用户的行为习惯的分析再次进行评价排序， 为下一次提供最佳推荐项； 使用了的解决 方案类别中， 机器人通过优化模块在专家知识库 （1012） 相同归类中， 对于长期不采纳的数 据将在设定的时间段内删除以优化空间， 或者对于一直都没出现过满意评价的解决方案， 机器人将会增加基于该解决方案的关键字词的收集信息频次， 以便达到修正和优化的目 的； 同时机器人在使用过程中遇到暂时提供不了解决方案的问题， 机器人将通过搜索模块 利用网络搜索相关信息， 将收集到的信息补充到专家知识库 （1012） 中， 以及用户通过客户 端 （102） 将自己掌握的医疗数据材料信息直接存放到专家知识库 （1012） 中， 机器人再对上 述的医疗数据材 料信息进行 学习整理并设置推荐权 重。 5.如权利要求1所述的一种用于手术室的多维度、 多功能技术指导智能机器人， 其特征 在于， 所述医疗人工智能支持系统 （101） 还 包括更新系统、 设置系统、 收藏系统和保存系统； 所述更新系统是根据所述医疗人工智能支持系统 （101） 更新时间， 基于RPA机器人平台 （201） 对所述专 家知识库 （1012） 进行医疗信息的更新； 所述设置系统是在客户端 （102） 中， 设置多个不同语音用户， 针对不同语音用户的不同 语音情景信息， 提供 各用户所需的语音人工智能支持； 所述收藏系统是根据用户语音指令， 通过客户端 （102） 收藏所述医疗人工智能支持系 统 （101） 中专家知识库 （1012） 提供的相关技术文字、 语音、 图片和视频信息， 以此形成用户 自己的学习库； 所述保存系统根据用户 在客户端 （102） 的语音指令， 通过客户端 （102） 从专家知识库 （1012） 中提供的相关技术文字、 语音、 图片和视频信息， 存储至所述客户端 （102） 或客户端 （102） 连接的存 储设备。 6.如权利要求1所述的一种用于手术室的多维度、 多功能技术指导智能机器人， 其特征 在于， 所述专家知识库分析系统 （1011） 中的传输模块和反馈模块， 与所述客户端 （102） 连 接， 所述客户端 （102） 通过语音输入用户对话中的医疗信息至传输模块， 并存储至专家知识 库 （1012） 中； 所述反馈模块根据传输模块输入的用户对话中的医疗信 息的问题信 息， 并根据当前情 境状态， 基于专家知识库分析系统 （1011） 和专家知识库 （1012） 进 行系统操作应答 或者在专 家知识库中查询解决方案， 将系统操作应答或解决方案信息通过反馈模块传输至客户端 （102） 。权　利　要　求