(19)中华 人民共和国 国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111641478.9 (22)申请日 2021.12.2 9 (71)申请人 深圳乐易通医疗设备研发有限公司 地址 518000 广东省深圳市福田区沙 头街 道天安社区泰然四路25号 天安创新科 技广场一期B座1810 (72)发明人 刘小欣　华中秋　张明豪　 (74)专利代理 机构 北京高沃 律师事务所 1 1569 代理人 刘芳 (51)Int.Cl. G06V 20/40(2022.01) G06V 20/52(2022.01) G06V 30/148(2022.01) G06V 10/75(2022.01) G06K 9/62(2022.01)G06K 7/14(2006.01) G01N 1/28(2006.01) G01N 1/31(2006.01) G01N 1/36(2006.01) (54)发明名称 一种病理样本的实时监测系统 (57)摘要 本发明公开了一种病理样本的实时监测系 统。 该系统通过设置现场图像采集模块和图像处 理与识别模块， 实现了对采集、 脱水、 包埋、 染色 和制片整个流程的实时监测， 能降低成本、 提高 监测效率 以及保证各个操作环节中病理样本的 准确性。 权利要求书3页 说明书12页 附图4页 CN 114359799 A 2022.04.15 CN 114359799 A 1.一种病理样本的实时监测系统， 其特 征在于， 包括： 现场图像采集模块， 用于通过在现场架设摄像机， 采集各个操作环节对病理样本进行 处理时的监控图像数据； 所述监控图像数据包括： 取材操作台在进行病理样本采集操作环 节时的样本盒操作视频图像、 脱水操作环节中脱水前后的脱水篮图像、 包埋操作台在进行 包埋操作 环节时的包埋视频图像、 切片操作 环节中获取的石蜡标本切面图像数据以及染色 操作环节中批量 获取的染色环节图像； 所述包埋视频图像包括包埋样本盒内标本的标本视 频图像和已包埋样本盒的样本盒视频图像； 所述 染色环节图像包括未染色的切片标签图像 数据、 已染色的切片标签图像数据和已染色的病理切片的切片图像； 图像处理与识别模块， 用于自动对所述监控图像数据进行实时智能分析， 获得各个操 作环节中的监控信息； 所述监控信息包括： 取材中样本盒状态信息、 脱 水篮中装载的所有样 本盒的标签信息、 各待包埋样本盒内的标本是否有样本组织丢失、 染色前后晾片盘或玻片 架中装载玻片的标签信息、 染色状态信息、 染色质量等级以及石蜡标本与相应的玻片的匹 配信息； 所述取材中样本盒状态信息包括样本盒操作视频图像中各样本盒的开盖状态、 有 无样本的状态及样本个数； 数据校验模块， 用于通过将所述监控信息与系统数据库中的数据进行对比， 实现各个 操作环节中样本操作的差错 监测， 得到 差错监测结果。 2.根据权利要求1所述的一种病理样本的实时监测系统， 其特征在于， 还包括： 差错追 溯模块， 用于： 当采集环节出现差错时， 根据差错产生时间调取对应时间的样本盒操作视频图像， 以 实现采集环 节问题追溯； 当在脱水之后的操作环节中出现差错时， 调取所述脱水监测结果， 以实现脱水环节问 题追溯； 当在包埋之后的操作环节中出现差错时， 调取所述包埋监测结果， 以实现包埋环节问 题追溯。 3.根据权利要求1所述的一种病理样本的实时监测系统， 其特征在于， 所述图像处理与 识别模块， 具体包括： 取 材监测子模块； 所述取材监测子模块， 具体包括： 盒体状态检测单元， 用于确定所述样本盒操作视频图像中各样本盒的位置区域， 得到 样本盒图像， 并检测所述样本盒图像中各样本盒中是否装有样本以及样本个数； 样本盒筛 选单元， 用于筛选所述样本盒图像中处于开盖状态的样本盒， 得到开盖图像； 标签识别单元， 用于对所述开盖 图像中的样本盒上的标签进行识别， 并将所述开盖 图 像中装有样本的样本盒的状态修改为已采集。 4.根据权利要求3所述的一种病理样本的实时监测系统， 其特征在于， 所述标签识别单 元， 具体包括： 标签信息识别单元， 用于识别所述开盖 图像中的样本盒上的标签的信息类型； 所述信 息类型为 二维码和/或文本； 二维码识别单元， 用于搜索所述标签上的二维码区域， 并对所述二维码区域进行解码 操作， 得到二维码标签信息， 将与所述 二维码标签信息对应的样本盒的状态修改为已采集； 文本识别单元， 用于搜索所述标签上的文本区域， 并采用文本识别算法对所述文本区权　利　要　求　书 1/3 页 2 CN 114359799 A 2域进行识别， 得到文本标签信息， 将与所述文本标签信息对应的样本盒的状态修改为已采 集。 5.根据权利要求4所述的一种病理样本的实时监测系统， 其特征在于， 所述文本识别单 元， 具体包括： 文本区域识别子单 元， 用于采用文本检测算法搜索所述标签上的文本区域； 第一识别子单元， 用于采用端到端文本识别算法对所述文本区域进行识别， 得到第一 识别结果； 第二识别子单元， 用于采用连通域方式对所述文本区域进行分割， 并采用机器学习的 方式对分割后的图像进行识别， 得到第二识别结果； 第三识别子单元， 用于采用卷积算法对所述文本区域中的文本分割点进行预测， 得到 分割字符， 并采用机器学习算法对所述分割字符进行识别， 得到第三识别结果； 投票识别子单元， 用于对所述第一识别结果、 所述第二识别结果和所述第三识别结果 投票， 得到文本标签信息； 状态修改子单 元， 用于将与所述文本标签信息对应的样本盒的状态修改为已采集。 6.根据权利要求1所述的一种病理样本的实时监测系统， 其特征在于， 所述图像处理与 识别模块， 具体包括： 脱水监测子模块； 所述脱水监测子模块， 具体包括： 脱水篮样式识别单 元， 用于识别放置脱水 前后病理样本的脱水篮的样式； 第一样本盒位置检测单元， 用于根据 所述样式将脱水后图像中的脱水篮区域划分为多 个第一子窗口， 并在各 所述第一子窗口中搜索样本盒的位置， 得到第一样本盒区域图像； 第一样本盒标签识别单元， 用于识别所述第一样本盒区域图像中的标签信息， 得到第 一标签信息； 第二样本盒位置检测单元， 用于根据 所述样式将脱水前图像中的脱水篮区域划分为多 个第二子窗口， 并在各 所述第二子窗口中搜索样本盒的位置， 得到第二样本盒区域图像； 第二样本盒标签识别单元， 用于识别所述第二样本盒区域图像中的标签信息， 得到第 二标签信息； 匹配单元， 用于将所述第一标签信息和所述第二标签信息进行匹配， 得到脱水监测结 果。 7.根据权利要求1所述的一种病理样本的实时监测系统， 其特征在于， 所述图像处理与 识别模块， 具体包括： 包埋 监测子模块； 所述包埋 监测子模块， 具体包括： 标准图像获取 单元， 用于获取 各样本盒的取 材样本图像； 包埋盒定位单元， 用于采用识别网络识别所述标本视频图像中各待包埋样本盒的位 置， 得到包埋盒位置区域图像； 包埋盒标签识别单元， 用于对各所述包埋盒位置区域图像上的标签信息进行识别， 得 到识别结果； 所述标签信息包括 二维码信息和/或文本信息； 匹配单元， 用于根据 所述识别结果确定与 各所述包埋盒位置区域图像相匹配的取材样 本图像； 比对单元， 用于将各所述包埋盒位置区域图像分别与相匹配的取材样本图像进行比权　利　要　求　书 2/3 页 3 CN 114359799 A 3