(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210688821.3 (22)申请日 2022.06.17 (71)申请人 来也科技 （北京） 有限公司 地址 100080 北京市海淀区丹棱 街3号B座 17层1-43单 元 (72)发明人 李检　王瑞丰　江治刚　 (74)专利代理 机构 北京清亦华知识产权代理事 务所(普通 合伙) 11201 专利代理师 罗岚 (51)Int.Cl. B25J 9/16(2006.01) B25J 19/00(2006.01) G06V 30/10(2022.01) (54)发明名称 基于RPA和AI实现IA的机器人运行状态的方 法及装置 (57)摘要 本公开提出一种基于RPA和AI实现IA的机器 人运行状态 的方法。 其中， 该方法包括： RPA机器 人获取当前待执行的业务节点后， 调用自然语言 处理NLP服务， 对当前待执行的业务节点进行处 理， 以确定当前待执行的业务节点的类型， 在当 前待执行的业务节点的类型为截图业务的情况 下， 可以获取与截图业务对应的业务节点截图， 之后， 可以将业务节点截 图发送给RPA机器人控 制台， 以使RPA 机器人控制台根据截图确定RPA 机 器人的运行状态。 由此， 通过NLP服务确定业务节 点的类型为截图业务， 进而根据获取的业务节点 截图即可自动确定RPA机器人的运行状态， 从而 实现IA的机器人运行状态， 实现了对RPA机器人 的运行状态的自动监控， 提高了设备的运行效 率。 权利要求书3页 说明书15页 附图6页 CN 115026825 A 2022.09.09 CN 115026825 A 1.一种基于RPA和AI实现IA的机器人运行状态的方法， 其特 征在于， 包括： RPA机器人获取当前待执 行的业务节点； 调用自然语言处理NLP服务， 对所述当前待执行的业务节点进行处理， 以确定所述当前 待执行的业务节点的类型； 响应于所述当前待执行的业务节点的类型为截图业务， 获取与 所述截图业务对应的业 务节点截图； 将所述业务节点截图发送给RPA机器人控制台， 以使所述RPA机器人控制台根据所述截 图确定所述RPA机器人的运行状态。 2.如权利要求1所述的方法， 其特征在于， 所述获取与 所述截图业务对应的业务节点截 图， 包括： 确定与所述截图业 务对应的截图框尺寸和/或位置； 根据所述截图框尺寸和/或位置， 获取与所述截图业 务对应的业 务节点截图。 3.如权利要求1所述的方法， 其特征在于， 所述将所述业务节点截图发送给RPA机器人 控制台， 包括： 调用光学字符识别OCR服务， 对所述业务节点截图进行识别， 以获取所述业务节点截图 中包含的字符； 确定所述字符与预设的敏感词典中的敏感词间的匹配度； 在任一字符与任一敏感词间的匹配度 大于阈值的情况下， 将所述任一字符进行掩码处 理， 以获取掩码处 理后的业 务节点截图； 将所述掩码处 理后的业 务节点截图发送给 所述RPA机器人控制台。 4.如权利要求1 ‑3任一所述的方法， 其特征在于， 所述将所述业务节点截图发送给RPA 机器人控制台， 包括： 将所述业务节点截图及对应的业 务节点标识发送给 所述RPA机器人控制台。 5.一种基于AI的确定RPA机器人运行状态的方法， 其特 征在于， 包括： 接收RPA机器人发送的业 务节点截图； 获取与所述RPA机器人对应的参 考截图； 根据所述 业务节点截图与所述 参考截图的匹配度， 确定所述RPA机器人的运行状态。 6.如权利要求5所述的方法， 其特征在于， 所述获取与所述RPA机器人对应的参考截图， 包括： 根据所述RPA机器人对应的目标业 务流程， 获取所述RPA机器人对应的参 考截图。 7.如权利要求5所述的方法， 其特征在于， 所述获取与所述RPA机器人对应的参考截图， 包括： 确定所述 业务节点截图关联的业 务节点标识； 根据所述RPA机器人对应的目标业 务流程， 获取所述RPA机器人对应的参 考截图集； 从所述参考截图集中， 获取与所述 业务节点标识对应的参 考截图。 8.如权利要求5 ‑7任一所述的方法， 其特征在于， 所述根据 所述业务节点截图与所述参 考截图的匹配度， 确定所述RPA机器人的运行状态， 包括： 调用光学字符识别OCR服 务， 对所述截图进行识别， 以获取 所述截图中包 含的字符； 确定所述字符与预设的敏感词典中的敏感词间的匹配度；权　利　要　求　书 1/3 页 2 CN 115026825 A 2在任一字符与任一敏感词间的匹配度 大于阈值的情况下， 将所述任一字符进行掩码处 理， 以获取掩码处 理后的业 务节点截图； 根据所述掩码处理后的业务节点截图与所述参考截图的匹配度， 确定所述RPA机器人 的运行状态。 9.如权利要求8所述的方法， 其特征在于， 在所述确定所述字符与预设的敏感词典中的 敏感词间的匹配度之前， 还 包括： 根据RPA机器人对应的目标业 务流程， 获取所述预设的敏感词典。 10.一种基于RPA和AI实现IA的机器人运行状态的装置， 其特 征在于， 包括： 获取模块， 用于RPA机器人获取当前待执 行的业务节点； 确定模块， 用于调用自然语言处理NLP服务， 对所述当前待执行的业务节点进行处理， 以确定所述当前待执 行的业务节点的类型； 截图模块， 用于响应于所述当前待执行的业务节点为截图业务， 获取与所述截图业务 对应的业 务节点截图； 发送模块， 用于将所述业务节点截图发送给RPA机器人控制台， 以使所述RPA机器人控 制台根据所述截图确定所述RPA机器人的运行状态。 11.如权利要求10所述的装置， 其特 征在于， 所述发送模块， 具体用于： 调用光学字符识别OCR服务， 对所述业务节点截图进行识别， 以获取所述业务节点截图 中包含的字符； 确定所述字符与预设的敏感词典中的敏感词间的匹配度； 在任一字符与任一敏感词间的匹配度 大于阈值的情况下， 将所述任一字符进行掩码处 理， 以获取掩码处 理后的业 务节点截图； 将所述掩码处 理后的业 务节点截图发送给 所述RPA机器人控制台。 12.一种基于AI的确定RPA机器人运行状态的装置， 其特 征在于， 包括： 接收模块， 用于 接收RPA机器人发送的业 务节点截图； 获取模块， 用于获取与所述RPA机器人对应的参 考截图； 确定模块， 用于根据所述业务节点截图与所述参考截图的匹配度， 确定所述RPA机器人 的运行状态。 13.如权利要求12任一所述的装置， 其特 征在于， 所述确定模块， 具体用于： 调用光学字符识别OCR服 务， 对所述截图进行识别， 以获取 所述截图中包 含的字符； 确定所述字符与预设的敏感词典中的敏感词间的匹配度； 在任一字符与任一敏感词间的匹配度 大于阈值的情况下， 将所述任一字符进行掩码处 理， 以获取掩码处 理后的业 务节点截图； 根据所述掩码处理后的业务节点截图与所述参考截图的匹配度， 确定所述RPA机器人 的运行状态。 14.一种计算机设备， 其特征在于， 包括： 处理器和存储器， 所述存储器中存储指令， 所 述指令由处理器加载并执行， 以实现如权利要求1至4任一项所述的方法， 或者实现如权利 要求5至9任一项所述的方法。 15.一种计算机可读存储介质， 所述计算机可读存储介质内存储有计算机程序， 所述计 算机程序被处理器执行时实现如权利要求1 ‑4中任一项所述的方法， 或者实现如权利要求权　利　要　求　书 2/3 页 3 CN 115026825 A 3