(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210573627.0 (22)申请日 2022.05.24 (71)申请人 上海弘青石科技有限公司 地址 200131 上海市浦东 新区中国 （上海） 自由贸易试验区临港新片区新杨公路 1588号4栋 (72)发明人 陈赟　纪德宝　谢宇　林立宇　 辛紫萱　方武宏　 (74)专利代理 机构 上海正旦专利代理有限公司 31200 专利代理师 陆飞　陆尤 (51)Int.Cl. G06V 10/764(2022.01) G06V 10/44(2022.01) G06V 10/34(2022.01)G06K 7/14(2006.01) G06K 19/06(2006.01) (54)发明名称 基于图像识别的抗原检测结果认证方法 (57)摘要 本发明属于图像检测技术领域， 具体为基于 图像识别的抗原 检测结果认证的方法。 本发明方 法包括： 采集抗原检测之前试剂盒照片； 采集抗 原检测之后试剂盒照片； 判断试剂条信息， 自动 上传抗原 检测结果。 本方法采用智能识别试剂盒 照片， 能够简化抗原信息数据上传的便利性， 并 且增加自动识别抗原结果的功能。 本发明方法在 手机端就可以进行抗原结果的识别， 如果无法在 边缘端判断， 再将抗原结果照片上传至服务器， 进行更深层次的判断， 这可以大大降低服务器压 力， 实现低功耗。 此外， 本发明增加了防瞒报功 能， 以防被检测人员在发现阳性后蓄意隐瞒不上 传照片情况， 进一 步提升抗疫防控能力。 权利要求书2页 说明书5页 附图2页 CN 115035332 A 2022.09.09 CN 115035332 A 1.一种基于图像识别的抗原检测结果认证方法， 其特 征在于， 具体步骤为： S1、 采集用户抗原检测之前 试剂盒照片， 包括： S1‑1、 由用户手机下 载抗原自测AP P； S1‑2、 在手机端通过APP拍摄抗原试剂盒的照片、 二维码以及试剂条照片， 一并发送到 检验层； S1‑3、 二维码照片完整性和抗原试剂盒照片判断； 检验层采用边缘检测方法， 判断二维 码照片是否完整并且 试剂条是否空白； 如果二 维码照片不完整， 则返回S1 ‑2， 如果二 维码照 片完整但是试剂条不是空 白， 则向终端返回失败信息； 如果二维码照片完整且试剂条是空 白， 则进行 下一步； S1‑4、 将二维码信息由检验层发送到认证层， 认证层从二维码数据库调取信息进行认 证， 判断二 维码是否属实、 并且是否使用过， 如果认证不通过， 则向终端层返回失败信息， 若 通过， 进行S2； S2、 采集用户抗原检测之后的试剂盒照片， 包括： S2‑1、 将用户手机拍摄的抗原试剂盒照片、 二维码 以及试剂条照片， 一并发送到检验 层； S2‑2、 检验层采用边缘检测方法， 判断二维码照片是否完整、 试剂条是否有效； 如果二 维码照片不完整， 则返回S1 ‑2； 如果二 维码照片 完整但是试剂条无效， 则向终端返回试剂无 效信息， 并提醒用户重新做抗原检测， 返回S1； 如果二维码照片完整且试剂条有效， 则进入 S3； S3、 判断试剂条信息， 自动上传抗原检测结果， 包括： S3‑1、 检测两次拍摄的试剂盒的二维码信息， 判断是否一致； 若不一致或者未上传第二 次抗原检测照片， 进行S3 ‑3； 若一致， 则进入S3 ‑2； S3‑2、 判断试剂条信息； 若在C处为一条杠， 上传阴性结果， 若在C处和T处都有一条杠， 上传阳性结果， 并把被检测人员信息上传至待复核数据库； 后续重点关注被检测人员的健 康问题， 若试剂条检验结果 为非上述两种， 则判断为模糊， 进入S3 ‑3； S3‑3、 将此抗原检测的试剂条信息上传至服务器， 在服务器端使用AI的方法进行识别， 判断若为阴性， 上传阴性结果； 若为阳性， 上传阳性结果， 并把被检测人员信息上传至待复 核数据库； 后续重点关注被检测人员的健康问题， 若非上述两种结果， 判定此次抗原检测无 效， 进入S3 ‑4； S3‑4、 将被检测人员信息上传至待观察数据库， 并提醒用户端重新进行抗原检测， 若12 小时后， 被检测人员尚未进行新的抗原检测信息上传， 则将被检测人员信息上传至待复核 数据库， 重点关注被 检测人员健康问题； 其中： 所述检验层代表的是APP将Canny算法部署在用户的手机上， 然后调用用户手机的算力 来处理二维码和试剂条图片的环 节； 所述认证层代表的是将识别出的试剂盒二维码编码送到后台服务器的数据中心来认 证该编码是否存在或是否被使用的环 节； 所述服务器为存放在疾控中心的管理计算资源的计算机； 服务器的主要作用是管理 由 试剂盒编码信息、 用户的个人信息以及对应抗原检测结果的信息构成的数据库；权　利　要　求　书 1/2 页 2 CN 115035332 A 2所述待观察数据库， 用来存放抗原检测结果模糊难以做出判断， 需要重新进行抗原检 测的用户信息； 所述待复核数据中心， 用来存放抗原检测结果为阳性， 需要 防疫人员上门进行核酸检 测的用户信息 。 2.根据权利要求1所述的基于图像识别的抗原检测结果认证方法， 其特征在于， 步骤 S1‑2中， 通过手机端APP拍摄的照片时， 只允许APP获取手机相机权限， 禁止获取存储权限， 以防止采用相册导入。 3.根据权利要求1所述的基于图像识别的抗原检测结果认证方法， 其特征在于， 步骤 S1‑3中， 二维码照片完整性判断和抗原试剂条照片判断包括： 使用边缘算法进 行识别分类； 通过定位图片中的二 维码位置， 再根据二维码呈正方形的特点来对图片进 行旋转和透视等 处理； 然后对处理后的图片进 行切割， 并将其中试剂条的部分进 行抽离； 接着对 所有得到的 试剂条通过边 缘检测算法来 鉴定试剂条 上信息判断。 4.根据权利要求1所述的基于图像识别的抗原检测结果认证方法， 其特征在于， 所述边 缘检测算法的具体流 程为： （1） 首先， 将输入的抗原检测试纸图片img转为灰度图img_gray； 在 img_gray中， 根据二 维码框来 提取包含二维码所在区域 img_sub； （2） 然后， 对img_sub进行二值化处理， 利用Canny算法提取二维码所在的矩形边缘， 并 用四条直线 进行拟合； （3） 利用拟合的直线求出四条直线的交点， 即二维码正方形框的四个顶点： (x0,y0), (x1,y1),(x2,y2),(x3,y3)， 作为源矩阵Ms， 并计算出目标矩阵Md， 根据源矩阵Ms与目标矩 阵Md， 计算变换矩阵M； （4） 根据变换矩阵M， 对img_gray进行旋转变化， 同时根据变换矩阵M计算获取二维码宽 度和高度 （w,h） ， 根据抗原试剂盒原封装尺寸， 计算试纸矩形框所在位置： (x4,y4),(x5, y5),(x6,y6),(x7,y7)， 然后提取 该子图img_test； （5） 得到图片中检测的目标区域后， 利用Canny提取img_test边缘信息， 利用直线拟合， 并获取直线 数目n， 同时计算横向直线位置与试纸高度的比值a； 若识别直线 数目n的值小于 零， 则说明该试剂盒检测无效； 若直线 数目n的值大于零， 则比较所有直线的a值与阴性位置 a1和阳性位置a2的大小； 若直线数 目n大于2， 且存在a约等于a2， 则表 明该抗原检测结果为 阳性； 若直线数目n小于2， 不存在a等于a2且存在a等于a1， 则表 明抗原检测结果为阴性， 否 则表明该抗原检测结果无效。权　利　要　求　书 2/2 页 3 CN 115035332 A 3