(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210896984.0 (22)申请日 2022.07.28 (71)申请人 四川封面传媒科技有限责任公司 地址 610020 四川省成 都市锦江区红星路 二段70号1幢传媒大厦8楼 (72)发明人 唐弋淞　徐桢虎　孙唐虎　付楷峰　 占钦　 (74)专利代理 机构 成都虹桥专利事务所(普通 合伙) 51124 专利代理师 陈春光 (51)Int.Cl. H04L 9/40(2022.01) H04L 67/562(2022.01) H04L 69/22(2022.01) (54)发明名称 一种用于安卓APP的自动化数据采集系统及 方法 (57)摘要 本发明涉及数据采集技术领域， 公开了一种 用于安卓APP的自动化数据采集系统及方法， 旨 在解决现有 安卓APP的数据采集方式存在耗时耗 力和难度较高的问题， 方案主要包括： 通过ADB程 序将云服务器与多个安卓设备进行连接； 云服务 器获取当前连接的安卓设备的身份信息， 根据身 份信息获取数据采集任务， 以及根据数据采集任 务执行对应的自动化脚本； 代理服务器在云服务 器执行自动化脚本时开启代理模块， 代理模块实 时监听并获取所有安卓设备发起的请求， 根据请 求获取对应的响应数据， 以及从响应数据中获取 所需数据并对其进行数据落地。 本发明降低了 APP数据采集的人力物力消耗， 提高了数据采集 效率， 特别适用于新闻数据采集。 权利要求书2页 说明书4页 附图1页 CN 115277202 A 2022.11.01 CN 115277202 A 1.一种用于安卓APP的自动化数据采集系统， 其特征在于， 包括： 云服务器、 代 理服务器 和多个安卓设备， 所述云服 务器通过ADB程序与各安卓设备 连接； 所述云服务器， 用于确定当前连接的安卓设备， 获取当前连接的安卓设备的身份信 息， 根据所述身份信息获取数据采集任务， 以及根据所述数据采集任务执行对应的自动化脚 本， 所述自动化脚本用于控制安卓设备 执行相应的操作； 所述代理服务器， 用于在云服务器执行自动化脚本时开启代理模块， 代理模块实时监 听并获取所有安卓设备发起的请求， 根据所述请求获取对应的响应数据， 以及从所述响应 数据中获取 所需数据并对其进行 数据落地； 所述安卓设备， 安装有至少一个安卓APP， 用于在云服务器执行自动化脚本时， 接收云 服务器的控制并对安卓APP执行相应的操作， 以及在执行操作时接收代理服务器的监听并 将发起的请求发送至代理服 务器。 2.如权利要求1所述的用于安卓APP的自动化数据采集系统， 其特征在于， 所述云服务 器， 具体用于： 在获取当前连接的安卓设备的身份信 息后， 对每个安卓设备建立一个进程并 同时运行 所有进程； 在每个进程中， 根据对应安卓设备的身份信息获取数据采集任务， 并根据数据采 集任务执 行用于控制对应安卓设备的自动化脚本 。 3.如权利要求1所述的用于安卓APP的自动化数据采集系统， 其特征在于， 所述代理服 务器开启代理模块之后还 包括： 所述代理服务器对外暴露监 听端口， 将当前连接的安卓设备的代理地址和端口设置为 代理服务器的服 务器地址和端口， 并在当前 连接的安卓设备 上安装代理证书。 4.如权利要求1所述的用于安卓APP的自动化数据采集系统， 其特征在于， 所述云服务 器从数据库中获取数据采集任务， 所述数据采集任务对应的上一次采集时间与当前时间的 时间差大于采集间隔时间， 并且所述数据采集任务为优先级最高或者相同优先级时对应的 采集时间在前的数据采集任务。 5.如权利要求1所述的用于安卓APP的自动化数据采集系统， 其特征在于， 从所述响应 数据中获取 所需数据， 具体包括： 对所述响应数据进行数据 解析， 得到所需数据， 所述数据解析的方式为XPath、 CSS或正 则表达式。 6.如权利要求1所述的用于安卓APP的自动化数据采集系统， 其特征在于， 所述数据落 地的形式为mysql数据库、 mo ngo数据库、 redis数据库或kafka数据库。 7.如权利要求1所述的用于安卓APP的自动化数据采集系统， 其特征在于， 所述自动化 脚本具体用于： 控制安卓设备安装、 打开和卸载安卓AP P， 以及在安卓AP P内点击页面元 素。 8.一种用于安卓APP的自动化数据采集方法， 其特征在于， 应用于如权利要求1至7任一 项所述的用于安卓AP P的自动化数据采集系统， 包括以下步骤： 步骤1、 通过ADB程序将云服 务器与多个安卓设备进行 连接； 步骤2、 云服务器确定当前连接的安卓设备， 获取当前连接的安卓设备的身份信息， 根 据所述身份信息获取数据采集任务， 以及根据所述数据采集任务执行对应的自动化脚本， 所述自动化脚本用于控制安卓设备 执行相应的操作；权　利　要　求　书 1/2 页 2 CN 115277202 A 2步骤3、 代理服务器在云服务器执行自动化脚本时开启代理模块， 代 理模块实时监听并 获取所有安卓设备发起的请求， 根据所述请求获取对应的响应数据， 以及从所述响应数据 中获取所需数据并对其进行 数据落地。 9.如权利要求8所述的用于安卓APP的自动化数据采集方法， 其特征在于， 该方法具体 包括： 在获取当前连接的安卓设备的身份信 息后， 对每个安卓设备建立一个进程并 同时运行 所有进程； 在每个进程中， 根据对应安卓设备的身份信息获取数据采集任务， 并根据数据采 集任务执 行用于控制对应安卓设备的自动化脚本 。 10.如权利要求8所述的用于安卓APP的自动化数据采集方法， 其特征在于， 所述云服务 器从数据库中获取数据采集任务， 所述数据采集任务对应的上一次采集时间与当前时间的 时间差大于采集间隔时间， 并且所述数据采集任务为优先级最高或者相同优先级时对应的 采集时间在前的数据采集任务。权　利　要　求　书 2/2 页 3 CN 115277202 A 3