数据采集方法、装置和电子设备

专利申请号：CN202311338999.6

公 开 号：CN117370289A

发 明 人：张旭 

代 理 人：李敏灵;臧建明

代理机构：北京同立钧成知识产权代理有限公司

专利类型：发明专利

申 请 日：20240109

公 开 日：20231016

专利主分类号：G06F16/174

关 键 词：目标数据 压缩文件 中间数据库 采集参数 采集指令 数据采集 服务器 实时传输数据 数据处理领域 数据传输效率 服务器发送 接收服务器 电子设备 网络波动 业务产生 业务系统 解压缩 打包 申请 存储 发送 携带 

摘      要：本申请提供了一种数据采集方法、装置和电子设备，涉及数据处理领域，该数据采集方法包括：接收服务器发送的采集指令，采集指令携带采集参数；根据采集参数，异步从中间数据库中获取不同时间的多批目标数据，中间数据库中存储有业务系统执行相关业务产生的数据；基于多批目标数据，生成压缩文件以及压缩文件的第一文件摘要；向服务器发送压缩文件和第一文件摘要，服务器用于根据第一文件摘要解压缩压缩文件得到目标数据。本申请通过将多批目标数据汇总打包后发送给服务器，能够避免实时传输数据导致的网络波动以及数据传输效率低的问题。