数据处理方法、装置、设备、介质及产品

专利申请号：CN202311236248.3

公 开 号：CN117251449A

发 明 人：余锋 熊浩 王伟 曾欣 

代 理 人：赵秀芹

代理机构：北京东方亿思知识产权代理有限责任公司

专利类型：发明专利

申 请 日：20231219

公 开 日：20230922

专利主分类号：G06F16/22

关 键 词：数据装载 目标文件 数据文件 历史表 目标数据文件 映射关系 目标表 数据处理技术 对象发送 接收目标 路径确定 全量数据 文件路径 预先建立 数据处理 复杂度 映射库 申请 匹配 装载 查询 响应 创建 维护 

摘      要：本申请公开了一种数据处理方法、装置、设备、介质及产品，涉及大数据处理技术领域。所述方法包括：接收目标对象发送的数据装载请求，所述数据装载请求包括目标表名；基于预先建立的映射关系，在数据文件映射库中查询是否存在与所述目标表名相匹配的目标文件路径，所述映射关系为数据文件的表名与所述数据文件的文件路径的对应关系；响应于存在所述目标文件路径，根据所述目标文件路径确定目标数据文件；创建第一历史表，并将所述目标数据文件中的全量数据装载到所述第一历史表中；将正表与所述第一历史表切换以完成数据装载。根据本申请实施例，可以实现数据装载的通用性，降低了数据装载的复杂度以及后期维护成本，提高了数据装载效率。