版权所有:内蒙古大学图书馆 技术提供:维普资讯• 智图
内蒙古自治区呼和浩特市赛罕区大学西街235号 邮编: 010021
专利申请号:CN202010032824.2
公 开 号:CN111291227B
代 理 人:深圳市世纪恒程知识产权代理事务所晏波
代理机构:深圳市世纪恒程知识产权代理事务所
专利类型:发明专利
申 请 日:20230411
公 开 日:20200113
专利主分类号:G06F16/90
关 键 词:数据分析程序 适配 样本数据 大数据 数据源地址 数据源节点 样本文件 计算机存储介质 数据安全性 源节点发送 分析装置 接收数据 全量数据 数据节点 信息对应 分析 匹配 浮动 调度 驱动 部署 保证
摘 要:本发明公开了一种大数据分析方法,包括以下步骤:接收数据源节点发送的样本文件,获取所述样本文件中的样本数据和数据源地址信息;根据数据分析程序适配表,调度部署有数据分析程序的数据节点,驱动所述数据分析程序与所述样本数据进行适配,获得适配结果;在所述适配结果为所述数据分析程序与所述样本数据匹配时,将所述数据分析程序浮动至所述数据源地址信息对应的数据源节点,通过所述数据分析程序在数据源节点进行全量数据分析。本发明还公开了一种大数据分析装置、系统、设备和计算机存储介质。本发明在保证数据安全性的前提下,提高了大数据分析的效率。