检索结果-内蒙古大学图书馆

作者：李自军望远闻王民安 518129 广东省深圳市龙岗区坂田华为总部办公楼

本发明涉及一种分布式数据管理系统，包括应用模块和数据管理器；所述应用模块中设有数据访问模块和数据缓存器；所述数据管理器中设有订阅管理模块、订阅列表模块、通知模块和数据存储器；另外，所述应用模块中还设有动态订阅管理模块... 详细信息

标准号: CN100512118C

本发明涉及一种分布式数据管理系统，包括应用模块和数据管理器；所述应用模块中设有数据访问模块和数据缓存器；所述数据管理器中设有订阅管理模块、订阅列表模块、通知模块和数据存储器；另外，所述应用模块中还设有动态订阅管理模块和数据记录模块；所述数据管理器中还设有数据发布模块，该数据发布模块与所述数据存储器连接；所述动态订阅管理模块分别与所述数据记录模块、所述数据缓存器以及所述数据访问模块连接，与所述订阅管理模块、所述通知模块以及所述数据发布模块通信连接；本发明还提供一种动态订阅数据的方法。采用本发明，可有效减小网络传输和系统处理的数据量，减轻网络负担，提高系统的工作性能。

关键词：订阅管理模块数据发布模块数据管理器应用模块数据访问模块数据记录模块数据存储器数据缓存分布式数据管理系统工作性能通信连接网络传输网络负担系统处理数据量连接

来源：评论

学校读者我要写书评

暂无评论

面向数据分析的分布式数据管理系统

面向数据分析的分布式数据管理系统

引用

作者：吴胤旭中国科学院大学(中国科学院深圳先进技术研究院)

学位级别：硕士

随着工业4.0与互联网+的相关产业发展,大数据成为业界的一个普遍现象,也逐渐在方方面面影响着大众的生活。如何管治与利用好大数据,是目前众多政府机关与企业所面临的难题,而目前的大数据生态圈正处于一个刚刚为大众所了解,正在稳步发... 详细信息

随着工业4.0与互联网+的相关产业发展,大数据成为业界的一个普遍现象,也逐渐在方方面面影响着大众的生活。如何管治与利用好大数据,是目前众多政府机关与企业所面临的难题,而目前的大数据生态圈正处于一个刚刚为大众所了解,正在稳步发展的局面;关于数据的收集、存储、处理及分析建模,已经有系统或者架构可以初步完成这些任务,然而随着数据量的增大、模型的复杂度增加,正让目前的系统显得力不从心、效率低下。研究如何快速、低成本地完成海量数据的分析与建模具有一定的应用价值与现实意义。当前业界仍然是认为分析全量数据才能全面分析数据,而分析全量数据的代价是非常巨大的;另一方面,大数据的管理方式也是基于全量数据的顺序进行分块,这也导致了分析全量数据的必然性。现有分布式系统的各种开销,使得大数据分析的迫切性与困难之间的矛盾日益突出,直到随机样本划分(Random Sample Partition,简称RSP)研究表明,分析一个与全量数据分布相似的数据子集,可以达到近似分析全量数据的效果,并可通过子集数量的增加,对全量建模结果逼近。本文研究重点是基于随机样本划分的面向数据分析的分布式数据管理系统。研究与应用基于随机样本划分的大数据管理新方法,为数据分析建模提供快速、灵活的支持。本论文主要内容包括以下几点:1.提出了分布式随机样本划分算法:本文在随机样本划分数据表达模型的基础上,提出了分布式随机样本划分算法,该算法对每一条记录生成一个分区编号,全体分区编号服从均匀分布,随后根据分区编号进入对应的分区,算法是一个典型的Map Reduce过程,也可应用于Spark平台,具有良好的可扩展性,通过验证实验,分布式算法的可行性及有效性得到证明,在相同的建模条件下,使用1%的数据量获得与全量数据接近的模型精度,并且训练时间仅为全量数据的十分之一,达到了分析少量子集数据即可逼近全量数据的目的。2.提出了随机样本划分存储模型:面向数据分析及建模的需求,结合随机样本划分数据表达模型的特性,本文设计了随机样本划分存储模型,对划分后的数据进行了结构化的存储,达成了提供对分区与相关元数据的快速随机访问的目标。3.研发基于随机样本划分的数据管理原型系统:基于随机样本划分及其存储模型,借助现有分布式系统的并行及高可用性,构建具有统计感知的数据管理系统(Random Sample Partition Data Management System,简称RSPDMS),以满足大数据快速分析建模需求,并且具有横向扩展性;通过良好的系统架构与设计,与企业的大数据平台进行对接,对系统进行的各项测试和分析,达到了预期的目标。如何快速高效地对大数据进行分析、建模是国内外大数据系统研究的共同目标,本文针对传统大数据管理系统的数据组织方面的不足,提出了基于随机样本划分的优化方法,借助对数据进行随机样本划分以及针对数据分析建模的存储模型,建立了分布式数据管理系统。

关键词：大数据分布式数据管理系统随机样本划分随机样本划分存储模型

来源：评论

学校读者我要写书评

暂无评论

分布式数据管理系统及其数据访问方法

分布式数据管理系统及其数据访问方法

引用

作者：王浩波 100025 北京市朝阳区姚家园路105号3号楼10层1102

本发明提供一种分布式数据管理系统及其数据访问方法。所述分布式数据管理系统包括至少两个数据源，所述方法包括：响应于数据访问请求，获取活动数据源的信息，基于所述活动数据源处理所述数据访问请求，并且发送所述数据访问请求的处... 详细信息

标准号: CN105893528A

本发明提供一种分布式数据管理系统及其数据访问方法。所述分布式数据管理系统包括至少两个数据源，所述方法包括：响应于数据访问请求，获取活动数据源的信息，基于所述活动数据源处理所述数据访问请求，并且发送所述数据访问请求的处理结果；响应于数据源更新指令，将新的批量数据导入当前未被标识为活动数据源的另一数据源，并且将所述另一数据源标识为当前的活动数据源。本发明的分布式数据管理系统能够在不影响用户对系统进行数据访问的情况下，进行较高频率的数据更新，为用户提供最新的数据信息，提高用户的使用体验。

关键词：活动数据分布式数据管理系统数据访问请求数据源数据访问数据源标识更新指令批量数据数据更新数据信息影响用户用户提供响应高频率发送

来源：评论

学校读者我要写书评

暂无评论

一种基于Web3的分布式数据管理系统

一种基于Web3的分布式数据管理系统

引用

作者：洪跃宗 361001 福建省厦门市思明区前埔路169号万安大厦1102室

本发明公开了一种基于Web3的分布式数据管理系统，包括卡顿延迟监测模块、稳定性分析模块和提醒控制模块，所述卡顿延迟监测模块与稳定性分析模块无线通信连接，所述稳定性分析模块与提醒控制模块电连接，所述卡顿延迟监测模块用于监测... 详细信息

标准号: CN116527729A

本发明公开了一种基于Web3的分布式数据管理系统，包括卡顿延迟监测模块、稳定性分析模块和提醒控制模块，所述卡顿延迟监测模块与稳定性分析模块无线通信连接，所述稳定性分析模块与提醒控制模块电连接，所述卡顿延迟监测模块用于监测开发人员调用数据时的卡顿程度，所述稳定性分析模块用于分析计算当前RPC框架上调用数据的稳定性，所述提醒控制模块用于控制RPC框架数据传输速度的临界值，所述卡顿延迟监测模块包括时间戳标记模块一，所述时间戳标记模块一用于检测后端服务器接收所经过的时间，所述数据快照模块用于利用数据快照检测开发人员调用数据的卡顿程度，本发明，具有实用性强和稳定性高的特点。

关键词：稳定性分析监测模块提醒控制模块延迟调用数据时间戳标记数据快照分布式数据管理系统无线通信连接后端服务器分析计算框架数据电连接检测传输开发监测

来源：评论

学校读者我要写书评

暂无评论

基于分布式数据管理系统的读写性能优化研究

引用

信息技术与标准化 2022年第6期 29-34页

作者：杨子剑胡俊蔡静中国人民银行征信中心中征(北京)征信有限责任公司

读写混合数据处理模式下的TDDMS分布式数据管理系统在实际应用中出现了查询速度慢、写入有积压等现象,系统并没有达到预期的性能效果。为解决系统性能问题,基于TDDMS分布式数据管理系统,针对读写混合下数据管理系统的性能问题提出了具... 详细信息

读写混合数据处理模式下的TDDMS分布式数据管理系统在实际应用中出现了查询速度慢、写入有积压等现象,系统并没有达到预期的性能效果。为解决系统性能问题,基于TDDMS分布式数据管理系统,针对读写混合下数据管理系统的性能问题提出了具有针对性的性能优化方案。最终优化方案的运行结果表明,优化后的系统在性能上满足了业务对于查询响应和入库的诉求,系统在读写混合下的应用取得了阶段性成果。

关键词：读写混合分布式数据管理系统性能优化

来源：评论

学校读者我要写书评

暂无评论

多主机分布式数据管理系统中的事务操作

多主机分布式数据管理系统中的事务操作

引用

作者： R.巴伯 C.加西亚-阿雷拉诺 R.格罗斯曼 M.A.胡拉斯 M.H.皮拉赫什 V.拉曼 R.S.西德勒 A.斯托姆 P.托曾美国纽约阿芒克

一个实施例提供了一种用于梳理多主机分布式数据管理系统中的事务操作的方法，该方法包括在至少一个事务本地侧日志中维持事务操作。为包括日志中的每个记录的记录标识的表执行表日志扫描。基于所述标识向表中的每一列加载列值。将基于... 详细信息

标准号: CN111801661B

一个实施例提供了一种用于梳理多主机分布式数据管理系统中的事务操作的方法，该方法包括在至少一个事务本地侧日志中维持事务操作。为包括日志中的每个记录的记录标识的表执行表日志扫描。基于所述标识向表中的每一列加载列值。将基于列值的记录写入基于表的梳理后的事务块，并且生成梳理后的块上的每个记录的元组序列号。将该表在处理系统中的事务操作的节点之间共享/分片，以增加事务操作的处理的处理能力。

关键词：事务操作梳理日志记录分布式数据管理系统处理系统记录标识日志扫描多主机加载元组事务写入共享

来源：评论

学校读者我要写书评

暂无评论

一种分布式数据管理系统

一种分布式数据管理系统

引用

作者：徐雷 212000 江苏省镇江市高新区南徐大道298号睿泰C座

本发明公开了一种分布式数据管理系统，本系统包括URL动态调配模块、反爬策略调度模块、数据标记解析模块、数据格式化模块。本系统的研发能够高效获取互联网热点信息，并依照差异化、个性化的需求，为用户提供及时、精细化的数据。本... 详细信息

标准号: CN112231602A

本发明公开了一种分布式数据管理系统，本系统包括URL动态调配模块、反爬策略调度模块、数据标记解析模块、数据格式化模块。本系统的研发能够高效获取互联网热点信息，并依照差异化、个性化的需求，为用户提供及时、精细化的数据。本系统中以以Storm实时流处理、数据库中间件、Hadoop批处理和ELK数据可视化结合的框架，提升了系统的兼容性、容错性和可扩展性，提高系统对差异化需求的适应性。

关键词：差异化批处理分布式数据管理系统互联网热点信息策略调度模块数据库中间件数据格式化数据可视化动态调配高效获取解析模块可扩展性数据标记用户提供兼容性精细化容错性实时流研发个性化

来源：评论

学校读者我要写书评

暂无评论

一种基于智联网的分布式数据管理系统

一种基于智联网的分布式数据管理系统

引用

作者：游海涛范自道王琳傅福斌杨丰佳 361008 福建省厦门市软件园二期观日路18号502室

本发明涉及智联网技术领域，特别涉及一种基于智联网的分布式数据管理系统，包括个人服务器和终端设备，所述个人服务器接收存储所述终端设备上传的第一数据及通过所述终端设备利用用户私钥从商用服务器获取的第二数据，并向所述终端设... 详细信息

标准号: CN111935290B

本发明涉及智联网技术领域，特别涉及一种基于智联网的分布式数据管理系统，包括个人服务器和终端设备，所述个人服务器接收存储所述终端设备上传的第一数据及通过所述终端设备利用用户私钥从商用服务器获取的第二数据，并向所述终端设备返回数据CID；所述终端设备收到所述数据CID后调用用户公钥对其加密，向区块链节点发送包含加密CID的数据信息。本发明提供的一种基于智联网的分布式数据管理系统，不仅改善了个人服务器网络不稳定的情况，还有效地利用个人服务器运用到分布式数据管理系统中，真正让服务器下沉到用户身边，从而提高用户的访问效率。

关键词：个人服务器终端设备分布式数据管理系统加密终端设备利用商用服务器联网第一数据返回数据访问效率接收存储联网技术数据信息用户公钥用户私钥链节点有效地区块上传调用下沉服务器发送网络

来源：评论

学校读者我要写书评

暂无评论

多主机分布式数据管理系统中的事务操作

多主机分布式数据管理系统中的事务操作

引用

作者： R.巴伯 C.加西亚-阿雷拉诺 R.格罗斯曼 M.A.胡拉斯 M.H.皮拉赫什 V.拉曼 R.S.西德勒 A.斯托姆 P.托曾美国纽约阿芒克

标准号: CN111801661A

关键词：事务操作梳理日志记录分布式数据管理系统处理系统记录标识日志扫描多主机加载元组事务写入共享

来源：评论

学校读者我要写书评

暂无评论

一种基于Web3的分布式数据管理系统

一种基于Web3的分布式数据管理系统

引用

作者：洪跃宗 361001 福建省厦门市思明区前埔路169号万安大厦1102室

标准号: CN116527729B

来源：评论

学校读者我要写书评

暂无评论

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案：

请选择收藏分类：

通借通还

建议与咨询 留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案： 新增检索档案 确定 取消

请选择收藏分类： 新增自定义分类 确定 取消

通借通还

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

请选择保存的检索档案：

请选择收藏分类：