检索结果-内蒙古大学图书馆

计算机应用 2017年第4期37卷 941-944页

作者：曾沁李永生广东省气象台广州510080 广东省气象探测数据中心广州510080

气象数据的增长规模已达到每小时TB级,这使得传统基于关系型数据库和文件存储系统在海量数据存储与管理方面捉襟见肘,进而使得基于大规模异构气象数据的应用无法规模化,同时,也无法满足科研人员对海量气象数据高效探索的需要。为解决这... 详细信息

气象数据的增长规模已达到每小时TB级,这使得传统基于关系型数据库和文件存储系统在海量数据存储与管理方面捉襟见肘,进而使得基于大规模异构气象数据的应用无法规模化,同时,也无法满足科研人员对海量气象数据高效探索的需要。为解决这一系列问题,研究者分别基于MapReduce、HBase等分布式框架下的分布式计算和存储技术,尝试为海量气象数据的探索提供有效技术手段,然而,综合性的研究据了解还未开展。因此,利用近年来积累的海量多普勒天气雷达数据,开展了基于MapReduce和HBase相结合的风暴三维追踪方法的研究,并基于传统Rest标准化接口实现了雷达资料的点、线、面、体的多种分布式服务接口,与传统的Rest标准化单机数据存储和访问接口的性能相比,所实现方法在性能方面有100%的效率提升。最后,以2007年至2009年珠江三角洲地区三年雷达数据的风暴追踪回算为例,进一步验证了所提方法在计算和存储管理方面的性能优势。

关键词：分布式计算框架风暴追踪算法长时间序列分析

来源：评论

学校读者我要写书评

暂无评论

分布式计算框架下的大数据机器学习

引用

电子技术与软件工程 2019年第20期 168-169页

作者：田彬晋中师范高等专科学校数理科学系

本文利用多层神经网络使用单层神经网络实现数据集训练,对均方误差和改变迭代时间进行对比。通过试验结果表示,低于最高的均方误差,提高收敛速度。简单来说,所实现多层神经网络能够精准预测数据集。

关键词：分布式计算框架大数据机器学习

来源：评论

学校读者我要写书评

暂无评论

分布式计算框架的管理方法、装置、设备及存储介质

分布式计算框架的管理方法、装置、设备及存储介质

引用

作者：许宏斌钱振洋吴绍华 518000 广东省深圳市南山区兴科一街2号

本发明涉及计算机技术领域，公开了一种分布式计算框架的管理方法、装置、设备及存储介质，该方法包括：通过原生云应用架构的拓展机制配置分布式计算框架应用的应用配置信息；基于应用配置信息确定分布式计算框架应用对应的集群部署属... 详细信息

标准号: CN117873602A

本发明涉及计算机技术领域，公开了一种分布式计算框架的管理方法、装置、设备及存储介质，该方法包括：通过原生云应用架构的拓展机制配置分布式计算框架应用的应用配置信息；基于应用配置信息确定分布式计算框架应用对应的集群部署属性；基于集群部署属性，通过预设容器化管理集群将分布式计算框架应用部署至目标工作节点。由于本发明基于分布式计算框架应用的应用配置信息确定分布式计算框架应用对应的集群部署属性，以基于集群部署属性将分布式计算框架应用部署至目标工作节点，从而解决了现有技术中在使用分布式计算框架进行分布式计算时，通常需要耗费大量时间检查运行环境，导致效率低且维护成本高的技术问题。

关键词：分布式计算框架集群部署应用配置信息工作节点应用部署应用计算机技术领域分布式计算存储介质机制配置时间检查运行环境云应用集群预设架构管理拓展维护

来源：评论

学校读者我要写书评

暂无评论

面向离散事件仿真系统的分布式计算框架建模

面向离散事件仿真系统的分布式计算框架建模

引用

作者：王章虎中国科学院研究生院

学位级别：硕士

随着信息科学技术的迅速发展，离散事件系统仿真技术在各个领域有了更深入的研究。在基于离散事件的大规模复杂系统的仿真研究中，由于系统计算复杂，仿真粒度越来越细化，使得系统对计算资源的需求日益增加。缩短大规模复杂仿真系统运... 详细信息

随着信息科学技术的迅速发展，离散事件系统仿真技术在各个领域有了更深入的研究。在基于离散事件的大规模复杂系统的仿真研究中，由于系统计算复杂，仿真粒度越来越细化，使得系统对计算资源的需求日益增加。缩短大规模复杂仿真系统运行的时间，满足系统的时效性需求，是一个重要的研究方向。\n 首先，本文调研了描述离散事件仿真系统的形式化的方法:离散事件系统规范(Discrete Event System Specifications，DEVS)，并基于DEVS对大规模复杂仿真系统进行了逻辑建模。\n 其次，在逻辑建模的基础上，本文分析了大规模复杂仿真系统的特征，并结合Hadoop的MapReduce模型，提出了基于离散事件仿真系统的分布式计算框架，对系统进行了软件建模。\n 最后，本文给出了分布式计算框架的设计和实现，包括系统的整体架构和数据流程，以及关键模块的设计与实现，并详尽地描述了整个框架的设计原理和实现细节。

关键词：离散事件仿真分布式计算框架数据流程软件建模 Hadoop模型 MapReduce模型

来源：评论

学校读者我要写书评

暂无评论

分布式计算框架

分布式计算框架

引用

作者： N·G·甘地 K·范海宁 J·刘 K·A·拉森美国华盛顿州

实施例所针对的是：将处理任务从性能降低的计算机系统分布到至少一个其他计算机系统；在一个计算机系统处处理从性能降低的计算机系统接收的分布式任务；以及建立模拟环境以用于测试分布式计算框架功能。在实施例中，性能降低的计算机... 详细信息

标准号: CN103562868B

实施例所针对的是：将处理任务从性能降低的计算机系统分布到至少一个其他计算机系统；在一个计算机系统处处理从性能降低的计算机系统接收的分布式任务；以及建立模拟环境以用于测试分布式计算框架功能。在实施例中，性能降低的计算机系统监视计算任务以为每个任务确定处理资源使用水平。计算任务是在性能降低的计算机系统上运行的软件应用的一部分。性能降低的计算机系统确定：所监视的任务之一正在使用超过所指定阈值水平的处理资源。性能降低的计算机系统将任务发送给另一计算机系统，该另一计算机系统接收、处理并返回该任务的结果到性能降低的计算机系统。性能降低的计算机系统将从该另一计算机系统接收的经处理结果呈现在运行中的软件应用内。

关键词：计算机系统性能降低处理资源软件应用分布式计算框架监视模拟环境任务确定阈值水平测试返回

来源：评论

学校读者我要写书评

暂无评论

分布式计算框架中临近游戏对象的确定方法、装置及设备

分布式计算框架中临近游戏对象的确定方法、装置及设备

引用

作者：张扬赛万明林靖然 100085 北京市海淀区上地十街10号百度大厦二层

本公开提出了一种分布式计算框架中临近游戏对象的确定方法、装置、设备及存储介质，涉及计算机技术领域，具体涉及大数据、云计算等人工智能技术领域，具体实现方案为：第一服务器在确定任一对象的位置发生了变更的情况下，确定任一对... 详细信息

标准号: CN114491301A

本公开提出了一种分布式计算框架中临近游戏对象的确定方法、装置、设备及存储介质，涉及计算机技术领域，具体涉及大数据、云计算等人工智能技术领域，具体实现方案为：第一服务器在确定任一对象的位置发生了变更的情况下，确定任一对象变更后的位置；向位置服务器及第二服务器分别发送临近对象查询请求；接收位置服务器返回的第一临近对象列表及第二服务器返回的第二临近对象列表；根据第一临近对象列表及第二临近对象列表，确定任一对象位置变更后对应的目标临近对象列表。由此，在任一对象的位置变更时，通过分布式计算框架中的各服务器间的交互，即可实时确定该任一对象对应的临近对象列表，不仅准确可靠，而且实时性很高。

关键词：分布式计算框架第二服务器服务器计算机技术领域变更人工智能技术第一服务器位置服务器存储介质对象变更对象查询对象位置接收位置实时确定位置变更游戏对象大数据实时性云计算返回发送

来源：评论

学校读者我要写书评

暂无评论

分布式计算框架的任务调派系统

分布式计算框架的任务调派系统

引用

作者：孙良君 210012 江苏省南京市雨花台区小行尤家凹08号

本申请公开一种分布式计算框架的任务调派系统，其中包括应用服务器、任务队列服务平台与Redis服务平台。应用服务器用于部署多个业务处理服务；任务队列服务平台由多个任务服务器透过网路集群，任务队列服务平台中部署zookeeper服务，... 详细信息

标准号: CN105760221B

本申请公开一种分布式计算框架的任务调派系统，其中包括应用服务器、任务队列服务平台与Redis服务平台。应用服务器用于部署多个业务处理服务；任务队列服务平台由多个任务服务器透过网路集群，任务队列服务平台中部署zookeeper服务，任务调度操作用于处理zookeeper服务的消息队列的新的客户任务；由多个Redis服务器透过网路连接构成，Redis服务平台经由网路连接于任务队列服务平台，Redis服务平台根据新加入消息队列中的客户任务调用处理进程，处理进程对客户任务进行清洗并输出第一业务结果存储至Redis缓存存储器中；Redis服务平台的实时计算模块侦测Redis缓存存储器中存在新的第一业务结果，实时计算模块对第一业务结果进行计算并输出第二业务结果。

关键词：服务平台任务队列业务结果缓存存储器应用服务器处理进程实时计算网路连接客户分布式计算框架业务处理服务任务服务器加入消息任务调度任务调用消息队列输出网路集群侦测队列服务器部署清洗存储服务申请

来源：评论

学校读者我要写书评

暂无评论

分布式计算框架

分布式计算框架

引用

作者： N·G·甘地 K·范海宁 J·刘 K·A·拉森美国华盛顿州

标准号: CN103562868A

关键词：计算机系统计算任务软件应用分布式计算框架监视模拟环境资源使用阈值水平经处理

来源：评论

学校读者我要写书评

暂无评论

分布式计算框架和分布式计算方法

分布式计算框架和分布式计算方法

引用

作者：张建伟张云聪王聪徐瑶文春阳黄鑫宋展朱冠胤 100085 北京市海淀区上地十街10号百度大厦2层

本申请公开了分布式计算框架和分布式计算方法。该分布式计算框架的一具体实施方式包括：解析单元，用于解析分布式计算任务的表达式，确定算子、算子对应的字段；算子单元，用于提供算子，算子的输入参数包括：字段、字段型分布式数据... 详细信息

标准号: CN106406985A

本申请公开了分布式计算框架和分布式计算方法。该分布式计算框架的一具体实施方式包括：解析单元，用于解析分布式计算任务的表达式，确定算子、算子对应的字段；算子单元，用于提供算子，算子的输入参数包括：字段、字段型分布式数据集。实现了任意算子接收和返回的参数的类型均可以为字段型分布式数据集，任意算子均可对字段型分布式数据集中的对应于字段的数据进行操作。从而，任意算子均需实现一次，实现算子的复用。将分布式计算任务以较为简单的表达式显示地表达出来，简化了用户利用的分布式计算框架编写分布式计算程序的复杂度，进一步地，可以通过表达式确定分布式计算中涉及的算子，从而可以对分布式计算过程进行优化。

关键词：算子分布式计算字段分布式计算框架分布式数据解析单元输入参数算子单元用户利用复杂度复用解析返回申请优化

来源：评论

学校读者我要写书评

暂无评论

分布式计算框架的任务调派系统

分布式计算框架的任务调派系统

引用

作者：孙良君 210012 江苏省南京市雨花台区小行尤家凹08号

标准号: CN105760221A

来源：评论

学校读者我要写书评

暂无评论

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案：

请选择收藏分类：

通借通还

建议与咨询 留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案： 新增检索档案 确定 取消

请选择收藏分类： 新增自定义分类 确定 取消

通借通还

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

请选择保存的检索档案：

请选择收藏分类：