检索结果-内蒙古大学图书馆

软件学报 2022年第3期33卷 1005-1017页

作者：刘瑞奇李博扬高玉金李长升赵恒泰金福生李荣华王国仁北京理工大学计算机学院北京100081 东北大学计算机科学与工程学院辽宁沈阳110819

随着大数据和机器学习的火热发展,面向机器学习的分布式大数据计算引擎随之兴起.这些系统既可以支持批量的分布式学习,也可以支持流式的增量学习和验证,具有低延迟、高性能的特点.然而,当前的一些主流系统采用了随机的任务调度策略,忽... 详细信息

随着大数据和机器学习的火热发展,面向机器学习的分布式大数据计算引擎随之兴起.这些系统既可以支持批量的分布式学习,也可以支持流式的增量学习和验证,具有低延迟、高性能的特点.然而,当前的一些主流系统采用了随机的任务调度策略,忽略了节点的性能差异,因此容易导致负载不均和性能下降.同时,对于某些任务,如果资源要求不满足,则会导致调度失败.针对这些问题,提出了一种异构任务调度框架,能够保证任务的高效执行和被执行.具体来讲,该框架针对任务调度模块,围绕节点的异构计算资源,提出了概率随机的调度策略resource-Pick_kx和确定的平滑加权轮询算法.Resource-Pick_kx算法根据节点性能计算概率,进行概率随机调度,性能高的节点概率越大,任务调度到此节点的可能性就越高.平滑加权轮询算法在初始时根据节点性能设置权重,调度过程中平滑加权,使任务调度到当下性能最高的节点上.此外,对于资源不满足要求的任务场景,提出了基于容器的纵向扩容机制,自定义任务资源,创建节点加入集群,重新完成任务的调度.通过实验在benchmark和公开数据集上测试了框架的性能,相比于原有策略,该框架性能提升了10%-20%.

关键词：任务调度负载均衡自动扩容分布式计算异构任务

来源：评论

学校读者我要写书评

暂无评论

适应多级调度安全稳定分析资源共享的分布式计算管理平台

引用

电力系统自动化 2016年第23期40卷 1-8页

作者：方勇杰王胜明华北电力大学电气与电子工程学院北京市102206 南瑞集团公司(国网电力科学研究院) 江苏省南京市211106 智能电网保护和运行控制国家重点实验室江苏省南京市211106 国电南瑞科技股份有限公司江苏省南京市211106

针对大电网多级调度安全稳定协同分析与控制计算对分布式计算管理平台的资源共享和统一管理的新需求,结合各级调度计算资源独立部署的现状,基于"资源调度分级管理、计算服务全局共享"设计思想提出了一种动态树形架构的分布式... 详细信息

针对大电网多级调度安全稳定协同分析与控制计算对分布式计算管理平台的资源共享和统一管理的新需求,结合各级调度计算资源独立部署的现状,基于"资源调度分级管理、计算服务全局共享"设计思想提出了一种动态树形架构的分布式计算管理平台及其设计原则,分别从用户管理层、计算管理层、资源管理层和信息代理层阐述了平台的主要功能,并讨论了平台实现需要解决的多级调度协调管理机制、任务调度管理策略和计算资源优化分配方法等关键技术问题。

关键词：多级调度分布式计算动态树形架构任务调度资源共享

来源：评论

学校读者我要写书评

暂无评论

基于嵌入式网络的数据采集与分布式计算系统

引用

传感技术学报 2006年第3期19卷 885-889页

作者：韩志峰宋执环浙江大学工业控制技术研究所工业控制技术国家重点实验室杭州310027

采用将网络的开放分布和DSP高速信号处理的优势相融合的技术,给出了系统详细的软硬件设计和工作原理,以及通过嵌入式网络接口与上位机通信和采用XML-Socket技术数据传输的设计和实现过程。实验验证了系统在工业环境中与多种传感器配合... 详细信息

采用将网络的开放分布和DSP高速信号处理的优势相融合的技术,给出了系统详细的软硬件设计和工作原理,以及通过嵌入式网络接口与上位机通信和采用XML-Socket技术数据传输的设计和实现过程。实验验证了系统在工业环境中与多种传感器配合使用实现分布式数据采集与实时计算功能的可靠性、稳定性。

关键词：数据采集数字信号处理器嵌入式以太网分布式计算

来源：评论

学校读者我要写书评

暂无评论

基于分布式计算的复合材料机翼优化设计

引用

复合材料学报 2007年第1期24卷 167-171页

作者：程文渊常艳崔德刚谢向辉北京航空航天大学航空科学与工程学院北京100083 江南计算技术研究所无锡214083

将遗传算法与高精度的通用有限元分析软件相结合,并将其应用于复合材料机翼满足气动弹性要求的优化设计中。为了提高采用遗传算法的复合材料机翼优化设计的效率,探讨了将分布式计算与遗传算法进行集成,形成了基于分布式计算和遗传算法... 详细信息

将遗传算法与高精度的通用有限元分析软件相结合,并将其应用于复合材料机翼满足气动弹性要求的优化设计中。为了提高采用遗传算法的复合材料机翼优化设计的效率,探讨了将分布式计算与遗传算法进行集成,形成了基于分布式计算和遗传算法的复合材料机翼优化设计方法,并应用该方法解决某大展弦比复合材料机翼副翼和舵面操纵反效问题。计算结果表明,该方法可用于解决工程上复杂结构优化问题。

关键词：多目标优化复合材料分布式计算遗传算法

来源：评论

学校读者我要写书评

暂无评论

分布式计算中的因果性研究:回顾与展望

引用

计算机科学 1996年第5期23卷 1-9页

作者：贺乐天孙永强上海交通大学计算机科学与工程系上海200030

分布式系统是一组在空间上分隔的顺序进程,进程间仅仅通过消息传递来交换信息,由于缺乏全局时钟,基于事件观察的事件交叉线性序列往往不适合于我们对分布式程序行为的理解,在实际应用中带来很多问题.现在已经认识到,将事件之间的关系理... 详细信息

分布式系统是一组在空间上分隔的顺序进程,进程间仅仅通过消息传递来交换信息,由于缺乏全局时钟,基于事件观察的事件交叉线性序列往往不适合于我们对分布式程序行为的理解,在实际应用中带来很多问题.现在已经认识到,将事件之间的关系理解成基于事件相互影响的偏序关系是比较合适的[1s,川,这种相互影响的关系也被称为因果关系。本文较系统地综述了十多年来因果性间题研究的发展情况,并讨论了因果性在分布式计算中很多重要问题中的应用,阐述了对研究现状的认识,并指出了若干研究方向。

关键词：分布式计算因果性计算机计算方法

来源：评论

学校读者我要写书评

暂无评论

配用电大数据分布式计算集群负载均衡框架

引用

电网技术 2019年第1期43卷 259-265页

作者：张令涛赵林张亮田国辉孙湃南瑞集团国网电力科学研究院)有限公司江苏省南京市211106 北京科东电力控制系统有限责任公司北京市海淀区100192

为了解决配用电环节产生的大数据经常出现数据倾斜而造成分布式运算环境利用效率不高的现象,提出了一种用于配用电大数据分布式计算的负载均衡框架。框架首先定义了中间结果提前传输机制,通过限定范围的可控参数控制传输进程,将中间结... 详细信息

为了解决配用电环节产生的大数据经常出现数据倾斜而造成分布式运算环境利用效率不高的现象,提出了一种用于配用电大数据分布式计算的负载均衡框架。框架首先定义了中间结果提前传输机制,通过限定范围的可控参数控制传输进程,将中间结果进行排序,传输低于负载均值的分片。然后介绍了分片的二次分拆原理,根据分片的大小动态决定分拆计划。完成分片的分拆之后,介绍了如何利用贪心启发式算法实现分拆结果的均衡分配,结合布隆滤波器实现了分拆后分片的传输。最后通过实验验证,文中提出的配用电负载均衡框架能够有效地提高配用电大数据分布式运算系统的效率,减少因数据倾斜造成的部分节点因运算任务过重而导致的总体执行时间过长现象。

关键词： Hadoop 大数据分布式计算数据倾斜负载均衡配用电

来源：评论

学校读者我要写书评

暂无评论

分布式计算模式下的协同工作环境

引用

小型微型计算机系统 1999年第8期20卷 561-566页

作者：裴云彰史元春徐光佑清华大学计算机科学与技术系

随着Ｉｎｔｅｒｎｅｔ逐步成为应用程序运行的环境，传统的ＣＳＣＷ应用逐渐暴露出严重的缺陷，从客户机／服务器模式向分布式计算模式的转变是大势所趋．本文提出的协同工作环境（ＣＷＥ）的概念建立在分布式对象技术和分布式计算三级... 详细信息

随着Ｉｎｔｅｒｎｅｔ逐步成为应用程序运行的环境，传统的ＣＳＣＷ应用逐渐暴露出严重的缺陷，从客户机／服务器模式向分布式计算模式的转变是大势所趋．本文提出的协同工作环境（ＣＷＥ）的概念建立在分布式对象技术和分布式计算三级体系结构的技术基础上，为各类ＣＳＣＷ应用提供一个统一的运行／开发环境和功能框架．它不仅为最终用户提供必要的协作工具，还提供通用的协作功能，供开发者开发新的协作应用和集成现有应用．通过把某一特定应用领域的工具软件集成到通用的协同工作环境中，可以很方便地构造满足其特殊需求的协作应用系统，从而极大地减轻了开发者的负担．

关键词： CSCW 协同工作环境分布式计算 Internet网

来源：评论

学校读者我要写书评

暂无评论

Unix环境下基于RMI的分布式计算研究与实践

引用

计算机工程 2002年第4期28卷 39-40,43页

作者：徐建波李仁发湘潭工学院计算机科学系湘潭411201 湖南大学计算机科学系长沙410001

在分析远程过程调用(RPC)原理的基础上,引入Java远程方法调用(RMI)的概念,并详细讨论了Java RMI的体系结构和运作机制。还给出了一个Unix环境下的分布式计算示例。

关键词：远程过程调用远程方法调用分布式计算客户/服务器 UNIX 计算机网络

来源：评论

学校读者我要写书评

暂无评论

基于分布式计算的网络管理平台的设计与实现

引用

计算机工程 2005年第23期31卷 113-115页

作者：王彦丽陈明田登山首都师范大学信息工程学院北京100037 石油大学计算机科学与技术系北京102200

提出了一个基于分布式计算的网络管理系统模型,从理论和实践两方面,详细论述了系统的结构及实现机制,对系统的特点和性能进行了分析与研究,并将该系统应用到实际中,结果表明是有效而实用的。

关键词：网络管理分布式计算管理平台

来源：评论

学校读者我要写书评

暂无评论

基于自校正控制的电力系统分布式计算

引用

电力系统自动化 2010年第10期34卷 18-23页

作者：李兢沈沉陈颖刘锋清华大学电机系电力系统国家重点实验室北京市100084

分布式计算一方面要求算法收敛性好、通信次数少、计算速度快,另一方面要求通信交换的数据边界化,解除子分区同构限制,保证各分区内部资源的私有性。针对这些要求,文中尝试从控制理论这一角度来分析分布式计算的分解协调问题,通过建立... 详细信息

分布式计算一方面要求算法收敛性好、通信次数少、计算速度快,另一方面要求通信交换的数据边界化,解除子分区同构限制,保证各分区内部资源的私有性。针对这些要求,文中尝试从控制理论这一角度来分析分布式计算的分解协调问题,通过建立分布式计算过程的控制系统模型,使用自校正控制的方法构建新的分布式算法。基于自校正控制方法的分布式计算能够在保证通信数据边界化的同时,有效降低通信次数,提高算法的收敛速度。算例测试结果验证了所提出的方法的有效性。

关键词：分布式计算控制理论自校正电力系统

来源：评论

学校读者我要写书评

暂无评论

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案：

请选择收藏分类：

通借通还

建议与咨询 留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案： 新增检索档案 确定 取消

请选择收藏分类： 新增自定义分类 确定 取消

通借通还

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

请选择保存的检索档案：

请选择收藏分类：