检索结果-内蒙古大学图书馆

作者：谢朝阳郑少斌 100093 北京市海淀区杏石口路99号西山赢府E座4层

本发明提供了一种用于云平台处理文件备份任务的方法和系统，其中系统包括：服务器池管理模块，用于维护由一个以上备份服务器构成的备份服务器池，包括根据各备份服务器的实际使用状况创建新的备份服务器、修改备份服务器的配置或关闭... 详细信息

标准号: CN103036946A

本发明提供了一种用于云平台处理文件备份任务的方法和系统，其中系统包括：服务器池管理模块，用于维护由一个以上备份服务器构成的备份服务器池，包括根据各备份服务器的实际使用状况创建新的备份服务器、修改备份服务器的配置或关闭空闲的备份服务器；任务调度模块，用于获取云平台的用户文件备份任务，向所述服务器池管理模块请求获取备份服务器列表，向监控模块请求获取备份服务器的使用状况后，将云平台的用户文件备份任务分配到可用的备份服务器上；监控模块，用于监控备份服务器的使用状况。本发明能够降低用户额外的工作量和额外占用的网络带宽，提高数据备份的可靠性。

关键词：备份服务器备份任务服务器池监控模块用户文件管理模块请求任务调度模块处理文件管理模块数据备份网络带宽工作量空闲监控

来源：评论

学校读者我要写书评

暂无评论

在数据备份系统中的备份任务之间分配资源的方法和装置

在数据备份系统中的备份任务之间分配资源的方法和装置

引用

作者：迈克尔·蔡斯托马斯·哈特尼特阿多奈贾·帕克美国加利福尼亚州

本发明描述一种在数据备份系统中的备份任务之间分配资源的方法和装置。本发明的一个方面涉及在计算机网络中管理备份任务。基于一组备份统计表为每个备份任务建立估计的资源利用。基于估计的资源利用为每个备份任务分配资源预留。在备... 详细信息

标准号: CN101276301B

本发明描述一种在数据备份系统中的备份任务之间分配资源的方法和装置。本发明的一个方面涉及在计算机网络中管理备份任务。基于一组备份统计表为每个备份任务建立估计的资源利用。基于估计的资源利用为每个备份任务分配资源预留。在备份任务的执行过程中动态地改变每个备份任务的资源预留。

关键词：备份任务分配资源资源利用数据备份系统备份统计表方法和装置资源预留计算机网络预留描述管理

来源：评论

学校读者我要写书评

暂无评论

一种MapReduce中备份任务推测执行策略的优化方案

一种MapReduce中备份任务推测执行策略的优化方案

引用

作者：刘琦蔡卫东肖博沈剑付章杰 210000 江苏省南京市建邺区奥体大街69号

一种MapReduce中备份任务推测执行策略的优化方案，采用指数平滑算法，结合集群中节点实时性能，对任务运行各阶段的时间分别计算，达到对任务运行的剩余时间进行准确预测的目的。解决了默认情况下，推测执行准确率低，由于错误地启动... 详细信息

标准号: CN105302647A

一种MapReduce中备份任务推测执行策略的优化方案，采用指数平滑算法，结合集群中节点实时性能，对任务运行各阶段的时间分别计算，达到对任务运行的剩余时间进行准确预测的目的。解决了默认情况下，推测执行准确率低，由于错误地启动备份任务的问题。本方案极大程度的提高推测执行的正确率，节省了任务运行的时间，有效地节约了集群中有限的资源。

关键词：任务运行推测执行备份任务集群分别计算剩余时间实时性能优化方案指数平滑准确预测各阶段正确率中节点准确率一种默认算法节省节约启动结合有效解决进行

来源：评论

学校读者我要写书评

暂无评论

用于管理数据备份任务的设备和方法

用于管理数据备份任务的设备和方法

引用

作者：郭峰陈齐彦陶隽施德明美国马萨诸塞州

本发明的实施方式涉及用于管理数据备份任务的设备和方法。特别地，公开了一种用于管理对数据进行备份的备份任务的设备，包括：执行时间计算装置，配置用于计算所述备份任务的执行时间；执行路径确定装置，配置用于确定所述备份任务的... 详细信息

标准号: CN103176862A

本发明的实施方式涉及用于管理数据备份任务的设备和方法。特别地，公开了一种用于管理对数据进行备份的备份任务的设备，包括：执行时间计算装置，配置用于计算所述备份任务的执行时间；执行路径确定装置，配置用于确定所述备份任务的执行路径；以及冲突检测装置，配置用于基于所述执行时间和所述执行路径，检测所述备份任务是否与其他备份任务存在冲突。还公开了相应的方法。利用本发明的技术方案，可以按照更为有效、高效和智能的方式管理数据备份任务的调度和执行。

关键词：备份任务管理数据路径确定装置时间计算装置冲突检测对数据备份调度智能检测冲突管理

来源：评论

学校读者我要写书评

暂无评论

数据库一体化监管平台及其工作方法以及依据此平台的备份任务流程管理的业务控制方法

数据库一体化监管平台及其工作方法以及依据此平台的备份任务流程...

引用

作者：赵越于翔李培培 225009 江苏省扬州市维扬路179号

本发明涉及一种电力企业数据库集群管理技术，具体涉及一种面向电力企业数据库集群备份的流程化管理方法。该平台主要包括平台基础信息管理子系统、数据库集群信息采集子系统和备份任务管理子系统，平台基础信息管理子系统主要是负责平... 详细信息

标准号: CN103235988A

本发明涉及一种电力企业数据库集群管理技术，具体涉及一种面向电力企业数据库集群备份的流程化管理方法。该平台主要包括平台基础信息管理子系统、数据库集群信息采集子系统和备份任务管理子系统，平台基础信息管理子系统主要是负责平台数据维护管理工作，数据库集群信息采集子系统主要是负责对集群中线上应用系统主目录和后台数据库信息的采集、维护、管理工作；备份任务管理子系统主要是负责对备份策略的制定、备份脚本管理、以及备份任务远程调度等工作。本发明提供的是一种面向电力企业业务人员，使其能够对数据库应用系统备份任务进行精细化管理。

关键词：备份任务集群电力企业数据库信息采集子系统信息管理子系统管理子系统平台基础备份数据库应用系统后台数据库备份策略管理方法管理工作集群管理平台数据维护管理应用系统远程调度业务人员精细化流程化脚本采集管理

来源：评论

学校读者我要写书评

暂无评论

一种云数据中心任务备份的方法、装置和系统

一种云数据中心任务备份的方法、装置和系统

引用

作者：夏云霓周刚罗辛俞可朱庆生 400045 重庆市沙坪坝区沙正街174号

本发明公开了一种云数据中心任务备份的方法、装置和系统，属于云计算系统控制领域，本发明首先获取云数据中心各服务器的历史故障出现时间的信息，计算故障间隔时间和单位时间多步故障间隔时间增长率、计算下一次任务备份的等待时间、... 详细信息

标准号: CN104767806A

本发明公开了一种云数据中心任务备份的方法、装置和系统，属于云计算系统控制领域，本发明首先获取云数据中心各服务器的历史故障出现时间的信息，计算故障间隔时间和单位时间多步故障间隔时间增长率、计算下一次任务备份的等待时间、计算近期单个服务器最大故障数、近期单个服务器最小故障数、备份任务源服务器的序号和备份任务目的服务器的序号；然后进行任务备份。本发明能够根据云数据中心中各服务器可靠性的变化趋势，评估未来系统整体崩溃的风险，提前进行预防性的任务备份，并制定可变的控制间隔时间，避免了“备份过频”和“备份不足”两个极端。

关键词：备份服务器数据中心备份任务间隔时间故障数故障间隔时间目的服务器计算故障历史故障系统控制云计算增长率评估预防风险

来源：评论

学校读者我要写书评

暂无评论

基于节点识别的慢任务调度算法

引用

通信学报 2014年第7期35卷 122-128页

作者：崔云飞李新明李艺刘东北京航天飞行控制中心北京100094 装备学院复杂电子系统仿真重点实验室北京101416

为了降低大数据处理集群在执行任务过程中的慢任务对作业执行效率的影响,提出了一种识别慢任务、备份慢任务、减少慢任务相结合的调度算法——TQST算法。首先,通过判断节点能力和任务执行时间,建立慢节点、非常慢节点和慢任务队列;其次... 详细信息

为了降低大数据处理集群在执行任务过程中的慢任务对作业执行效率的影响,提出了一种识别慢任务、备份慢任务、减少慢任务相结合的调度算法——TQST算法。首先,通过判断节点能力和任务执行时间,建立慢节点、非常慢节点和慢任务队列;其次,根据预判备份执行价值确定如何启动慢任务的备份任务,提高了备份执行的作用;然后,在节点识别的基础上,规避为非常慢节点分配任务,从根本上减少慢任务的产生,提高作业执行效率。实验结果表明,TQST算法在作业响应时间等方面优于已有的慢任务调度算法。

关键词：大数据慢任务备份任务 Map-Reduce

来源：评论

学校读者我要写书评

暂无评论

基于预测的Hadoop任务调度算法优化

基于预测的Hadoop任务调度算法优化

引用

作者：袁小卉华中科技大学

学位级别：硕士

在出现落后任务时,现有的Hadoop推测式执行任务调度器会在空闲节点上为该任务进行备份执行,但并未周全地考虑该空闲节点的当前性能,可能造成这次备份任务仍然失败或执行速度非常慢,导致执行备份任务的失败率较高,不仅占用较多系统资源... 详细信息

在出现落后任务时,现有的Hadoop推测式执行任务调度器会在空闲节点上为该任务进行备份执行,但并未周全地考虑该空闲节点的当前性能,可能造成这次备份任务仍然失败或执行速度非常慢,导致执行备份任务的失败率较高,不仅占用较多系统资源并且延迟了系统响应时间。因此,研究现有的Hadoop任务调度算法,针对备份任务的调度执行提出改进方案,对提高系统性能有非常重要的意义。提出了基于预测的Hadoop任务调度优化算法——CPL(Computation Prediction of Late)调度算法,主要包含两个优化点:首先,在系统中维护两个预测队列,分别为CPU空闲型节点队列和I/O空闲型节点队列。队列内部按执行任务失败率升序排序,在匹配任务和节点类型的基础上,预测即将空闲且失败率低的节点执行备份任务,降低了执行备份任务的失败率;其次,利用Map任务占用CPU时间片段的总和对现有的任务分类算法进行了修正,提出了更加准确的任务类型划分方法。通过Cloud Sim云计算仿真平台进行仿真实验,对CPL调度算法的性能进行了验证。结果表明:CPL调度算法的作业响应时间相比于FIFO调度算法和LATE调度算法分别降低了20%和14%;CPL调度算法比LATE调度算法执行备份任务的失败率平均降低了16%。

关键词： Hadoop 备份任务任务调度 CPL调度算法

来源：评论

学校读者我要写书评

暂无评论

异构环境下增强自适应能力的MapReduce调度算法研究

异构环境下增强自适应能力的MapReduce调度算法研究

引用

作者：余丽萍河南理工大学

学位级别：硕士

MapReduce是一个编程模型，也是一个算法模型，用于处理和生成的超大数据集的相关实现。Hadoop是MapReduce的开源实现，它不仅广泛应用于批量大作业，同时也用在处理相对低效率的短作业。然而，现有的Hadoop都是建立在虚拟的同构集群下... 详细信息

MapReduce是一个编程模型，也是一个算法模型，用于处理和生成的超大数据集的相关实现。Hadoop是MapReduce的开源实现，它不仅广泛应用于批量大作业，同时也用在处理相对低效率的短作业。然而，现有的Hadoop都是建立在虚拟的同构集群下，并使用假设条件来决定落后队列中的任务何时推测式执行，但是这种虚拟的同构在实践中却是不可行的。　　目前我们要解决的问题是如何高效地运行推测执行机制使系统性能最大化。本文主要研究了Hadoop默认的调度器和异构环境下LATE调度器和H-LATE调度器推测执行机制的不足。在 H-LATE调度算法的基础上提出了一个增强自适应能力的KSAMR调度算法，来提高MapReduce中落后任务的重执行。为了更准确得识别慢任务，该算法记录了每个节点的历史信息，采用机器学习技术 K-means聚类算法将记录节点阶段进度值的历史信息划分为K个聚蔟，动态地调节阶段进度值参数，平衡节点上的负载，准确地查找慢任务。并将节点进一步分类，从而能够在快速节点上启动落后任务的备份任务，从而减小响应时间，并尽量避免节点空载，以免浪费系统资源。　　为了验证该算法的性能，本文搭建了Hadoop集群，并在该集群上实现KSAMR调度算法。通过大量的试验数据，对影响系统性能参数进行合理的配置。最后通过三个指标：任务阶段进度值鉴别能力、剩余时间鉴别能力、慢任务鉴别能力验证增强自适应的MapReduce调度算法的有效性。试验结果表明KSAMR调度算法通过准确估计任务的执行时间并启动备份任务显著地提高了MapReduce调度算法的性能。

关键词： MapReduce调度算法异构环境自适应能力备份任务机器学习

来源：评论

学校读者我要写书评

暂无评论

基于可靠性约束的多核节能调度策略研究

基于可靠性约束的多核节能调度策略研究

引用

作者：刘靖康武汉理工大学

学位级别：硕士

近些年来,多核技术在许多领域得到了广泛的应用,虽然多核处理器强化了设备系统的性能,但它也一定会带来更高的功耗。众所周知,较高的功耗必然会导致处理器系统的温度升高,以至于在很大程度上使系统可靠性降低。因此,功耗最小化是多核系... 详细信息

近些年来,多核技术在许多领域得到了广泛的应用,虽然多核处理器强化了设备系统的性能,但它也一定会带来更高的功耗。众所周知,较高的功耗必然会导致处理器系统的温度升高,以至于在很大程度上使系统可靠性降低。因此,功耗最小化是多核系统所关心的主要问题之一,可靠性要求也必然存在于多核平台的应用之中。所以,必须对任务进行合理分配和调度才能在满足系统可靠性的同时减少能量消耗,而这两方面的优化研究却又存在着相互促进和制约的关系。因此,如何在保证系统运行时满足一定可靠性的前提下尽可能减少系统能耗,是多核处理器系统任务调度技术研究中亟待解决的问题,于当今计算机领域的各种应用都有着重要的实际意义。本文分别以多核平台下的帧任务及硬实时周期任务为对象,对基于可靠性约束的多核节能调度策略进行研究。主要研究工作如下:面向帧任务模型,以降低能耗并保证原始可靠性为目标,针对基于可靠性的动态电源管理策略中存在的问题,本文提出基于任务排序和动态回收的单核任务调度策略TSDR。该策略通过为任务安排一定数量的恢复块作为备份任务来保证可靠性目标,并且以任务排序为基础、结合了混合空闲回收的思想,在进行恢复块回收时动态地调整任务的运行频率。实验表明,在无故障发生的情况下,该策略与对比策略相比可节省14.5%的能耗;并且在设定一个故障发生时,也能比对比策略节能19.7%左右。然后在多核处理器平台,依据最坏适应调度方法将TSDR策略进行扩展,提出多核节能调度策略WFD-TSDR。通过实验表明,当任务可以向更多的处理器核分配时具有更好的节能效果。随后将任务模型调整为硬实时周期任务,以达到节约能耗、满足原始可靠性且容忍单一永久故障为目标,本文对基于固定优先级的备用备份策略做出了改进、提出基于混合任务和动态优先级的任务调度策略MTDP。由于硬实时周期任务不同于帧任务,数量较多且截止期均不同,该策略为每个主任务分配对应的备份任务以确保系统可靠性目标。并且基于任务混合的分配,该策略对于双核处理器而言还可以容忍单一永久故障。在调度中除了将主副版本任务混合分配给处理器,还结合动态优先级的思想增强可调度性、通过动态地计算预留时间减少主副任务的重叠以降低能耗。在最好情况下,即无故障发生时MTDP策略比对比策略节能可达17%左右;在最坏情况下,即所有主任务都发生故障时该策略也可比对比策略节省20%左右的能耗。为了进一步验证MTDP策略的有效性,以分簇思想为依据将MTDP策略实现于多核处理器平台,提出多核节能调度策略CDU-MTDP。实验结果表明CDU-MTDP策略在节能方面优于对比策略,最高可节省25%左右的能耗。

关键词：可靠性约束节能调度备份任务空闲回收多核处理器

来源：评论

学校读者我要写书评

暂无评论

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案：

请选择收藏分类：

通借通还

建议与咨询 留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案： 新增检索档案 确定 取消

请选择收藏分类： 新增自定义分类 确定 取消

通借通还

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

请选择保存的检索档案：

请选择收藏分类：