检索结果-内蒙古大学图书馆

程序员 2014年第12期 98-103页

作者：鞠大升美团

以Kafka、Storm和Samza为代表的实时计算技术，提供了不同于MapReduce的另一种大数据解决方案，更好地解决了海量数据处理的时效性问题。本文将从需求、架构、应用和优化等方面介绍美团在实时计算技术方面的应用和实践经验。大数据技术... 详细信息

以Kafka、Storm和Samza为代表的实时计算技术，提供了不同于MapReduce的另一种大数据解决方案，更好地解决了海量数据处理的时效性问题。本文将从需求、架构、应用和优化等方面介绍美团在实时计算技术方面的应用和实践经验。大数据技术正改变着互联网行业。一方面是以Hadoop／MapReduce为代表的批量计算技术，生态圈已发展相对成熟；

关键词：实时计算应用 MapReduce 计算技术海量数据处理互联网行业实践经验数据技术

来源：评论

学校读者我要写书评

暂无评论

百度实时计算应用实践

引用

程序员 2014年第3期 116-120页

作者：刘锋甄鹏刘贺百度基础架构部

实时计算及相应的应用实践是目前大数据领域的一个热点。本刊2月《百度实时计算系统》一文中已介绍了百度实时计算系统Dstream和Gem㈣的相关架构和技术，本文则主要分享这两套实时计算平台在百度实际生产环境中的应用实践。

关键词：实时计算百度应用计算系统生产环境计算平台 Gem 架构

来源：评论

学校读者我要写书评

暂无评论

基于分布式实时计算框架的低压台区线损智能诊断分析

引用

现代管理 2021年第2期11卷 162-170页

作者：唐伟宁钟术海鞠默欣覃华勤孔凡强王莹煜余达菲刘慧国网吉林省电力有限公司营销服务中心吉林长春北京科东电力控制系统有限责任公司北京国网吉林省电力有限公司电力科学研究院吉林长春

针对低压台区复杂的现场情况,通过研究分析影响台区线损率的因素,实时准确的分析线损率变化的原因,便于对台区线损进行个性化细化管理,更加准确的定位问题台区。本文致力于进一步推动台区线损管理由结果管理向过程管理转变,提高低压台... 详细信息

针对低压台区复杂的现场情况,通过研究分析影响台区线损率的因素,实时准确的分析线损率变化的原因,便于对台区线损进行个性化细化管理,更加准确的定位问题台区。本文致力于进一步推动台区线损管理由结果管理向过程管理转变,提高低压台区线损管理水平和工作质量,从硬件、软件、服务三个方面提出了改善低压台区线损治理问题的方法。通过加装智能硬件设备可提供数据支撑,识别台户关系,实现分时、分段、分支、分相的线损计算,定位高损、负损台区具体位置。基于业务规则判断台区线损是否异常,利用智能用电大数据及数据挖掘分析技术对台区线损异常进行智能诊断分析,生成智能诊断分析报告,为线损异常问题整改提供咨询支撑,辅助现场人员做分析决策。另外在提升系统运行效率的同时也保障系统的业务扩展性与灵活性,增加实时计算功能的同时对现有的集中式关系型数据库进行分布式化改造。在国网某省级电力公司用电信息采集系统优化升级改造项目中的工程应用,对提升线损异常智能化、精益化的管控能力取得了很好的成效。

关键词：台区线损智能诊断分布式架构实时计算大数据

来源：评论

学校读者我要写书评

暂无评论

滴滴实时计算平台在运营监控方面的应用

滴滴实时计算平台在运营监控方面的应用

引用

2017中国大数据技术大会

作者：罗李基础平台部-大数据架构部

大数据架构部负责滴滴大数据实时和离线计算平台基础设施，存储和计算引擎的版本开发,升级和维护(hadoop/hive/spark/flink/druid/hbase/phoenix/Alluxio），离线&实时平台集群的开发,管理,维护,调优,升级，提供离线&实时开发平... 详细信息

大数据架构部负责滴滴大数据实时和离线计算平台基础设施，存储和计算引擎的版本开发,升级和维护(hadoop/hive/spark/flink/druid/hbase/phoenix/Alluxio），离线&实时平台集群的开发,管理,维护,调优,升级，提供离线&实时开发平台,调度系统,管理平台和数据分析平台，服务所有滴滴对内数据业务，两位开源社区PMC,Committer和若干Contributor,分别参与Yarn,HDFS,Druid,Spark,Alluxio的社区贡献.

关键词：大数据系统架构实时计算运营监控

来源：评论

学校读者我要写书评

暂无评论

Spark Streaming在实时计算中的应用研究

引用

电脑知识与技术 2018年第9期14卷 258-259页

作者：谢艳晴长江大学计算机科学学院湖北荆州434023

Spark Streaming作为目前最为流行的一种实时流计算框架,在大数据时代,企业搭建实时计算平台中占据着举足轻重的地位。其良好的扩展性、高吞吐量以及容错机制能够满足我们很多场景应用。

关键词： Spark Streaming 实时计算

来源：评论

学校读者我要写书评

暂无评论

基于移动互联网大数据的异构实时计算架构分析

引用

自动化技术与应用 2020年第9期39卷 44-47页

作者：陈海倩鼎信信息科技有限责任公司广东广州510623

随着大数据技术的发展和不断应用,许多问题也暴露出来,数据异构是影响数据处理速度和质量的重要因素。本文分析了大数据的特点并引申出电网大数据的特性,阐述了大数据管理的一般现状,提出了数据异构情况下算法的选择原则,给出了本文异... 详细信息

随着大数据技术的发展和不断应用,许多问题也暴露出来,数据异构是影响数据处理速度和质量的重要因素。本文分析了大数据的特点并引申出电网大数据的特性,阐述了大数据管理的一般现状,提出了数据异构情况下算法的选择原则,给出了本文异构数据实时计算的框架设计和主要功能模块设计的具体内容,并将本文的设计应用到具体实践中。

关键词：移动互联网大数据异构实时计算

来源：评论

学校读者我要写书评

暂无评论

基于变时基数据矩阵构造和实时计算的海洋平台结构参数识别

基于变时基数据矩阵构造和实时计算的海洋平台结构参数识别

引用

第八届全国振动理论及应用学术会议

作者：何林欧进萍哈尔滨工业大学土木工程学院哈尔滨工业大学土木工程学院

本文首先用随机减量方法提取海洋平台结构自由振动信号,在此基础上,提出了利用稳健标准差统计函数,确定虚拟测点扩展时间的变时基方法,利用此方法动态组建结构的时域动态特征数据矩阵,同时利用二阶残差矩阵广义逆快速计算方法,实现基于... 详细信息

本文首先用随机减量方法提取海洋平台结构自由振动信号,在此基础上,提出了利用稳健标准差统计函数,确定虚拟测点扩展时间的变时基方法,利用此方法动态组建结构的时域动态特征数据矩阵,同时利用二阶残差矩阵广义逆快速计算方法,实现基于输出的现场实时计算。为了验证算法,首先用三层框架模型的仿真数据识别结构的动力参数,然后对海洋平台1:10的模型和实际平台结构数据进行了计算,结果表明,该方法能够较好地完成复杂结构参数的在线实时识别,具有较好的实际工程应用前景。

关键词：自由振动信号提取变时基实时计算基于输出的参数识别

来源：评论

学校读者我要写书评

暂无评论

面向移动互联网大数据的异构实时计算框架