检索结果-内蒙古大学图书馆

作者：袁景凌肖骅罗忆李新平罗佩江春鹏 430070 湖北省武汉市洪山区珞狮路122号

本发明公开了一种基于多进程数据流的海量虚实数据快速比对方法，首先整理虚拟数据，形成标准数据文件，依据标准数据格式对实测数据进行预处理，对齐数据长度；然后将虚拟数据与实测数据按对应唯一编码合并成一条数据，形成单一数据文... 详细信息

标准号: CN112052260A

本发明公开了一种基于多进程数据流的海量虚实数据快速比对方法，首先整理虚拟数据，形成标准数据文件，依据标准数据格式对实测数据进行预处理，对齐数据长度；然后将虚拟数据与实测数据按对应唯一编码合并成一条数据，形成单一数据文件；接着读入数据流，通过一个循环遍历整个数据文件，比对每条数据前后半段差异；最后直接将内存中的数据流按硬件环境进行分块，通过多线程并行方式同时遍历分块后的内存数据，获取分块比对结果文件。本发明通过多进程并行处理与数据流计算的有效融合，实现虚拟数据与实测数据在内存中高速比对的同时能避免数据量过大而导致内存存储限制，从而能提高生产或工程项目中海量数据比对的效率。

关键词：数据流实测数据数据文件虚拟数据分块多进程比对内存预处理标准数据格式数据流计算比对结果并行处理并行方式存储限制工程项目快速比对内存数据数据比对唯一编码循环遍历硬件环境有效融合对齐多线程后半段数据量中高速遍历读入合并生产

来源：评论

学校读者我要写书评

暂无评论

一种可重构分布式数据流架构性能的仿真平台及仿真方法

一种可重构分布式数据流架构性能的仿真平台及仿真方法

引用

作者：王重阳牛镇镇付书峰唐士斌欧阳鹏 100080 北京市海淀区宝盛南路1号院26号楼2层201

本发明属于仿真平台技术领域，具体公开了一种可重构分布式数据流架构性能的仿真平台及仿真方法。本发明提出的仿真平台及仿真方法，可以在粗粒度的事务级对计算系统进行仿真，不会涉及到芯片设计的RTL级别的仿真，能够显著提高编译速... 详细信息

标准号: CN118171614A

本发明属于仿真平台技术领域，具体公开了一种可重构分布式数据流架构性能的仿真平台及仿真方法。本发明提出的仿真平台及仿真方法，可以在粗粒度的事务级对计算系统进行仿真，不会涉及到芯片设计的RTL级别的仿真，能够显著提高编译速度和仿真速度，并快速地找到最优设计，实现版本迭代；此外，该仿真平台可通过对软件侧、硬件侧、运行负载、计算任务数据流进行表征，不仅可以准确地描述数据流计算特性，高效模拟分布式计算集群，还实现了工作负载运行时软件表达和硬件执行的解耦，提高了模型功能扩展的便利性。

关键词：仿真平台分布式数据流分布式计算任务数据流数据流计算工作负载计算系统模型功能芯片设计硬件执行运行负载最优设计便利性粗粒度可重构运行时迭代集群解耦编译架构事务

来源：评论

学校读者我要写书评

暂无评论

一种实时数据流的统计方法和装置

一种实时数据流的统计方法和装置

引用

作者：韩路 710100 陕西省西安市国家民用航天产业基地东长安街666号航天城中心广场5号楼

本发明公开了一种实时数据流的统计方法和装置，涉及计算机技术领域。该方法的一具体实施方式包括：根据读取的数据流，注册所述数据流的虚拟表；在所述数据流的虚拟表上加载运行预置的SQL语句文件；将运行后得到的实时统计结果进行存... 详细信息

标准号: CN112148762A

本发明公开了一种实时数据流的统计方法和装置，涉及计算机技术领域。该方法的一具体实施方式包括：根据读取的数据流，注册所述数据流的虚拟表；在所述数据流的虚拟表上加载运行预置的SQL语句文件；将运行后得到的实时统计结果进行存储。该实施方式克服了数据流计算框架基于各种API算子对多个数据流进行处理时处理过程复杂的技术问题，进而达到通过编写SQL语句就可以替换复杂的转换计算函数，来实现业务场景下对实时数据流的统计的技术效果。

关键词：数据流实时数据流虚拟表计算机技术领域读取方法和装置数据流计算技术效果计算函数实时统计业务场景算子加载预置替换存储统计转换

来源：评论

学校读者我要写书评

暂无评论

基于消息队列的数据流处理检查点文件存储的方法及装置

基于消息队列的数据流处理检查点文件存储的方法及装置

引用

作者：郝常波聂铁铮于戈申德荣寇月 110819 辽宁省沈阳市和平区文化路三巷11号

本发明提供了一种基于消息队列的数据流处理检查点文件存储的方法及装置，其中该方法根据流式计算中产生的用于保存中间状态的检查点文件进行特征分析，将其存储结构与消息队列消息队列的存储模型进行逻辑适配，设计文件操作接口与消息... 详细信息

标准号: CN112199334B

本发明提供了一种基于消息队列的数据流处理检查点文件存储的方法及装置，其中该方法根据流式计算中产生的用于保存中间状态的检查点文件进行特征分析，将其存储结构与消息队列消息队列的存储模型进行逻辑适配，设计文件操作接口与消息操作接口的映射关系，使用Zookeeper保存映射关系元信息部分；自定义分布式文件系统协议，提供依赖库的无服务形式被上游流式处理应用所依赖，以一种对用户透明的运行方式，根据实现的映射规则将检查点数据路由到对应的消息队列存储结构中，当流式应用重启时，根据Zookeeper中的元信息获取到消息队列中相应的状态数据，进行任务恢复以实现数据流计算框架容错机制。

关键词：消息队列映射关系检查点元信息流式分布式文件系统消息队列存储数据流处理数据流计算操作接口存储结构存储模型服务形式流式处理任务恢复容错机制设计文件特征分析文件存储消息操作映射规则运行方式中间状态状态数据保存点数据透明的自定义路由适配重启应用上游检查

来源：评论

学校读者我要写书评

暂无评论

一种精简数据流指令集处理器

一种精简数据流指令集处理器

引用

作者：罗闳訚周志新何日辉尤培坤汤梦饶 361021 福建省厦门市火炬高新区软件园三期诚毅北大街8号1902室A区

本发明公开了一种精简数据流指令集处理器，包含片上存储器、平面运算器、立方体运算器、点运算器、张量运算器和指令控制器；所述片上存储器直接从片外存储器读取并保存计算数据，所述计算数据用于平面运算器、立方体运算器和点运算器... 详细信息

标准号: CN117151180A

本发明公开了一种精简数据流指令集处理器，包含片上存储器、平面运算器、立方体运算器、点运算器、张量运算器和指令控制器；所述片上存储器直接从片外存储器读取并保存计算数据，所述计算数据用于平面运算器、立方体运算器和点运算器的计算；所述张量运算器直接从片外存储器获取数据，根据来自指令控制器的指令配置信息，对张量数据执行调换、拆分、聚合以及反向聚合操作；所述指令控制器直接从片外存储器获取指令，并根据指令向平面运算器、立方体运算器、点运算器或张量运算器发送指令配置信息。本处理器具备精简的、有限的计算类型，可在具备通用计算特性的同时，保持数据流计算架构的高效性，从而具备高算力、高主频、低能耗的优点。

关键词：运算器片外存储器指令控制器片上存储器计算数据聚合指令集处理器数据流计算读取发送指令获取数据获取指令配置信息数据执行通用计算指令配置数据流处理器低能耗高效性主频调换架构指令保存

来源：评论

学校读者我要写书评

暂无评论

一种基于多进程数据流的海量虚实数据比对方法

一种基于多进程数据流的海量虚实数据比对方法

引用

作者：袁景凌肖骅罗忆李新平罗佩江春鹏 430070 湖北省武汉市洪山区珞狮路122号

标准号: CN112052260B

来源：评论

学校读者我要写书评

暂无评论

一种图数据流的处理方法、处理装置和存储介质

一种图数据流的处理方法、处理装置和存储介质

引用

作者：李德友张磊 100176 北京市北京经济技术开发区科创十一街18号C座2层221室

本申请公开了一种图数据流的处理方法、处理装置和存储介质，具体为获取计算任务；根据各个计算任务之间的依赖关系，将各个表示计算任务的图节点用方向线连接成有向无环图，采用有向无环图进行集成各个计算任务以建立图数据流计算模型... 详细信息

标准号: CN112148926A

本申请公开了一种图数据流的处理方法、处理装置和存储介质，具体为获取计算任务；根据各个计算任务之间的依赖关系，将各个表示计算任务的图节点用方向线连接成有向无环图，采用有向无环图进行集成各个计算任务以建立图数据流计算模型；配置图数据流计算模型中的各个图节点的算法组件参数，其中，算法组件为计算任务使用的算法计算框架；运行配置后的图数据流计算模型，并生成各个计算任务的计算结果；将计算结果渲染在对应的图数据流计算模型中的各个图节点上，以使点击图节点后显示对应的计算结果。本申请实施例通过可视化建模，集成算法计算框架，简化计算开发流程，并可视化的呈现计算结果，提升了图数据流建模及调度计算的效率。

关键词：数据流计算图节点有向无环图算法组件可视化建模数据流建模处理装置存储介质集成算法算法计算依赖关系运行配置数据流点击图方向线可视化配置图申请渲染调度开发

来源：评论

学校读者我要写书评

暂无评论

一种神经网络张量处理器的数据流高速缓存

一种神经网络张量处理器的数据流高速缓存

引用

作者：罗闳訚周志新何日辉 361021 福建省厦门市软件园三期诚毅北大街59号404-2单元

本发明公开了一种神经网络张量处理器的数据流高速缓存，包括数据地址映射模块、数据地址生成模块、特征数据SRAM存储器和参数数据SRAM存储器；数据流高速缓存外部连接一个大容量的片外存储器和一个神经网络计算模块，片外存储器保存所... 详细信息

标准号: CN112860596A

本发明公开了一种神经网络张量处理器的数据流高速缓存，包括数据地址映射模块、数据地址生成模块、特征数据SRAM存储器和参数数据SRAM存储器；数据流高速缓存外部连接一个大容量的片外存储器和一个神经网络计算模块，片外存储器保存所有的特征数据和参数数据，数据流高速缓存用于根据神经网络计算模块正在计算的输出张量的行地址，通过数据地址生成模块、数据地址映射模块生成的特征地址和参数地址，预取对应的特征数据和参数数据并缓存在小容量的特征数据SRAM存储器和参数数据SRAM存储器中。数据流高速缓存的一次索引可以输出计算1行输出特征张量所需的大量数据(如几百个字节)，在数据流计算架构下，数据流高速缓存拥有较高的存储效率。

关键词：数据流高速缓存存储器参数数据数据地址特征数据神经网络计算片外存储器生成模块映射模块数据流计算参数地址存储效率神经网络输出计算特征地址外部连接次索引大容量小容量行地址行输出处理器预取架构输出保存

来源：评论

学校读者我要写书评

暂无评论

能源电力企业辅助决策信息技术探讨

引用

电力信息化 2013年第5期11卷 13-17页

作者：李军方彤左新强国网能源研究院北京100052

针对大型能源企业日趋迫切的科学决策需求,综合研究机构作为企业的"智囊",应以信息技术为支撑,构建专业的信息系统来提升决策服务的及时性和有效性。基于此,首先梳理了国内外能源企业研究机构相关辅助决策信息技术进展情况,... 详细信息

针对大型能源企业日趋迫切的科学决策需求,综合研究机构作为企业的"智囊",应以信息技术为支撑,构建专业的信息系统来提升决策服务的及时性和有效性。基于此,首先梳理了国内外能源企业研究机构相关辅助决策信息技术进展情况,包括行业信息情报平台、学术信息传播平台、研究课题管理平台等;其次,针对电力行业,结合智能电网的发展规划,提出了电力企业研究机构未来信息化决策的发展方向,主要包括电力数据挖掘、电力流式调控、能源电力规划、运营分析监测和电力安全预警等;最后,描述了信息化建设的架构示例和预期效果。

关键词：决策支持运营管理商业智能大数据挖掘数据流计算

来源：评论

学校读者我要写书评

暂无评论

快速实现二维DFT的处理器阵列

引用

安徽师大学报 1994年第3期17卷 41-45页

作者：魏小君胡艳军安徽大学

本文给出了实现二维离散付里叶变换（２ＤＤＦＴ）的两种新阵列，两种结构方案都适用于ＶＬＳＩ技术，可用于多维高速输入输出处理器和ＦＦＴ的结构中。它的优点是减少了处理器元素（ＰＥ＿ｓ）之间的数据交换，并省去了通常所要的矩阵... 详细信息

本文给出了实现二维离散付里叶变换（２ＤＤＦＴ）的两种新阵列，两种结构方案都适用于ＶＬＳＩ技术，可用于多维高速输入输出处理器和ＦＦＴ的结构中。它的优点是减少了处理器元素（ＰＥ＿ｓ）之间的数据交换，并省去了通常所要的矩阵变换操作。

关键词：数据流计算多维 DFT 处理器

来源：评论

学校读者我要写书评

暂无评论

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案：

请选择收藏分类：

通借通还

建议与咨询 留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案： 新增检索档案 确定 取消

请选择收藏分类： 新增自定义分类 确定 取消

通借通还

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

请选择保存的检索档案：

请选择收藏分类：