检索结果-内蒙古大学图书馆

作者：代一尘华中科技大学

学位级别：硕士

有关流数据分析与管理的研究是目前国际数据库研究领域的一个热点。在过去30多年中,尽管传统数据库技术发展迅速且得到了广泛应用,但是它不能够处理在诸如网络路由、传感器网络、股票分析等应用中所生成的一种新型数据,即流数据。流数... 详细信息

有关流数据分析与管理的研究是目前国际数据库研究领域的一个热点。在过去30多年中,尽管传统数据库技术发展迅速且得到了广泛应用,但是它不能够处理在诸如网络路由、传感器网络、股票分析等应用中所生成的一种新型数据,即流数据。流数据的特点是数据持续到达,且速度快、规模宏大。分布式处理能力和动态发现并利用动态数据流是近来流数据处理模型研究的热点。如何解决分布式系统中信息之间的异构问题和协作问题是研究的重点。在分布式流数据处理系统中引入数据源的语义描述,不仅可以有效的解决分布式流数据中可能出现的异构问题,通过本体之间的映射机制动态的增减数据源,而且可以通过语义强大的推理机制,有效的提高系统的自适应能力。基于现有的领域本体构建方法,提出了一个可行的构建领域本体的工程学方法,并构建了流数据和系统状态两个领域本体。流数据领域本体的引入很好的支持了流数据的动态语义集成;系统状态本体支持系统状态的推理,是系统自适应机制实现的基础。系统的负载是数据流管理系统中的一个重要课题,也是系统自适应机制的重要组成部分。利用现有的本体推理工具,结合实际分布式数据流管理系统提出了一个数据流动态语义集成和系统自适应机制的框架。实现了一个自适应的数据流过滤算法,在分布式环境下可以有效的减少数据通信量,分析实现了系统运行过程中CPU和内存两种资源在系统超载情况下的调整策略,并进行了试验测试和分析。

关键词：数据流管理系统自适应语义本体

来源：评论

学校读者我要写书评

暂无评论

传感器网络中间件数据管理模块的设计与实现

传感器网络中间件数据管理模块的设计与实现

引用

作者：陈日光东北大学

学位级别：硕士

近年来,随着传感器技术、通信技术、嵌入式和分布式计算技术的快速发展和日益成熟,无线传感器网络开始在世界范围内出现。传统的数据库管理系统适合处理有限存储数据集的一次性查询。然而,由于传感器网络中的数据以大量、快速、时变的... 详细信息

近年来,随着传感器技术、通信技术、嵌入式和分布式计算技术的快速发展和日益成熟,无线传感器网络开始在世界范围内出现。传统的数据库管理系统适合处理有限存储数据集的一次性查询。然而,由于传感器网络中的数据以大量、快速、时变的数据流形式持续到达的,需要对数据流进行长期的或连续的查询处理。因此,如何开发一种有效的数据流管理系统来满足传感器网络数据流的处理要求已成为当前的一个研究热点。本文设计并实现了一个应用于传感器网络网关中间件的数据流管理原型系统,使其支持数据流上的持续查询,用户能够像使用传统数据库一样使用数据流管理系统来对数据流进行管理。本文首先讨论了已有的典型数据流管理系统,总结提出了数据流管理系统的体系结构,以及数据流管理的主要研究工作。接着对数据流的相关技术进行研究,包括数据流模型、查询语句解析、数据流连续查询算法、数据流查询语言、查询优化策略等；设计了一个以SQL为基础应用于数据流管理系统中的数据流查询语言CQL；提出了基于窗口的分桶聚集查询算法和带缓存的基于窗口的连接查询算法；并提出了循环扫描的操作符调度策略。最后,设计并实现了数据流管理系统,数据流管理系统的设计参考了很多传统数据库管理系统的思想,同时又做了改进使其能够更有效的应用于数据流环境中,使用户能够像使用传统数据库一样高效地管理传感器网络数据流。

关键词：无线传感器网络数据流数据流管理系统连续查询操作符

来源：评论

学校读者我要写书评

暂无评论

工业实时数据在线分析平台研究

工业实时数据在线分析平台研究

引用

作者：邓磊华中科技大学

学位级别：硕士

随着工业信息化研究和应用的逐渐加大和普及，信息化系统内部针对广域分布设备的数据采集规模、采集精度以及采集速度的需求也不断提高。在数据呈海量增长的趋势下，工业实时数据库系统作为能够实时采集、存储以及管理来自工业实时数据... 详细信息

随着工业信息化研究和应用的逐渐加大和普及，信息化系统内部针对广域分布设备的数据采集规模、采集精度以及采集速度的需求也不断提高。在数据呈海量增长的趋势下，工业实时数据库系统作为能够实时采集、存储以及管理来自工业实时数据源的专用数据库系统，已经广泛的应用到厂级监控系统、配网自动化、配电自动化等信息化应用系统中。通过数据分析提炼出实时数据中的有效信息是工业实时数据库系统的重要功能。但是目前工业实时数据库已有的数据分析方式是离线的，并且只能提炼数据的初步信息，在数据连续不断的到达下,原有的基于离线的静态数据分析已无法满足实时数据库的实时应用需求，用户需要在线动态的数据分析方式来实时响应不断到达的数据。本文以自研工业实时数据库为基础，结合数据流管理系统中在线分析的相关模型及方法，设计了基于工业实时数据库的在线分析平台。分析平台向外部提供一种声明性的类SQL查询语言来共上层进行分析应用，能够实现对实时数据的多尺度分析、连续查询、数据抽象等功能。同时，针对时间序列数据对关系代数进行了扩展，在使得查询更像是在关系表上进行操作的同时，提供在时间轴上的查询语义。在分析平台的基础上，针对工业实时数据的特点，本文提出了一种扩展自Bloom过滤器（Bloom Filters，BF）的数据结构概率Bloom过滤器（Probability Bloom Filters，PBF）。相对于BF仅能提供集合成员查询的功能，PBF还能获取成员所带的属性值。并从理论上证明了针对PBF查询结果的准确性以及PBF进行组合操作的能力。接着针对工业实时数据的特点，基于PBF提出一种能够表示采集数据点集合的概要数据结构Multi-PBF（MPBF）。同时考虑到实时数据重要性随着时间递减，提出了MPBF的倒金字塔衰减演化算法。最后对MPBF在在线分析平台上的应用进行了仿真验证，进过对结果的分析可知，MPBF达到了设计要求且具有一定的实用价值。

关键词：工业实时数据库数据流管理系统在线分析概要数据结构 Bloom Filters

来源：评论

学校读者我要写书评

暂无评论

数据流多重持续查询优化技术研究及其在入侵检测中的应用

数据流多重持续查询优化技术研究及其在入侵检测中的应用

引用

作者：沈星星中国科学院研究生院（计算技术研究所）

学位级别：硕士

随着网络技术的发展,越来越多的应用系统需要处理各种以流动形式存在的数据。由于流数据与静态数据的处理有着巨大差异,传统的数据库管理技术已经不能适应对高速、变化的数据流进行实时处理的需求。与此同时,基于数据流的持续查询处理... 详细信息

随着网络技术的发展,越来越多的应用系统需要处理各种以流动形式存在的数据。由于流数据与静态数据的处理有着巨大差异,传统的数据库管理技术已经不能适应对高速、变化的数据流进行实时处理的需求。与此同时,基于数据流的持续查询处理技术在近年来得到了学术界的广泛关注。例如,网络入侵检测必须不间断、无延迟地处理在线、持续流动的高速网络报文,是数据流技术应用的典型场景。本文从理论模型和实际应用两方面出发,研究了大规模数据流持续查询技术及其在网络入侵检测中的应用。具体工作如下: 总结了国内外数据流查询技术的研究现状以及网络入侵检测所面临的挑战,阐述了数据流多重持续查询优化技术的重要性及其在网络安全中的应用背景。总结了网络入侵检测等安全应用系统与数据流管理技术之间的紧密联系,分析了数据流处理基础平台对相关应用系统的支持。通过将网络数据关系化以及检测规则关系化,建立了网络入侵检测的关系数据流模型。该模型将为基于网络数据流处理的相关网络安全系统提供共性的数据处理平台,为进一步提高相关应用系统的数据共享能力和系统效能提供了基础支持。进一步研究了基于单流过滤的多重持续查询优化算法。通过将大规模查询操作编译为一个自动机匹配树,能够消除查询谓词执行过程中的许多冗余操作。在此基础上,引入决策树模型,并利用决策树的信息增益对各个属性的选择性进行度量,调整属性的匹配次序,从而优化匹配时间。针对网络入侵检测中所涉及到的不同数据类型,分别设计了整型字段、flags型字段以及字符型字段的匹配决策树节点的数据结构和匹配方法。试验表明,优化算法能够大大减少谓词执行过程中的比较次数,并且随着规则数目的增加,比较次数保持稳定,不会相应线性增长。本文最后设计和实现了一个基于关系数据流模型的入侵检测系统IceNetwork。系统采用了多重持续查询优化算法。通过构造一个入侵检测系统的测试环境,对系统进行了功能验证。试验证明了这种设计思路是正确可行的。通过性能对比试验,比较了IceNetwork原型系统与Snort在强攻击流压力下的执行效率。测试不同流量压力下的平均丢包率,Snort为45%,IceNetwork为4.5%。试验显示IceNetwork比Snort有更高的处理性能。

关键词：数据流处理数据流管理系统多重持续查询优化网络入侵检测

来源：评论

学校读者我要写书评

暂无评论

数据流管理若干关键问题的研究

引用

成都信息工程学院学报 2008年第3期23卷 269-274页

作者：王建涛蔡淮西南交通大学信息科学与技术学院四川成都610031

面向数据流而设计的管理系统——数据流管理系统,能有效地处理输入数据流并提供持续查询的功能。从整体上分析了数据流管理系统的体系结构和构成要素,对数据流的数据模型和流查询进行了重点讨论。

关键词：数据流数据流管理系统连续查询数据流模型

来源：评论

学校读者我要写书评

暂无评论

数据流QoS自适应框架聚集查询卸载策略的研究

引用

中国科技论文在线 2007年第10期2卷 735-740页

作者：杜钰韩东红王国仁东北大学信息学院沈阳110004

本文研究了在数据流QoS自适应框架中,数据流聚集查询的卸载算法问题。在CPU处理能力不足内存超载情况下,在聚集查询操作中对负载进行卸载,并能满足一定的服务质量。对于一个或多个聚集查询存在的情况下,将原有的框架从得到近似结果进一... 详细信息

本文研究了在数据流QoS自适应框架中,数据流聚集查询的卸载算法问题。在CPU处理能力不足内存超载情况下,在聚集查询操作中对负载进行卸载,并能满足一定的服务质量。对于一个或多个聚集查询存在的情况下,将原有的框架从得到近似结果进一步拓展为可以得到精确结果子集的系统框架。在保留原有清洗器,调度器以及卸载器功能的前提下,进一步改善卸载器的功能,并加入新的如窗口分配器、聚集操作器两个新的功能模块,以确保满足结果是正确结果的子集。本文使用新的卸载算法与原框架相结合,保证系统在执行聚集查询操作时能在动态环境中具有良好的自适应性。实验结果表明,该方法在CPU利用率和错失事优于其它方法。

关键词：计算机系统结构数据流管理系统聚集卸载服务质量

来源：评论

学校读者我要写书评

暂无评论

数据流处理技术

引用

佳木斯大学学报（自然科学版） 2004年第4期22卷 556-560页

作者：刘景春王永利佳木斯大学计算机公共教学部黑龙江佳木斯154007 东南大学计算机科学与工程系江苏南京210096

　处理潜在无限的连续数据流的应用日益流行,传统数据库对快速变化的数据流进行在线分析的支持存在很多限制,需要对已存在的技术进行广泛的扩展研究,构建新的系统管理数据流.本文回顾近来数据流管理系统领域的相关工作和流项目的研究情... 详细信息

　处理潜在无限的连续数据流的应用日益流行,传统数据库对快速变化的数据流进行在线分析的支持存在很多限制,需要对已存在的技术进行广泛的扩展研究,构建新的系统管理数据流.本文回顾近来数据流管理系统领域的相关工作和流项目的研究情况;分析了连续查询处理的新需求和挑战及数据流系统新颖之处.并提出在数据流研究方面的一些新看法.

关键词：数据流数据流管理系统连续查询

来源：评论

学校读者我要写书评

暂无评论

数据流中的频繁模式挖掘

引用

计算机技术与发展 2007年第12期17卷 53-55,59页

作者：程转流王本年合肥工业大学计算机学院南京大学计算机学院江苏南京210093

近年来,数据流挖掘越来越引起研究人员的关注,已逐渐成为许多领域有用的工具。如何利用有限的存储空间高效地挖掘出频繁模式已成为数据流挖掘的基本问题,具有很强的现实意义和理论价值。在论述数据流管理系统模型的基础上,深入分析了国... 详细信息

近年来,数据流挖掘越来越引起研究人员的关注,已逐渐成为许多领域有用的工具。如何利用有限的存储空间高效地挖掘出频繁模式已成为数据流挖掘的基本问题,具有很强的现实意义和理论价值。在论述数据流管理系统模型的基础上,深入分析了国内外的各种频繁模式挖掘算法,并指出这些算法的特点及其局限性。最后对未来的研究方向进行了展望。

关键词：数据挖掘数据流频繁模式数据流管理系统

来源：评论

学校读者我要写书评

暂无评论

基于硬件预处理的数据流并发连接查询优化算法

引用

电脑知识与技术 2016年第11X期12卷 25-26页

作者：周虹富春岩支援刘越于占龙薛佳楣韦韫韬王超张立铭李微娜佳木斯大学黑龙江佳木斯154007

目前在金融、移动数据、网络监控及物联网等领域中,经常会需要处理一些海量的、实时的、需要快速响应的数据流。为了对这些数据流进行有效的管理,提出了基于硬件预处理的数据流管理系统,并对相应的数据流并发连接算法进行了优化,以得到... 详细信息

目前在金融、移动数据、网络监控及物联网等领域中,经常会需要处理一些海量的、实时的、需要快速响应的数据流。为了对这些数据流进行有效的管理,提出了基于硬件预处理的数据流管理系统,并对相应的数据流并发连接算法进行了优化,以得到数据流预处理器所需的控制信息。

关键词：数据流管理系统连续查询查询优化

来源：评论

学校读者我要写书评

暂无评论

数据流技术及查询算法研究

引用

微型电脑应用 2007年第12期23卷 59-60页

作者：张素智魏艳郑州轻工业学院计算机与工程学院

数据流技术是一种正在兴起的新型数据形式,信息以数据序列的形式产生并且需要实时、持续地进行处理。数据流管理系统(DSMS)是面向数据流而设计的数据管理系统,它能有效地处理输入流数据并提供持续检索的功能。本文从整体上介绍数据流的... 详细信息

数据流技术是一种正在兴起的新型数据形式,信息以数据序列的形式产生并且需要实时、持续地进行处理。数据流管理系统(DSMS)是面向数据流而设计的数据管理系统,它能有效地处理输入流数据并提供持续检索的功能。本文从整体上介绍数据流的相关技术,重点分析了DSMS的特点以及相应的查询算法的分析。

关键词：数据流查询算法数据流管理系统

来源：评论

学校读者我要写书评

暂无评论

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案：

请选择收藏分类：

通借通还

建议与咨询 留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案： 新增检索档案 确定 取消

请选择收藏分类： 新增自定义分类 确定 取消

通借通还

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

请选择保存的检索档案：

请选择收藏分类：