检索结果-内蒙古大学图书馆

近几十年来,随着各行各业的高度信息化,尤其是科学研究、互联网、电子商务领域等的发展,数据正在以前所未有的速度飞快增长,大数据时代已经到来。如何有效的管理大数据,提高大数据的查询分析能力,是工业界和学术界的研究热点。索引技术是提高数据查询处理的有效方式,大数据存储方式的根本改变,使得原有的传统关系型数据库中成熟的索引技术不能直接应用于海量数据处理,大数据的海量性及复杂性等特征,要求大数据的索引机制必须满足支持多种查询、支持高效检索和易于维护等要求。为了解决大数据查询处理问题,需要针对大数据环境建立新的索引结构。本文提出了一种Hadoop下的基于位置编码索引树,利用MapReduce编程模型在处理大规模数据的优势,根据KNN查询的特点,提出MapReduce框架下的数据存储优化策略,通过将相似资源分开存储,达到在进行查询过程时,最大限度的提高MapReduce的并行性。首先将海量数据进行聚类,然后根据聚类数据分布特征,以质心为圆心对聚类中的数据对象进行同心圆分层,并对每层采用不同长度的二进制编码来表达,将所有数据对象的编码组织成索引树结构,缩短频繁查询的数据查找路径,达到查询时利用索引结构快速确定搜索空间目的,从而提高大数据检索效率。本文通过实验验证提出方法的有效性。从数据规模对查询效率影响、扩展性、K值对查询时间的影响以及跟非索引结构下的对比,实验结果表明本文提出的Hadoop下的基于位置编码索引树在KNN查询时查询效率具有明显提升并具有良好的扩展性。

关键词：大数据数据索引 KNN查询 MapReduce

来源：评论

学校读者我要写书评

暂无评论

文本数据索引技术研究及其在数字图书馆中的应用

文本数据索引技术研究及其在数字图书馆中的应用

引用

作者：李立环东北大学

学位级别：硕士

数字图书馆是二十一世纪全球文化科技竞争的焦点之一。这种竞争既是科学技术的竞争，更是知识经济时代的市场竞争。数字图书馆的建设已经成为当前评价一个国家信息基础水平的重要标志，也是近年来发达国家十分重视的基础性项目。数字图... 详细信息

数字图书馆是二十一世纪全球文化科技竞争的焦点之一。这种竞争既是科学技术的竞争，更是知识经济时代的市场竞争。数字图书馆的建设已经成为当前评价一个国家信息基础水平的重要标志，也是近年来发达国家十分重视的基础性项目。数字图书馆具有收藏数字化、操作电脑化、传递网络化、信息存贮自由化、资源共享化、结构连接化的特点。\n 信息检索是建设数字图书馆涉及到的多项技术之一。在庞大的信息资源中为用户提供科学、高效的检索信息的手段，是数字图书馆应具有的一项重要功能。\n 本文对直接影响数字图书馆建设的相关技术问题加以介绍，论述了目前国内外在数字图书馆方面的研究现状，介绍了中文全文检索的定义、建立中文全文索引的难点问题、以及目前对中文文本文件建立全文索引的三种实现方案。并针对该问题重点研究了数字图书馆中文本数据的索引技术，包括对以XML和MARC二种格式描述的元数据文本文档建立主题索引和对中文文本文档建立全文索引二个方面，论述了解析这两类元数据提取索引单元的相关技术和方法。\n 同时，设计了一个数字图书馆系统的体系结构，并给出图示，接着对系统中各个组成部分的功能进行了介绍，然后论述了在该设计方案下，系统是如何工作的，最后分析了本系统的特点。\n 最后，介绍了系统中索引生成器的具体实现。给出了对以XML和MARC格式描述的元数据文本文档建立主题索引和对中文文本文档建立全文索引的实现过程。对XML和MARC格式元数据的解析是采用的SAX接口即基于事件触发的方法。对中文文本文档建立全文索引时是选择双字符作为索引单元，可实现中英文及数字符号的混合检索。

关键词：数字图书馆元数据全文检索信息检索数据索引文本数据

来源：评论

学校读者我要写书评

暂无评论

SeiWebGIS数据索引及调度研究

SeiWebGIS数据索引及调度研究

引用

第三届中国国际数字城市建设技术研讨会

作者：杨白新王占昌大连市信息产业局辽宁大连116011 大连市信息资源管理中心辽宁大连116011

SeiWebGIS系统是大连市空间信息基础设施建设项目的一个WebGIS平台。重点论述了SeiWeb-GIS系统数据的索引技术和存储方式、数据的组织调度策略。提出了优化的四又树索引技术，有效地解决了大数据的索引问题。提出了以块为最小调度单位... 详细信息

SeiWebGIS系统是大连市空间信息基础设施建设项目的一个WebGIS平台。重点论述了SeiWeb-GIS系统数据的索引技术和存储方式、数据的组织调度策略。提出了优化的四又树索引技术，有效地解决了大数据的索引问题。提出了以块为最小调度单位的异步数据调入算法、最近最久未使用法和最高优先级法相结合的数据调出算法，从而确保了空间数据调度的高效率。

关键词：城市空间信息基础设施构建地理信息系统网络环境数据索引存储调度

来源：评论

学校读者我要写书评

暂无评论

面向配送路径智能优化的实时物流数据索引方法

引用

大众科技 2024年第5期26卷 16-19,28页

作者：刘宇南宁职业技术大学教育发展与信息服务中心(图书馆) 广西南宁530008

在配送路径智能优化的背景下,为获得较好的实时物流数据索引效果,文章提出并设计了一种面向配送路径智能优化的实时物流数据索引方法。该方法首先在配送路径智能优化背景下进行物流数据压缩传输设计,为之后的内容提供更好的数据依据;其... 详细信息

在配送路径智能优化的背景下,为获得较好的实时物流数据索引效果,文章提出并设计了一种面向配送路径智能优化的实时物流数据索引方法。该方法首先在配送路径智能优化背景下进行物流数据压缩传输设计,为之后的内容提供更好的数据依据;其次,基于R树布隆过滤器完成实时物流数据索引结构及数据更新设计;最后,以设计的索引结构为基础,完成实时物流数据的多维查询机制设计。实验结果表明,应用文章所提出的方法,实时物流数据索引查询召回率及准确率均较高,应用效果较好。

关键词：配送路径智能优化实时物流数据索引

来源：评论

学校读者我要写书评

暂无评论

空间数据索引方法研究

引用

建材与装饰 2012年第27期 135-136页

作者：何莹南宁市国土资源信息中心

在人们的日常生活和工作过程中,数据索引一直都具有很大的作用,同样占有很重要的地位,而数据索引能够安全以及稳定的应用,就必须要采取一个十分有效以及合理的方式,这也就对实施方法具有很多要求,本文中,笔者就对空间数据索引方法进行分析.

关键词：数据索引空间索引实施方法技术措施

来源：评论

学校读者我要写书评

暂无评论

数据库中数据索引与排序的比较

引用

内蒙古电大学刊 2000年第5期 92-93页

作者：陈玉峰呼市职工大学

来源：评论

学校读者我要写书评

暂无评论

基于神经网络的增量式数据索引机制研究

基于神经网络的增量式数据索引机制研究

引用

2001年中国智能自动化会议

作者：陈恩红张振亚王煦法中国科学技术大学计算机系中国科学技术大学计算机系中国科学技术大学计算机系

在对传统或文本及多媒体数据进行索引、数据挖掘和可视化等操作时,典型而有效的方法是首先利用空间方法将数据映射到低维空间,并保持原始数据间的距离信息,尔后再执行相应的操作。本文提出了基于神经网络的增量式数据索引方法,在该方法... 详细信息

在对传统或文本及多媒体数据进行索引、数据挖掘和可视化等操作时,典型而有效的方法是首先利用空间方法将数据映射到低维空间,并保持原始数据间的距离信息,尔后再执行相应的操作。本文提出了基于神经网络的增量式数据索引方法,在该方法中,首先对其中的少量数据以MDS方法进行索引,并用索引结果训练神经网络,新的数据再通过训练好的神经网络进行索引。利用训练好的神经网络对增量数据的索引时间复杂度为O(n)。实验结果表明本文提出的方法在效率及原始数据对象间距离信息保持方面具有明显的效果。

关键词：数据索引距离神经网络

来源：评论

学校读者我要写书评

暂无评论

嵌入式故障数据库的内外存数据索引管理方法

嵌入式故障数据库的内外存数据索引管理方法

引用

第七届全国虚拟现实与可视化学术会议

作者：敖建旺何兵陈小武北京航空航天大学计算机学院虚拟现实技术国家重点实验室北京 100083

索引管理是数据库管理系统的重要组成部分,索引结构及策略直接影响数据存取效率和存储空间利用率。现有索引管理方法大部分针对内存数据或外存数据,较少考虑数据的个性化特征。针对航天故障数据的特征,提出了一种嵌入式故障数据库的内... 详细信息

索引管理是数据库管理系统的重要组成部分,索引结构及策略直接影响数据存取效率和存储空间利用率。现有索引管理方法大部分针对内存数据或外存数据,较少考虑数据的个性化特征。针对航天故障数据的特征,提出了一种嵌入式故障数据库的内外存数据索引管理方法,使具有关键性、高存取频率、临时性或强实时性的数据常驻内存,并采用内存索引存取这些数据;使具有一般性、低存取频率、永久性或弱实时性的数据常驻外存,并采用外存索引存取这些数据。与只使用内存索引的方法相比,本方法能够有效降低系统运行过程中对内存的需求;与只使用外存索引的方法相比,本方法能够有效提高常驻内存数据的存取效率。

关键词：数据库索引管理数据索引航天故障数据

来源：评论

学校读者我要写书评

暂无评论

建立测绘生产数据索引的文件格式及关联分析

引用

江西测绘 2014年第1期 24-25页

作者：余伟平吴琳江西省基础测绘院江西南昌330001

在测绘生产中,建设服务于生产的内部网络时,一般都会建立文件交换与数据中转的FTP服务器。就一般而言,建设的这样的FTP服务器总是需要进行大量的数据存储,这就存在着大量的数据再利用、数据重复调用的问题,这些问题的产生就需要建立一... 详细信息

在测绘生产中,建设服务于生产的内部网络时,一般都会建立文件交换与数据中转的FTP服务器。就一般而言,建设的这样的FTP服务器总是需要进行大量的数据存储,这就存在着大量的数据再利用、数据重复调用的问题,这些问题的产生就需要建立一个完备的索引来解决。文章主要对建立索引前所需要测绘生产中的数据文件的格式、关联性等进行分析。

关键词：测绘生产数据索引文件格式关联

来源：评论

学校读者我要写书评

暂无评论

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案：

请选择收藏分类：

通借通还

建议与咨询 留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案： 新增检索档案 确定 取消

请选择收藏分类： 新增自定义分类 确定 取消

通借通还

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

请选择保存的检索档案：

请选择收藏分类：