检索结果-内蒙古大学图书馆

计算机仿真 2021年第4期38卷 422-426页

作者：魏秀卓赵慧南东北师范大学人文学院吉林长春130000

在网络数据量增长的同时,也引发了数据源与数据模态的增长,由此导致在数据检索时将面临着语义区分与海量数据两大难题,为此提出并设计了基于的多源多模态大数据检索方法。针对语义一致性区分,引入哈希与字典学习构建目标评价,为尽可能... 详细信息

在网络数据量增长的同时,也引发了数据源与数据模态的增长,由此导致在数据检索时将面临着语义区分与海量数据两大难题,为此提出并设计了基于的多源多模态大数据检索方法。针对语义一致性区分,引入哈希与字典学习构建目标评价,为尽可能保证特征对在低维空间内的近似性,采取矩阵分解结合中间变量方式,将目标评价的求解转化为非凸问题。同时,利用网络学习来获取多源多模态数据间存在的彼此联系,将层结构设计为节点邻接矩阵形式,并根据近似度计算得出多模态检索结果。针对海量数据,引入处理框架,将检索任务分割成轻量化的子任务,并将算法部署于与中,实现分布式并行处理。基于多源多模态大数据检索质量分析,通过仿真证明了所提方法对于多源多模态数据检索具有良好的准确性和完整性,且显著提升了大数据的检索效率。

关键词：多源多模态哈希算法目标评价函数近似度大数据检索

来源：评论

学校读者我要写书评

暂无评论

高校档案管理中大数据检索改进算法的研究

引用

电子测量技术 2020年第10期43卷 90-94页

作者：李欣佳黑龙江中医药大学哈尔滨150040

在科技创新理念的指导下,越来越多的新技术和算法应用于高校档案管理。这些出色的硬件技术和算法使高校的档案更加便捷、智能和高效。基于大数据环境,结合当前高校档案管理的实际需求,对智能文件管理系统的建立和文档检索进行了研究。首... 详细信息

在科技创新理念的指导下,越来越多的新技术和算法应用于高校档案管理。这些出色的硬件技术和算法使高校的档案更加便捷、智能和高效。基于大数据环境,结合当前高校档案管理的实际需求,对智能文件管理系统的建立和文档检索进行了研究。首先,重点讨论了基于复合的Spring-Struts-Hibernate(SSH)框架系统提出的Java EE框架的缺陷,旨在优化SSH的性能并提高其效率;其次,为了解决当前高校中档案爆炸式增长导致的检索效率不足的问题,对蚁群算法进行了创造性地优化,有效地提升了蚁群算法检索高校档案的效率;最后,分析了优化算法的复杂度和检索效率。结果表明,在大数据环境下提出的算法在检索时间和效率两方面都得到了提高。

关键词：高校档案管理 SSH框架蚁群算法大数据检索

来源：评论

学校读者我要写书评

暂无评论

基于ElasticSearch的车辆大数据存储与检索系统的设计与实现

基于ElasticSearch的车辆大数据存储与检索系统的设计与实现

引用

作者：张瑞栋西安电子科技大学

学位级别：硕士

在社会经济飞速发展、人民生活水平不断提高的大背景下,我国车辆保有量呈现出井喷式增长的趋势,而且我国现阶段已经全面进入电子信息时代,这意味着车辆数据也在成倍增长。如何把这些车辆数据应用于构建智能交通系统以及车辆刑侦辅助系... 详细信息

在社会经济飞速发展、人民生活水平不断提高的大背景下,我国车辆保有量呈现出井喷式增长的趋势,而且我国现阶段已经全面进入电子信息时代,这意味着车辆数据也在成倍增长。如何把这些车辆数据应用于构建智能交通系统以及车辆刑侦辅助系统成为公安部门不断努力研究的方向。而传统的数据存储与检索方式已经无法满足公安部门对海量车辆数据的分析与处理,现在急需借助大数据技术实现一套功能强大、业务完善的车辆大数据存储与检索系统来辅助公安部门工作。针对分析和处理车辆数据的现状,本文根据公安部门在车辆刑侦方面现有业务的实际需求,调研相关技术文档,借助UML用例图对系统进行了功能性需求和非功能性需求分析,基于B/S架构设计与实现了车辆大数据存储与检索系统,包含车辆检索与分析模块、算法管理模块、用户服务模块和配置管理模块。在系统的设计与实现中,本系统以道路卡口抓拍的过车数据为基础,运用高性能分布式非关系型数据库Hbase技术对数据进行存储,使用消息队列Kafka将数据进行增量同步,再采用分布式检索引擎ElasticSearch来确保数据能被实时高效的检索,最后基于SpringBoot框架搭建web页面,实现了可以对亿级车辆数据进行近实时检索的车辆大数据存储与检索系统。本系统为公安部门提供了轨迹分析、落脚点分析、车流量统计、高峰时段统计、碰撞分析、跟车分析、行政区域过车统计、首次进城、多车同行分析、车辆频次统计、卡口频次统计以及昼伏夜出分析等多种检索与分析算法。系统实现后,本文在实际场景对系统进行了部署和运行,并对已运行的系统做了全面的测试。本文从功能性需求测试入手,保证系统在使用中不存在功能性故障。从非功能性需求测试确保系统的安全性和系统的性能。最后分析测试结果,得出目前系统已完成研发且完全满足业务需求的结论。本系统在实际运用中为公安用户提供了有效的帮助。首先,本系统能全面高效地收集线索,避免人工分析线索造成的警力消耗,缩短案件侦察的时间,提高公安部门工作效率;其次,本系统的统计算法能用于可视化大屏展示,可以更加清晰直观的展示行政区域的交通情况;最后,近实时的车辆数据检索能在警方刑侦时提供准确的辅助,打击车辆犯罪,保证社会长治久安。

关键词： ElasticSearch 智能交通车辆刑侦大数据检索大数据存储

来源：评论

学校读者我要写书评

暂无评论

基于Flink的海洋现象特征数据检索方法研究

基于Flink的海洋现象特征数据检索方法研究

引用

作者：徐立东中国海洋大学

学位级别：硕士

全球近71%的总面积被海洋覆盖，海洋是人类生产和生活都不可缺少的重要领域，与人类社会休戚相关。21世纪是经略海洋的时代，有效地对海洋信息与海洋环境的观测、监测，对于人类进一步了解海洋情况、开发海洋资源、保护海洋具有重要意... 详细信息

全球近71%的总面积被海洋覆盖，海洋是人类生产和生活都不可缺少的重要领域，与人类社会休戚相关。21世纪是经略海洋的时代，有效地对海洋信息与海洋环境的观测、监测，对于人类进一步了解海洋情况、开发海洋资源、保护海洋具有重要意义。对于各类海洋观测数据、监测数据的有效检索、处理、维护和使用，则势必成为重要的研究课题。　　海洋时空数据是一类多维、多变量的时空要素数据场，具有数据规模大、时间跨度大、类别多、格式多样、结构灵活等特征，其数据处理具有处理过程复杂、时效性强、计算量大、数据格式多样和检索模式灵活等特点。近年来，各类海洋现象如风暴潮，飓风，台风等发生日益频繁，海洋现象变化过程中对应的影响海域范围，与之相关联海洋时空数据也相应发生的变化。海洋时空数据已经广泛应用于各个方面，服务于海洋灾害预报、海洋防灾减灾、船舶航行规划，台风追踪、海洋环流等等多个领域，有效检索查询出相关的海洋时空数据对其至关重要。随着数据采集频率和采样精度的不断提高，海洋时空数据的总量规模呈几何式快速增长趋势，大规模长时间序列的海洋时空数据以及海洋现象特征数据的分析处理需求的也不断增长，研究利用分布式并行存储与处理手段，设计并且构建有效的时空数据索引，高效地存储、快速准确地检索查询以及维护海洋时空数据成为亟需应对的挑战。　　对于海洋时空数据存储与检索查询的问题以及海洋现象特征数据的检索查询问题，本文主要主要以下几个方面的探究：　　1.海洋时空数据　　1）本文根据结合海洋时空数据本身的特征以及海洋时空数据检索查询特性，综合考虑各类常见的索引的优点与缺点，采用了R-树索引与网格索引结合的方式，对地理空间经纬网格划分，设计和实现了基于R-树+地理空间网格的混合空间索引。　　2）针对海洋时空数据的检索查询，本文设计实现了基于Flink的海洋现象特征数据分布式检索查询系统，实现了对海洋时空数据的快速有效检索查询的基于R-树空间索引的分布式区间检索查询算法。　　3）针对海洋时空数据的存储，本文设计实现了以分布式内存文件系统Alluxio作为核心的海洋现象特征数据分布式存储系统。　　2.海洋现象特征数据　　1）本文依据海洋现象特征数据的检索查询的特性，对完整的海洋现象分级抽象为:海洋现象过程对象、海洋现象阶段对象、海洋现象序列对象、海洋现象状态对象四种对象，并且划分出的四种对象进行了组织和描述。　　2）依据对海洋现象的分级抽象的结果，本文对海洋现象状态对象进行了R-树的构建，构建R-树集合来描述海洋现象特征过程。　　实验结果表明，本文基于R-树+地理空间网格的混合空间索引虽然在索引建立时间稍长，但能够明显提高检索查询效率。本文对海洋现象的分级抽象能够有效对海洋现象进行描述，对其构建的R-树及R-树集合能提高检索查询效率，降低查询与结果冗余，具有轻量级检索时间效率高的特点，可为海洋现象数据分析和可视化计算提供数据支撑。

关键词：海洋时空数据大数据检索 Flink框架 R-树

来源：评论

学校读者我要写书评

暂无评论

基于弱监督相似评估网络的肺部CT图像相似检索方法

基于弱监督相似评估网络的肺部CT图像相似检索方法

引用

作者：陈帅浙江工商大学

学位级别：硕士

随着医学图像技术的飞速发展和大数据时代的到来,作为一种重要的医学图像类型之一,高分辨率的肺部CT图像在数量上已经呈现爆炸式增长趋势。从海量的肺部CT图像数据库中寻找与用户提交的CT图像相似的图像可以有效帮助医生实现辅助诊断。... 详细信息

随着医学图像技术的飞速发展和大数据时代的到来,作为一种重要的医学图像类型之一,高分辨率的肺部CT图像在数量上已经呈现爆炸式增长趋势。从海量的肺部CT图像数据库中寻找与用户提交的CT图像相似的图像可以有效帮助医生实现辅助诊断。然而,肺部CT图像的相似度检索比普通的基于内容的相似度检索对准确度要求更高,在外部形状以及内部血管及病灶位置相似度都有相似要求。在传统的有监督深度学习网络中,网络的学习依赖于标签。然而,医学图像的标签需要专业的医学相关人员费时费力对每一张图像进行标注,成本过高。本文提出一种基于弱监督的肺部CT图像相似度评估深度学习网络——弱监督相似评估网络WSSENet(Weakly Supervised Similarity Evaluation Network)。实验表明,该学习网络在计算肺部CT图像的相似度量和检索方面取得了令人满意的效果,本课题主要完成了以下工作:1)相关算法研究。研究了国内外关于医学影像检索算法的发展背景,研究了医学影像检索系统的相关算法。2)提出基于深度学习的医学图像检索算法。本文提出了一种分层学习的深度学习网络WSSENet,分层评估肺部CT图像在肺叶轮廓和肺叶内部细节上的相似度,从而实现高精度的相似性评估。3)通过肺部CT图像的特点,并结合空间变形网络的变种提出了一种自动标签算法,这种标签是一种粗粒度的标签,可以自动生成训练深度学习网络的训练集以及测试集。4)通过结合i Distance算法实现在大数据下对医学图像进行高效top-k检索。

关键词：医学图像检索深度学习 CT图像大数据检索

来源：评论

学校读者我要写书评

暂无评论

基于键值对非关系型数据库快速读取方法的研究

基于键值对非关系型数据库快速读取方法的研究

引用

作者：张晓波东华大学

学位级别：硕士

随着互联网金融的迅速发展，风险防控在电子金融领域内的重要性越来越明显，对金融大数据进行挖掘、分析得到的结果往往在企业运营、决策中发挥着重要作用。大数据的安全存储和高效检索为数据挖掘、分析提供了重要支撑。键值对非关系型... 详细信息

随着互联网金融的迅速发展，风险防控在电子金融领域内的重要性越来越明显，对金融大数据进行挖掘、分析得到的结果往往在企业运营、决策中发挥着重要作用。大数据的安全存储和高效检索为数据挖掘、分析提供了重要支撑。键值对非关系型数据库常作为大数据的存储数据库，它具有良好的可扩展性、可用性和高并发处理能力。但是，键值对非关系型数据库不支持非主键字段的索引查询，并且使用分布式文件系统作为底层存储时缓存命中率低。因此，本文的主要工作包括以下三个部分：　　首先，针对键值对非关型数据库只支持主键（行键）建立索引可以进行索引查询，而对非主键不支持建立索引这一问题，本文提出一种动态混合索引DHI（Dynamic Hybrid Index）方法。该方法对非主键字段建立额外的索引结构，并将非主键字段按查询频率分为高频字段和低频字段两类。高频字段通过建立详细索引实现快速索引查询的目的，而对低频字段建立概要索引提升查询效率的同时节省存储空间。最后通过字段权重动态地调整字段索引类型以满足不同时刻的查询需求。通过实验表明，本文中提出的动态混合索引 DHI 方法与现有的非主键索引方法相比范围查询性能提升了29.4%，并且索引占用的存储空间节省了28.5%。　　其次，针对键值对非关系型数据库底层存储使用分布式文件系统时采用基于文件块形式的缓存，使得面向数据表记录的查询命中率低这一问题，本文建立了分布式存储模式中面向记录的缓存结构，提出了一种双队列K频次缓存方法——DLK（Double-LRU-K）。该方法提出了双队列存储结构，针对高频访问数据和低频访问数据应用不同的置换规则。同时，该方法将缓存空间分为了列表区和数据区，用不同的数据结构组织数据，降低了数据访问和处理的时间。实验表明，使用本文提出的缓存方法后查询时间降低了 30%;与 LRU、LRU-K、2Q 等置换算法相比较，命中率最大提升了 60.1%，查询时间最大降低了43.5%;并且，DLK方法在较小缓存容量下性能更优。　　最后，非关系型数据库不提供可视化操作界面，并且学习使用非关系型数据库耗时长、学习成本高，本文设计并实现了风险防控平台的大数据存储子系统。在非关系型数据库的基础上，结合了本文提出的非主键索引和读缓存方法，优化了数据的读写效率。使用B/S结构为用户提供了可视化操作界面和统一的访问API接口，简化了用户操作数据库的复杂度，降低了非关系型数据库使用的学习成本。　　综上所述，本文针对键值对非关系型数据库不支持建立非主键索引和底层分布式文件系统只提供基于文件块的缓存方法的问题，提出了动态索引方法，对非主键字段建立详细索引和概要索引并实现了动态调整。同时，提出了分布式环境下面向记录的缓存结构，提升了检索记录的缓存命中率。最后，在风险防控平台中实现了大数据存储子系统，方便了用户的使用。本文所做的研究为大规模数据的挖掘提供了存储检索支撑。

关键词：键值对非关系型数据库大数据检索快速读取缓存结构置换算法

来源：评论

学校读者我要写书评

暂无评论

基于Spring Cloud的埋点管理与分析系统的设计与实现

基于Spring Cloud的埋点管理与分析系统的设计与实现

引用

作者：王雅琪华中科技大学

学位级别：硕士

近年来,随着互联网的蓬勃发展,各大公司的产品为了提高用户体验、满足用户需求、提供稳定服务、争抢市场资源,开始注重对用户行为数据和系统运行进行收集,一方面针对通过用户行为数据进行分析,能够更好的了解用户需求,提出改善建议,推... 详细信息

近年来,随着互联网的蓬勃发展,各大公司的产品为了提高用户体验、满足用户需求、提供稳定服务、争抢市场资源,开始注重对用户行为数据和系统运行进行收集,一方面针对通过用户行为数据进行分析,能够更好的了解用户需求,提出改善建议,推出新功能;另一方面则可通过分析系统相关的数据信息掌握系统的漏洞所在,进而改进提供更稳定、可靠的服务。目前市场对Web端的数据收集已经有较为成熟的产品,但仍存在缺乏灵活性、统计分析不全面等缺点,同时也鲜有同时支持用户信息和系统信息收集的产品。基于此提出了基于真实的企业环境下,多应用系统的用户信息、系统信息收集方案,设计并实现了一个运行稳定、拓展灵活的埋点管理与分析系统。全文首先对国内外相关的研究现状以及产品特性进行分析,提出目前仍需解决的问题,并提供一套合理的设计和解决方案。其次利用Java Script脚本对用户行为进行收集,使用AOP技术对接口信息进行监控,最后通过自定义Appender适配多种系统日志信息收集。在数据存储方面则是通过Rabbit MQ绑定不同的队列进行消费,同时使用Elastic Search进行存储。在系统搭建方面,后端以Spring Boot+Spring Cloud为基础,前端则是以Vue+Element Ui为基础框架共同搭建埋点管理与分析系统。最后通过JMeter压测工具对系统的性能进行测试,验证各个模块的功能可靠性与稳定性。系统的搭建基于当前稳定的开源框架,具有较高的灵活性、稳定性和可维护性,能够提供多种方式接入,对数据进行收集,可作为一个开源框架使用。系统的实现可以省去其他系统再去单独实现用户信息、系统信息收集的麻烦,大大节省人力资源,同时提供埋点需求的管理分析,简化业务人员与开发人员的沟通,为双方提供便利。

关键词：代码埋点微服务大数据检索消息队列

来源：评论

学校读者我要写书评

暂无评论

航空装备故障管理与分析平台的设计与实现

航空装备故障管理与分析平台的设计与实现

引用

作者：王少丽大连理工大学

学位级别：硕士

目前,航空装备产业的发展正处于上升阶段,航空装备相关实验的数量不断增多。在这样的情况之下,航空装备的质量管理出现了新的问题,随着航空装备产业的发展,单一航空装备上集成了越来越多的技术,对于实验人员和研发人员而言,在技术和工... 详细信息

目前,航空装备产业的发展正处于上升阶段,航空装备相关实验的数量不断增多。在这样的情况之下,航空装备的质量管理出现了新的问题,随着航空装备产业的发展,单一航空装备上集成了越来越多的技术,对于实验人员和研发人员而言,在技术和工程应用飞速发展的情况下,凭借以往根据实验人员自身经验或者纸质版文档记录分析实验数据的传统研发方式,已经无法适应当前的科技形式。因此,对于航空装备产业相关的工程数据和维护资料的合理储存和运用便成了当务之急。所以,本论文将设计和实现一个基于大数据的航空装备故障管理与分析平台,以帮助航空装备产业相关的研发人员更好的对航空装备的质量进行分析和预测。面对当前装备数量和装备信息爆发增长的情况,航空装备故障管理与分析平台将帮助研发和维护人员分析航空装备的质量问题和维护航空装备故障案例数据。本平台主要实现的功能是航空装备质量问题案例的分析及检索功能,本功能拥有故障案例分析能力,该能力将着重于做基于大数据的航空装备故障案例之间的相似度计算和对用户搜索信息做智能推荐相关的分析功能。该功能同时提供了非常多样的数据查询方式,包括基于大数据的全文模糊检索和分析功能,多种维度如时间、产品、单位的模糊检索功能。本平台在大数据可视化展示方面,为使用人员提供了可视化的数据分析和操作功能,方便使用人员快速了解数据和发现案例之间的关系。使用人员可通过简便易操作的可视化界面,对各类数据进行分析和查看系统分析结果。本平台在数据控制管理方面,将设计一站式的基于RBAC数据角色权限控制功能。同时,本平台提供了后台应用,具有数据录入分析功能,便于对案例教训进行分析和维护。可有效提升质量问题的经验积累和教训提炼能力。航空装备故障管理与分析平台现已成功研发完毕,并正式投入生产环境使用。该平台在某研究所得到了成功实践,在航空装备故障的分析和维护方面取得了良好的效果,为航空装备产业的发展做出了贡献。

关键词：装备故障分析文献相似度数据可视化大数据检索

来源：评论

学校读者我要写书评

暂无评论

中国现代文学馆·沈阳书房系统介绍

引用

辽宁广播电视技术 2023年第4期 20-22页

作者：马莉新沈阳广播电视台

“中国现代文学馆·沈阳书房”项目是“文化+科技”的综合体,是集成5G、4K、VR、大数据等新技术的文化传播平台。具有文学展陈教育、文艺创作交流、文化内容孵化等功能,同时能以数字化方式呈现中国现代文学馆馆藏资料。根据功能需求... 详细信息

“中国现代文学馆·沈阳书房”项目是“文化+科技”的综合体,是集成5G、4K、VR、大数据等新技术的文化传播平台。具有文学展陈教育、文艺创作交流、文化内容孵化等功能,同时能以数字化方式呈现中国现代文学馆馆藏资料。根据功能需求,沈阳书房技术系统包括4K超高清制播系统、5CG网络传输系统、互动展陈系统及大数据检索查询系统等。

关键词： 5G 4K VR 大数据检索

来源：评论

学校读者我要写书评

暂无评论

人脸识别结合大数据处理技术在社会治安监控的应用分析

引用

法制与社会 2017年第4期 191-192页

作者：康健博苏州市公安局吴中分局

在安防技术飞速发展的今天,基于视频人脸采集的人脸识别技术已在公安、政府、教育、医疗、金融、军队、司法及众多企业事业单位等领域得到广泛的应用。

关键词：人脸识别大数据检索治安应用

来源：评论

学校读者我要写书评

暂无评论

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案：

请选择收藏分类：

通借通还

建议与咨询 留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案： 新增检索档案 确定 取消

请选择收藏分类： 新增自定义分类 确定 取消

通借通还

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

请选择保存的检索档案：

请选择收藏分类：