检索结果-内蒙古大学图书馆

浙江档案 2024年第11期 42-46页

作者：王亿豪张静孔祥盛孙轶楠中国科学院文献情报中心中国科学院大学经济与管理学院图书情报与档案管理系中国科学院档案馆中国医学科学院医学信息研究所

科学数据是科研档案的重要组成部分，开展科学数据归档质量控制研究对于实现科学数据价值最大化和科研档案管理规范化具有重要意义。以欧洲社会科学数据档案委员会为例，运用网络调查法和内容分析法，从“预摄取-摄取-管护”流程介绍分... 详细信息

科学数据是科研档案的重要组成部分，开展科学数据归档质量控制研究对于实现科学数据价值最大化和科研档案管理规范化具有重要意义。以欧洲社会科学数据档案委员会为例，运用网络调查法和内容分析法，从“预摄取-摄取-管护”流程介绍分析其科学数据归档质量控制的具体举措，并立足我国科学数据管理现状，提出我国可以从加强科学数据自身及其元数据的双重质量控制，实现科学数据归档全过程质量控制，明确各责任主体职责并加强主体协同三方面着手，助力科学数据归档质量提升。

关键词：科学数据数据归档质量控制欧洲社会科学数据档案委员会

来源：评论

学校读者我要写书评

暂无评论

面向长周期天文数据归档的存储布局优化

面向长周期天文数据归档的存储布局优化

引用

作者：李镇天津大学

学位级别：硕士

随着观测能力的不断提升,天文观测获取的数据量呈爆炸性增长,大量优异的天文学研究成果建立在这些海量的历史观测数据之上。因此,建立一个长周期天文观测数据归档系统对于天文学研究有着重大的意义。然而这些海量的天文观测数据给归档... 详细信息

随着观测能力的不断提升,天文观测获取的数据量呈爆炸性增长,大量优异的天文学研究成果建立在这些海量的历史观测数据之上。因此,建立一个长周期天文观测数据归档系统对于天文学研究有着重大的意义。然而这些海量的天文观测数据给归档系统带来了不可忽视的能耗和性能问题。其中,存储布局的优化是能够减少能耗并提高性能的有效方式。由于归档系统数据请求往往是针对天球面上的某一区域,观测现场的时间集聚存储布局方式在能耗和性能查询方面往往开销很大。采用空间集聚存储布局是优化归档系统能耗和性能的有效方式。但是,如何在保持较高的存储容量利用率的同时将邻近天区的观测数据聚合到同一个存储设备上并且实现不同存储设备数据量的负载均衡是一个具有挑战性的问题。针对该问题,本文为归档系统开发了存储布局转换工具Astro Layout。在将观测现场产生的天文数据加入到归档系统时,Astro Layout可以根据原始观测数据生成一种新的适用于归档系统的空间集聚存储布局GpDL,并完成从源存储布局向GpDL存储布局的数据复制。本文提出的GpDL布局创新性地将图划分算法引入到长周期天文数据归档系统的空间集聚存储布局生成方案中来,先用HEALPix对天球面进行了初始的细粒度划分,然后根据数据分布的密度使用图划分算法将邻近的微小区域聚合成数个子区域,实现了不同子区域数据量的负载均衡。在数据复制的过程中,Astro Layout兼容硬盘、光盘、磁带等多种目标存储设备,还提供了断点续传、超时检测、文件校验等功能以增强工具的可用性。实验表明,GpDL在保持了高达91%的存储容量利用率的同时,为归档系统节省了资源并提升了数据查询速度,与Ta DL（观测现场的时间集聚存储布局）、Amr DL（一种基于自适应网格思想实现的空间集聚存储布局）和Srp DL（一种基于Spark Range Partitioner思想实现的空间集聚存储布局）相比,GpDL有效地减少了相同数据请求下的能耗和查询等待时间。

关键词：天文观测数据归档存储布局空间集聚

来源：评论

学校读者我要写书评

暂无评论

金融历史数据归档与查询系统设计与实现

金融历史数据归档与查询系统设计与实现

引用

作者：常国帅北京邮电大学

学位级别：硕士

在企业数字化转型的大背景下,金融行业的数字化能力不断提高,金融机构作为数据强依赖的行业,其线上金融业务的不断扩张及企业信息平台的不断增多将在更广的领域产生更加全面、多维、规模庞大的业务数据。在当今这个“数据就是生产要素... 详细信息

在企业数字化转型的大背景下,金融行业的数字化能力不断提高,金融机构作为数据强依赖的行业,其线上金融业务的不断扩张及企业信息平台的不断增多将在更广的领域产生更加全面、多维、规模庞大的业务数据。在当今这个“数据就是生产要素”的时代,日益增多的海量历史数据,不仅为金融机构的发展带来了更宽广的空间和机遇,也给金融机构的信息系统建设带来了新的挑战和要求。由于金融机构的特殊性,受限于金融监管、审计部门、司法部门、事后监督等场景的需要,其历史数据的管理变得尤为重要,金融机构信息系统产生的业务数据往往都会要求保留很久甚至永久保留,因此金融机构尤其需要建设历史数据归档能力。另外,由于金融数据的特殊性,金融监管等部门往往需要查询很久之前的历史数据,因此建设完整的金融历史数据归档与查询系统是未来的趋势。本文结合某金融机构的历史数据管理现状,对其金融历史数据的归档和查询进行了深入的调研、分析和研究。通过设计数据归档、数据存储、数据管理、数据服务等功能,建立了金融历史数据归档与查询系统。技术上,存储技术通过S3对象存储实现海量历史数据的可靠存储,利用其分布式能力保证历史数据的可靠归档。查询技术主要采用Spark技术结合Hadoop技术,实现已归档数据的高效查询,同时尽量降低系统资源的消耗。本文主要依照传统软件工程思想,从系统需求分析、系统架构设计、系统功能设计等方面介绍了系统的建设过程,提供了金融历史数据归档与查询系统的建设方案。系统经过测试表明,本文给出的金融历史数据归档与查询系统的设计功能可以满足金融机构对于历史数据归档管理的需要,同时可以满足监管等场景下的查询需要,系统性能符合设计目标,可以为其他数据归档系统设计提供参考。

关键词：历史数据金融监管数据归档对象存储

来源：评论

学校读者我要写书评

暂无评论

汽车产业链协作ASP平台数据归档研究

汽车产业链协作ASP平台数据归档研究

引用

作者：邓翰西南交通大学

学位级别：硕士

汽车产业链是由汽车制造厂、供应商、服务商和销售商组成的一个庞大的协作网络,汽车产业链协作ASP平台是基于ASP技术面向汽车产业链的公共应用服务平台,它为中小型汽车制造企业提供企业信息化的服务,实现产业链上各协作企业信息共享和交... 详细信息

汽车产业链是由汽车制造厂、供应商、服务商和销售商组成的一个庞大的协作网络,汽车产业链协作ASP平台是基于ASP技术面向汽车产业链的公共应用服务平台,它为中小型汽车制造企业提供企业信息化的服务,实现产业链上各协作企业信息共享和交换,快速有效地进行网络化业务协作。数据是信息存在的形式,随着时间的推移和注册企业的不断增加,汽车产业链协作ASP平台系统数据库正以惊人的速度膨胀,大量使用频率低的历史业务数据存在于数据库中,严重影响到系统的响应时间,对其维护成本也相应提高。数据归档是解决问题的有效途径。本课题是以汽车产业链协作ASP平台系统为研究对象,分析了系统数据库的物理结构,对其上数据分类讨论。根据物理结构特点和数据特点,本文提出基于“在线数据库”、“近线数据库”和“历史数据库”的数据存储策略、实现数据在各数据库之间迁移为目标的数据归档系统设计方案和基于数据归档的汽车产业链协作ASP平台设计方案所组成的整体解决方案。重点讨论了近线数据库和历史数据库构建方式和结构特点、数据归档系统设计方案、数据归档策略、历史数据库中数据重构的方法。论文研究了基于XML技术的历史数据库的构建方法、归档规则抽象化的静态数据字典的设计方案、基于MVC数据归档系统的设计模式和基于动态归档清单的汽车产业链协作ASP平台的设计方案,这些关键技术为实现汽车产业链协作ASP平台数据归档解决方案具有重要的意义。

关键词：汽车产业链协作ASP平台数据归档近线数据库历史数据库

来源：评论

学校读者我要写书评

暂无评论

钍基熔盐堆历史数据归档系统的研究

钍基熔盐堆历史数据归档系统的研究

引用

作者：李嘉曾中国科学院大学(中国科学院上海应用物理研究所)

学位级别：硕士

中国科学院启动“未来先进核裂变能”战略性先导科技专项来大力发展钍基熔盐堆核能系统。该系统尚处于研究发展阶段,运行产生的数据不可随意丢弃,历史数据归档系统用于过程变量的存储、检索和导出,是控制系统数据长期存储及历史数据趋... 详细信息

中国科学院启动“未来先进核裂变能”战略性先导科技专项来大力发展钍基熔盐堆核能系统。该系统尚处于研究发展阶段,运行产生的数据不可随意丢弃,历史数据归档系统用于过程变量的存储、检索和导出,是控制系统数据长期存储及历史数据趋势线绘制的工具,有利于对核能系统的进一步深入研究与发展。由于存储的变量随着存储时间不断增长,数据的累积量按照关系型数据库中所占字节计算已接近TB量级,目前采用的基于关系型数据库的归档系统RDB Channel Archiver在这个量级上的查询性能已达到瓶颈,需要一种能够在上千级别的PV数量上展现性能的存储系统。本论文结合控制系统的特点,对目前的历史数据归档系统性能需求、功能业务需求等进行了分析,对国内外大科学装置中数据归档系统的发展进行了研究。本课题首先对影响关系型数据库的性能的因素进行研究,通过触发器建立根据时间进行分表的方法进行数据库表优化,经优化后的归档系统性能仍有待提高,因此对新一代基于非关系型数据库的Archiver Appliance系统进行结构及原理上的研究。Archiver Appliance在功能上相比原归档系统具有更加快速的检索速度、丰富的系统状态查看界面以及直观的图标查看功能等,完全可以满足钍基熔盐堆的数据归档需求。本文在对Archiver Appliance系统的结构进行深入研究后分析出了提高其查询速率的因素并进行测试验证,同时针对系统的功能缺陷开发了实时监控工具,并进行了页面的并发性能测试、查询性能测试等,该系统在返回数据量在10000以上的性能要明显优于RDB Channel Archiver,目前已在SF0实验装置中稳定运行。

关键词：数据归档 Archiver Appliance 数据库

来源：评论

学校读者我要写书评

暂无评论

数据归档:现状、问题及其完善路径——基于相关主题文献计量及可视化分析

引用

档案 2022年第10期 14-22页

作者：黄婷婷李宗富郑州大学信息管理学院河南郑州450001

技术环境变迁使档案归档管理对象逐渐由实体态向数据态方向转移,也推动了数据归档研究及实践探索。本文通过梳理我国数据归档相关研究,全面了解其现状,揭示该领域的热点问题并探讨其未来完善路径。借助CiteSpace软件对数据归档相关文献... 详细信息

技术环境变迁使档案归档管理对象逐渐由实体态向数据态方向转移,也推动了数据归档研究及实践探索。本文通过梳理我国数据归档相关研究,全面了解其现状,揭示该领域的热点问题并探讨其未来完善路径。借助CiteSpace软件对数据归档相关文献进行主题聚类分析,形成数据归档理论层、政策层、规范层、技术层与实践层五个主题维度。分析发现当前数据归档研究在概念限定、标准规范及开发利用等方面存在着一些问题及不足。为此,需要大力拓宽研究思路丰富研究方法、深化学科交叉融合研究及实践,尽快构建数据归档标准体系、促进规范化发展,加大归档数据开发力度,充分发挥数据潜力和价值。

关键词：数据归档档案管理信息系统

来源：评论

学校读者我要写书评

暂无评论

基于NoSQL技术的MUSER数据归档与发布系统的设计与实现

基于NoSQL技术的MUSER数据归档与发布系统的设计与实现

引用

作者：林茂强昆明理工大学

学位级别：硕士

随着高空间、高时间、高频率分辨率的观测设备不断投入使用,天文观测产生的数据飞速增长。传统的科学数据归档和处理方法远远不能满足海量天文数据的需求。为了提高现代天文观测的科学产出效率,必须探索新的数据归档与发布方法。本文以... 详细信息

随着高空间、高时间、高频率分辨率的观测设备不断投入使用,天文观测产生的数据飞速增长。传统的科学数据归档和处理方法远远不能满足海量天文数据的需求。为了提高现代天文观测的科学产出效率,必须探索新的数据归档与发布方法。本文以明安图超宽频谱射电日像仪(Mingantu Ultrawide SpEctral Radioheliograph, MUSER)项目为研究背景,随着MUSER项目进入观测阶段,如何快速有效地归档其多波段多通道观测产生的海量数据成为急需解决的问题。同时,为便于观测数据的共享,在归档的基础上应采取有效的方式对观测信息进行发布。本研究的工作主要包括四个方面：(1)通过基于NoSQL技术的FastBit技术和传统的关系型数据库MySQL技术在建立索引、查询、插入数据及归档空间大小上的对比实验,得出FastBit更适合MUSER的实际索引和检索需求。(2)利用模拟数据设计并实现了MUSER项目的数据归档系统原型,包括FITS、UV-FITS格式和PNG格式的数据归档。FITS文件在归档的同时建立索引,便于后期的数据检索。PNG格式的数据归档应用于项目的发布,基于MUSER按天观测的特性,归档的层级目录按天定时创建。(3)利用模拟数据实现了将MUSER原始数据处理生成的太阳图像与其相关观测信息的融合,生成的图像用于MUSER的发布系统原型,进行效果显示。(4)设计并实现了MUSER项目的数据发布系统原型,其中的发布包括每隔10min的图像发布和每日中天时间图像的动态发布。同时,发布系统实现了指定的时间间隔的动态效果展示。本文研究和实验的数据归档和发布系统原型,能应用在MUSER的实际归档与发布系统中,对其提供技术支撑。

关键词： MUSER 数据归档位图索引发布

来源：评论

学校读者我要写书评

暂无评论

企业业务系统数据归档机制研究——以制造业企业为例

引用

档案学刊 2024年第1期 47-53页

作者：胡金涛中国电子科技集团公司第十四研究所江苏南京210039

随着企业信息化程度的不断提高,企业业务系统存储了越来越多的基础数据,这些数据是企业经营决策、科研生产的重要参考,是企业重要的信息资产,推动业务系统数据归档,对数据的后续利用具有重要意义。文章以制造业企业为例,对业务系统数据... 详细信息

随着企业信息化程度的不断提高,企业业务系统存储了越来越多的基础数据,这些数据是企业经营决策、科研生产的重要参考,是企业重要的信息资产,推动业务系统数据归档,对数据的后续利用具有重要意义。文章以制造业企业为例,对业务系统数据类型、存在形式和归档价值进行了调研,分析了业务系统数据归档的工作目标和思路,按照数据形成、归档、保管、利用等环节建立数据归档基本机制,提出各阶段档案工作要求,为企业开展业务数据归档工作提供借鉴和参考。

关键词：科学数据数据管理数据归档制造业企业

来源：评论

学校读者我要写书评

暂无评论

“数据归档”文献定量比较分析——《十四五全国档案事业发展规划》数据归档研究之一

引用

档案 2022年第1期 15-20页

作者：沙柳河南省南阳生态环境监测中心河南南阳473000

为高质量完成《“十四五”全国档案事业发展规划》规定的数据归档任务,文章采用文献定量比较分析方法,梳理“数据归档”的演进过程,勾勒出“数据归档”从实际工作运用到文献使用、再到学术研究对象,直至五年规划任务的递进发展脉络和趋... 详细信息

为高质量完成《“十四五”全国档案事业发展规划》规定的数据归档任务,文章采用文献定量比较分析方法,梳理“数据归档”的演进过程,勾勒出“数据归档”从实际工作运用到文献使用、再到学术研究对象,直至五年规划任务的递进发展脉络和趋势。可见“数据归档”已成为《“十四五”全国档案事业发展规划》中的新高频词,这预示着数据正在成为档案的又一新来源。

关键词： “十四五”全国档案事业发展规划数据归档演进过程定量比较分析

来源：评论

学校读者我要写书评

暂无评论

档案来源问题初探——基于《“十四五”全国档案事业发展规划》数据归档研究之五

引用

档案 2022年第5期 55-60页

作者：郭小磊河南省地矿局信息中心河南郑州450000

运用文献分析方法对“档案来源”的使用与理解进行梳理,发现档案来源有主体来源和客体来源两种理解,有来源原则和档案形成来源两种用法。两种“档案来源”在适用范围、主客类属、应用场景、与档案的关系、有限与无限、指向多寡、种属关... 详细信息

运用文献分析方法对“档案来源”的使用与理解进行梳理,发现档案来源有主体来源和客体来源两种理解,有来源原则和档案形成来源两种用法。两种“档案来源”在适用范围、主客类属、应用场景、与档案的关系、有限与无限、指向多寡、种属关系上各有涵义。讨论档案来源的主客体之分及各自涵义,不仅有助于我们高质量完成“十四五”期间数据归档任务,还能为日后应对不断扩充的、新的档案来源,有针对性地做好新客体归档提供建设性启示。

关键词：档案来源来源原则档案形成来源数据归档

来源：评论

学校读者我要写书评

暂无评论

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案：

请选择收藏分类：

通借通还

建议与咨询 留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案： 新增检索档案 确定 取消

请选择收藏分类： 新增自定义分类 确定 取消

通借通还

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

请选择保存的检索档案：

请选择收藏分类：