检索结果-内蒙古大学图书馆

计算机学报 2015年第1期38卷 18-34页

作者：金澈清钱卫宁周敏奇周傲英华东师范大学软件学院数据科学与工程研究院上海200062

大数据时代的到来意味着新技术、新系统和新产品的出现.如何客观地比较和评价不同系统之间的优劣自然成为一个热门研究课题,这种情形与三十多年前数据库系统蓬勃发展时期甚为相似.众所周知,在数据库系统取得辉煌成就的发展道路上,基准... 详细信息

大数据时代的到来意味着新技术、新系统和新产品的出现.如何客观地比较和评价不同系统之间的优劣自然成为一个热门研究课题,这种情形与三十多年前数据库系统蓬勃发展时期甚为相似.众所周知,在数据库系统取得辉煌成就的发展道路上,基准评测研究一直扮演着重要角色,极大推进了数据库技术和系统的长足发展.数据管理系统评测基准是指一套可用于评测、比较不同数据库系统性能的规范,以客观、全面反映具有类似功能的数据库系统之间的性能差距,从而推动技术进步、引导行业健康发展.数据管理系统评测基准与应用息息相关:应用发展产生新的数据管理需求,继而引发数据管理技术革新,再催生多个数据管理系统/平台,进而产生新的数据管理系统评测基准.数据管理系统评测基准种类多样,不仅包括面向关系型数据的基准评测,还包括面向半结构化数据、对象数据、流数据、空间数据等非关系型数据的评测基准.在当今新的数据系统发展中,面向大数据管理系统的评测基准的研究热潮也如期而至.大数据评测基准研究与应用密切相关.总体而言,尽管已有的数据管理系统评测基准未能充分体现大数据的特征,但是从方法学层面而言,三十多年来数据管理系统评测基准的发展经验是开展大数据系统研发最值得借鉴和参考的,这也是该文的主要动机.该文系统地回顾了数据管理系统评测基准的发展历程,分析了取得的成就,并展望了未来的发展方向.

关键词：评测基准大数据数据生成器度量工作负载

来源：评论

学校读者我要写书评

暂无评论

一种基于模式的实体解析算法

引用

计算机学报 2015年第9期38卷 1796-1808页

作者：刘辉平金澈清周傲英华东师范大学软件学院数据科学与工程研究院上海200062

实体解析是数据融合和数据清洗的关键步骤,旨在从大量的数据集中找出描述相同实体的记录.当前主要有两种基本的解决思路,一种是穷尽式的实体解析,通过两两比较数据集中的所有记录,然后再合并相似的记录,从而找到描述某一个实体的若干记... 详细信息

实体解析是数据融合和数据清洗的关键步骤,旨在从大量的数据集中找出描述相同实体的记录.当前主要有两种基本的解决思路,一种是穷尽式的实体解析,通过两两比较数据集中的所有记录,然后再合并相似的记录,从而找到描述某一个实体的若干记录集合.然而,该方法的计算复杂度比较高(O(n2),其中n表示数据集合的规模),难以处理大型数据集合.另一种思路是基于分块的实体解析,它调用特定的分块函数(如哈希函数、滑动窗口技术等)将集合中较为相似的记录划分到同一个块中,再仅对属于同一块中的记录进行两两比较.这种方法显著降低了运行时间,但会损失部分精度,因为某些描述同一实体的记录可能没有被分到同一个块中.文中提出了一种基于模式的实体解析算法,通过将相似的记录合并成记录集合并尝试生成对应的记录模式,然后进行模式之间的两两比较来产生一个边界值,以确定对应的记录集合是否需要进行进一步的精确比较,从而判断是否属于同一个实体.与第一种方法相比,该方法可有效地过滤部分不可能相似的记录,从而避免了针对所有数据记录进行两两比较,显著地降低了时间复杂度;与第二种方法相比,该方法并不损失任何精度.基于真实和模拟数据集合的实验结果验证了新方法的执行效率和有效性.

关键词：数据融合数据清洗实体解析编辑距离字符串相似度

来源：评论

学校读者我要写书评

暂无评论

面向学龄儿童脑智发育研究的多模态MRI脑影像序列参数与扫描规范专家共识

引用

中华放射学杂志 2025年第3期59卷 250-260页

作者：门卫伟赵腾达黄瑞旺朱礼涛葛秋龚高浪何宏建黄楚中雷旭李淑宇刘河生刘勇卢青彭芸饶恒毅沈定刚隋婧王若思夏明睿肖雅琼严超赣尹训涛臧玉峰赵立张寒张嘉颖左西年左真涛高家红贺永北京大学前沿交叉学科研究院磁共振成像研究中心北京100871 北京师范大学认知神经科学与学习国家重点实验室、北京师范大学神经影像大数据与人脑连接组学北京市重点实验室、北京师范大学IDG/麦戈文脑科学研究院北京100875 华南师范大学心理学院广州510631 北京师范大学认知神经科学与学习国家重点实验室北京100875 杭州师范大学附属医院认知与脑疾病研究中心杭州310015 浙江大学物理学院杭州310027 华东师范大学心理与认知科学学院上海200062 西南大学心理学部重庆400715 北京大学生物医学前沿创新中心北京100871 北京邮电大学人工智能学院北京100876 东南大学生物科学与医学工程学院南京210000 首都医科大学附属北京儿童医院影像科北京100045 上海外国语大学国际工商管理学院上海200083 上海科技大学生物医学工程学院上海201210 北京师范大学认知神经科学与学习国家重点实验室、北京师范大学IDG/麦戈文脑科学研究院北京100875 深圳市神经科学研究院深圳518107 中国科学院心理研究所北京100101 广州医科大学附属妇女儿童医疗中心放射科广州510600 浙江大学生物医学工程与仪器科学学院杭州310027 中国科学院生物物理研究所脑与认知重点实验室北京100101 北京大学前沿交叉学科研究院磁共振成像研究中心、北京大学医学物理和工程北京市重点实验室、北京大学IDG/麦戈文脑科学研究院北京100871

当代多模态MRI技术的迅速发展,为精准刻画儿童青少年脑发育规律与个体差异、揭示脑发育异常疾病的神经机制,提供了重要影像研究工具,带来了儿童脑发育影像学这一脑科学前沿方向。然而,面向学龄儿童(6~18岁)的高质量多模态MRI脑影像序列... 详细信息

当代多模态MRI技术的迅速发展,为精准刻画儿童青少年脑发育规律与个体差异、揭示脑发育异常疾病的神经机制,提供了重要影像研究工具,带来了儿童脑发育影像学这一脑科学前沿方向。然而,面向学龄儿童(6~18岁)的高质量多模态MRI脑影像序列参数设置与扫描采集极具挑战性,严重阻碍了国内脑发育相关影像研究的开展与推广。为此,国内相关领域的多家权威机构和专家团队,依托科技部科技创新2030-“脑科学与类脑研究”重大项目“中国学龄儿童脑智队列”计划,通过调研全国30余家机构MRI设备现况,以及国际大型儿童脑发育队列研究序列参数的优缺点,共同制订了《面向学龄儿童脑智发育研究的多模态MRI脑影像序列参数与扫描规范专家共识》,以期规范国内不同规模、不同类型队列相关脑发育影像研究中的序列参数设计与扫描操作,提升儿童脑影像扫描成功率与影像质量,以及结果可比性与稳定性,推动我国儿童脑智发育基础与临床研究的整体进步。

关键词：儿童脑发育磁共振成像共识

来源：评论

学校读者我要写书评

暂无评论

基于函数依赖与条件约束的数据修复方法

引用

软件学报 2016年第7期27卷 1671-1684页

作者：金澈清刘辉平周傲英华东师范大学计算机科学与软件工程学院数据科学与工程研究院上海200062

随着经济与信息技术的发展,在许多应用中均产生大量数据.然而,受硬件设备、人工操作、多源数据集成等诸多因素的影响,在这些应用之中往往存在较为严重的数据质量问题,特别是不一致性问题,从而无法有效管理数据.因此,首要的任务就是开发... 详细信息

随着经济与信息技术的发展,在许多应用中均产生大量数据.然而,受硬件设备、人工操作、多源数据集成等诸多因素的影响,在这些应用之中往往存在较为严重的数据质量问题,特别是不一致性问题,从而无法有效管理数据.因此,首要的任务就是开发新型数据清洗技术来提升数据质量,以支持后续的数据管理与分析.现有工作主要研究基于函数依赖的数据修复技术,即以函数依赖来描述数据一致性约束,通过变更数据库中部分元组的属性值(而非增加/删除元组)来使得整个数据库遵循函数依赖集合.从一致性约束描述的角度来看,函数依赖并非是唯一的表达方式,还存在其他表达方式,例如硬约束、数量约束、等值约束、非等值约束等.然而,随着一致性约束种类的增加,其处理难度也远比仅有函数依赖的场景要困难.考虑以函数依赖与其他一致性约束共同表述数据库的一致性约束,并在此基础上设计数据修复算法,从而提升数据质量.实验结果表明,所提方法的执行效率较高.

关键词：数据质量数据修复函数依赖条件约束等价类

来源：评论

学校读者我要写书评

暂无评论

面向海量低质手机轨迹数据的重要位置发现

引用

软件学报 2016年第7期27卷 1700-1714页

作者：章志刚金澈清王晓玲周傲英华东师范大学计算机科学与软件工程学院数据科学与工程研究院上海200062

重要位置是指人们在日常生活中的主要活动地点,比如居住地和工作地.智能手机的不断发展与普及为人们的日常生活带来了极大的便利.除了通话、上网等传统应用之外,手机连接基站自动生成的日志记录也是用于用户行为模式挖掘的重要数据来源... 详细信息

重要位置是指人们在日常生活中的主要活动地点,比如居住地和工作地.智能手机的不断发展与普及为人们的日常生活带来了极大的便利.除了通话、上网等传统应用之外,手机连接基站自动生成的日志记录也是用于用户行为模式挖掘的重要数据来源,例如重要位置发现.然而,相关工作面临着诸多挑战,包括轨迹数据规模庞大、位置精度低以及手机用户的多样性.为此,提出了一个通用解决框架以提高轨迹数据可用性.该框架包含一个基于状态的过滤模块,提高了数据的可用性,以及一个重要位置挖掘模块.基于此框架设计了两种分布式挖掘算法:GPMA(grid-based parallel mining algorithm)和SPMA(station-based parallel mining algorithm).进一步地,为提高挖掘结果的准确性和精确度,从3个方面进行优化:(1)使用多元数据的融合技术,提高结果的准确性;(2)提出了无工作地人群的发现算法;(3)提出了夜间工作人群的发现算法.理论分析和实验结果表明,所提算法具有较高的执行效率和可扩展性,并具有更高的精度.

关键词：低质轨迹挖掘重要位置数据修正

来源：评论

学校读者我要写书评

暂无评论

内存数据索引：以处理器为核心的性能优化技术

引用

华东师范大学学报（自然科学版） 2014年第5期 192-206页

作者：董绍婵周敏奇张蓉周傲英华东师范大学软件学院数据科学与工程研究院上海200062

随着单机内存容量的持续上升,内存数据库技术逐渐取代传统磁盘数据库为数据管理提供更快速的支持.本文分析了设计内存索引结构所需要考虑的基本要素;对目前的内存索引结构进行了分类总结,并分析各结构的优缺点;针对当前应用发展趋势,指... 详细信息

随着单机内存容量的持续上升,内存数据库技术逐渐取代传统磁盘数据库为数据管理提供更快速的支持.本文分析了设计内存索引结构所需要考虑的基本要素;对目前的内存索引结构进行了分类总结,并分析各结构的优缺点;针对当前应用发展趋势,指出内存索引未来发展的机遇与挑战;最后介绍了我们正在研发的分布式集群感知内存数据库(CLAIMS)中的内存索引结构.

关键词：内存索引 cache利用率分布式内存数据库索引压缩

来源：评论

学校读者我要写书评

暂无评论

面向分片许可链的无协调者跨片交易处理

引用

计算机研究与发展 2023年第11期60卷 2469-2488页

作者：阙琦峰陈之豪张召杨艳琴周傲英区块链数据管理教育部工程研究中心(华东师范大学) 上海200062 华东师范大学数据科学与工程学院上海200062 华东师范大学软件工程学院上海200062

区块链作为一种防篡改、去中心化的分布式系统引起了学术界和工业界的极大关注.然而,传统区块链系统的吞吐量较低,且难以扩展到支持大规模系统,这使得其在商业中的应用范围受到限制.为了解决这些问题,人们尝试利用分片技术把区块链网络... 详细信息

区块链作为一种防篡改、去中心化的分布式系统引起了学术界和工业界的极大关注.然而,传统区块链系统的吞吐量较低,且难以扩展到支持大规模系统,这使得其在商业中的应用范围受到限制.为了解决这些问题,人们尝试利用分片技术把区块链网络分成多个可单独执行交易的子网,各个子网能够并行执行交易,其性能则可以随子网数成比例提升.然而,昂贵的跨片交易执行成本阻碍了分片区块链系统性能的进一步提升.传统的基于两阶段提交的跨片交易执行方法无论在性能上还是扩展性上都无法满足现代产业对大规模系统的需求;同时,这些方法在高冲突负载下的表现不佳,导致跨片交易的延迟急剧增加,严重影响到系统的正常运行.为了解决此问题,提出了一个针对分片许可链的跨片交易执行方法.该方法将确定性引入跨片交易执行,避免了额外的协调开销,同时提高了系统执行跨片交易的效率.此外,该执行方法也配备了抗冲突的交易重排序方法,除了提高跨片执行方法在高冲突的场景下交易处理性能之外,还能优化跨片交易执行中状态传输的效率.实验结果证明,该方法的吞吐量比基于两阶段提交协议的方法提高1.6~2.5倍;在冲突场景下,相较于优化前系统吞吐量则提高2.9~25倍.

关键词：许可链分片技术跨片交易无协调者抗冲突

来源：评论

学校读者我要写书评

暂无评论

Web 3.0数字经济风险感知技术综述

引用

计算机研究与发展 2024年第12期61卷 3005-3026页

作者：贾金萍肖诗涵钱堃杨艳琴张召区块链数据管理教育部工程研究中心(华东师范大学) 上海200062 华东师范大学数据科学与工程学院上海200062 华东师范大学软件工程学院上海200062

Web 3.0数字经济体系以区块链平台为基础设施,围绕加密货币、NFT、数字藏品等数字资产和去中心化金融(DeFi)、游戏金融(GameFi)等去中心化应用(DApp)开展各项社会经济活动.在公有链和开放联盟链下,作为DApp内核的智能合约可以由任何个... 详细信息

Web 3.0数字经济体系以区块链平台为基础设施,围绕加密货币、NFT、数字藏品等数字资产和去中心化金融(DeFi)、游戏金融(GameFi)等去中心化应用(DApp)开展各项社会经济活动.在公有链和开放联盟链下,作为DApp内核的智能合约可以由任何个人或组织予以部署,并对全体用户可见及可调用.这种开放性给经济发展带来了新的机遇,同时也蕴含了许多金融风险.以智能合约为中心分析了Web 3.0数字经济潜在的风险,并从智能合约的编码、功能、应用3个层面总结了风险感知技术的研究现状.首先介绍了智能合约漏洞检测技术的研究挑战、安全漏洞类型和4类漏洞检测方法;其次分析了常见的智能合约骗局类型,并根据训练数据的不同分类总结了现有的智能合约骗局识别技术;接着介绍了基于区块链交易记录对4种非法交易行为进行检测的技术现状;最后结合对现有工作局限性的分析,展望了未来的研究方向.

关键词： Web 3.0 区块链智能合约风险感知技术数字经济

来源：评论

学校读者我要写书评

暂无评论

面向MAX/MIN优化的SQL Window函数处理

引用

计算机学报 2016年第10期39卷 2149-2160页

作者：马建松王科强宋光旋张凯王晓玲金澈清华东师范大学数据科学与工程研究院上海市高可信计算重点实验室上海200062

Window(窗口)函数作为关系数据库领域中数据分析技术的一种解决方案,其精妙的语义特征使其能代替自连接(Self Join)和相关子查询(Sub Queries)等完成传统复杂查询功能,现已被广泛应用到互联网应用的数据管理和分析中.在目前互联网应用... 详细信息

Window(窗口)函数作为关系数据库领域中数据分析技术的一种解决方案,其精妙的语义特征使其能代替自连接(Self Join)和相关子查询(Sub Queries)等完成传统复杂查询功能,现已被广泛应用到互联网应用的数据管理和分析中.在目前互联网应用步入大数据时代的背景下,针对高吞吐和实时响应等需求,已有的Window(窗口)函数的处理性能已经出现了瓶颈.文中首先介绍了关系数据库中窗口函数在执行器中的两阶段执行框架,然后基于PostgreSQL数据库中原有MAX/MIN Window(窗口)函数执行框架,提出了一种基于临时窗口的优化方法,来优化SQL Window查询针对MAX/MIN函数的处理,并给出了查询代价的分析模型,从理论上分析了该算法的性能.通过与现有商业数据库SQL Server进行性能上的对比,验证了该方案的有效性.

关键词： Window函数查询处理性能优化 MAX/MIN PostgreSQL

来源：评论

学校读者我要写书评

暂无评论

基于移动轨迹数据的商圈消费者规模分析

引用

华东师范大学学报（自然科学版） 2017年第4期 97-113,138页

作者：刘志刘辉平赵大鹏王晓玲华东师范大学计算机科学与软件工程学院数据科学与工程研究院上海200062

随着城市化的推进以及大数据技术的不断发展,智慧商圈成为智慧城市建设的重要组成部分.智慧商圈的热门程度、消费者的规模、消费层次等因素成为智慧商圈建设的关注热点.然而,传统的消费者规模的统计,还是基于传统的问卷调查或者抽样等,... 详细信息

随着城市化的推进以及大数据技术的不断发展,智慧商圈成为智慧城市建设的重要组成部分.智慧商圈的热门程度、消费者的规模、消费层次等因素成为智慧商圈建设的关注热点.然而,传统的消费者规模的统计,还是基于传统的问卷调查或者抽样等,这些方法不仅成本昂贵而且效率低下.但随着数据挖掘技术的发展,使得通过分析用户行为轨迹来确定商圈消费者规模成为可能.本文提出了一种基于轨迹数据分析的商圈消费者规模分析方法.本文的主要工作包括:①在轨迹数据中,如何确定商圈的边界这是一个首要的问题,基于此,才能确定一位消费者是在商圈内活动,还是在商圈外面.本文提出了根据商圈内基站点的位置分布,运用k-Nearest Neighbor(kNN)分类算法,对该商圈的范围进行圈定的方法.②由于轨迹数据的不确定性特点,确定一个用户与商圈的关系也是一个难题.本文利用计算不规则多边形面积的方法计算基站点的权重值,结合时间阈值分析该区域内每天的消费者规模.③最后,鉴于轨迹数据的海量性,本文提出了一个大数据计算框架BPDA(Business-Circle Parallel Distributed Algorithm),基于Hadoop大数据处理平台和Kafka分布式消息系统,实现了基于移动轨迹数据的商圈消费者规模分析系统,并使用中山公园商圈基站数据,展示了本文所提方法的可行性.

关键词：移动轨迹数据消费者规模分析 kNN分类算法商圈轮廓

来源：评论

学校读者我要写书评

暂无评论

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案：

请选择收藏分类：

通借通还

建议与咨询 留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案： 新增检索档案 确定 取消

请选择收藏分类： 新增自定义分类 确定 取消

通借通还

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

请选择保存的检索档案：

请选择收藏分类：