检索结果-内蒙古大学图书馆

作者：王宇徐晓燕周渊刘庆良郑彩娟王振宇黄成李斌斌周游刘斌斌 100125 北京市朝阳区霞光里8号承冀诚大厦二层

本发明提供了一种基于海量数据类SQL检索场景的自动识别优化方法，属于海量数据统计分析领域。本发明通过五方面来进行优化：引入lucene作为可选存储介质；对每个数据文件的检索字段增加bloomfilter索引(bf索引)；对不同检索场景的划分... 详细信息

标准号: CN106484815A

本发明提供了一种基于海量数据类SQL检索场景的自动识别优化方法，属于海量数据统计分析领域。本发明通过五方面来进行优化：引入lucene作为可选存储介质；对每个数据文件的检索字段增加bloomfilter索引(bf索引)；对不同检索场景的划分及最优存储介质的选择；在进行lucene检索场景时，将类SQL语句转换为lucene语句；对lucene存储介质和bf索引添加有效性的会话级设置。在检索时，首先判定bf索引会话级的有效性，通过bf索引缩小待检索数据文件列表，再判定lucene存储介质的会话级有效性。本发明有效降低了海量数据检索时集群的资源消耗，大幅度提升了海量数据的检索性能。

关键词：存储介质索引海量数据检索场景会话判定检索海量数据检索检索数据文件检索性能数据文件索引添加资源消耗自动识别字段增加统计分析集群可选语句优化引入转换

来源：评论

学校读者我要写书评

暂无评论

一种可保持titan实时数据一致性的高效并行加载方法

一种可保持titan实时数据一致性的高效并行加载方法

引用

作者：毛洪亮唐积强王秀文李焱余苏沐冉马秀娟吴震徐小磊张露晨李传海李斌斌蒲路谢铭 100029 北京市朝阳区裕民路甲3号

本发明公开了一种可保持titan实时数据一致性的高效并行加载方法，属于大数据处理领域；首先，将titan划分为7个并行工作的模块，清洗规则管理模块实时更新过滤规则；数据接收模块接收pieceOfData放入queue1中；数据清洗模块过滤合格数... 详细信息

标准号: CN107038260A

本发明公开了一种可保持titan实时数据一致性的高效并行加载方法，属于大数据处理领域；首先，将titan划分为7个并行工作的模块，清洗规则管理模块实时更新过滤规则；数据接收模块接收pieceOfData放入queue1中；数据清洗模块过滤合格数据放入queue2中；ID转换模块与高速索引模块交互，判断当前pieceOfData中的两个点与titan ID的对应关系是否存在与图数据库中；如果是，将titan内部ID属性与ID值替换点保存到pieceOfDataT中，放入到queue4中；否则，将未加载的点放入HashSet中，并将对应的pieceOfData放入queue3中；剩余数据加载模块多线程并行将pieceOfDataT加载到titan中；点加载模块负责将HashSet中点加入titan，将点与titan ID的对应关系加入高速索引模块。本发明每个模块独自或交互完成部分功能，从而实现整体上加载效率的提升。

关键词：放入加载加载模块索引模块规则管理模块数据处理领域数据接收模块并行加载过滤规则合格数据剩余数据实时更新实时数据数据清洗多线程并行过滤清洗替换数据库保存线程队列加载模块多线程并行清洗规则管理模块规则配置文件数据接收模块剩余数据数据清洗索引模块消息队列放入数据库数据源获取数据读取实时动态更新客户端请求并行操作并行加载定时读取过滤规则过滤条件结束条件实时数据加载解析丢弃过滤取出

来源：评论

学校读者我要写书评

暂无评论

融合共同评分用户数和项目兴趣关系的推荐算法

引用

信息工程大学学报 2017年第3期18卷 347-353页

作者：于阳陈道波金鑫黄瑞阳国家数字交换系统工程技术研究中心河南郑州450002 河南轻工职业学院河南郑州450062 国家计算机网络与信息安全管理中心北京100031

基于项目的协同过滤系统中,传统的cosine、pearson和jaccard等相似性计算方法都只从单一的角度衡量了项目之间的相似性,导致相似性计算结果不准确。协同过滤系统中普遍存在评分数据稀疏性问题,使这一现象更为严重。针对这些问题,提出了... 详细信息

基于项目的协同过滤系统中,传统的cosine、pearson和jaccard等相似性计算方法都只从单一的角度衡量了项目之间的相似性,导致相似性计算结果不准确。协同过滤系统中普遍存在评分数据稀疏性问题,使这一现象更为严重。针对这些问题,提出了一种融合共同评分用户数和项目兴趣关系的推荐算法。算法根据项目间的同类性和共同评分用户数改进了Pearson相似性,引入用户对项目的兴趣度,基于用户建立项目之间兴趣度向量。实验结果表明:算法提高了推荐准确度,有效地缓解了评分数据稀疏性对传统相似性计算的影响。

关键词：基于项目的协同过滤相似性稀疏性兴趣度

来源：评论

学校读者我要写书评

暂无评论

一种应用于海量P2P网贷金融数据智能预处理工具及方法

一种应用于海量P2P网贷金融数据智能预处理工具及方法

引用

作者：马秀娟毛洪亮王秀文苏沐冉张露晨吴震李焱余唐积强徐小磊李传海苏志坚谢铭 100029 北京市朝阳区裕民路甲3号

本发明公开了一种应用于海量P2P网贷金融数据智能预处理工具及方法，可以对海量P2P网贷金融数据在存储到标准金融业务数据库之前，进行准确、高效地预处理，确保数据的准确性及有效性，从而建立P2P网络借贷平台有效监测机制，有效加强对... 详细信息

标准号: CN107220892A

本发明公开了一种应用于海量P2P网贷金融数据智能预处理工具及方法，可以对海量P2P网贷金融数据在存储到标准金融业务数据库之前，进行准确、高效地预处理，确保数据的准确性及有效性，从而建立P2P网络借贷平台有效监测机制，有效加强对P2P网络借贷平台的监管。预处理包括建立有效性及完整性校验规则，实现入库前的数据校验；以及数据分类、数据去重、数据修正、数据转换、状态计算，实现入库前的数据处理；最终将数据加载入标准金融业务数据库。

关键词：预处理业务数据库标准金融金融数据入库完整性校验预处理工具监测机制数据分类数据校验数据修正数据转换有效加强状态计算数据处理数据加去重存储载入智能监管应用

来源：评论

学校读者我要写书评

暂无评论

一种应用于P2P网络借贷企业数据接入模型的系统及方法

一种应用于P2P网络借贷企业数据接入模型的系统及方法

引用

作者：马秀娟徐小磊唐积强吴震张露晨李焱余苏沐冉王秀文毛洪亮李传海未占肖谢铭 100029 北京市朝阳区裕民路甲3号

本发明公开了一种应用于P2P网络借贷企业数据接入模型的系统及方法；系统分为三个模块：数据接入模块、数据预处理模块和数据加载存储模块；数据接入模块完成对网络借贷平台的身份认证和数据接入接口规范；数据预处理模块完成数据完整... 详细信息

标准号: CN107067322A

本发明公开了一种应用于P2P网络借贷企业数据接入模型的系统及方法；系统分为三个模块：数据接入模块、数据预处理模块和数据加载存储模块；数据接入模块完成对网络借贷平台的身份认证和数据接入接口规范；数据预处理模块完成数据完整性和有效性校验，建立各类数据完整性和有效性校验规则，并对数据进行去重和修正操作；数据加载存储模块完成大规模数据安全存储技术，为数据分析建模提供安全而方便的数据支撑服务；本发明的优点在于：可以对大量网络借贷平台中的异构数据形成规范和统一的标准，并进行规范、安全、稳定的数据接入，为P2P网络借贷平台监管奠定数据基础。

关键词：数据预处理模块数据接入模块数据完整性有效性校验存储模块数据加载数据接入数据分析建模大规模数据安全存储接口规范企业数据身份认证数据基础数据支撑异构数据去重网络修正安全监管应用统一服务身份认证网络数据接入模块用户名密码平台身份平台提供企业数据身份识别网络环境证书认证认证架构互联网应用服务

来源：评论

学校读者我要写书评

暂无评论

一种基于词典与文法分析的多语种分词方法

一种基于词典与文法分析的多语种分词方法

引用

作者：王宇徐晓燕周渊刘庆良郑彩娟黄成王海平周游陈婷婷 100125 北京市朝阳区霞光里8号承冀诚大厦二层

本发明公开一种基于词典与文法分析的多语种分词方法，可以实现中、日、韩、粤语等混合文本高效准确的分词处理，并且对于不同时段、不同专业的词可以实现灵活的词库扩展，有效更新词库信息，实现准确、高效的多语种语言文本分词；通过... 详细信息

标准号: CN106528536A

本发明公开一种基于词典与文法分析的多语种分词方法，可以实现中、日、韩、粤语等混合文本高效准确的分词处理，并且对于不同时段、不同专业的词可以实现灵活的词库扩展，有效更新词库信息，实现准确、高效的多语种语言文本分词；通过内嵌中日韩粤等语系子分词器、中文量子分词器和西方语系分词器，可以实现每类语种文本判断的准确分词；通过内置的语言片段编码识别机制字段对待分词文本片段进行切分，切分后的每种文本片段对应于一种语系，并使用相应的子分词器进行分词；通过文法分析可以实现西方屈折语的分词、中、日、韩、粤语的smart模式分词，可以处理含有阿拉伯数字信息的文本；同时，本发明还可以实现多种语言混合的文本分词，脱离了分词工具只能对单一语种、个别几个语种分词的局限性，保证文本分词的安全性、准确性、高效性、灵活性、普适性。通过本发明的提出的多语言分词，在增强海量数据文本分类、文本信息提取、自动摘要等文本分词领域具有广泛的应用前景。

关键词：分词分词器文本分词语系文本片段文法分析多语种粤语语种文本信息提取阿拉伯数字编码识别词库信息单一语种分词处理海量数据混合文本文本分类文本判断有效更新语言片段语言文本多语言高效性灵活的普适性中日韩词库量子内嵌内置字段文本脱离中文语言应用保证

来源：评论

学校读者我要写书评

暂无评论

一种互联网金融数据公众查验方法

一种互联网金融数据公众查验方法

引用

作者：吴震张露晨王秀文徐小磊唐积强李传海苏沐冉毛洪亮马秀娟李焱余刘正洋王峰 100029 北京市朝阳区裕民路甲3号

本发明公开了一种互联网金融数据公众查验方法，属于数据处理技术领域。所述方法包括个人投资数据查询、漏报补充、错报纠正和企业运营指数统计。采用本发明提供的方法，可证实公众用户在互联网金融企业投资过，且被国家权威部门正常监... 详细信息

标准号: CN107193986A

本发明公开了一种互联网金融数据公众查验方法，属于数据处理技术领域。所述方法包括个人投资数据查询、漏报补充、错报纠正和企业运营指数统计。采用本发明提供的方法，可证实公众用户在互联网金融企业投资过，且被国家权威部门正常监测到；为国家提供了对互联网金融企业投资理财风险监测的技术支持平台；为互联网金融投资用户提供了一个可以参考、可以跟踪投资的国家权威入口，帮助互联网用户安全理财，理性理财，降低投资风险。本发明具有很强的实用性和推广性，帮助互联网金融投资用户安全理财，具有很广泛的应用前景。

关键词：互联网理财国家权威金融企业金融投资投资技术支持平台数据处理技术互联网用户风险监测个人投资公众用户金融数据企业运营数据查询用户安全用户提供推广性漏报查验帮助参考跟踪监测补充纠正应用统计安全

来源：评论

学校读者我要写书评

暂无评论

一种应用于海量数据全文检索系统的测试工具及测试方法

一种应用于海量数据全文检索系统的测试工具及测试方法

引用

作者：李高超徐晓燕周渊张露晨马秀娟唐积强徐小磊毛洪亮刘俊贤苏沐冉杨翔宇 100125 北京市朝阳区霞光里8号承冀诚大厦二层

本发明一种应用于海量数据全文检索系统的测试工具及测试方法，属于海量数据全文检索系统测试方法领域，所述测试工具包括七个模块：顺序写入/读取模块、随机写入/读取模块、循环写入/读取模块、语种识别模块、关键字检索对比模块、删... 详细信息

标准号: CN106446013A

本发明一种应用于海量数据全文检索系统的测试工具及测试方法，属于海量数据全文检索系统测试方法领域，所述测试工具包括七个模块：顺序写入/读取模块、随机写入/读取模块、循环写入/读取模块、语种识别模块、关键字检索对比模块、删除模块和并发模块；每个模块单独连接海量数据全文检索系统。所述测试方法为：首先，将某个事件的海量数据，顺序写入全文检索系统，并读取文件数据；然后，制定用于进行检索测试的关键参数和测试命令；通过调整不同的参数，对海量数据进行不同的检索测试；最后，将每一条性能测试的结果输出到自定义文件中。优点在于：利用一个工具即可完成多种性能测试，使用简单，具有很强的实用性和广泛的应用前景。

关键词：海量数据全文检索系统测试读取模块写入测试工具性能测试检索关键字检索自定义文件测试命令单独连接读取文件对比模块关键参数删除模块语种识别并发应用输出制定

来源：评论

学校读者我要写书评

暂无评论

一种比特币区域流向的统计方法

一种比特币区域流向的统计方法

引用

作者：王秀文苏沐冉吴震毛洪亮马秀娟唐积强李焱余徐小磊张露晨李传海王刚谢铭 100029 北京市朝阳区裕民路甲3号

本发明公开了一种比特币区域流向的统计方法，首先统计所有的交易所、矿池、赌博及比特币交易服务等主要的交易场所，并统计这些场所所属的国家及地区，然后搜集这些交易所的所有的钱包地址。然后根据区块链，查找某区块链中的所有的交... 详细信息

标准号: CN107194677A

本发明公开了一种比特币区域流向的统计方法，首先统计所有的交易所、矿池、赌博及比特币交易服务等主要的交易场所，并统计这些场所所属的国家及地区，然后搜集这些交易所的所有的钱包地址。然后根据区块链，查找某区块链中的所有的交易hash，根据该hash找到对应的具体交易信息，该信息中会包含交易双方的交易地址，根据交易地址所属的国家区域，可以分析出该交易属于哪个国家及地区的交易。本发明为监测比特币的区域流向提供一种可行的方案；本发明方法具有很广泛的应用前景。

关键词：交易区域流向区块统计国家区域交易服务交易双方交易信息钱包地址矿池搜集赌博查找监测应用分析

来源：评论

学校读者我要写书评

暂无评论

一种基于学习的即时通信会话切分技术与方法

一种基于学习的即时通信会话切分技术与方法

引用

作者：唐积强马秀娟李传海毛洪亮吴震李焱余苏沐冉王秀文徐小磊张露晨王海平王峰 100029 北京市朝阳区裕民路甲3号

本发明公开了一种基于学习的即时通信会话切分技术与方法，属于大数据分析领域；将即时通信会话用户两两划分为一组，并将每组的会话话单明细进行分类和基于时间排序；会话切分为：依次选取相邻两条话单R1和R2，计算时间间隔Δt，文本... 详细信息

标准号: CN107066450A

本发明公开了一种基于学习的即时通信会话切分技术与方法，属于大数据分析领域；将即时通信会话用户两两划分为一组，并将每组的会话话单明细进行分类和基于时间排序；会话切分为：依次选取相邻两条话单R1和R2，计算时间间隔Δt，文本内容相似度Δsim和距离值F(R1,R2)；如果F(R1,R2)<f，则话单R1和R2同属于一个会话；否则，话单R1和R2分别属于两个不同的会话；通过spark并行对所有用户组以及每个用户组的所有类话单明细数据分别同时操作，最终将所有即时通信的用户所有的会话进行切分。本发明综合考虑了会话时间距离影响因子和会话文本内容距离影响因子，实现了不同会话用户组差异化的会话切分标准，有效解决了大数据背景下海量即时通信文本会话切分的准确性和高效性问题。

关键词：会话即时通信用户组文本内容影响因子大数据计算时间间隔明细数据时间距离时间排序有效解决综合考虑差异化高效性相似度并行文本分类分析学习会话话单记录集中分布即时通信通信会话用户组稀疏学习

来源：评论

学校读者我要写书评

暂无评论

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案：

请选择收藏分类：

通借通还

建议与咨询 留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案： 新增检索档案 确定 取消

请选择收藏分类： 新增自定义分类 确定 取消

通借通还

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

请选择保存的检索档案：

请选择收藏分类：