检索结果-内蒙古大学图书馆

作者：洛桑嘎登中央民族大学

学位级别：硕士

随着对语言信息处理研究工作的不断深入,藏文信息处理技术也从文字处理逐步转向语言信息处理。藏文自动分词和词性标注是进行藏语语义理解、藏文信息检索、藏语与其他语种之间的机器翻译等的首要问题。目前国内很多研究机构、学者在汉... 详细信息

随着对语言信息处理研究工作的不断深入,藏文信息处理技术也从文字处理逐步转向语言信息处理。藏文自动分词和词性标注是进行藏语语义理解、藏文信息检索、藏语与其他语种之间的机器翻译等的首要问题。目前国内很多研究机构、学者在汉语自然语言处理领域已经开发出了较多成熟的系统,比如：哈尔滨工业大学的LTP、复旦大学的FudanNLP等,这些开放的系统正在推动着汉语自然语言处理的进步与发展。反观藏语信息处理研究,基础比较薄弱,虽然有不少公开发表的研究成果文章,但是公开可用的系统寥寥无几。本文采用条件随机场统计模型进行藏文分词标注,并利用藏文自身语言特征,采用知识融合的方式对基于条件随机场模型的分词标注结果进行校正,并实现了一个基于web的藏文分词标注系统,能自动进行大规模藏文文本的自动采集、XML格式转换及藏文分词和词性标注,为后续的智能信息处理应用奠定了基础。本文研究的主要贡献和创新点体现在以下三点：1、基于大规模语料的藏文分词标注模型的构建本文从西藏新闻网、人民网和新华网藏语频道、青海藏语广播网等10多个主流的藏语网站获取的藏语语料,所涉及的领域范围包括新闻、娱乐、诗歌、文化、宗教等不同类别的文章。除此之外,还包括1-9年级的藏语教材内容。先后构建了35.1M即100多万个词的分词模型的训练和测试语料,以及78.5M即398万词的词性标注模型的训练和测试语料,实验语料规模庞大,所涉范围广。通过实验验证,详细分析了模型构建过程中所选取的每个特征项对标注结果的影响,确定最优特征模板,且取得了满意的藏文分词标注实验结果。2、知识融合的分词标注策略基于条件随机场的统计模型在藏文分词标注上取得了不错的效果,但是依然存在一些缺陷。本文对基于条件随机场统计模型的藏文分词标注结果中的错误进行详细分析,归纳总结了基于藏文自身知识的分词标注规则,以此来对统计模型分词的结果进行校正,得到最终的分词标注结果。本文分别对3.6M和40.06M的语料进行分词和词性标注的开放实验,结果表明该系统的分词正确率、召回率、F值分别是96.11%、96.03%、96.06%,词性标注准确率达到98.75%,系统已经能够满足基本的实用需求。3、实现了开放实用的分词标注系统最后,本文在以上实验结果的基础上设计并实现一个基于web的藏文自动分词标注系统。该系统是基于B/S模式,可以在任何地方进行操作而不用安装专门的软件,为使用带来方便。

关键词：藏文分词词性标注条件随机场知识融合

来源：评论

学校读者我要写书评

暂无评论

基于藏文字符感知的文本预训练模型方法研究

引用

计算机工程与应用 2024年第21期60卷 127-133页

作者：洛桑嘎登尼玛扎西西藏大学信息科学技术学院拉萨850000 西藏大学西藏自治区藏文信息技术人工智能重点实验室拉萨850000

目前藏文预训练模型主要使用音节作为藏文单词表示。采用音节嵌入构建藏文单词表示,会存在藏文单词表示不完整且鲁棒性不高的问题。为了应对这一挑战,提出了一个名为藏文字符感知的预训练模型,该模型融合藏文字符、字丁和音节三个维度... 详细信息

目前藏文预训练模型主要使用音节作为藏文单词表示。采用音节嵌入构建藏文单词表示,会存在藏文单词表示不完整且鲁棒性不高的问题。为了应对这一挑战,提出了一个名为藏文字符感知的预训练模型,该模型融合藏文字符、字丁和音节三个维度的特征,从藏文更细粒度的信息表征藏文单词特征。利用原始数据集和对抗性拼写错误测试集,评估了所提出的方法在藏文自动分词和命名实体识别任务上的性能。实验结果表明,该方法可以同时提高藏文预训练语言模型的性能和鲁棒性。

关键词：藏文预训练模型字符感知

来源：评论

学校读者我要写书评

暂无评论

融合外部知识和位置信息的中文命名实体识别

引用

计算机工程与应用 2024年第22期60卷 162-171页

作者：李源洛桑嘎登蒋卫丽信阳农林学院信息工程学院河南信阳464000 西藏大学信息科学技术学院拉萨850000 四川大学计算机学院成都610207

命名实体识别(named entity recognition,NER)是信息检索和自然语言处理领域重要且基础的任务。与英文不同,目前大部分的中文NER方法,都面临分词困扰、领域知识缺失的问题。针对以上问题,基于Lattice结构,提出一种结合知识图谱嵌入(know... 详细信息

命名实体识别(named entity recognition,NER)是信息检索和自然语言处理领域重要且基础的任务。与英文不同,目前大部分的中文NER方法,都面临分词困扰、领域知识缺失的问题。针对以上问题,基于Lattice结构,提出一种结合知识图谱嵌入(knowledge graphs embedding,KGE)和带掩码位置信息的中文NER模型。Lattice语义信息的使用,为补充词粒度信息和解决分词问题奠定了结构基础。知识图谱嵌入的使用,为模型补充并定位了其所缺失的领域知识。而带掩码位置信息的使用,则较好地解决了由于知识图谱的引入而带来的知识噪声问题。所提出的方法在通用领域和垂直领域上均能取得较好的表现,在Weibo、Resume以及CCKS 2017上的F1值分别达到了74.01%、96.62%、94.95%。

关键词： Lattice 知识图谱嵌入位置信息中文命名实体识别

来源：评论

学校读者我要写书评

暂无评论

基于知识融合的CRFs藏文分词系统

引用

中文信息学报 2015年第6期29卷 213-219页

作者：洛桑嘎登杨媛媛赵小兵中央民族大学信息工程学院北京100081 中央民族大学少数民族语言文学系北京100081 中央民族大学国家语言资源监测中心少数民族语言分中心北京100081

藏文分词问题是藏文自然语言处理的基本问题之一,该文首先通过对35.1M的藏文语料进行标注之后,通过条件随机场模型对其进行训练,生成模型参数,再用模版对未分词的语料进行分词,针对基于条件随机场分词结果中存在的非藏文字符切分错误,... 详细信息

藏文分词问题是藏文自然语言处理的基本问题之一,该文首先通过对35.1M的藏文语料进行标注之后,通过条件随机场模型对其进行训练,生成模型参数,再用模版对未分词的语料进行分词,针对基于条件随机场分词结果中存在的非藏文字符切分错误,藏文黏着词识别错误,停用词切分错误,未登录词切分错误等问题分别总结了规则,并对分词的结果利用规则进行再加工,得到最终的分词结果,开放实验表明该系统的正确率96.11%,召回率96.03%,F值96.06%。

关键词：藏文分词条件随机场知识融合

来源：评论

学校读者我要写书评

暂无评论

藏文词级处理研究现状及热点方法

引用

电脑知识与技术（过刊） 2015年第11X期21卷 183-185页

作者：洛桑嘎登赵小兵中央民族大学北京100081

藏文自动分词和词性标注是藏语信息处理中重要的基础性工作,分词和词性标注二者之间有着十分密切的联系,切分歧义、紧缩格的识别、未登录词的识别是藏语分词及词类标注所面临的难题,词性标注质量的高低也直接影响着自动分词的效果。本... 详细信息

藏文自动分词和词性标注是藏语信息处理中重要的基础性工作,分词和词性标注二者之间有着十分密切的联系,切分歧义、紧缩格的识别、未登录词的识别是藏语分词及词类标注所面临的难题,词性标注质量的高低也直接影响着自动分词的效果。本文通过对藏文分词和词性标注的产生,研究方法,以及研究现状的分析,总结了藏文分词和标注中有待解决的突出问题,并提出了解决这些问题的方案建议。

关键词：藏文分词词性标注

来源：评论

学校读者我要写书评

暂无评论

藏药知识图普展示系统研发

引用

电子元器件与信息技术 2021年第6期5卷 180-181+185页

作者：尼玛顿珠洛桑嘎登景丽莎西藏大学信息科学技术学院

藏药作为中华民族传统医药学的一个重要组成部分,在我国西部一代为人类的健康发挥着很好的作用。将藏医药传统学科与信息高度融合,更好为全人类服务具有重要意义。本文收集并整理了有关藏药的书籍数据,经过数据爬取、数据清洗、数据分类... 详细信息

藏药作为中华民族传统医药学的一个重要组成部分,在我国西部一代为人类的健康发挥着很好的作用。将藏医药传统学科与信息高度融合,更好为全人类服务具有重要意义。本文收集并整理了有关藏药的书籍数据,经过数据爬取、数据清洗、数据分类,藏药实体识别,关系抽取等技术过程,构建了藏药知识图谱,根据调研,这是第一个有关藏医药的知识图谱构建工作。知识图谱的构建不仅可以直观的认识藏药的各种相关知识,还能够以更加便捷的方式传承和发扬藏药传统知识。

关键词：藏药实体识别知识图谱可视化分析

来源：评论

学校读者我要写书评

暂无评论

藏语动词的配价及句子生成初探

引用

电脑知识与技术（过刊） 2017年第9X期23卷 178-179页

作者：仁增多杰洛桑嘎登西藏大学信息科学技术学院西藏拉萨850000

在藏语句子中藏文动词通常是位于句子的末端,但是它在藏语句子中占有非常重要的地位。因为藏语动词是整个句子的核心,句子中的其他成分都是直接或间接的依存这个核心成分,再加之藏语属于格语法范畴,其句法以格为主,特别是部分格中体现了... 详细信息

在藏语句子中藏文动词通常是位于句子的末端,但是它在藏语句子中占有非常重要的地位。因为藏语动词是整个句子的核心,句子中的其他成分都是直接或间接的依存这个核心成分,再加之藏语属于格语法范畴,其句法以格为主,特别是部分格中体现了"论元"结构语法,这些为藏语动词的配价方式研究藏语句子生成提供了很好的研究基础。在动词的配价中的"价"一般我们会涉及三个层面的因素,句法、语义、语用,在该文中我们不考虑语用因素,对实质存在的句子进行分析。

关键词：动词配价格助词句子生成

来源：评论

学校读者我要写书评

暂无评论

基于知识融合的CRFs藏文分词系统

基于知识融合的CRFs藏文分词系统

引用

中国中文信息学会2015学术年会(CIPS2015)暨第十四届全国计算语言学学术会议(CCL2015)、第三届基于自然标注大数据的自然语言处理国际学术研讨会(NLP-NABD2015)

藏文分词问题是藏文自然语言处理的基本问题之一,本文首先通过对35.1M的藏文语料进行标注之后,通过条件随机场模型对其进行训练,生成模型参数,再用模版对未分词的语料进行分词,针对基于条件随机场分词结果中存在的非藏文字符切分错误,... 详细信息

藏文分词问题是藏文自然语言处理的基本问题之一,本文首先通过对35.1M的藏文语料进行标注之后,通过条件随机场模型对其进行训练,生成模型参数,再用模版对未分词的语料进行分词,针对基于条件随机场分词结果中存在的非藏文字符切分错误,藏文黏着词识别错误,停用词切分错误,未登录词切分错误等问题分别总结了规则,并对分词的结果利用规则进行再加工,得到最终的分词结果,开放实验表明该系统的正确率96.11％,召回率96.03％,F值96.06％.

关键词：藏文分词系统条件随机场知识融合

来源：评论

学校读者我要写书评

暂无评论

藏汉英自习室查询App

引用

电脑知识与技术 2019年第1X期15卷 80-81,88页

作者：孟姚媛洛桑嘎登李威陈付旻西藏大学信息科学技术学院西藏拉萨850000

在移动互联网技术日趋成熟的背景下,如何利用移动互联网技术和移动智能终端使得校园生活更加便利,具有深刻的现实意义和广泛的研究价值。基于Android平台的藏汉英自习室查询APP,可为学生提供自习室查询、交流等资讯服务。该APP能够便利... 详细信息

在移动互联网技术日趋成熟的背景下,如何利用移动互联网技术和移动智能终端使得校园生活更加便利,具有深刻的现实意义和广泛的研究价值。基于Android平台的藏汉英自习室查询APP,可为学生提供自习室查询、交流等资讯服务。该APP能够便利我校的在校学生,提高生活效率,节省寻找自习室的时间。

关键词：校园资讯移动终端 Android 二维码

来源：评论

学校读者我要写书评

暂无评论

TASSM_BS:基于Bi-LSTM和Self-Attention的藏文自动分句方法

引用

中文信息学报 2023年第5期37卷 44-52页

作者：才让叁智多拉格桑多吉洛桑嘎登仁增多杰西北民族大学中国语言文学学部甘肃兰州750000 西藏大学信息科学技术学院西藏拉萨850000 青海师范大学藏语智能信息处理及应用国家重点实验室青海西宁810008

自动分句在自然语言处理中具有重要的应用价值,是机器翻译、句法分析和语义分析等任务的重要前期工作环节。当前藏文自动分句中采用的基于词典的分句方法,以及基于词典和统计模型相结合的分句方法因受句尾词兼类现象和数据稀疏等问题的... 详细信息

自动分句在自然语言处理中具有重要的应用价值,是机器翻译、句法分析和语义分析等任务的重要前期工作环节。当前藏文自动分句中采用的基于词典的分句方法,以及基于词典和统计模型相结合的分句方法因受句尾词兼类现象和数据稀疏等问题的影响,分句效率较低。对此,该文提出了一种基于Bi-LSTM和Self-Attention的藏文自动分句方法。通过实验对比,该方法的宏准确率、宏召回率和宏F1值分别到达了97.7%、98.06%和97.88%,其结果优于所有对比方法。另外,在实验过程中还发现,当模型使用序列前端截补方式定长的数据时,其性能优于使用后端截补方式定长的数据;当模型使用基于Skip-gram的音节字表示时,其性能优于基于CBOW和随机生成的音节字表示。

关键词：藏文句子分句 TSRM_BS模型

来源：评论

学校读者我要写书评

暂无评论

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案：

请选择收藏分类：

通借通还

建议与咨询 留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案： 新增检索档案 确定 取消

请选择收藏分类： 新增自定义分类 确定 取消

通借通还

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

请选择保存的检索档案：

请选择收藏分类：