检索结果-内蒙古大学图书馆

作者：吴金文汪翔 518057 广东省深圳市南山区高新区科技中一路腾讯大厦35层

本申请公开了一种通用语言模型的训练方法、使用方法、装置、设备和介质，属于人工智能技术领域。该方法包括：获取至少一种模态的样本数据，至少一种模态的样本数据标注有标签信息，标签信息包括样本可信度；将至少一种模态的样本数据... 详细信息

标准号: CN117520499A

本申请公开了一种通用语言模型的训练方法、使用方法、装置、设备和介质，属于人工智能技术领域。该方法包括：获取至少一种模态的样本数据，至少一种模态的样本数据标注有标签信息，标签信息包括样本可信度；将至少一种模态的样本数据输入通用语言模型，通过通用语言模型中的目标判定网络，得到至少一种模态的样本数据对应的预测信息，预测信息包括预测可信度，目标判定网络用于使通用语言模型具备基于场景进行可信度判定的能力；基于预测信息和标签信息，对通用语言模型的模型参数进行训练。该方案可应用于大语言模型、多模态大模型领域中，可应用于自然语言生成、问答系统场景，能够实现对输入数据对应的预测数据在目标场景中的可信度进行判定。

关键词：通用语言模型样本数据可信度模态标签信息预测信息目标判定判定人工智能技术自然语言生成场景模型参数目标场景问答系统语言模型预测数据多模态标注样本应用网络预测申请

来源：评论

学校读者我要写书评

暂无评论

一种基于通用语言模型确定输出数据的方法及装置

一种基于通用语言模型确定输出数据的方法及装置

引用

作者：徐雯商逾众刘帅沈芳仙 310052 浙江省杭州市滨江区长河街道网商路599号4幢7层

本申请公开了一种基于通用语言模型确定输出数据的方法、装置及电子设备，该方法包括：获取用户在目标场景下输入的查询数据；在目标内容数据库中查询与所述查询数据匹配的匹配数据，所述目标内容数据库中包括所述目标场景对应的数据信... 详细信息

标准号: CN117688166A

本申请公开了一种基于通用语言模型确定输出数据的方法、装置及电子设备，该方法包括：获取用户在目标场景下输入的查询数据；在目标内容数据库中查询与所述查询数据匹配的匹配数据，所述目标内容数据库中包括所述目标场景对应的数据信息；基于通用语言模型，根据所述匹配数据以及所述查询数据，生成所述查询数据对应的输出数据。上述方法中，由于目标内容数据库中包括目标场景对应的数据信息，可实现匹配数据的准确获取；进一步地，在通用语言模型生成查询数据对应的输出数据时，将查询数据和匹配数据共同作为通用语言模型的输入数据，所生成的输出数据准确度高、与查询数据的匹配性好。

关键词：查询数据通用语言模型匹配数据输出数据目标场景目标内容数据信息数据库装置及电子设备准确度匹配性匹配查询申请

来源：评论

学校读者我要写书评

暂无评论

通用深度学习语言模型的隐私风险评估

引用

计算机研究与发展 2021年第5期58卷 1092-1105页

作者：潘旭东张谧颜一帆陆逸凡杨珉复旦大学计算机科学技术学院上海200438

近年来,自然语言处理领域涌现出多种基于Transformer网络结构的通用深度学习语言模型,简称“通用语言模型(general-purpose language models,GPLMs)”,包括Google提出的BERT(bidirectional encoder representation from transformers)模型等,已在多个标准数据集和多项重要自然语言处理任务上刷新了最优基线指标,并已逐渐在商业场景中得到应用.尽管其具有很好的泛用性和性能表现,在实际部署场景中,通用语言模型的安全性却鲜为研究者所重视.近年有研究工作指出,如果攻击者利用中间人攻击或作为半诚实(honest-but-curious)服务提供方截获用户输入文本经由通用语言模型计算产生的文本特征,它将以较高的准确度推测原始文本中是否包含特定敏感词.然而,该工作仅采用了特定敏感词存在与否这一单一敏感信息窃取任务,依赖一些较为严格的攻击假设,且未涉及除英语外其他语种的使用场景.为解决上述问题,提出1条针对通用文本特征的隐私窃取链,从更多维度评估通用语言模型使用中潜在的隐私风险.实验结果表明:仅根据通用语言模型提取出的文本表征,攻击者能以近100%的准确度推断其模型来源,以超70%的准确度推断其原始文本长度,最终推断出最有可能出现的敏感词列表,以重建原始文本的敏感语义.此外,额外针对3种典型的中文预训练通用语言模型开展了相应的隐私窃取风险评估,评估结果表明中文通用语言模型同样存在着不可忽视的隐私风险.

关键词：深度学习隐私通用语言模型自然语言处理深度学习人工智能信息安全

来源：评论

学校读者我要写书评

暂无评论

基于提示微调的微博立场检测研究

引用

中国电子科学研究院学报 2024年第4期19卷 340-349页

作者：蒲秋梅李辅德中央民族大学民族语言智能分析与安全治理教育部重点实验室北京100081

鉴于传统机器学习和自然语言处理技术在处理微博等社交媒体短文本数据时遇到的挑战,特别是数据的信息稀疏性影响数据的表达和分类性能,文中通过提示微调的方法,进行微博立场检测任务。提示微调方法可以充分挖掘和利用预训练语言模型内... 详细信息

鉴于传统机器学习和自然语言处理技术在处理微博等社交媒体短文本数据时遇到的挑战,特别是数据的信息稀疏性影响数据的表达和分类性能,文中通过提示微调的方法,进行微博立场检测任务。提示微调方法可以充分挖掘和利用预训练语言模型内嵌的丰富知识库,以便更精确捕捉并识别不同文本内容对特定话题的立场倾向。文中首先对微博立场检测数据进行基于反翻译的数据增强,将训练数据从3000条增强到12000条;然后,根据微博文本内容以及对应话题,设计出提示词。这些提示旨在引导预训练语言模型的注意力机制关注文本中对立场检测尤为关键的信息片段,从而提高模型对微博文本立场的识别能力。为了验证提示微调在微博立场检测任务上的有效性,文中在NLPCC 2016的中文微博立场数据集上进行实验,实验结果显示,相较于最优的基线方法,基于提示微调的微博立场检测方法在五个评价指标上提升了0.6%~6%。综上,本研究不仅揭示了基于提示微调的方法在微博立场检测任务中具有巨大的应用潜力,同时也为未来的研究提供了有价值的参考。

关键词：自然语言处理立场检测提示微调通用语言模型数据增强

来源：评论

学校读者我要写书评

暂无评论

语音识别方法、装置、电子设备和存储介质

语音识别方法、装置、电子设备和存储介质

引用

作者：胡今朝吴重亮马志强李永超 230088 安徽省合肥市高新区云飞路66号天源迪科一号楼9楼903

本发明提供一种语音识别方法、装置、电子设备和存储介质，涉及语音识别技术领域，该方法包括：将采集的待识别语音输入声学模型，得到声学模型输出的第一文本；在检测到第一文本中包括实体词标记符时，将第一文本中的实体词部分输入实... 详细信息

标准号: CN116705010A

本发明提供一种语音识别方法、装置、电子设备和存储介质，涉及语音识别技术领域，该方法包括：将采集的待识别语音输入声学模型，得到声学模型输出的第一文本；在检测到第一文本中包括实体词标记符时，将第一文本中的实体词部分输入实体语言模型，得到实体语言模型输出的实体词部分的第一置信度，并将第一文本输入通用语言模型，得到通用语言模型输出的第一文本的第二置信度；实体词部分包括实体词标记符和目标实体词；基于第一置信度和第二置信度对目标实体词进行激励，得到待识别语音的语音识别结果。本发明提供的技术方案能够避免语音识别过程中实体词的误触发。

关键词：置信度文本通用语言模型声学模型实体语言语音识别标记符输出语音语音识别技术语音识别结果存储介质电子设备误触发采集检测

来源：评论

学校读者我要写书评

暂无评论

基于多语言模型的跨语言摘要生成方法和装置

基于多语言模型的跨语言摘要生成方法和装置

引用

作者：孙梦阳李天健杜政晓 100084 北京市海淀区中关村东路1号院6号楼6层603A

本申请提出了一种基于多语言模型的跨语言摘要生成方法，涉及跨语言摘要生成技术领域，其中，该方法包括：获取多语言文本数据；基于多语言文本数据对通用语言模型进行预训练，得到多语言模型；获取多语言摘要数据，基于多语言摘要数据... 详细信息

标准号: CN115455175A

本申请提出了一种基于多语言模型的跨语言摘要生成方法，涉及跨语言摘要生成技术领域，其中，该方法包括：获取多语言文本数据；基于多语言文本数据对通用语言模型进行预训练，得到多语言模型；获取多语言摘要数据，基于多语言摘要数据对多语言模型进行学习，得到多语言摘要生成模型；获取待处理文本数据，将待处理文本数据输入多语言摘要生成模型，生成待处理文本数据对应的多种不同语言的摘要。本申请实现了跨语言摘要生成，能够生成不同语言的摘要，同时能够提炼总结文本大意，提高了摘要的精度。

关键词：多语言摘要生成文本数据语言多语言文本摘要数据通用语言模型申请提炼文本学习

来源：评论

学校读者我要写书评

暂无评论

领域语言模型构建方法、装置、计算机设备及存储介质

领域语言模型构建方法、装置、计算机设备及存储介质

引用

作者：张旭华齐欣孙泽明朱林林王宁 210000 江苏省南京市玄武区徐庄软件园苏宁大道1-1号

本发明公开了一种领域语言模型构建方法、装置、计算机设备及存储介质，属于语音识别技术领域，方法包括：将通用语言模型转换为等价的第一WFSA网络；根据预设数目的领域语料，从第一WFSA网络中筛选出满足预设条件的最优路径，以构造第... 详细信息

标准号: CN112002310A

本发明公开了一种领域语言模型构建方法、装置、计算机设备及存储介质，属于语音识别技术领域，方法包括：将通用语言模型转换为等价的第一WFSA网络；根据预设数目的领域语料，从第一WFSA网络中筛选出满足预设条件的最优路径，以构造第二WFSA网络；对第二WFSA网络进行归一化，并将归一化后的第二WFSA网络转换为领域语言模型。本发明在领域训练语料不足的情况下，能够快速构建满足特定场景并且具有通用泛化能力的领域语言模型。

关键词：领域语言归一化网络通用语言模型语音识别技术计算机设备存储介质快速构建领域语料模型构建网络转换训练语料预设条件最优路径预设等价筛选场景通用转换

来源：评论

学校读者我要写书评

暂无评论

一种基于领域预训练的嵌套事件抽取方法

一种基于领域预训练的嵌套事件抽取方法

引用

作者：张维彦阮彤叶琪翟洁 200237 上海市徐汇区梅陇路130号

本发明公开了一种基于领域预训练的嵌套事件抽取方法。本发明包括以下步骤：步骤1：获取领域语料并预处理，采用相邻字凝固度方法对语料构造领域专业词表，随机抽文本数据进行人工标注得嵌套事件文本数据集；步骤2：利用领域语料和领域... 详细信息

标准号: CN113076468B

本发明公开了一种基于领域预训练的嵌套事件抽取方法。本发明包括以下步骤：步骤1：获取领域语料并预处理，采用相邻字凝固度方法对语料构造领域专业词表，随机抽文本数据进行人工标注得嵌套事件文本数据集；步骤2：利用领域语料和领域专业词表作为输入，预训练领域语言模型CaseBERT，其是在通用语言模型BERT内部增加新闻类别分类预训练任务；步骤3：定义分层抽取嵌套事件信息模版，梳理嵌套事件层次关系；步骤4：采用CaseBERT模型和预定义的嵌套事件抽取模版，对嵌套事件文本数据集进行触发词和事件属性联合抽取。本发明适用于领域性的多主体嵌套事件抽取任务，通过预训练领域语言模型和预定义嵌套事件分层抽取模板，有效提高领域嵌套事件抽取的准确率。

关键词：嵌套抽取词表领域语料领域语言领域专业事件文本数据集预定义模版通用语言模型预处理层次关系定义分层类别分类人工标注事件分层事件属性事件信息文本数据领域性凝固度准确率触发语料梳理联合

来源：评论

学校读者我要写书评

暂无评论

基于GPT网络模型的汽车技术规划与决策的方法及系统

基于GPT网络模型的汽车技术规划与决策的方法及系统

引用

作者：龚循飞邓建明于勤张俊罗锋熊慧慧张萍樊华春廖程亮 330000 江西省南昌市望城新区江铃大道666号

本发明提供了一种基于GPT网络模型的汽车技术规划与决策的方法及系统，通过获取目标文本数据，并根据目标文本数据，构建无标注的语料库；构建GPT网络模型，并控制GPT网络模型在语料库的基础上进行无监督预训练，以学习得到通用语言模... 详细信息

标准号: CN116468298A

本发明提供了一种基于GPT网络模型的汽车技术规划与决策的方法及系统，通过获取目标文本数据，并根据目标文本数据，构建无标注的语料库；构建GPT网络模型，并控制GPT网络模型在语料库的基础上进行无监督预训练，以学习得到通用语言模型；构建有标注的目标数据集，并确定目标数据集中的各目标输入和目标输出；控制通用语言模型在目标数据集的基础上进行监督微调处理，以学习得到目标语言模型；将实际需求输入目标语言模型中，输出对应的反馈结果，具体的，通过对大量的汽车相关的文本数据进行预训练和微调，实现对汽车技术路线等信息的自动理解和响应，自动给出相应的结果，以辅助技术规划人员及决策者提高技术规划/决策效率和质量。

关键词：目标数据网络模型构建通用语言模型汽车技术文本数据语料库微调标注目标文本数据目标语言模型反馈结果辅助技术获取目标技术规划决策效率目标输出实际需求输入目标语言模型无监督规划输出学习响应汽车决策监督

来源：评论

学校读者我要写书评

暂无评论

一种认知功能障碍筛查用的语音识别方法和装置

一种认知功能障碍筛查用的语音识别方法和装置

引用

作者：王刚任汝静谢心怡王金涛 200025 上海市黄浦区瑞金二路197号

本发明涉及一种认知功能障碍筛查用的语音识别方法和装置，其中，方法包括：获取待检测的音频信号；将所述音频信号输入语音识别模型中进行识别，得到识别结果，其中，所述语音识别模型中的声学模型部分通过语音数据训练得到；语言模型... 详细信息

标准号: CN116153298A

本发明涉及一种认知功能障碍筛查用的语音识别方法和装置，其中，方法包括：获取待检测的音频信号；将所述音频信号输入语音识别模型中进行识别，得到识别结果，其中，所述语音识别模型中的声学模型部分通过语音数据训练得到；语言模型部分包括通用语言模型与专病语言模型，专病语言模型根据阿尔茨海默病及相关认知障碍收集的对应文本数据得到，通用语言模型与专病语言模型进行自学习融合；特征提取部分用于基于声学模型部分获取音频信号中的音频特征；解码器部分用于对提取出的音频特征进行识别，在识别时，根据解码参数动态地在通用语言模型与专病语言模型中进行选择。本发明能够平衡通用和医疗专病场景识别效果。

关键词：语言模型专病通用语言模型语音识别声学模型音频特征音频信号阿尔茨海默病认知功能障碍音频信号输入解码器方法和装置场景识别解码参数认知障碍特征提取文本数据语音数据自学习筛查融合通用检测平衡医疗

来源：评论

学校读者我要写书评

暂无评论

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案：

请选择收藏分类：

通借通还

建议与咨询 留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案： 新增检索档案 确定 取消

请选择收藏分类： 新增自定义分类 确定 取消

通借通还

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

请选择保存的检索档案：

请选择收藏分类：