说明:收录25万 73个行业的国家标准 支持批量下载
文库搜索
切换导航
文件分类
频道
仅15元无限下载
联系我们
问题反馈
文件分类
仅15元无限下载
联系我们
问题反馈
批量下载
(19)中华 人民共和国 国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111373575.4 (22)申请日 2021.11.19 (71)申请人 北京小米移动软件 有限公司 地址 100085 北京市海淀区西二 旗中路33 号院6号楼8层018号 申请人 北京小米松果电子有限公司 (72)发明人 李可 李嫣然 (74)专利代理 机构 北京善任知识产权代理有限 公司 11650 代理人 李梅香 (51)Int.Cl. G06F 16/36(2019.01) G06F 16/35(2019.01) G06N 20/00(2019.01) (54)发明名称 数据增强方法、 装置、 电子设备及存 储介质 (57)摘要 本公开是关于一种数据增强方法、 装置、 电 子设备及存储介质。 该数据增强方法包括: 对训 练模型进行预处理; 向所述训练模 型输入带有训 练标签及标识有掩码的训练语句; 基于所述训练 标签, 通过所述训练模型对所述训练语句进行词 汇扩展训练, 得到扩展词汇; 输出带有所述扩展 词汇的扩展语句, 其中, 所述扩展语句通过所述 扩展词汇替代所述掩码的位置得到。 本申请中, 由于放置扩展词汇的位置事先通过掩码确定出, 因此得到的大量扩展词汇可放置于训练语句中 的相同位置, 从而可得到相同语序的扩展语句, 有利于后续数据训练时对词汇的提取, 进而实现 数据增强。 权利要求书2页 说明书9页 附图3页 CN 114153984 A 2022.03.08 CN 114153984 A 1.一种数据增强方法, 其特 征在于, 所述方法包括: 对训练模型进行 预处理; 向所述训练模型输入带有训练标签及标识有掩码的训练语句; 基于所述训练标签, 通过所述训练模型对所述训练语句进行词汇扩展训练, 得到扩展 词汇; 输出带有所述扩展词汇的扩展语句, 其中, 所述扩展语句通过所述扩展词汇替代所述 掩码的位置得到 。 2.根据权利要求1所述的数据增强方法, 其特征在于, 所述基于所述训练标签, 通过所 述训练模型对所述训练语句进行词汇扩展训练, 得到扩展词汇, 包括: 确定待扩展词汇与所述训练标签间的关联关系; 基于所述训练标签以及确定的所述关联关系, 对所述训练语句进行训练, 得到所述扩 展词汇。 3.根据权利要求2所述的数据增强方法, 其特 征在于, 所述训练标签至少包括: 表征情绪的情绪标签; 所述关联关系为所述扩展词汇用于表征 所述情绪标签中所述情绪产生原因; 所述基于所述训练标签以及确定的所述关联关系, 对所述训练语句进行训练, 得到所 述扩展词汇, 至少包括: 基于所述情绪标签以及所述关联关系, 训练得到表征 所述情绪产生原因的扩展词汇。 4.根据权利要求1所述的数据增强方法, 其特征在于, 所述基于所述训练标签, 通过所 述训练模型对所述训练语句进行词汇扩展训练, 得到扩展词汇, 包括: 确定所述掩码位置能够容纳的所述扩展词汇的词汇长度; 基于所述训练标签, 训练得到符合所述词汇长度的所述扩展词汇。 5.根据权利要求1所述的数据增强方法, 其特征在于, 向所述训练模型输入带有训练标 签及标识有掩码的训练语句之前, 所述方法还 包括: 获取初始语句, 所述初始语句至少包括用户问询语句; 用所述掩码遮挡所述初始语句中与所述训练标签关联的词汇; 确定被遮挡词汇所在位置为所述掩码的位置 。 6.根据权利要求1所述的数据增强方法, 其特征在于, 所述对训练模型进行预处理, 至 少包括: 获取预定领域内未带有所述训练标签的训练词汇, 其中所述训练词汇具有所述预定领 域的语言特 征; 向所述训练模型输入所述训练词汇; 基于所述训练词汇对所述训练模型进行训练。 7.根据权利要求1所述的数据增强方法, 其特 征在于, 所述方法还 包括: 在情感对话任务中, 确定出所述训练标签, 其中, 所述训练标签用于表征所述情 感对话 任务中涉及到的情绪类别; 基于表征 所述情绪类别的训练标签, 训练得到所述扩展词汇。 8.一种数据增强装置, 其特 征在于, 所述装置包括: 第一处理单元, 用于对训练模型进行 预处理;权 利 要 求 书 1/2 页 2 CN 114153984 A 2第二处理单元, 用于向所述训练模型输入带有训练标签及标识有掩码的训练语句; 第三处理单元, 用于基于所述训练标签, 通过所述训练模型对所述训练语句进行词汇 扩展训练, 得到扩展词汇; 第四处理单元, 用于输出带有所述扩展词汇的扩展语句, 其中, 所述扩展语句通过所述 扩展词汇替代所述掩码的位置得到 。 9.一种电子设备, 其特征在于, 包括: 处理器和用于存储能够在处理器上运行的计算机 程序的存储器, 其中, 所述处理器用于运行所述计算机程序时, 执行权利要求 1至7所述方法 的步骤。 10.一种计算机可读存储介质, 其上存储有计算机程序, 其特征在于, 所述计算机程序 被处理器执行时实现权利要求1至7 所述方法的步骤。权 利 要 求 书 2/2 页 3 CN 114153984 A 3
专利 数据增强方法、装置、电子设备及存储介质
文档预览
中文文档
15 页
50 下载
1000 浏览
0 评论
309 收藏
3.0分
赞助2.5元下载(无需注册)
温馨提示:本文档共15页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
下载文档到电脑,方便使用
赞助2.5元下载
本文档由 人生无常 于
2024-03-18 19:02:44
上传分享
举报
下载
原文档
(570.1 KB)
分享
友情链接
T-STSI 43—2023 人工智能算力资源池技术规范.pdf
GB-T 25341.1-2019 铁路旅客运输服务质量 第1部分:总则.pdf
GB-T 5171.22-2017 小功率电动机 第22部分:永磁无刷直流电动机试验方法.pdf
GBT 50064-2014 交流电气装置的过电压保护和绝缘配合设计规范.pdf
GB-T 18337.3-2001 生态公益林建设 技术规程.pdf
NY-T 3866-2021 草地贪夜蛾测报技术规范.pdf
GB-T 29115-2012 工业企业节约原材料评价导则.pdf
DB31-T 1228-2020 在用燃油、燃气锅炉节能运行评价指标 上海市.pdf
GB-T 34943-2017 C-C++语言源代码漏洞测试规范.pdf
T-CCUA 016—2021 超级计算数据中心设计要求.pdf
DB15-T 1873—2020 大数据平台 数据接入质量规范 内蒙古自治区.pdf
GB-T 35347-2017 机动车安全技术检测站.pdf
T-GXAS 409—2022 建设项目社会稳定风险分析报告编制规范.pdf
GM-T 0035.1-2014 射频识别系统密码应用技术要求 第1部分:密码安全保护框架及安全级别.pdf
T-CSRME 02—2019 海上风电工程基桩检测技术规程.pdf
GB-T 25808-2021 硫化黑2BR、3B 200%.pdf
GB-T 31250-2014 电子电气产品环境信息基本要求.pdf
GB-T 25744-2010 钢件渗碳淬火回火金相检验.pdf
GB-T 42825-2023 电动滑板车通用技术规范.pdf
GB-T 42752-2023 区块链和分布式记账技术 参考架构.pdf
1
/
3
15
评价文档
赞助2.5元 点击下载(570.1 KB)
回到顶部
×
微信扫码支付
2.5
元 自动下载
官方客服微信:siduwenku
支付 完成后 如未跳转 点击这里 下载
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们
微信(点击查看客服)
,我们将及时删除相关资源。