说明:收录25万 73个行业的国家标准 支持批量下载
(19)中华 人民共和国 国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111680114.1 (22)申请日 2021.12.3 0 (71)申请人 深圳萨摩耶数字科技有限公司 地址 518049 广东省深圳市福田区梅林街 道梅都社区中康路136号深圳新一代 产业园5栋1501 (72)发明人 林建明 王文杰  (74)专利代理 机构 深圳智汇远见知识产权代理 有限公司 4 4481 代理人 聂磊 (51)Int.Cl. G06N 20/00(2019.01) (54)发明名称 一种模型训练方法、 装置、 电子设备及存储 介质 (57)摘要 本申请涉及一种模型训练方法、 装置、 电子 设备及存储介质, 方法包括: 确定用于进行模型 训练的特征, 获取存储的该特征的领域知识参 数, 并基于领域知识参数确定特征与待训练模型 的目标变量之间的目标关系, 获取特征的特征数 据, 基于目标关系对特征数据进行数据蒸馏, 得 到目标特征数据, 其中, 目标特征数据与目标变 量之间的关系符合目标关系, 利用目标特征数据 对待训练模型进行训练。 其中, 领域知识参数表 示的目标关系是根据业务认知设置的, 如此, 利 用基于特征与 目标变量之间的目标关系进行数 据蒸馏得到的目标特征数据是符合业务认知的, 因此基于目标特征数据训练得到的模型也是符 合业务认知, 从而提高了模型准确性。 权利要求书2页 说明书9页 附图3页 CN 114418113 A 2022.04.29 CN 114418113 A 1.一种模型训练方法, 其特 征在于, 包括: 确定用于进行模型训练的特 征; 获取存储的所述特征的领域知识参数, 并基于所述领域知识参数确定所述特征与待训 练模型的目标变量之间的目标关系; 获取所述特征的特征数据; 基于所述目标关系对所述特征数据进行数据蒸馏, 得到目标特征数据, 所述目标特征 数据与所述目标变量之间的关系符合所述目标关系; 利用所述目标 特征数据对所述待训练模型进行训练。 2.根据权利要求1所述的方法, 其特征在于, 所述基于所述目标关系对所述特征数据进 行数据蒸馏, 得到目标 特征数据, 包括: 根据所述目标关系确定所述特征数据中的误差数据, 所述误差数据为与所述目标变量 之间的关系不符合所述目标关系的特 征数据; 去除所述特 征数据中的所述 误差数据得到目标 特征数据。 3.根据权利要求2所述的方法, 其特征在于, 所述根据所述目标关系确定所述特征数据 中的误差数据, 包括: 基于所述特征数据对应的目标变量值对所述特征数据进行排序, 使得排序后的所述特 征数据对应的目标变量 值具有单调性; 基于排序后的所述特 征数据, 根据所述目标关系确定所述特 征数据中的误差数据。 4.根据权利要求3所述的方法, 其特征在于, 所述去除所述特征数据中的所述误差数据 得到目标 特征数据, 包括: 对所述误差数据进行分箱处 理, 生成新的特 征数据; 将所述特征数据中的第 一特征数据和所述新的特征数据作为目标特征数据, 所述第 一 特征数据与所述目标变量之间的关系符合所述目标关系。 5.根据权利要求4所述的方法, 其特征在于, 所述对所述误差数据进行分箱处理, 生成 新的特征数据, 包括: 基于排序后的所述特 征数据, 将相邻的所述 误差数据组成一个区间; 将所述区间作为 新的特征数据。 6.根据权利要求1所述的方法, 其特 征在于, 所述方法还 包括: 在利用所述目标特征数据对所述待训练模型进行训练之前, 基于所述目标特征数据的 单调性设置所述待训练模型的单调性约束, 以基于所述单调性约束对所述待训练模型进 行 训练。 7.根据权利要求1所述的方法, 其特 征在于, 所述方法还 包括: 在确定用于进行模型训练的特征之前, 对参数进行初始化操作, 所述参数包括下述参 数中的一种或几种: 字段列表、 转换对象、 单个箱体内样本数量下限、 特征分箱 参数空间、 单 调特征参轮数、 缺 失值、 并行计算数、 排除列表、 样 本分割标志字段、 样 本分割标志字段需要 分析的样本合 集、 袋外样本列表、 用户自定义单调性字典、 日志等级、 随机数种子 。 8.一种模型训练装置, 其特 征在于, 包括: 特征确定模块, 用于确定用于进行模型训练的特 征; 关系确定模块, 用于获取存储的所述特征的领域知识参数, 并基于所述领域知识参数权 利 要 求 书 1/2 页 2 CN 114418113 A 2确定表示所述特 征与待训练模型的目标变量之间的目标关系; 数据获取模块, 用于获取 所述特征的特征数据; 数据蒸馏模块, 基于所述领域知识参数目标关系对所述特征数据进行数据蒸馏, 得到 目标特征数据, 所述目标 特征数据与所述目标变量之间的关系符合所述目标关系; 训练模块, 利用所述目标 特征数据对所述待训练模型进行训练。 9.一种电子设备, 其特征在于, 包括: 处理器和存储器, 所述处理器用于执行所述存储 器中存储的模型训练程序, 以实现权利要求1 ‑7任一项所述的模型训练方法。 10.一种存储介质, 其特征在于, 所述存储介质存储有一个或者多个程序, 所述一个或 者多个程序可被一个或者多个处理器执行, 以实现权利要求1 ‑7任一项所述的模型训练方 法。权 利 要 求 书 2/2 页 3 CN 114418113 A 3

.PDF文档 专利 一种模型训练方法、装置、电子设备及存储介质

文档预览
中文文档 15 页 50 下载 1000 浏览 0 评论 309 收藏 3.0分
温馨提示:本文档共15页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 一种模型训练方法、装置、电子设备及存储介质 第 1 页 专利 一种模型训练方法、装置、电子设备及存储介质 第 2 页 专利 一种模型训练方法、装置、电子设备及存储介质 第 3 页
下载文档到电脑,方便使用
本文档由 人生无常 于 2024-03-18 19:29:09上传分享
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。