说明:收录25万 73个行业的国家标准 支持批量下载
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210158443.8 (22)申请日 2022.02.21 (71)申请人 北京小米移动软件 有限公司 地址 100085 北京市海淀区西二 旗中路33 号院6号楼8层018号 申请人 北京小米松果电子有限公司 (72)发明人 储兵兵  (74)专利代理 机构 北京善任知识产权代理有限 公司 11650 专利代理师 张振伟 孟桂超 (51)Int.Cl. G06F 16/33(2019.01) G06F 16/36(2019.01) G06F 40/247(2020.01) G06F 40/289(2020.01)G06N 3/04(2006.01) G06N 3/08(2006.01) (54)发明名称 文本数据处理方法及装置、 电子设备、 存储 介质 (57)摘要 本公开是关于一种文本数据处理方法及装 置、 电子设备、 存储介质。 所述文本数据处理方法 包括: 根据待训练的文本训练模型, 将文本数据 中的文本拆分为一个以上的子文本; 将所述子文 本表征为多个维度的向量; 生 成与表征所述子文 本的向量的维度相同的位于设定范围的均匀分 布向量; 将所述均匀分布向量与表征所述子文本 的向量进行叠加, 生成综合向量; 利用所述综合 向量对所述待训练的文本训练模 型进行训练, 得 到训练后的文本训练模型; 将表征所述子文本的 向量输入所述训练后的文本训练模 型, 得到所述 文本的预测结果。 本公开提升了文本数据的预测 结果准确性, 使训练模型 具有更佳的实用性。 权利要求书2页 说明书11页 附图3页 CN 114579700 A 2022.06.03 CN 114579700 A 1.一种文本数据处 理方法, 其特 征在于, 所述方法包括: 根据待训练的文本训练模型, 将文本数据中的文本拆分为 一个以上的子文本; 将所述子文本表征为多个维度的向量; 生成与表征 所述子文本的向量的维度相同的位于设定范围的均匀分布向量; 将所述均匀分布向量与表征 所述子文本的向量进行叠加, 生成 综合向量; 利用所述综合向量对所述待训练的文本训练模型进行训练, 得到训练后的文本训练模 型; 将表征所述子文本的向量输入所述训练后的文本训练模型, 得到所述文本的预测结 果。 2.根据权利要求1所述的方法, 其特征在于, 所述根据待训练的文本训练模型, 将文本 数据中的文本拆分为 一个以上的子文本, 包括: 响应于所述待训练的文本训练模型为第 一训练模型, 将所述文本拆分为一个以上的第 一类别子文本 。 3.根据权利要求1所述的方法, 其特征在于, 所述根据待训练的文本训练模型, 将文本 数据中的文本拆分为 一个以上的子文本, 包括: 响应于所述待训练的文本训练模型为第 二训练模型, 将所述文本拆分为一个以上的第 二类别子文本 。 4.根据权利要求1所述的方法, 其特征在于, 所述将所述子文本表征为多个维度的向 量, 包括: 响应于将所述子文本表征为随机向量, 为所述子文本设置向量的维度, 将所述子文本 按所设置的向量维度随机生成向量。 5.根据权利要求1所述的方法, 其特征在于, 所述将所述子文本表征为多个维度的向 量, 包括: 响应于所述待训练的文本训练模型中对输入向量的维度 数要求, 将所述子文本按所述 待训练的文本训练模型要求的维度数随机生成向量。 6.一种文本数据处 理装置, 其特 征在于, 所述装置包括: 拆分单元, 用于根据待训练的文本训练模型, 将文本数据中的文本拆分为一个以上的 子文本; 表征单元, 用于将所述子文本表征为多个维度的向量; 第一生成单元, 用于生成与表征所述子文本的向量的维度相同的位于设定范围的均匀 分布向量; 第二生成单元, 用于将所述均匀分布向量与表征所述子文本的向量进行叠加, 生成综 合向量; 训练单元, 用于利用所述综合向量对所述待训练的文本训练模型进行训练, 得到训练 后的文本训练模型; 预测单元, 用于将表征所述子文本的向量输入所述训练后的文本训练模型, 得到所述 文本的预测结果。 7.根据权利要求6所述的装置, 其特 征在于, 所述拆分单 元, 还用于: 响应于所述待训练的文本训练模型为第 一训练模型, 将所述文本拆解为一个以上的第权 利 要 求 书 1/2 页 2 CN 114579700 A 2一类别子文本 。 8.根据权利要求6所述的装置, 其特 征在于, 所述拆分单 元, 还用于: 响应于所述待训练的文本训练模型为第 二训练模型, 将所述文本拆解为一个以上的第 二类别子文本 。 9.根据权利要求6所述的装置, 其特 征在于, 所述表征 单元, 还用于: 响应于将所述子文本表征为随机向量, 为所述子文本设置向量的维度, 将所述子文本 按所设置的向量维度随机生成向量。 10.根据权利要求6所述的装置, 其特 征在于, 所述表征 单元, 还用于: 响应于所述待训练的文本训练模型中对输入向量的维度 数要求, 将所述子文本按所述 待训练的文本训练模型要求的维度数随机生成向量。 11.一种电子设备, 包括处理器和用于存储处理器可执行指令的存储器, 其特征在于, 所述处理器被配置为在调用存储器中的可执行指 令时, 能够执行如权利要求 1至5中任一项 所述的文本数据处 理方法的步骤。 12.一种非临时性计算机可读存储介质, 当所述存储介质中的指令由电子设备的处理 器执行时, 使得电子 设备能够执行如权利要求 1至5中任一项 所述的文本数据处理方法的步 骤。权 利 要 求 书 2/2 页 3 CN 114579700 A 3

.PDF文档 专利 文本数据处理方法及装置、电子设备、存储介质

文档预览
中文文档 17 页 50 下载 1000 浏览 0 评论 309 收藏 3.0分
温馨提示:本文档共17页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 文本数据处理方法及装置、电子设备、存储介质 第 1 页 专利 文本数据处理方法及装置、电子设备、存储介质 第 2 页 专利 文本数据处理方法及装置、电子设备、存储介质 第 3 页
下载文档到电脑,方便使用
本文档由 人生无常 于 2024-03-18 08:58:50上传分享
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。