(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210225366.3 (22)申请日 2022.03.09 (71)申请人 航空工业信息中心 地址 100029 北京市朝阳区安外小关东里 14号 申请人 北京中科闻歌科技股份有限公司   中国科学院自动化研究所 (72)发明人 王婧宜 禹宁 冯昊 孔庆超  王宇琪 许刚刚 曹家 罗引  (74)专利代理 机构 北京开阳星知识产权代理有 限公司 1 1710 专利代理师 袁义科 (51)Int.Cl. G06F 16/35(2019.01) G06F 40/30(2020.01) (54)发明名称 面向多级标签的文本分类方法、 装置、 设备 及存储介质 (57)摘要 本公开实施例涉及一种面向多级标签的文 本分类方法、 装置、 设备及存储介质。 本公开实施 例通过获取文本以及文本中关键词对应的标签; 基于预设的面向多级标签的文本分类模型中的 文本编码模 型对文本进行编码处理, 得到文本的 特征向量, 文本的特征向量对文本的关键词进行 敏感表征, 基于预设的面向多级标签的文本分类 模型中的标签编码模型, 对标签进行编码处理, 得到标签的向量; 分别计算文本的特征向量与每 个标签的向量之间的余弦相似度; 将余弦相似度 大于预设阈值的标签确定为文本的标签。 通过对 文本和现有类别标签进行编码处理和余弦相似 度计算处理, 选择出文本内容相匹配的标签, 可 减轻对人工标注标签的依赖, 降低人工标注和标 签体系的维护成本, 提高标签标注的准确率, 使 文本分类结果更准确。 权利要求书2页 说明书10页 附图2页 CN 114691866 A 2022.07.01 CN 114691866 A 1.一种面向多 级标签的文本分类方法, 其特 征在于, 所述方法包括: 获取文本以及文本中关键词对应的标签; 基于预设的面向多级标签的文本分类模型中的文本编码模型对所述文本进行编码处 理, 得到所述文本的特征向量, 所述文本的特征向量对所述文本的关键词进行敏感表征, 基 于预设的面向多级标签的文本分类模型中的标签编码模型, 对所述标签进行编码处理, 得 到标签的向量; 分别计算所述文本的特 征向量与每 个标签的向量之间的余弦相似度; 将所述余弦相似度大于预设阈值的标签确定为所述文本的标签。 2.根据权利要求1所述的方法, 其特征在于, 所述获取文本以及文本 中关键词对应的标 签, 包括: 基于已有的关键词表, 从所述文本中匹配得到关键词; 基于关键词和标签之间的映射关系, 确定得到所述文本中的关键词对应的标签。 3.根据权利要求1所述的方法, 其特征在于, 所述基于预设的面向多级标签的文本分类 模型中的文本编码模型对所述文本进行编码处理, 得到所述文本的特征向量, 所述文本的 特征向量对所述文本的关键词进 行敏感表征, 基于预设的面向多级标签的文本 分类模型中 的标签编码模型, 对所述标签进行编码处 理, 得到标签的向量之前, 所述方法还 包括: 对所述文本进行预处理, 所述预处理的方式至少包括删除超文本标记语言、 繁体字转 为简体字、 英文大小 写统一、 删除符合预设正则表达式的内容中的一种。 4.根据权利要求1所述的方法, 其特 征在于, 对所述文本进行编码处 理, 包括: 从所述文本 中提取标题以及首段和尾段的内容, 并对所述标题以及所述首段和尾段的 内容进行拼接, 或者从所述文本中提取 标题和摘要, 并对所述标题和摘要 进行拼接; 基于拼接得到的文本内容进行编码处 理, 得到文本的特 征向量。 5.一种面向多 级标签的文本分类装置, 其特 征在于, 所述装置包括: 获取模块, 用于获取文本以及文本中关键词对应的标签; 编码模块, 用于基于预设的面向多级标签的文本分类模型中的文本编码模型对所述文 本进行编码处理, 得到所述文本的特征向量, 所述文本的特征向量对所述文本的关键词进 行敏感表征, 基于预设的面向多级标签的文本分类模型中的标签编码模型, 对所述标签进 行编码处 理, 得到标签的向量; 计算模块, 用于分别计算所述文本的特 征向量与每 个标签的向量之间的余弦相似度; 确定模块, 用于将所述 余弦相似度大于预设阈值的标签确定为所述文本的标签。 6.根据权利要求5所述的装置, 其特 征在于, 所述获取模块, 包括: 第一匹配子模块, 用于基于已有的关键词表, 从所述文本中匹配得到关键词; 第一确定子模块, 用于基于关键词和标签之间的映射关系, 确定得到所述文本中的关 键词对应的标签。 7.根据权利要求5所述的装置, 其特 征在于, 所述装置还 包括: 预处理模块, 用于对所述文本进行预处理, 所述预处理的方式至少包括删除超文本标 记语言、 繁体字转 为简体字、 英文大小 写统一、 删除符合预设正则表达式的内容中的一种。 8.根据权利要求5所述的装置, 其特 征在于, 所述编码模块, 包括: 第一拼接子模块, 用于从所述文本中提取标题以及首段和尾段的内容, 并对所述标题权 利 要 求 书 1/2 页 2 CN 114691866 A 2以及所述首段和尾段 的内容进行拼接, 或者从所述文本中提取标题和摘要, 并对所述标题 和摘要进行拼接; 第一编码子模块, 用于基于拼接得到的文本内容进行编码处 理, 得到文本的特 征向量。 9.一种计算设备, 其特 征在于, 包括: 存储器和处理器, 其中, 所述存储器 中存储有计算机程序, 当所述计算机程序被所述处 理器执行时, 实现如权利要求1 ‑4中任一项所述的面向多 级标签的文本分类方法。 10.一种计算机可读存储介质, 其特征在于, 所述存储介质中存储有计算机程序, 当所 述计算机程序被处理器执行时, 实现如权利要求1 ‑4中任一项所述的面向多级标签的文本 分类方法。权 利 要 求 书 2/2 页 3 CN 114691866 A 3

.PDF文档 专利 面向多级标签的文本分类方法、装置、设备及存储介质

文档预览
中文文档 15 页 50 下载 1000 浏览 0 评论 309 收藏 3.0分
温馨提示:本文档共15页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 面向多级标签的文本分类方法、装置、设备及存储介质 第 1 页 专利 面向多级标签的文本分类方法、装置、设备及存储介质 第 2 页 专利 面向多级标签的文本分类方法、装置、设备及存储介质 第 3 页
下载文档到电脑,方便使用
本文档由 人生无常 于 2024-03-18 17:52:48上传分享
友情链接
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。