(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210338436.6 (22)申请日 2022.04.01 (71)申请人 北京物灵科技有限公司 地址 100102 北京市朝阳区望京东园523号 楼13层216 3号06室 (72)发明人 宋伟　李来林　尚跃进　 (74)专利代理 机构 北京维正专利代理有限公司 11508 专利代理师 赵万凯 (51)Int.Cl. G06F 16/33(2019.01) G06F 16/332(2019.01) G06F 40/253(2020.01) G06F 40/30(2020.01) G09B 5/06(2006.01)G10L 13/08(2013.01) (54)发明名称 辅助绘本阅读的方法、 装置、 计算机设备及 存储介质 (57)摘要 本发明公开了一种辅助绘本阅读的方法、 装 置、 计算机设备及存储介质， 其中， 该辅助绘本阅 读的方法包括： 获取实时绘本特征， 基于绘本数 据库和实时绘本特征匹配目标绘本以及目标绘 本页； 基于目标绘本对应的绘本文本， 提取目标 绘本页对应的绘本页文本； 采用语 言处理模块对 绘本页文本进行分析， 获取互动页内容； 基于互 动内容数据库对互动页内容进行匹配， 若匹配结 果为失败， 则通过音频处理模块， 将互动页内容 转换为互动页音频并播放互动页音频。 该方法可 提升读者尤其是儿童在阅读绘本过程中的参与 度， 利于读者深入理解绘本内容携带的知识， 提 高自助学习绘本知识的能力。 权利要求书2页 说明书10页 附图6页 CN 114741472 A 2022.07.12 CN 114741472 A 1.一种辅助绘本阅读的方法， 其特 征在于， 包括： 获取实时绘本特征， 基于绘本数据库和所述实时绘本特征匹配目标绘本以及目标绘本 页； 基于所述目标绘本对应的绘本文本， 提取 所述目标绘本页对应的绘本页文本； 采用语言处 理模块对所述绘本页文本进行分析， 获取互动页内容； 基于互动内容数据库对所述互动页内容进行匹配， 若匹配结果为失败， 则通过音频处 理模块， 将所述互动页内容 转换为互动页音频并播 放所述互动页音频。 2.根据权利要求1所述的辅助绘本阅读的方法， 其特征在于， 所述获取实时绘本特征， 基于绘本数据库和所述实时绘本特 征匹配目标绘本以及目标绘本页， 包括： 获取在同一待识别绘本页上实时识别的绘本页文字、 实时拍摄的绘本页图片 或绘本页 视频； 基于所述绘本页文字、 绘本页图片 或绘本页视频， 在所述绘本数据库中进行特征匹配， 获取对应的目标绘本以及所述目标绘本页。 3.根据权利要求1所述的辅助绘本阅读的方法， 其特征在于， 所述采用语言处理模块对 所述绘本页文本进行分析， 获取互动页内容， 包括： 采用语言理解模块处 理所述绘本页文本， 生成结构化数据； 结合绘本知识库和语言生成模块对所述结构化数据进行信 息提取， 生成所述互动页内 容。 4.根据权利要求3所述的辅助绘本阅读的方法， 其特征在于， 所述结构化数据包括关键 词； 所述结合绘本知识库和语言生成模块对所述结构化数据进行信 息提取， 生成所述互动 页内容， 包括： 提取关键词的词义关系； 基于所述词义关系和所述绘本知识库对所述关键词进行筛选， 获取筛选结果作为保留 词； 对所述保留词进行排序、 聚合和语法化处 理， 获取所述互动页内容。 5.根据权利要求1所述的辅助绘本阅读的方法， 其特征在于， 所述互动内容数据库包括 用户ID； 在所述基于互动内容数据库对所述互动页内容进行匹配之后， 还 包括： 若匹配结果为成功， 则基于用户ID获取所述互动页内容对应的互动页播放率以及最近 播放时间； 若所述互动页播放率大于播放率阈值或者最近播放 时间晚于播放 时间阈值， 则停止转 换所述互动页内容成为所述互动页音频。 6.根据权利要求1所述的辅助绘本阅读的方法， 其特征在于， 所述互动页内容包括互动 页问题和互动页答案； 播放所述互动页音频， 包括： 播放所述互动页问题， 在预设问题等待时间后播 放所述互动页答案 。 7.根据权利要求1所述的辅助绘本阅读的方法， 其特 征在于， 还 包括： 获取互动页内容请求， 所述互动页内容请求包括互动页ID和用户互动音频；权　利　要　求　书 1/2 页 2 CN 114741472 A 2将所述用户互动音频转换为用户互动文本； 采用所述语言理解模块对所述用户互动文本和所述互动页ID对应的绘本页进行分析， 获取互动页回复内容； 将所述互动页回复内容 转换为互动页回复音频并播 放所述互动页回复音频。 8.一种辅助绘本阅读的装置， 其特 征在于， 包括： 获取绘本特征模块， 用于获取实时绘本特征， 基于绘本数据库和所述实时绘本特征匹 配目标绘本以及目标绘本页； 提取绘本文本模块， 用于基于所述目标绘本对应的绘本文本， 提取所述目标绘本页对 应的绘本页文本； 获取互动页内容模块， 用于采用语言处理模块对所述绘本页文本进行分析， 获取互动 页内容； 播放互动页音频模块， 用于基于互动内容数据库对所述互动页内容进行匹配， 若匹配 结果为失败， 则通过音频处理模块， 将所述互动页内容转换为互动页音频并播放所述互动 页音频。 9.一种计算机设备， 包括存储器、 处理器以及存储在所述存储器中并可在所述处理器 上运行的计算机程序， 其特征在于， 所述处理器执行所述计算机程序时实现如权利要求 1至 7任一项所述辅助绘本阅读的方法。 10.一种计算机可读存储介质， 所述计算机可读存储介质存储有计算机程序， 其特征在 于， 所述计算机程序被处理器执行时实现如权利要求1至7任一项所述辅助绘本阅读的方 法。权　利　要　求　书 2/2 页 3 CN 114741472 A 3