(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210213234.9 (22)申请日 2022.03.04 (71)申请人 长沙医学院 地址 410219 湖南省长 沙市望城区雷锋大 道1501号 (72)发明人 宋芫　 (74)专利代理 机构 郑州豫原知识产权代理事务 所(普通合伙) 41176 专利代理师 吴小传 (51)Int.Cl. G10L 15/26(2006.01) G10L 15/02(2006.01) G10L 25/51(2013.01) G10L 25/60(2013.01) G06V 40/70(2022.01)G06F 40/30(2020.01) G06N 3/08(2006.01) G06F 3/01(2006.01) G06Q 50/20(2012.01) (54)发明名称 一种虚拟现实场景的英 语口语测评方法 (57)摘要 本发明公开了一种虚拟现实场景的英语口 语测评方法， 涉及英语口语评测技领域， 其技术 方案包括以下步骤： 步骤一： 测评准备： 对测评场 地进行清空， 开启计算机， 同时使得被测评人员 佩戴上VR装置， 并且开启场地的监控摄像头； 步 骤二： 测评声音录入： 通过测评场地的收音设备 对被测评 人员的声音进行录入、 通过监控摄像头 对被测评人员的肢体动作以及面部表情进行录 入， 利用计算机将被测评人员表情与肢体状态不 符的地方进行录入， 并通过显示装置进行展示； 对逻辑性 以及语句的充实程度较判断为低的语 句进行标记， 通过显示装置进行指出， 并将正确 的语句进行显示， 进而能够 使得被测评人员更好 地克服英 语口语时存在的问题。 权利要求书1页 说明书4页 CN 114596858 A 2022.06.07 CN 114596858 A 1.一种虚拟现实场景的英语口语测评方法， 其特 征在于， 包括以下步骤： 步骤一： 测评准备： 对测评场地进行清空， 开启计算机， 同时使得被测评人员佩戴上VR 装置， 并且开启场地的监控摄 像头； 步骤二： 测评声音录入： 通过测评场 地的收音设备对被测评人员的声音进行录入， 同时 通过监控摄 像头对测评人员的肢体动作以及面部表情进行录入； 步骤三： 音频分析： 通过计算机对被测评人员的声音进行文字转换， 同时通过计算机 中 的检测模块对语句中每 个单词的发音 进行检测， 并且 对语句之间的连贯 性进行判断； 步骤四： 语义分析： 通过虚拟现实场景中的对话， 从而对被测评人员所回答语句的逻辑 性以及语句的充实程度进行评判； 步骤五： 通过计算机中的图像模块对被测评人员的面部表情以及进行测评时的姿态进 行判断； 步骤六： 指正： 通过计算机将被测评人员表情与肢体状态不符的地方进行录入， 并通过 显示装置进行展示， 同时对逻辑性以及语句的充实程度较判断为低的语句进行标记， 并通 过显示装置进行指出， 并且将正确的语句进行显示。 2.根据权利要求1所述的一种虚拟现实场景的英语口语测评方法， 其特征在于， VR装置 与计算机相连接， 通过计算机将图像数据传输 到VR装置中。 3.根据权利要求1所述的一种虚拟现实场景的英语口语测评方法， 其特征在于， 监控摄 像头采用C MOS摄像头， CMOS摄像头拍摄的图像实时传输 到计算机中进行存 储。 4.根据权利要求1所述的一种虚拟现实场景的英语口语测评方法， 其特征在于， 所述计 算机的内部还包括有深度学习模块， 通过深度学习模块对被测评人员的对话时的语调 与声 音高低进行 可视化观看。 5.根据权利要求1所述的一种虚拟现实场景的英语口语测评方法， 其特征在于， 所述计 算机对被测评人员的测评记录以及测评后的改正 意见存储一个星期。 6.根据权利要求1所述的一种虚拟现实场景的英语口语测评方法， 其特征在于， 计算机 与显示装置之间通信连接， 在测评过程中通过显示装置显示出被测评人员所处的虚拟场 景。权　利　要　求　书 1/1 页 2 CN 114596858 A 2一种虚拟现实场景的英语口语测评方 法 技术领域 [0001]本发明涉及英语口语评测技术领域， 尤其涉及一种虚拟现实场景的英语口语测评 方法。 背景技术 [0002]英语口语是英语使用者在交际中使用的口头语言形式。 英语口语是通过声音传播 的有声语言。 英语文 学作品中也常以书面形式记叙英语口语。 英语口语根据不同的交际者、 交际环境、 交际对象和交际目的而灵活多变被交际者自由使用。 与口语相对， 书面英语是在 口头英语的基础上发展出来的， 是语言口头形式的书面记载。 [0003]经检索， 中国专利号为CN107818795B的发明专利， 公开了一种英语口语的测评方 法及装置， 所述方法包括： 采集用户的语音数据， 所述语音数据为用户的英语口音数据； 将 所述语音数据转换为对应的文本数据； 对所述文本数据中的口语习惯文本数据进行标注； 获取标注后的文本数据的文本特征和所述语音数据的声学特征； 根据所述文本特征和声 学 特征获取用户的口语习惯信息； 根据所述口语习惯信息对用户的英语口语水平进行测评。 此发明在测评过程可以全面反映英语学者表达的流畅性、 句 子单元的组织能力等， 也可以 综合体现英语学习者掌握 语言的水平。 [0004]然而， 上述测评方法在实际使用过程中仅能够实现对测评语句的录入与评判， 但 是缺乏对虚拟现实场景 的搭建， 从而降低测评人员的现场能力， 同时也缺 乏对测评过程中 姿态与面部表情的检测， 并且无法对测评后存在的问题进行指正。 因此需要一种虚拟现实 场景的英语口语测评方法弥补上述方法的缺陷和不足。 发明内容 [0005]本发明的目的是为了突破现有技术中缺乏对虚拟现实场景的搭建问题。 由于真实 交际环境的缺失导致被测评人员的现场能力降低， 影响测评结果的真实性和有效性； 本发 明弥补了缺 乏对测评过程中副语言特征， 包括面部表情、 视觉接触、 体态、 手势和语音特征 的检测， 并且无法对测评后存在的问题进行指正的缺陷， 而提出 的一种虚拟现实场景 的英 语口语测评方法。 [0006]为了实现上述目的， 本发明采用了如下技 术方案： [0007]一种虚拟现实场景的英语口语测评方法， 包括以下步骤： [0008]步骤一： 测评准备： 对测评场地进行清空， 开启计算机， 同时使得被测评人员佩戴 上VR装置， 并且开启场地的监控摄 像头； [0009]步骤二： 测评声音录入： 通过测评场地的收音设备对被测评人员的声音进行录入， 同时通过监控摄 像头对被测评人员的肢体动作以及面部表情进行录入； [0010]步骤三： 音频分析： 通过计算机对被测评人员的声音进行文字转换， 同时通过计算 机中的检测模块对语句中每 个单词的发音 进行检测， 并且 对语句之间的连贯 性进行判断； [0011]步骤四： 语义分析： 通过虚拟现实场景中的对话， 从而对被测评人员所回答语句的说　明　书 1/4 页 3 CN 114596858 A 3