(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211214542.X (22)申请日 2022.09.30 (71)申请人 五八畅生活 （北京） 信息技 术有限公 司 地址 100020 北京市朝阳区酒仙桥北路甲 10号院10 5号楼1至7层101内1层123室 (72)发明人 涂思娜　田书杭　 (74)专利代理 机构 北京润泽恒知识产权代理有 限公司 1 1319 专利代理师 杨柳苑 (51)Int.Cl. G06F 11/36(2006.01) G06F 16/906(2019.01) G06F 16/9535(2019.01) (54)发明名称 数据测试方法、 装置、 电子设备及可读存储 介质 (57)摘要 本发明实施例提供了一种数据测试方法、 装 置、 电子设备及可读存储介质， 所述方法包括： 确 定针对推荐场景的用户样本数据和M个推荐策略 对应的推荐策略数据； 调用N个所述推荐策略对 应的推荐策略数据分别对所述用户样本数据进 行处理， 得到N个所述推荐策略在生成推荐数据 的推荐过程中产生的推荐过程数据； 其中， 所述 推荐过程拆分为多个过程阶段； 选取各个所述过 程阶段对应的所述推荐过程数据， 作为N个所述 推荐策略在各个所述过程阶段对应的过程指标； 展示N个所述推荐策略在各个所述过程阶段对应 的所述过程指标。 本发明实施例按照过程阶段对 推荐过程数据进行分类， 作为推荐策略在各个过 程阶段下的过程指标并展示给测试 人员。 权利要求书2页 说明书15页 附图5页 CN 115525560 A 2022.12.27 CN 115525560 A 1.一种数据测试 方法， 其特 征在于， 所述方法包括： 确定针对推荐场景的用户样本数据和M个 推荐策略对应的推荐策略数据， M为 正整数； 调用N个所述推荐策略对应的推荐策略数据分别对所述用户样本数据进行处理， 得到 基于N个所述推荐 策略生成推荐 数据的推荐过程中产生的推荐过程数据； 其中， 所述推荐过 程拆分为多个过程阶段， N 为小于等于 M的正整数； 选取各个所述过程阶段对应的所述推荐过程数据， 作为所述N个推荐策略在各个所述 过程阶段对应的过程指标； 展示所述 N个推荐策略在各个所述过程阶段对应的所述过程指标。 2.根据权利要求1所述的方法， 其特征在于， 所述过程阶段至少包括召回阶段、 排序阶 段和结果输出阶段的其中一种。 3.根据权利要求1或2所述的方法， 其特征在于， 所述推荐策略至少包括两个， 所述展示 N个所述推荐策略在各个所述过程阶段对应的所述过程指标， 包括： 对比展示 N个所述推荐策略之间在各个所述过程阶段对应的所述过程指标。 4.根据权利要求1所述的方法， 其特征在于， 所述推荐数据具有多种结果分类， 在所述 选取各个所述过程阶段对应的所述推荐过程数据， 作为N个所述推荐策略在各个所述过程 阶段对应的过程指标之后， 所述方法还 包括： 选取各个所述结果分类对应的推荐数据， 作为N个所述推荐策略的各个所述结果分类 对应的结果指标； 对比展示N个所述推荐策略的各个所述结果分类之间的所述结果指标； 其中， 所述结果 分类至少包括类目分类、 距离分类、 质量分类和时间分类的其中一种。 5.根据权利要求4所述的方法， 其特征在于， 所述对比展示N个所述推荐策略的各个所 述结果分类之间的所述结果指标， 包括： 计算N个所述推荐策略的各个所述结果分类的所述结果指标的分布情况； 对比展示 N个所述推荐策略的各个所述结果分类之间的所述分布情况。 6.根据权利要求1所述的方法， 其特征在于， 在所述确定针对推荐场景的用户样本数据 和M个推荐策略对应的推荐策略数据之前， 所述方法还 包括： 获取线上的初始用户样本数据； 从所述初始用户样本数据中提取可共有特征， 所述可共用特征为允许在对不同的所述 推荐场景和/或所述推荐策略数据测试时共用的数据； 所述确定针对推荐场景的用户样本数据和M个 推荐策略对应的推荐策略数据， 包括： 从所述可共有特征中确定针对推荐场景的目标可共用特征并组装为所述用户样本数 据， 以及确定针对所述推荐场景的M个 推荐策略对应的推荐策略数据。 7.根据权利要求1所述的方法， 其特征在于， 在所述展示N个所述推荐策略数据在各个 所述过程阶段对应的所述过程指标之后， 所述方法还 包括： 响应于对N个所述推荐策略中任意至少一个目标推荐策略的标注请求， 确定针对每个 所述目标推荐策略的测试 标注数据。 8.一种数据测试装置， 其特 征在于， 所述装置包括： 确定模块， 用于确定针对推荐场景的用户样本数据和M个推荐策略对应的推荐策略数 据， M为正整数；权　利　要　求　书 1/2 页 2 CN 115525560 A 2调用模块， 用于调用N个所述推荐策略对应的推荐策略数据分别对所述用户样本数据 进行处理， 得到基于N个所述推荐策略数据在生成推荐数据的推荐过程中产生的推荐过程 数据； 其中， 所述推荐过程拆分为多个过程阶段， N 为小于等于 M的正整数； 分类模块， 用于选取各个所述过程阶段对应的所述推荐过程数据， 作为N个所述推荐策 略数据在各个所述过程阶段对应的过程指标； 展示模块， 用于展示 N个所述推荐策略数据在各个所述过程阶段对应的所述过程指标。 9.一种电子设备， 其特征在于， 包括处理器、 通信接口、 存储器和通信总线， 其中， 所述 处理器、 所述 通信接口以及所述存 储器通过 所述通信总线完成相互间的通信； 所述存储器， 用于存放计算机程序； 所述处理器， 用于执行存储器上所存放的程序时， 实现如权利要求1 ‑7任一项所述的方 法。 10.一种计算机可读存储介质， 其上存储有指令， 当由一个或多个处理器执行时， 使得 所述处理器执行如权利要求1 ‑7任一项所述的方法。权　利　要　求　书 2/2 页 3 CN 115525560 A 3