(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210937112.4 (22)申请日 2022.08.05 (71)申请人 上海卓越睿新数码科技股份有限公 司 地址 200000 上海市徐汇区钦州北路1 188 号科汇大厦9-10楼 (72)发明人 王晖　章乐　朱伟彬　 (74)专利代理 机构 浙江锦明智一知识产权代理 有限公司 3 3503 专利代理师 孙远 (51)Int.Cl. G06F 40/295(2020.01) G06F 40/30(2020.01) G06V 20/40(2022.01) G06V 30/18(2022.01) (54)发明名称 一种在线学习多场景强化学习方法 (57)摘要 本发明涉及数据分析 处理技术领域， 具体涉 及一种在 线学习多场景强化学习方法。 方法包括 以下步骤： S1， 通过OCR算法识别出当前在线教学 视频帧中的文字数据； S2， 通过实体识别技术获 取可能成为知识点的命名实体， 根据命名实体获 取目标知 识点； S3， 目标知识点进行实体识别， 为 目标知识点匹配目标复习内容并标记目标知识 点； S4， 对目标知 识点、 对应的目标复习内容进行 实体对齐， 获得与目标知识点内容本质相同的目 标复习内容； S5， 记录对应的目标复习内容所在 场景的链接并与 目标知识点构建知识之间的关 联链接。 本申请能够保存知识点所在的课程场 景， 把本质相同的概念连接起来， 在场景选择中 供选择， 能促进学习者巩固学习， 提高在线学习 效果。 权利要求书1页 说明书3页 附图1页 CN 115470789 A 2022.12.13 CN 115470789 A 1.一种在线学习多场景强化学习方法， 其特 征在于， 至少包括以下步骤： S1， 通过OCR算法识别出当前在线教学视频帧中的文字数据； S2， 通过实体识别技术获取可能成为知识点的命名实体， 根据所述命名实体获取目标 知识点； S3， 所述目标知识点进行实体识别， 为所述目标知识点匹配目标复习内容并标记所述 目标知识点； S4， 对所述目标知识点、 对应的所述目标复习内容进行实体对齐， 获得与所述目标知识 点内容本质相同的所述目标复习内容； S5， 记录对应的所述目标复习内容所在场景的链接并与所述目标知识点构建知识之间 的关联链接 。 2.根据权利要求1所述的一种在线学习 多场景强化学习方法， 其特征在于， 将所述当前 在线视频教学帧进行文字识别， 抓取 出所述当前在线视频教学帧中包 含的文本信息 。 3.根据权利要求2所述的一种在线学习多场景强化学习方法， 其特征在于， 所述S2中的 所述命名实体获得步骤 包括： S2.1， 提取 所述文本信息中的字符信息； S2.2， 根据所述字符信息进行实体定位、 实体分块和实现提取， 获得可能成知识点的所 述命名实体。 4.根据权利要求3所述的一种在线学习 多场景强化学习方法， 其特征在于， 根据语义分 析处理得到所述命名实体的实体 类型， 并将所述命名实体归纳至相应的实体 类型中。 5.根据权利要求2所述的一种在线学习 多场景强化学习方法， 其特征在于， 提取所述命 名实体的实体信息， 根据所述 实体信息， 判断所述命名实体中是否已存在历史复习内容， 若 判断已存在所述历史复习内容， 则标记为知识点命名实体。 6.根据权利要求5所述的一种在线学习 多场景强化学习方法， 其特征在于， 查询学习课 程库， 为所述知识点命名实体关联所有的所述历史复习内容， 并获取所有的所述历史复习 内容进行关联。 7.根据权利要求6所述的一种在线学习 多场景强化学习方法， 其特征在于， 获取学习者 的ID信息， 根据所述ID信息获得已学课程信息， 根据所述已学课程信息剔除已掌握知识点 命名实体后得到精简知识点命名实体。 8.根据权利要求7所述的一种在线学习 多场景强化学习方法， 其特征在于， 突出显示所 述精简知识点命名实体， 并获取目标知识点命名实体。 9.根据权利要求1所述的一种在线学习 多场景强化学习方法， 其特征在于， 所述目标复 习内容包括所述目标知识点内容本质相同的历史学习文本信息、 历史学习文本所在地址、 历史学习记录； 所述历史学习记录包括历史学习时间、 历史学习次数和历史学习耗时。 10.根据权利要求1所述的一种在线学习多场景强化学习方法， 其特征在于， 所述S5中 包括建立跳转 通道， 所述跳转 通道中包括多条 所述目标复习内容选项。权　利　要　求　书 1/1 页 2 CN 115470789 A 2一种在线学习多场景强化学习方 法 技术领域 [0001]本发明涉及数据分析处理技术领域， 具体涉及一种在线学习多场景强化学习方 法。 背景技术 [0002]自2012年以来远程学习日益被人们接受， 如线上视频学习， 在线上学习的过程中 由于无法像线下一样与老师进行互动， 老师无法及时获得学生的学习程度， 学生也可能由 于缺乏自主学习能力， 难以巩固学习。 比如现在有的英语学习 软件里面会标记出文本中的 重要单词， 但是基于线上学习的缺点老师无法就知识点根据每位学生进行知识点巩固。 所 以我们需要一种强化学习方法， 能够保存知识点所在的课程场景， 而且后面复习的时候能 够选择跳转还原， 能把本质相同的概念连接起来， 在场景选择中供选择， 能促进 学习者在头 脑中构建知识之间的脉络和关联， 进行记 忆的强化， 巩固学习。 发明内容 [0003]本发明提供一种在线学习多场景强化学习方法， 能把本质相同的概念连接起来， 在场景选择中供选择， 能促进学习者在头脑中构建知识之间的脉络和关联， 进行记忆的强 化， 巩固学习。 [0004]本发明的上述技术目的是通过以下技术方案得以实现的： 一种在线学习多场景强 化学习方法， 至少包括以下步骤： [0005]S1， 通过OCR算法识别出当前在线教学视频帧中的文字数据； [0006]S2， 通过实体识别技术获取可能成为知识点的命名实体， 根据所述命名实体获取 目标知识点； [0007]S3， 所述目标知识点进行实体识别， 为所述目标知识点匹配目标复习内容并标记 所述目标知识点； [0008]S4， 对所述目标知识点、 对应的所述目标 复习内容进行实体对齐， 获得与所述目标 知识点内容本质相同的所述目标复习内容； [0009]S5， 记录对应的所述目标 复习内容所在场景的链接并与所述目标知识点构建知识 之间的关联链接 。 [0010]作为优选， 将所述当前在线视频教学帧进行文字识别， 抓取出所述当前在线视频 教学帧中包 含的文本信息 。 [0011]作为优选， 所述S2中的所述命名实体获得步骤 包括： [0012]S2.1， 提取 所述文本信息中的字符信息； [0013]S2.2， 根据所述字符信息进行实体定位、 实体分块和实现提取， 获得可能成知识点 的所述命名实体。 [0014]作为优选， 根据语义分析处理得到所述命名实体 的实体类型， 并将所述命名实体 归纳至相应的实体 类型中。说　明　书 1/3 页 3 CN 115470789 A 3