基于云计算的电竞教育系统

摘要

本发明涉及云计算技术领域，具体涉及基于云计算的电竞教育系统，所述系统包括：分布式云计算服务器组和用户端；所述分布式云计算服务器包括多个并联的云计算服务器；所述用户端配置用于采集运行数据，将运行数据发送至分布式云计算服务器组。其通过采集用户端的AI角色行为数据和用户角色行为数据，配合分布式云计算服务器组来预测用户角色行为，以此来生成AI角色行为优化链，从而提升用户端的AI角色行为的合理性，对抗用户角色，达到训练用户行为的目的，以此实现电竞学员的自动训练，即便学员能够操控用户角色击败AI角色，但AI角色将根据调整后的行为，对抗学员操控的用户角色，以此提升学员的操作能力。

权利要求

1.基于云计算的电竞教育系统，其特征在于，所述系统包括：分布式云计算服务器组和用户端；所述分布式云计算服务器包括多个并联的云计算服务器；所述用户端配置用于采集运行数据，将运行数据发送至分布式云计算服务器组；所述运行数据包括：用户角色行为数据和AI角色行为数据；所述分布式云计算服务器组接收到运行数据后，基于用户角色行为数据首先进行用户行为预测，构建用户角色行为链，再基于AI 角色行为数据和构建的用户角色行为链生成AI角色行为优化链；在进行用户行为预测时，构建的用户角色行为链具有多个，基于用户角色行为链生成的AI角色行为优化链也具有多个；分布式云计算服务器组将并联的云计算服务器进行分组，得到多个云计算服务器子组；云计算服务器子组的数量与AI角色行为优化链的数量相同；每个云计算服务器子组与一个AI角色行为优化链对应，同时每个AI角色行为优化链与一个用户角色行为优化链对应；当用户端实时采集到新的用户角色行为数据后，分布式云计算服务器组基于采集到的新的用户角色行为数据，找到对应的AI角色行为优化链，再基于找到的AI角色行为优化链，找到对应的用户角色行为优化链，以及找到对应的云计算服务器子组，对应的云计算服务器子组基于对应的AI角色行为优化链，发送控制命令至用户端，控制用户端的AI角色按照AI角色行为优化链运行；

所述基于AI 角色行为数据和构建的用户角色行为链生成AI角色行为优化链的方法包括：基于用户角色行为链中，构建用户角色行为链的共轭链；再基于AI角色行为数据进行AI行为预测，构建AI角色行为链；再将AI角色行为链和共轭链进行取平均处理，生成AI角色行为优化链；

所述共轭链的构建方法包括：事先建立AI角色行为和用户角色行为的克制关系表；若某个AI角色行为和用户角色行为构成克制关系，则该AI角色行为和用户角色行为构成共轭；基于用户角色行为链中的每个用户角色行为，通过克制关系表，构建用户角色行为链的共轭链；

基于用户角色行为数据确定用户角色的待利用的用户角色属性项目及所述用户角色属性项目对应的用户角色项目数据；从用户角色属性矩阵中，确定各个用户角色属性项目分别对应的用户角色属性向量；其中，所述用户角色属性矩阵为预先基于用户角色历史行为数据得到的用于用户行为预测的矩阵，所述用户角色属性矩阵中包括样本集所涵盖的多个属性项目对应的属性向量；根据所述用户角色属性向量、所述用户角色项目数据以及预设的向量合并公式，计算用户角色数据合并向量；根据用户角色反应矩阵、所述用户角色数据合并向量、预设的多个初始状态向量以及预设的概率计算公式，计算每个所述初始状态向量的第一概率值；其中，所述用户角色反应矩阵为预先基于所述用户角色历史行为数据而获得的用于用户行为预测的调整矩阵，所述多个初始状态向量均不相同，每个初始状态向量所包括的元素均分别唯一对应一个状态项目，且每个元素表示所对应状态项目的状态；根据所述第一概率值，确定所述用户角色对应的第一用户行为预测向量；根据所述第一用户行为预测向量，确定所述用户角色的状态的预测结果；基于用户角色的状态的预测结果，构建用户角色行为链；

所述向量合并公式具体为：设一个向量为：A = [1 2 3 4]；另一个向量为：B = [5 6 7 

8]；将A和B合并成C=[A B] = [1 2 3 4 5 6 7 8]；

获得所述用户角色属性矩阵以及所述用户角色反应矩阵的步骤，包括：获得初始有用矩阵以及用户角色样本集，其中，所述初始有用矩阵至少包括初始属性矩阵以及初始反应矩阵，所述用户角色样本集中包含第一预设数量个样本，每个样本至少包括多个第一属性项目、所述第一属性项目对应的第一项目数据、状态项目以及所述状态项目对应的第一状态数据；从所述用户角色样本集中选择第二预设数量个用户角色样本；从当前初始属性矩阵中，确定每个用户角色样本的各个第一属性项目分别对应的第一属性向量；根据所述第一属性向量、每个用户角色样本的各个第一属性项目分别对应的第一项目数据以及所述向量合并公式，获得第一数据合并向量；根据当前初始反应矩阵、所述第一数据合并向量、多个所述初始状态向量以及预设的概率计算公式，计算每个用户角色样本所对应的多个初始状态向量的第二概率值；根据所述第二概率值，确定每个用户角色样本所对应的第二用户行为预测向量；并将每个用户角色样本所对应的第一状态数据进行0‑1编码，获得每个用户角色样本的期望状态向量；根据公式

，计算每个用户角

色样本所对应的第二用户行为预测向量相对于所对应期望状态向量的误差；其中， 表示所述误差， 表示用户角色样本所对应的期望状态向量， 表示用户角色样本所对应的第二用户行为预测向量；

，其中， 表示用户角色行为数据中的某个项目的当前值， 表示用户角色行为数据中的某个项目的前一个值， 表示用户角色行为数据的数量， 表示用户角色行为数据中的另一个项目的当前值， 表示用户角色行为数据中的另一个项目的前一个值；

，其中， 为用户角色行为数据中的某个项目的平均值，为用户角色行为数据中的另一个项目的平均值；根据每个用户角色样本的误差，确定用户角色有效误差；根据当前初始属性矩阵、当前初始反应矩阵、所述用户角色有效误差以及预设的更新公式，获得第一属性矩阵以及第一反应矩阵；根据当前第一属性矩阵、当前第一反应矩阵、当前初始属性矩阵以及当前初始反应矩阵，确定所述用户角色属性矩阵以及所述用户角色反应矩阵；

所述根据当前第一属性矩阵、当前第一反应矩阵、当前初始属性矩阵以及当前初始反应矩阵，确定所述用户角色属性矩阵以及所述用户角色反应矩阵的步骤，包括：判断所述样本集中是否有未被选择的样本；如果是，从未被选择的样本中选择第三预设数量个样本作为用户角色样本，并以当前第一属性矩阵更新当前初始属性矩阵，以当前第一反应矩阵更新当前初始反应矩阵，返回执行所述从当前初始属性矩阵中，确定每个用户角色样本的各个第一属性项目分别对应的第一属性向量的步骤。

2.如权利要求1所述的系统，其特征在于，判断所述样本集中是否有未被选择的样本时，如果否，判断当前第一有用矩阵是否满足收敛条件，其中，当前第一有用矩阵至少包括当前第一属性矩阵以及当前第一反应矩阵；当判断出当前第一有用矩阵不满足收敛条件时，以所述第一属性矩阵更新所述初始属性矩阵，以所述第一反应矩阵更新所述初始反应矩阵，返回执行从所述样本集中选择第二预设数量个样本作为用户角色样本的步骤；当判断出当前第一有用矩阵满足收敛条件时，将所述第一属性矩阵作为所述用户角色属性矩阵，将所述第一反应矩阵作为所述用户角色反应矩阵。

3.如权利要求2所述的系统，其特征在于，所述根据当前第一属性矩阵、当前第一反应矩阵、当前初始属性矩阵以及当前初始反应矩阵，确定所述用户角色属性矩阵以及所述用户角色反应矩阵的步骤，包括：判断所述样本集中是否有未被选择的样本；如果是，从未被选择的样本中选择第三预设数量个样本作为用户角色样本，并以当前第一属性矩阵更新当前初始属性矩阵，以当前第一反应矩阵更新当前初始反应矩阵，返回执行所述从当前初始属性矩阵中，确定每个用户角色样本的各个第一属性项目分别对应的第一属性向量的步骤。

4.如权利要求3所述的系统，其特征在于，判断所述样本集中是否有未被选择的样本时，如果否，将当前第一属性矩阵确定为所述用户角色属性矩阵，将当前第一反应矩阵确定为所述用户角色反应矩阵。

5.如权利要求4所述的系统，其特征在于，所述克制关系表为一个关系数据库。

说明书

基于云计算的电竞教育系统

技术领域

[0001] 本发明属于云计算技术领域，具体涉及基于云计算的电竞教育系统。

背景技术

[0002] 电竞行业快速发展，人才缺口越来越大，据腾讯报告显示，2017年底电竞从业人才缺口达26万，预计2020年底，电竞从业人才缺口将达50万。巨大的人才缺口催生了电竞教育
的发展。

[0003] 近年来随着全球电子竞技行业的不断深化，素质电子竞技教育的全面推进，不仅是国家体育总局，国家教育部门也越来越重视电子竞技在传统体育竞技中的地位，在不断
提高大学生身体素质要求的同时，也开设了游戏、电子竞技专业，为当代年轻人带来了全新
的教育模式。

[0004] 但是基于我国目前的电竞行业还处于发展阶段的情况，是远远不能达到国家体育总局，以及国家教育部门的要求的，与国际电子竞技的水平更是有着较大的差距，以及现阶
段的电子竞技环境还有待加强。

[0005] 专利号为CN201910328075.5A的专利公开了一种基于大数据的云计算教育平台，包括云数据中心模块、与云数据中心模块通讯连接的云数据采集模块、与云数据中心模块
通讯连接的客户端；云数据中心模块包括成绩模块、综合素质评价模块、家校互动信息模
块、选修课内容模块、学生考勤记录模块、数字图书馆模块、精品课堂模块、班级社区模块、
教育博客模块、央馆教学资源库模块与试题库模块；客户端包括登录模块与注册模块，登录
模块包括学校管理员登录模块、学生登录模块、教师登录模块与家长登录模块。

[0006] 其通过全方位的进行课堂管理，实现了基于云计算的在线教育。但目前针对电竞教育，仍然没有成熟的教育平台。而由于电竞教育不同于传统的教育，电竞教育重在实战，
且由于电竞基于电子游戏，如果通过老师授课，将难以实现教育学员的目的。

发明内容

[0007] 有鉴于此，本发明的主要目的在于提供基于云计算的电竞教育系统，其通过采集用户端的AI角色行为数据和用户角色行为数据，配合分布式云计算服务器组来预测用户角
色行为，以此来生成AI角色行为优化链，从而提升用户端的AI角色行为的合理性，对抗用户
角色，达到训练用户行为的目的，以此实现电竞学员的自动训练，即便学员能够操控用户角
色击败AI角色，但AI角色将根据调整后的行为，对抗学员操控的用户角色，以此提升学员的
操作能力。

[0008] 为达到上述目的，本发明的技术方案是这样实现的：

[0009] 基于云计算的电竞教育系统，所述系统包括：分布式云计算服务器组和用户端；所述分布式云计算服务器包括多个并联的云计算服务器；所述用户端配置用于采集运行数
据，将运行数据发送至分布式云计算服务器组；所述运行数据包括：用户角色行为数据和AI
角色行为数据；所述分布式云计算服务器组接收到运行数据后，基于用户角色行为数据首
先进行用户行为预测，构建用户角色行为链，再基于AI角色行为数据和构建的用户角色行
为链生成AI角色行为优化链；再进行用户行为预测，构建的用户角色行为链具有多个，基于
用户角色行为链生成的AI角色行为优化链也具有多个；分布式云计算服务器组将并联的云
计算服务器进行分组，得到多个云计算服务器子组；云计算服务器子组的数量与AI角色行
为优化链的数量相同；每个云计算服务器子组与一个AI角色行为优化链对应，同时每个AI
角色行为优化链与一个用户角色行为优化链；当用户端实时采集到新的用户角色行为数据
后，分布式云计算服务器组基于采集到的新的用户角色行为数据，找到对应的AI角色行为
优化链，再基于找到的AI角色行为优化链，找到对应的AI角色行为优化链，以及找到对应的
云计算服务器子组，对应的云计算服务器子组基于对应的AI角色行为优化链，发送控制命
令至用户端，控制用户端的AI角色按照AI角色行为优化链运行。

[0010] 进一步的，所述方法包括：基于用户角色行为数据确定用户角色的待利用的用户角色属性项目及所述用户角色属性项目对应的用户角色项目数据；从用户角色属性矩阵
中，确定各个用户角色属性项目分别对应的用户角色属性向量；其中，所述用户角色属性矩
阵为预先基于用户角色历史行为数据得到的用于用户行为预测的矩阵，所述用户角色属性
矩阵中包括样本集所涵盖的多个属性项目对应的属性向量；根据所述用户角色属性向量、
所述用户角色项目数据以及预设的向量合并公式，计算用户角色数据合并向量；根据用户
角色反应矩阵、所述用户角色数据合并向量、预设的多个初始状态向量以及预设的概率计
算公式，计算每个所述初始状态向量的第一概率值；其中，所述用户角色反应矩阵为预先基
于所述用户角色历史行为数据而获得的用于用户行为预测的调整矩阵，所述多个初始状态
向量均不相同，每个初始状态向量所包括的元素均分别唯一对应一个状态项目，且每个元
素表示所对应状态项目的状态；根据所述第一概率值，确定所述用户角色对应的第一用户
行为预测向量；根据所述第一用户行为预测向量，确定所述用户角色的状态的预测结果；基
于用户角色的状态的预测结果，构建用户角色行为链。

[0011] 进一步的，获得所述用户角色属性矩阵以及所述用户角色反应矩阵的步骤，包括：获得初始有用矩阵以及用户角色样本集，其中，所述初始有用矩阵至少包括初始属性矩阵
以及初始反应矩阵，所述用户角色样本集中包含第一预设数量个样本，每个样本至少包括
多个第一属性项目、所述第一属性项目对应的第一项目数据、状态项目以及所述状态项目
对应的第一状态数据；从所述用户角色样本集中选择第二预设数量个用户角色样本；从当
前初始属性矩阵中，确定每个用户角色样本的各个第一属性项目分别对应的第一属性向
量；根据所述第一属性向量、每个用户角色样本的各个第一属性项目分别对应的第一项目
数据以及所述向量合并公式，获得第一数据合并向量；根据当前初始反应矩阵、所述第一数
据合并向量、多个所述初始状态向量以及预设的概率计算公式，计算每个用户角色样本所
对应的多个初始状态向量的第二概率值；根据所述第二概率值，确定每个用户角色样本所
对应的第二用户行为预测向量；并将每个用户角色样本所对应的第一状态数据进行0‑1编
码 ，获 得每个 用户 角色 样本的 期望状 态向量 ；根据公 式
计算每个用户角色样本所对应的
第二用户行为预测向量相对于所对应期望状态向量的误差；其中，T表示所述误差，表示
用户角色样本所对应的期望状态向量，Δv表示用户角色样本所对应的第二用户行为预测
向量； 其中，xi表示用户角色行为数据中的某个项目的当
前值，xi‑1表示用户角色行为数据中的某个项目的前一个值，m表示用户角色行为数据的数
量，yi表示用户角色行为数据中的另一个项目的当前值，yi‑1表示用户角色行为数据中的另
一个项目的前一个值； 其中，ai为用户角色行为数据中的某个项
目的平均值，bi为用户角色行为数据中的另一个项目的平均值；根据每个用户角色样本的
误差，确定用户角色有效误差；根据当前初始属性矩阵、当前初始反应矩阵、所述用户角色
有效误差以及预设的更新公式，获得第一属性矩阵以及第一反应矩阵；根据当前第一属性
矩阵、当前第一反应矩阵、当前初始属性矩阵以及当前初始反应矩阵，确定所述用户角色属
性矩阵以及所述用户角色反应矩阵。

[0012] 进一步的，所述根据当前第一属性矩阵、当前第一反应矩阵、当前初始属性矩阵以及当前初始反应矩阵，确定所述用户角色属性矩阵以及所述用户角色反应矩阵的步骤，包
括：判断所述样本集中是否有未被选择的样本；如果是，从未被选择的样本中选择第三预设
数量个样本作为用户角色样本，并以当前第一属性矩阵更新当前初始属性矩阵，以当前第
一反应矩阵更新当前初始反应矩阵，返回执行所述从当前初始属性矩阵中，确定每个用户
角色样本的各个第一属性项目分别对应的第一属性向量的步骤。

[0013] 进一步的，判断所述样本集中是否有未被选择的样本时，如果否，判断当前第一有用矩阵是否满足收敛条件，其中，当前第一有用矩阵至少包括当前第一属性矩阵以及当前
第一反应矩阵；当判断出当前第一有用矩阵不满足收敛条件时，以所述第一属性矩阵更新
所述初始属性矩阵，以所述第一反应矩阵更新所述初始反应矩阵，返回执行从所述样本集
中选择第二预设数量个样本作为用户角色样本的步骤；当判断出当前第一有用矩阵满足收
敛条件时，将所述第一属性矩阵作为所述用户角色属性矩阵，将所述第一反应矩阵作为所
述用户角色反应矩阵。

[0014] 进一步的，所述根据当前第一属性矩阵、当前第一反应矩阵、当前初始属性矩阵以及当前初始反应矩阵，确定所述用户角色属性矩阵以及所述用户角色反应矩阵的步骤，包
括：判断所述样本集中是否有未被选择的样本；如果是，从未被选择的样本中选择第三预设
数量个样本作为用户角色样本，并以当前第一属性矩阵更新当前初始属性矩阵，以当前第
一反应矩阵更新当前初始反应矩阵，返回执行所述从当前初始属性矩阵中，确定每个用户
角色样本的各个第一属性项目分别对应的第一属性向量的步骤。

[0015] 进一步的，判断所述样本集中是否有未被选择的样本时，如果否，将当前第一属性矩阵确定为所述用户角色属性矩阵，将当前第一反应矩阵确定为所述用户角色反应矩阵。

[0016] 进一步的，所述基于AI角色行为数据和构建的用户角色行为链生成AI角色行为优化链的方法包括：基于用户角色行为链中，构建用户角色行为链的共轭链；再基于AI角色行
为数据进行AI行为预测，构建AI角色行为链；再将AI角色行为链和共轭链进行取平均处理，
生成AI角色行为优化链。

[0017] 进一步的，所述共轭链的构建方法包括：事先建立AI角色行为和用户角色行为的克制关系表；若某个AI角色行为和用户角色行为构成克制关系，则该AI角色行为和用户角
色行为构成共轭；基于用户角色行为链中的每个用户角色行为，通过克制关系表，构建用户
角色行为链的共轭链。

[0018] 进一步的，所述克制关系表为一个关系数据库。

[0019] 本发明的基于云计算的电竞教育系统，其通过采集用户端的AI角色行为数据和用户角色行为数据，配合分布式云计算服务器组来预测用户角色行为，以此来生成AI角色行
为优化链，从而提升用户端的AI角色行为的合理性，对抗用户角色，达到训练用户行为的目
的，以此实现电竞学员的自动训练，即便学员能够操控用户角色击败AI角色，但AI角色将根
据调整后的行为，对抗学员操控的用户角色，以此提升学员的操作能力。主要通过以下过程
实现：

[0020] 1.AI角色行为的优化：本发明通过采集用户角色行为和AI角色行为数据，来进行用户角色行为预测，基于预测结果，则可以得知接下来学员会在用户端控制用户角色作出
什么行为，再通过云计算服务器来构建针对对抗用户角色行为的AI行为链，这样就实现了
自动完成对学员的训练，学员在不断的操作过程中，得到技术的提升，且根据学员在操作后
技术提升后，还能不断优化AI角色行为，以此不断刺激学员提升自己的技术，实现电竞教育
的智能化；

[0021] 2.分布式云服务器的分组：本发明通过多个并联的云服务器来构成云计算服务器组，再通过预测的角色行为和构建的优化后的AI角色行为，来进行分组，每个分组控制一个
单独的优化后的AI角色行为，以此保证执行效率，因为用户在用户端进行操作时，其情况无
法预测，因此若用户行为进行了改变，则需要采用另外的AI角色行为，如果还是采用一个优
化后的AI角色行为，则无法达到目的。

附图说明

[0022] 图1为本发明实施例提供的基于云计算的电竞教育系统的系统结构示意图；

[0023] 图2为本发明实施例提供的基于云计算的电竞教育系统的用户角色行为链和AI角色行为优化链的构建原理示意图；

[0024] 图3为本发明实施例提供的基于云计算的电竞教育系统将并联的云计算服务器进行分组的原理示意图。

具体实施方式

[0025] 下面结合附图及本发明的实施例对本发明的方法作进一步详细的说明。

[0026] 实施例1

[0027] 如图1所示，基于云计算的电竞教育系统，所述系统包括：分布式云计算服务器组和用户端；所述分布式云计算服务器包括多个并联的云计算服务器；所述用户端配置用于
采集运行数据，将运行数据发送至分布式云计算服务器组；所述运行数据包括：用户角色行
为数据和AI角色行为数据；所述分布式云计算服务器组接收到运行数据后，基于用户角色
行为数据首先进行用户行为预测，构建用户角色行为链，再基于AI角色行为数据和构建的
用户角色行为链生成AI角色行为优化链；再进行用户行为预测，构建的用户角色行为链具
有多个，基于用户角色行为链生成的AI角色行为优化链也具有多个；分布式云计算服务器
组将并联的云计算服务器进行分组，得到多个云计算服务器子组；云计算服务器子组的数
量与AI角色行为优化链的数量相同；每个云计算服务器子组与一个AI角色行为优化链对
应，同时每个AI角色行为优化链与一个用户角色行为优化链；当用户端实时采集到新的用
户角色行为数据后，分布式云计算服务器组基于采集到的新的用户角色行为数据，找到对
应的AI角色行为优化链，再基于找到的AI角色行为优化链，找到对应的AI角色行为优化链，
以及找到对应的云计算服务器子组，对应的云计算服务器子组基于对应的AI角色行为优化
链，发送控制命令至用户端，控制用户端的AI角色按照AI角色行为优化链运行。

[0028] 采用上述技术方案，本发明通过采集用户端的AI角色行为数据和用户角色行为数据，配合分布式云计算服务器组来预测用户角色行为，以此来生成AI角色行为优化链，从而
提升用户端的AI角色行为的合理性，对抗用户角色，达到训练用户行为的目的，以此实现电
竞学员的自动训练，即便学员能够操控用户角色击败AI角色，但AI角色将根据调整后的行
为，对抗学员操控的用户角色，以此提升学员的操作能力。主要通过以下过程实现：

[0029] 1.AI角色行为的优化：本发明通过采集用户角色行为和AI角色行为数据，来进行用户角色行为预测，基于预测结果，则可以得知接下来学员会在用户端控制用户角色作出
什么行为，再通过云计算服务器来构建针对对抗用户角色行为的AI行为链，这样就实现了
自动完成对学员的训练，学员在不断的操作过程中，得到技术的提升，且根据学员在操作后
技术提升后，还能不断优化AI角色行为，以此不断刺激学员提升自己的技术，实现电竞教育
的智能化；

[0030] 2.分布式云服务器的分组：本发明通过多个并联的云服务器来构成云计算服务器组，再通过预测的角色行为和构建的优化后的AI角色行为，来进行分组，每个分组控制一个
单独的优化后的AI角色行为，以此保证执行效率，因为用户在用户端进行操作时，其情况无
法预测，因此若用户行为进行了改变，则需要采用另外的AI角色行为，如果还是采用一个优
化后的AI角色行为，则无法达到目的

[0031] 实施例2

[0032] 在上一实施例的基础上，所述方法包括：基于用户角色行为数据确定用户角色的待利用的用户角色属性项目及所述用户角色属性项目对应的用户角色项目数据；从用户角
色属性矩阵中，确定各个用户角色属性项目分别对应的用户角色属性向量；其中，所述用户
角色属性矩阵为预先基于用户角色历史行为数据得到的用于用户行为预测的矩阵，所述用
户角色属性矩阵中包括样本集所涵盖的多个属性项目对应的属性向量；根据所述用户角色
属性向量、所述用户角色项目数据以及预设的向量合并公式，计算用户角色数据合并向量；
根据用户角色反应矩阵、所述用户角色数据合并向量、预设的多个初始状态向量以及预设
的概率计算公式，计算每个所述初始状态向量的第一概率值；其中，所述用户角色反应矩阵
为预先基于所述用户角色历史行为数据而获得的用于用户行为预测的调整矩阵，所述多个
初始状态向量均不相同，每个初始状态向量所包括的元素均分别唯一对应一个状态项目，
且每个元素表示所对应状态项目的状态；根据所述第一概率值，确定所述用户角色对应的
第一用户行为预测向量；根据所述第一用户行为预测向量，确定所述用户角色的状态的预
测结果；基于用户角色的状态的预测结果，构建用户角色行为链。

[0033] 具体的，游戏中的AI，大多数都是按照规则设定好的，没有太多花哨的技术。原因有几个：

[0034] 一是出于风险成本的考虑，用一个新技术，需要程序员开发相应的算法和框架，游戏设计师重新上手设计方法和摸索算法的适用范围，小团队承受不起这样的开销，大团队
又怕做坏名声；

[0035] 二是“高级”的AI算法并不直观，难以设计。举一个例子，怎么利用神经网络来训练一个士兵AI？我见过的一个例子是设计师用几个按键来操作士兵移动攻击，然后程序自动
记录敌我双方的数据和设计师的操作，最后利用这些信息作为input构建一个行为树。这个
方法的问题有三个，一是效率奇慢，因为如果数据不够，行为树就可能覆盖不了所有情况，
但多少才是“够”，又没有定论；二是错误的操作也会被记录下来，当然可以开发一个功能来
删除设计师的某个动作；三是行为树的结果是无法解释的，相当于一个黑箱。

[0036] 实施例3

[0037] 在上一实施例的基础上，获得所述用户角色属性矩阵以及所述用户角色反应矩阵的步骤，包括：获得初始有用矩阵以及用户角色样本集，其中，所述初始有用矩阵至少包括
初始属性矩阵以及初始反应矩阵，所述用户角色样本集中包含第一预设数量个样本，每个
样本至少包括多个第一属性项目、所述第一属性项目对应的第一项目数据、状态项目以及
所述状态项目对应的第一状态数据；从所述用户角色样本集中选择第二预设数量个用户角
色样本；从当前初始属性矩阵中，确定每个用户角色样本的各个第一属性项目分别对应的
第一属性向量；根据所述第一属性向量、每个用户角色样本的各个第一属性项目分别对应
的第一项目数据以及所述向量合并公式，获得第一数据合并向量；根据当前初始反应矩阵、
所述第一数据合并向量、多个所述初始状态向量以及预设的概率计算公式，计算每个用户
角色样本所对应的多个初始状态向量的第二概率值；根据所述第二概率值，确定每个用户
角色样本所对应的第二用户行为预测向量；并将每个用户角色样本所对应的第一状态数据
进行0‑1编码，获得每个用户角色样本的期望状态向量；根据公式
计算每个用户角色样本所
对应的第二用户行为预测向量相对于所对应期望状态向量的误差；其中，T表示所述误差，
表示用户角色样本所对应的期望状态向量，Δv表示用户角色样本所对应的第二用户行
为预测向量； 其中，xi表示用户角色行为数据中的某个项
目的当前值，xi‑1表示用户角色行为数据中的某个项目的前一个值，m表示用户角色行为数
据的数量，yi表示用户角色行为数据中的另一个项目的当前值，yi‑1表示用户角色行为数据
中的另一个项目的前一个值； 其中，ai为用户角色行为数据中的
某个项目的平均值，bi为用户角色行为数据中的另一个项目的平均值；根据每个用户角色
样本的误差，确定用户角色有效误差；根据当前初始属性矩阵、当前初始反应矩阵、所述用
户角色有效误差以及预设的更新公式，获得第一属性矩阵以及第一反应矩阵；根据当前第
一属性矩阵、当前第一反应矩阵、当前初始属性矩阵以及当前初始反应矩阵，确定所述用户
角色属性矩阵以及所述用户角色反应矩阵。

[0038] 具体的，游戏AI的目标之一就是要找到一种简单并可扩展的开发逻辑的方案，常用的技术包括有限状态机(FSM)、分层有限状态机(HFSM)、面向目标的动作规划(GOAP)、分
层任务网络(HTN)等。

[0039] 行为树作为次时代的AI技术，距其原型提出也约有10年左右，像Halo、Spore、Crysis等大作已经采用。目前，很多知名的游戏引擎也已整合或提供了自己的行为树组件，
例如Unreal4、Unity引擎等。

[0040] 具体的，所述向量合并公式采用现有技术中的向量合并公式，具体为：设一个向量为：A＝[1234]；另一个向量为：B＝[5678]；将A和B合并成C＝[A B]＝[12345678]。

[0041] 实施例4

[0042] 在上一实施例的基础上，所述根据当前第一属性矩阵、当前第一反应矩阵、当前初始属性矩阵以及当前初始反应矩阵，确定所述用户角色属性矩阵以及所述用户角色反应矩
阵的步骤，包括：判断所述样本集中是否有未被选择的样本；如果是，从未被选择的样本中
选择第三预设数量个样本作为用户角色样本，并以当前第一属性矩阵更新当前初始属性矩
阵，以当前第一反应矩阵更新当前初始反应矩阵，返回执行所述从当前初始属性矩阵中，确
定每个用户角色样本的各个第一属性项目分别对应的第一属性向量的步骤。

[0043] 具体的，不同于有限状态机或者其它AI系统，行为树就是一棵节点层次分明的树，控制着AI物体的一系列决定。从树延伸出的叶子节点，执行控制AI物体的指令。各种工具节
点组成树的分支，来控制AI指令的走向以形成一系列的指令，这样来满足游戏需要。

[0044] 它可以是一棵很高的树，可以具有完成特定功能的子树，开发者可以创建行为库并把它们适当地连接起来以达到非常真实的AI行为。开发过程是高度可迭代的，你可以先
排出一个基础的行为树，然后创建新的分支来处理各种达到目标的可选方案，这些分支按
照它们的优先级排列，这样AI在一个特定的行为失败可以回溯到另一个策略，这是行为树
巨大优势所在。

[0045] 实施例5

[0046] 在上一实施例的基础上，判断所述样本集中是否有未被选择的样本时，如果否，判断当前第一有用矩阵是否满足收敛条件，其中，当前第一有用矩阵至少包括当前第一属性
矩阵以及当前第一反应矩阵；当判断出当前第一有用矩阵不满足收敛条件时，以所述第一
属性矩阵更新所述初始属性矩阵，以所述第一反应矩阵更新所述初始反应矩阵，返回执行
从所述样本集中选择第二预设数量个样本作为用户角色样本的步骤；当判断出当前第一有
用矩阵满足收敛条件时，将所述第一属性矩阵作为所述用户角色属性矩阵，将所述第一反
应矩阵作为所述用户角色反应矩阵。

[0047] 具体的，目前，最为先进的AI游戏技术当属于遗传算法。所谓的遗传算法，是基于达尔文进化论提出的一种决策计算模型，计算机在模拟自然进化过程中寻求最优解。体现
在游戏上，NPC会根据以往的经验去优化策略，新一轮的进攻的“敌人”会接收“牺牲者”的意
志，并针对玩家的过往策略逐个击破。这意味着越强大的玩家将面临越强大的敌人，并且没
有尽头。

[0048] 实施例6

[0049] 在上一实施例的基础上，所述根据当前第一属性矩阵、当前第一反应矩阵、当前初始属性矩阵以及当前初始反应矩阵，确定所述用户角色属性矩阵以及所述用户角色反应矩
阵的步骤，包括：判断所述样本集中是否有未被选择的样本；如果是，从未被选择的样本中
选择第三预设数量个样本作为用户角色样本，并以当前第一属性矩阵更新当前初始属性矩
阵，以当前第一反应矩阵更新当前初始反应矩阵，返回执行所述从当前初始属性矩阵中，确
定每个用户角色样本的各个第一属性项目分别对应的第一属性向量的步骤。

[0050] 具体的，从目前发展来看，AI是否已经如火如荼的进入了游戏行业了呢？其实并不是。游戏AI的发展仅仅只是较于AI初期有了一定程度的进步，但是AI就像一个宝藏，其中能
够应用于游戏中的结合点还需要我们不断去发掘。

[0051] 智能相对论分析师柯鸣认为，AI游戏的发展需要“真心”做游戏。所谓的“真心”，就是玩家在游戏过程中，极度专注，且全身心投入，连贯流畅的享受游戏体验，并不断享受成
功喜悦的一种情绪及心理状态。

[0052] 实施例7

[0053] 在上一实施例的基础上，判断所述样本集中是否有未被选择的样本时，如果否，将当前第一属性矩阵确定为所述用户角色属性矩阵，将当前第一反应矩阵确定为所述用户角
色反应矩阵。

[0054] 实施例8

[0055] 在上一实施例的基础上，所述基于AI角色行为数据和构建的用户角色行为链生成AI角色行为优化链的方法包括：基于用户角色行为链中，构建用户角色行为链的共轭链；再
基于AI角色行为数据进行AI行为预测，构建AI角色行为链；再将AI角色行为链和共轭链进
行取平均处理，生成AI角色行为优化链。

[0056] 实施例9

[0057] 在上一实施例的基础上，所述共轭链的构建方法包括：事先建立AI角色行为和用户角色行为的克制关系表；若某个AI角色行为和用户角色行为构成克制关系，则该AI角色
行为和用户角色行为构成共轭；基于用户角色行为链中的每个用户角色行为，通过克制关
系表，构建用户角色行为链的共轭链。

[0058] 实施例10

[0059] 在上一实施例的基础上，所述克制关系表为一个关系数据库。

[0060] 所属技术领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统的具体工作过程及有关说明，可以参考前述方法实施例中的对应过程，在此不再赘述。

[0061] 需要说明的是，上述实施例提供的系统，仅以上述各功能单元的划分进行举例说明，在实际应用中，可以根据需要而将上述功能分配由不同的功能单元来完成，即将本发明
实施例中的单元或者步骤再分解或者组合，例如，上述实施例的单元可以合并为一个单元，
也可以进一步拆分成多个子单元，以完成以上描述的全部或者单元功能。对于本发明实施
例中涉及的单元、步骤的名称，仅仅是为了区分各个单元或者步骤，不视为对本发明的不当
限定。

[0062] 所属技术领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的存储装置、处理装置的具体工作过程及有关说明，可以参考前述方法实施例中的对应过程，
在此不再赘述。

[0063] 本领域技术人员应能够意识到，结合本文中所公开的实施例描述的各示例的单元、方法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，软件单元、方法步骤对
应的程序可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编
程ROM、寄存器、硬盘、可移动磁盘、CD‑ROM、或技术领域内所公知的任意其它形式的存储介
质中。为了清楚地说明电子硬件和软件的可互换性，在上述说明中已经按照功能一般性地
描述了各示例的组成及步骤。这些功能究竟以电子硬件还是软件方式来执行，取决于技术
方案的特定应用和设计约束条件。本领域技术人员可以对每个特定的应用来使用不同方法
来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

[0064] 术语“第一”、“另一部分”等是配置用于区别类似的对象，而不是配置用于描述或表示特定的顺序或先后次序。

[0065] 术语“包括”或者任何其它类似用语旨在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者单元/装置不仅包括那些要素，而且还包括没有明确列出的
其它要素，或者还包括这些过程、方法、物品或者单元/装置所固有的要素。

[0066] 至此，已经结合附图所示的优选实施方式描述了本发明的技术方案，但是，本领域技术人员容易理解的是，本发明的保护范围显然不局限于这些具体实施方式。在不偏离本
发明的原理的前提下，本领域技术人员可以对相关技术标记作出等同的更改或替换，这些
更改或替换之后的技术方案都将落入本发明的保护范围之内。

[0067] 以上所述，仅为本发明的较佳实施例而已，并非配置用于限定本发明的保护范围。