一种基于人机交互的训练方法及装置、计算设备及存储介质与流程

1.本发明涉及计算机数据处理技术领域，尤其是指一种基于人机交互的训练方法及装置、计算设备及存储介质。


背景技术：

2.随着社会的进步和商业的发展，企业对于人才能力的要求不断提高，如何根据工作人员的自身实际情况以及所在企业情况进行相关训练，提升工作人员的能力和素质，已经成为影响企业发展的重要因素之一。
3.在企业中，企业的技能训练以人为授予为主，该种方式较为依赖提供训练的人的技能和经验，且由于工作人员存在个体的差异性，训练一般遵循普适性原则和高概括原则，并不能很好地根据个体差异性进行精准训练，以导致训练效果和规划效果的不佳。


技术实现要素：

4.有鉴于此，本发明针对现有技术存在之缺失，其主要目的是提供一种基于人机交互的训练方法及装置、计算设备及存储介质，其解决企业技能训练依赖提供训练者的技能和经验，不能很好地根据个体差异性进行精准训练，导致训练效果或规划效果不佳的技术问题。
5.为实现上述目的，本发明采用如下之技术方案：
6.本发明的一种基于人机交互的训练方法，其包括以下步骤：
7.s1.获取学员的基本信息；
8.s2.选择训练项目；
9.s3.建立与训练项目相对应的训练模型，并生成相应的训练场景；
10.s4.学员通过视频语音对答的方式进行训练；
11.s5.将训练后的训练数据输入评估模块进行训练评估；
12.s6.将评估模块评估后得出的评估数据保存并输出至显示端，同时向显示端输出该评估数据对应的指导意见及学习计划和长短期目标。
13.作为一种优选方案，所述基本信息包括学员的职业信息、与职业信息相匹配的职业技能信息和学员的目标技能的历史数据。
14.作为一种优选方案，所述训练项目包括基础知识训练、专业知识训练和技能对话训练。
15.作为一种优选方案，每个所述学员均通过个人用户账号进行登录训练学习，所述训练学习过程的所有学员基本信息、训练数据和评估数据均存储在云端平台。
16.作为一种优选方案，所述评估模块对学员的视频语音对答内容进行分析处理，得到训练数据，所述训练数据包括流畅度信息、情绪类别信息和回复命中率信息。
17.本发明的一种基于人机交互的训练装置，其包括云端平台、基本信息调用模块、训练模型建立模块、评估模块、视频语音输入端、视频语音信息采集模块和视频语音信息存储
模块，所述视频语音信息采集模块的一端与所述视频语音输入端连接，所述视频语音信息采集模块的另一端与所述视频语音信息存储模块连接，所述基本信息调用模块、评估模块和训练模型建立模块均与所述云端平台连接，所述基本信息调用模块还与所述训练模型建立模块连接，所述显示端、视频语音信息存储模块和训练模型建立模块均与所述评估模块连接。
18.作为一种优选方案，所述云端平台包括学员基本信息数据库、训练资料数据库、训练结果数据库、意见计划数据库和心理情绪数据库，所述学员基本信息数据库与所述基本信息调用模块连接，所述训练资料数据库与所述训练模型建立模块连接，所述评估模块包括训练测试评估单元、情绪评估单元和意见计划生成单元，所述训练模型建立模块、视频语音信息存储模块、训练结果数据库和意见计划生成单元均与所述训练测试评估单元连接，所述意见计划生成单元还与所述意见计划数据库、情绪评估单元和显示端连接，所述情绪评估单元还与所述心理情绪数据库和视频语音信息存储模块连接。
19.作为一种优选方案，所述训练测试评估单元提取所述视频语音信息存储模块的视频语音信息，并与所述训练模型建立模块生成的训练场景进行一一分析匹配和对比，生成流畅度信息和回复命中率信息，并将所述流畅度信息和回复命中率信息存储到所述训练结果数据库，同时传递给所述意见计划生成单元；所述情绪评估单元提取所述所述视频语音信息存储模块的视频语音信息，与所述心理情绪数据库的信息进行对比，得出情绪类别信息，并将所述情绪类别信息传递至所述意见计划生成单元；所述意见计划生成单元结合所述流畅度信息、回复命中率信息和情绪类别信息，得到评估数据，所述意见计划生成单元将得到的所述评估数据与所述意见计划数据库的信息进行匹配，得到所述评估数据对应的指导意见及学习计划和长短期目标，并输出至所述显示端。
20.本发明的一种电子设备，其包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现上述的任一种基于人机交互的训练方法。
21.本发明的一种计算机可读存储介质，其上存储有计算机指令，所述指令被执行时实现上述的任一种基于人机交互的训练方法。
22.本发明与现有技术相比具有明显的优点和有益效果，具体而言，由上述技术方案可知，其主要是通过视频语音信息采集模块将收集的视频语音信息存储至视频语音信息存储模块，训练模型建立模块根据从云端平台获取的学员基本信息和训练资料数据建立训练场景，评估模块从视频语音信息存储模块提取视频语音信息并与训练场景一一对应，得出训练数据，并进行评估，输出指导意见及学习计划和长短期目标，解决了较为依赖提供训练者技能和经验的问题，满足了工作人员存在的个体差异性，实现精准训练，提高了训练和规划的效果。
23.为更清楚地阐述本发明的结构特征和功效，下面结合附图与具体实施例来对本发明进行详细说明。
附图说明
24.图1是本发明之实施例的一种基于人机交互的训练方法的流程图；
25.图2是本发明之实施例的一种基于人机交互的训练装置的结构示意图。
具体实施方式
26.为了使本发明的目的，技术方案及优点更加清楚明白，以下结合附图及实施实例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
27.需要说明的是，当元件被称为“固定于”另一个元件，它可以直接在另一个元件上或者也可以存在居中的元件。当一个元件被认为是“连接”另一个元件，它可以是直接连接到另一个元件或者可能同时存在居中元件。本文所使用的术语“垂直的”、“水平的”、“左”、“右”以及类似的表述只是为了说明的目的。
28.请参阅图1至图2，本发明实施例提供了一种基于人机交互的训练方法，包括以下步骤：
29.s1.获取学员的基本信息；
30.s2.选择训练项目；
31.s3.建立与训练项目相对应的训练模型，并生成相应的训练场景；
32.s4.学员通过视频语音对答的方式进行训练；
33.s5.将训练后的训练数据输入评估模块进行训练评估；
34.s6.将评估模块评估后得出的评估数据保存并输出至显示端，同时向显示端输出该评估数据对应的指导意见及学习计划和长短期目标。
35.在本实施例中，所述基本信息包括学员的职业信息、与职业信息相匹配的职业技能信息和学员的目标技能的历史数据，所述训练项目包括基础知识训练、专业知识训练和技能对话训练，每个所述学员均通过个人用户账号进行登录训练学习，所述训练学习过程的所有学员基本信息、训练数据和评估数据均存储在云端平台，以方便管理和调用。
36.更进一步地，所述评估模块对学员的视频语音对答内容进行分析处理，得到训练数据，所述训练数据包括流畅度信息、情绪类别信息和回复命中率信息，基于所述语义理解网络模型对所述视频语音信息进行流畅度分析处理得到所述流畅度信息；以及基于所述语义理解网络模型对所述视频语音信息进行情绪分析处理得到所述情绪类别信息；以及基于所述语义理解网络模型对所述视频语音信息进行信息命中分析处理得到所述回答信息命中率信息。
37.本发明实施例提供了一种基于人机交互的训练装置，其包括包括云端平台、基本信息调用模块、训练模型建立模块、评估模块、视频语音输入端、视频语音信息采集模块和视频语音信息存储模块，所述视频语音信息采集模块的一端与所述视频语音输入端连接，所述视频语音信息采集模块的另一端与所述视频语音信息存储模块连接，所述基本信息调用模块、评估模块和训练模型建立模块均与所述云端平台连接，所述基本信息调用模块还与所述训练模型建立模块连接，所述显示端、视频语音信息存储模块和训练模型建立模块均与所述评估模块连接，所述视频语音信息采集模块通过所述视频语音输入端收集视频语音信息，并将所述视频语音信息存储到所述视频语音信息存储模块中；所述基本信息调用模块从所述云端平台提取学员的基本信息并传递给所述训练模型建立模块，所述训练模型建立模块接收到学员基本信息后，从云端平台调取与学员基本信息相匹配的训练资料数据，进行训练模型的建立并生成相应的训练场景；所述评估模块提取所述视频语音信息存储模块中的视频语音信息与所述训练模型建立模块生成的训练场景进行一一匹配，得出训
练数据，将训练数据存储至云端平台的同时，分析所得训练数据，并向显示端输出对应的指导意见及学习计划和长短期目标。
38.在本实施例中，所述云端平台包括学员基本信息数据库、训练资料数据库、训练结果数据库、意见计划数据库和心理情绪数据库，所述学员基本信息数据库与所述基本信息调用模块连接，所述训练资料数据库与所述训练模型建立模块连接，所述评估模块包括训练测试评估单元、情绪评估单元和意见计划生成单元，所述训练模型建立模块、视频语音信息存储模块、训练结果数据库和意见计划生成单元均与所述训练测试评估单元连接，所述意见计划生成单元还与所述意见计划数据库、情绪评估单元和显示端连接，所述情绪评估单元还与所述心理情绪数据库和视频语音信息存储模块连接。
39.更进一步地，所述训练测试评估单元提取所述视频语音信息存储模块的视频语音信息，并与所述训练模型建立模块生成的训练场景进行一一分析匹配和对比，生成流畅度信息和回复命中率信息，并将所述流畅度信息和回复命中率信息存储到所述训练结果数据库，同时传递给所述意见计划生成单元；所述情绪评估单元提取所述所述视频语音信息存储模块的视频语音信息，与所述心理情绪数据库的信息进行对比，得出情绪类别信息，并将所述情绪类别信息传递至所述意见计划生成单元；所述意见计划生成单元结合所述流畅度信息、回复命中率信息和情绪类别信息，得到评估数据，所述意见计划生成单元将得到的所述评估数据与所述意见计划数据库的信息进行匹配，得到所述评估数据对应的指导意见及学习计划和长短期目标，并输出至所述显示端，所述意见计划数据库中包括多组带有标号的的意见计划，所述心理情绪数据库中存储有多组带有不同情绪标记的视频语音数据。
40.本发明实施例提供了一种电子设备，其包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现上述的任一种基于人机交互的训练方法。
41.本发明实施例提供了一种计算机可读存储介质，其上存储有计算机指令，所述指令被执行时实现上述的任一种基于人机交互的训练方法。
42.以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的原则之内所作的任何修改，等同替换和改进等均应包含本发明的保护范围之内。

技术特征：
1.一种基于人机交互的训练方法，其特征在于，包括以下步骤：s1.获取学员的基本信息；s2.选择训练项目；s3.建立与训练项目相对应的训练模型，并生成相应的训练场景；s4.学员通过视频语音对答的方式进行训练；s5.将训练后的训练数据输入评估模块进行训练评估；s6.将评估模块评估后得出的评估数据保存并输出至显示端，同时向显示端输出该评估数据对应的指导意见及学习计划和长短期目标。2.根据权利要求1所述的一种基于人机交互的训练方法，其特征在于，所述基本信息包括学员的职业信息、与职业信息相匹配的职业技能信息和学员的目标技能的历史数据。3.根据权利要求1所述的一种基于人机交互的训练方法，其特征在于，所述训练项目包括基础知识训练、专业知识训练和技能对话训练。4.根据权利要求1所述的一种基于人机交互的训练方法，其特征在于，每个所述学员均通过个人用户账号进行登录训练学习，所述训练学习过程的所有学员基本信息、训练数据和评估数据均存储在云端平台。5.根据权利要求1所述的一种基于人机交互的训练方法，其特征在于，所述评估模块对学员的视频语音对答内容进行分析处理，得到训练数据，所述训练数据包括流畅度信息、情绪类别信息和回复命中率信息。6.一种基于人机交互的训练装置，包括权利要求1-5的任一项所述的一种基于人机交互的训练方法，其特征在于：包括云端平台、基本信息调用模块、训练模型建立模块、评估模块、视频语音输入端、视频语音信息采集模块和视频语音信息存储模块，所述视频语音信息采集模块的一端与所述视频语音输入端连接，所述视频语音信息采集模块的另一端与所述视频语音信息存储模块连接，所述基本信息调用模块、评估模块和训练模型建立模块均与所述云端平台连接，所述基本信息调用模块还与所述训练模型建立模块连接，所述显示端、视频语音信息存储模块和训练模型建立模块均与所述评估模块连接。7.根据权利要求6所述的一种基于人机交互的训练装置，其特征在于，所述云端平台包括学员基本信息数据库、训练资料数据库、训练结果数据库、意见计划数据库和心理情绪数据库，所述学员基本信息数据库与所述基本信息调用模块连接，所述训练资料数据库与所述训练模型建立模块连接，所述评估模块包括训练测试评估单元、情绪评估单元和意见计划生成单元，所述训练模型建立模块、视频语音信息存储模块、训练结果数据库和意见计划生成单元均与所述训练测试评估单元连接，所述意见计划生成单元还与所述意见计划数据库、情绪评估单元和显示端连接，所述情绪评估单元还与所述心理情绪数据库和视频语音信息存储模块连接。8.根据权利要求7所述的一种基于人机交互的训练装置，其特征在于，所述训练测试评估单元提取所述视频语音信息存储模块的视频语音信息，并与所述训练模型建立模块生成的训练场景进行一一分析匹配和对比，生成流畅度信息和回复命中率信息，并将所述流畅度信息和回复命中率信息存储到所述训练结果数据库，同时传递给所述意见计划生成单元；所述情绪评估单元提取所述所述视频语音信息存储模块的视频语音信息，与所述心理情绪数据库的信息进行对比，得出情绪类别信息，并将所述情绪类别信息传递至所述意见
计划生成单元；所述意见计划生成单元结合所述流畅度信息、回复命中率信息和情绪类别信息，得到评估数据，所述意见计划生成单元将得到的所述评估数据与所述意见计划数据库的信息进行匹配，得到所述评估数据对应的指导意见及学习计划和长短期目标，并输出至所述显示端。9.一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现权利要求1至5任一项所述的技能训练方法。10.一种计算机可读存储介质，其上存储有计算机指令，其特征在于，所述指令被执行时实现权利要求1至5任一项所述的技能训练方法。

技术总结
本发明公开一种基于人机交互的训练方法及装置、计算设备及存储介质，该方法包括：获取学员的基本信息；选择训练项目；建立与训练项目相对应的训练模型，并生成相应的训练场景；学员通过视频语音对答的方式进行训练；将训练后的训练数据输入评估模块进行训练评估；将评估模块评估后得出的评估数据保存并输出至显示端，同时向显示端输出该评估数据对应的指导意见及学习计划和长短期目标。本发明解决了较为依赖提供训练者技能和经验的问题，满足了工作人员存在的个体差异性，实现精准训练，提高了训练和规划的效果。了训练和规划的效果。


技术研发人员：余就裕 崔龙强 黎远伟
受保护的技术使用者：深圳高新邦技术有限公司
技术研发日：2023.06.24
技术公布日：2023/9/16