基于脑机接口的组句训练界面的交互方法、交互装置与流程

1.本发明涉及人机交互技术领域，特别涉及一种基于脑机接口的组句训练操作界面的交互方法、基于脑机接口的组句训练操作界面的交互装置、电子设备及计算机可读存储介质。


背景技术：

2.如今，用于儿童早教或者辅助特殊人群的电子设备越来越受欢迎。这类电子设备中都配置有相关的交互训练内容，通过人机交互的方式，提高儿童或者特殊人群的认知。以电子设备中组句交互功能为例，电子设备基于固有的句子样本显示相应的词条元素拖拽界面，用户可以按照自己所想的顺序拖拽各个词条元素，以拼凑成与句子样本的内容对应的组句内容。
3.然而，目前相关的交互方案，大多数是以预先配置好的句子样本顺序，依次显示每个句子样本对应的词条元素供用户进行组句操作。另外，在响应用户的组句操作时，也仅向用户展示拖拽词条元素的结果是否正确。可见，目前相关的交互方案存在交互策略较为单一，以及智能化程度较低的问题。


技术实现要素：

4.本发明的主要目的是提出一种基于脑机接口的组句训练操作界面的交互方法、基于脑机接口的组句训练操作界面的交互装置、电子设备及计算机可读存储介质，旨在解决现有的组句操作界面的交互方案存在的交互策略较为单一，以及智能化程度较低的问题。
5.为实现上述目的，本发明提出一种基于脑机接口的组句训练操作界面的交互方法，包括：显示组句操作界面，所述组句操作界面包括句子样本的n个词条元素；响应于用户在组句操作界面中对所述n个词条元素的组句操作，获取第一专注力数据，所述第一专注力数据用于表征用户对所述句子样本进行组句操作时的专注度；根据所述第一专注力数据获取并显示新的句子样本的词条元素，所述新的句子样本的组句操作难度等于或大于所述句子样本的组句操作难度；响应于用户对所述新的句子样本的词条元素的组句操作，获取组句操作结果，以及获取第二专注力数据，所述第二专注力数据用于表征用户对所述新的句子样本进行组句操作时的专注度；在所述组句操作结果为正确时，根据所述第二专注力数据继续显示下一条新的句子样本的词条元素，或者显示预设趣味内容。
6.本技术进一步提供一种基于脑机接口的组句训练操作界面的交互装置，包括：第一显示单元，用于显示组句操作界面，所述组句操作界面包括句子样本的n个词条元素；第一获取单元，用于响应于用户在组句操作界面中对所述n个词条元素的组句操
作，获取第一专注力数据，所述第一专注力数据用于表征用户对所述句子样本进行组句操作时的专注度；第二显示单元，用于根据所述第一专注力数据获取并显示新的句子样本的词条元素，所述新的句子样本的组句操作难度等于或大于所述句子样本的组句操作难度；第二获取单元，用于响应于用户对所述新的句子样本的词条元素的组句操作，获取组句操作结果，以及获取第二专注力数据，所述第二专注力数据用于表征用户对所述新的句子样本进行组句操作时的专注度；第三显示单元，用于在所述组句操作结果为正确时，根据所述第二专注力数据继续显示下一条新的句子样本的词条元素，或者显示预设趣味内容。本技术进一步提供一种电子设备，所述电子设备包括存储器、处理器以及存储在所述存储器中并可在所述电子设备上运行的计算机程序，所述处理器执行所述计算机程序时实现上述提供的基于脑机接口的组句训练操作界面的交互方法的各步骤。
7.本技术进一步提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现第一方面提供的基于脑机接口的组句训练操作界面的交互方法的各步骤。
8.本发明技术方案的有益效果在于：本技术实施例提供的一种基于脑机接口的组句训练操作界面的交互方法，通过显示包括句子样本的n个词条元素的组句操作界面，可以供用户通过该组句操作界面进行组句训练热身。当检测到用户在该组句操作界面中对n个词条元素的组句操作，则响应该组句操作，获取第一专注力数据。由于该第一专注力数据用于表征用户对句子样本进行组句操作时的专注度，因此根据该第一专注力数据获取到的新的句子样本与用户当前的专注度相适配，进而通过显示该新的句子样本的词条元素供用户进行正式的组句训练。当用户对新的句子样本的词条元素进行了组句操作，则获取该组句操作结果与第二专注力数据。因为第二专注力数据用于表征用户对新的句子样本进行组句操作时的专注度，所以在组句操作结果为正确时，一方面可以根据该第二专注力数据决定继续显示下一条新的句子样本的词条元素，也即供用户继续进行组句训练，另一方面可以根据该第二专注力数据决定切换至显示预设趣味内容，以重聚用户专注度。如此便实现了组句训练与重聚用户专注度，随用户的专注度变化而动态切换。进而为用户提供了更丰富的组句训练交互策略，提高了组句训练的智能化程度。
9.此外，根据该第一专注力数据获取与该专注度适配的新的句子样本的词条元素进行显示，使得往后的组句训练的句子样本与用户实际的专注度贴合度更高，以更灵活的适配句子样本策略优化了组句训练步骤，不仅有助于提高用户进行组句训练的效率，还可以给用户带来更好的产品使用体验。
附图说明
10.为了更清楚地说明本技术实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
11.图1是本技术实施例提供的一种基于脑机接口的组句训练操作界面的交互方法的实现流程图；图2是本技术实施例中组句操作界面在电子设备上呈现的示意图一；图3是本技术实施例中组句操作界面在电子设备上呈现的示意图二；图4是本技术另一实施例提供的一种基于脑机接口的组句训练操作界面的交互方法的实现流程图；图5是本技术再一实施例提供的一种基于脑机接口的组句训练操作界面的交互方法的实现流程图；图6是本技术实施例提供的一种基于脑机接口的组句训练操作界面的交互装置的结构框图；图7是本技术实施例提供的一种电子设备的结构框图。
具体实施方式
12.下面将结合本发明实施例中的附图，对本发明实施例中的方案进行清楚完整的描述，显然，所描述的实施例仅是本发明中的一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
13.需要说明，本发明实施例中所有方向性指示（诸如上、下、左、右、前、后
……
）仅用于解释在某一特定姿态（如附图所示）下各部件之间的相对位置关系、运动情况等，如果该特定姿态发生改变时，则该方向性指示也相应地随之改变。
14.还需要说明的是，当元件被称为“固定于”或“设置于”另一个元件上时，它可以直接在另一个元件上或者可能同时存在居中元件。当一个元件被称为是“连接”另一个元件，它可以是直接连接另一个元件或者可能同时存在居中元件。
15.另外，在本发明中涉及“第一”、“第二”等的描述仅用于描述目的，而不能理解为指示或暗示其相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。另外，各个实施例之间的技术方案可以相互结合，但是必须是以本领域普通技术人员能够实现为基础，当技术方案的结合出现相互矛盾或无法实现时应当认为这种技术方案的结合不存在，也不在本发明要求的保护范围之内。
16.本实施例提供的一种基于脑机接口的组句训练操作界面的交互方法，执行主体为电子设备。具体可以是配置有该方法功能的具有交互屏幕的电子交互设备。在实现时，电子设备还可以搭配脑机接口设备获取到用户在语句训练过程中的专注力数据。这里，脑机接口设备可以是头戴设备，如头环、电子头盔、电子眼镜以及电子帽等。电子设备可以通过与脑机接口设备建立通信，进而获取脑机接口设备采集到的专注力数据。在实际实现时，还可以在电子设备上配置用于采集用户专注力数据的脑机接口，例如，脑电波生物传感器等，利用该脑电波生物传感器采集用户脑电波数据，再由电子设备对该脑电波数据进行分析处理进而得到专注力数据。
17.在具体实现过程中，可以在脑机接口设备中预先配置相关的解析算法，或者软件模型，用于对采集到的脑电波数据进行处理分析，进而得到专注力数据。相关技术中，可以
利用神经网络构建专注力数据分析模型，以脑电波数据作为输入，通过对脑电波数据进行特征识别、特征卷积以及权重适配等操作，进而可以输出相应的权重总和或者评分，作为专注力数据，以表征用户对进行组句操作时的专注程度。
18.容易理解的是，由于在脑机接口技术领域中，在实现以脑电波数据作为输入，输出专注力数据或专注度评分时，还可以通过划分不同的专注度等级，并通过采集用户在不同专注度等级下的脑电波数据样本，从而构建脑电波数据样本特征与专注度等级之间的映射关系。在采集到脑电波数据后，通过解析该脑电波数据特征，进而根据上述映射关系可以匹配出相应的专注度等级作为专注度数据。在具体实现时，本领域技术人员还可以基于本实施例获取专注度数据的策略，采用其他的具体实现手段，故此处不再赘述。
19.需要说明的是，通常情况下，句子可以进行词汇拆分得到不同的词条或者字段。组句训练指的是用户将拆分后的词条或者字段重新组合成完整句子的训练过程。而在相关技术中，在利用电子设备上显示交互界面，供用户进行组句训练时，通常是以预先配置好的句子样本顺序，依次显示每个句子样本对应的词条元素供用户进行组句操作。并且在响应用户的组句操作时，也仅向用户展示拖拽词条元素的结果是否正确。该过程交互策略单一，且智能化程度较低。
20.基于此，本实施例提供的一种空调控制方法，显示包括句子样本的n个词条元素的组句操作界面，可以供用户通过该组句操作界面进行组句训练热身。当检测到用户在该组句操作界面中对n个词条元素的组句操作，则响应该组句操作，获取第一专注力数据。由于该第一专注力数据用于表征用户对句子样本进行组句操作时的专注度，因此根据该第一专注力数据获取到的新的句子样本与用户当前的专注度相适配，进而通过显示该新的句子样本的词条元素供用户进行正式的组句训练。当用户对新的句子样本的词条元素进行了组句操作，则获取该组句操作结果与第二专注力数据。因为第二专注力数据用于表征用户对新的句子样本进行组句操作时的专注度，所以在组句操作结果为正确时，一方面可以根据该第二专注力数据决定继续显示下一条新的句子样本的词条元素，也即供用户继续进行组句训练，另一方面可以根据该第二专注力数据决定切换至显示预设趣味内容，以重聚用户专注度。如此便实现了组句训练与重聚用户专注度，随用户的专注度变化而动态切换。进而为用户提供了更丰富的组句训练交互策略，提高了组句训练的智能化程度。
21.此外，根据该第一专注力数据获取与该专注度适配的新的句子样本的词条元素进行显示，使得往后的组句训练的句子样本与用户实际的专注度贴合度更高，以更灵活的适配句子样本策略优化了组句训练步骤，不仅有助于提高用户进行组句训练的效率，还可以给用户带来更好的产品使用体验。
22.以下通过具体实现方式对本实施例提供的一种空调控制方法进行详细说明。
23.图1是本技术实施例提供的一种基于脑机接口的组句训练界面的交互方法的实现流程图。如图1所示，基于脑机接口的组句训练操作界面的交互方法包括以下步骤：s11：显示组句操作界面，所述组句操作界面包括句子样本的n个词条元素。
24.在步骤s11中，组句操作界面用于显示句子样本的词条元素，且供用户输入交互操作。词条元素为句子样本进行词组拆分后得到的词条对应的显示元素。
25.在本技术的所有实施例中，句子样本可以是预先配置的句子字段，通过对该句子字段进行词组拆分，即可得到n个词条，也即显示在组句操作界面中的词条元素。当用户使
用电子设备进行组句训练时，通过显示组句操作界面并在该界面中显示与句子样本对应的n个词条元素供用户进行组句操作。由于词条是通过拆分句子样本得到，因此词条元素的个数n可以是大于1的整数。
26.例如，句子样本为“女孩坐着看电脑”，对该句子字段进行拆分即可得到的词条有“女孩”、“坐着”、“看”以及“电脑”。相应地，组句操作界面中的词条元素即为分别包含词条内容“女孩”、“坐着”、“看”以及“电脑”的元素。
27.在具体实现时，电子设备中可以配置有句子样本库，句子样本库用于存储并描述句子样本与词条元素之间的对应关系。在用户触发组句训练的操作时，显示组句该操作界面，且从句子样本库中随机获取句子样本及其对应的n个词条元素在该操作界面中进行显示。用户通过对组句操作界面中的词条元素进行组句操作实现组句训练。
28.需要说明的是，当用户开始进行组句训练时，由于此时用户的专注力程度处于未知状态，因此可以通过选择难易程度适中的句子样本，以起到训练前的热身目的。
29.结合上述示例，在句子样本库中可以为每个句子样本配置相应的难易程度指数，或者难易程度等级，以此来区分每个句子样本的难易程度。在每次显示组句操作界面，从句子样本库中选取句子样本及其对应的n个词条元素在该操作界面中进行显示的过程中，可以选取难易指数较低或者选择难易程度等级为简单的句子样本及其对应的n个词条元素。
30.作为一个实施例，图2示出了本技术实施例中组句操作界面在电子设备上呈现的示意图一。在图2中，电子设备a显示组句操作界面10。该组句操作界面10包括句子样本对应的n个词条元素11。用户在该操作界面中进行组句操作可以是依次点击各词条元素，或者长按词条元素。
31.在其他实施例中，还可以根据不同的组句操作需求在操作界面中配置更多的元素。如图3所示的本技术实施例中组句操作界面在电子设备上呈现的示意图二。与图2的区别在于，在图3中，组句操作界面10还包括填空区域12。相应地，用户在该操作界面中进行组句操作可以是长按词条元素11并将各个词条元素拖拽至填空区域12所在的位置。
32.s12：响应于用户在组句操作界面中对所述n个词条元素的组句操作，获取第一专注力数据。
33.在步骤s12中，第一专注力数据用于表征用户对句子样本进行组句操作时的专注度。第一专注力数据可以是由电子设备通过采集用户脑电波数据处理得到，或者是电子设备接收到用户的穿戴设备发送的脑电波数据进行处理得到。具体地，穿戴设备可以包括但不仅限于头戴设备等，后文不再赘述。
34.在本技术的所有实施例中，第一专注力数据是用户在对句子样本进行组句操作过程中获得的数据。基于此，获取该第一专注力数据的时机应当是在显示了组句操作界面之后，以用户能够对组句操作界面中的词条元素进行操作为开始，直到用户对词条元素的组句操作完成为结束。
35.作为一个实施例，词条元素包括词条内容与词条内容描述的图像。相应地，步骤s12包括：在用户对首个所述词条元素进行组句操作时，开始获取第一专注力数据；当用户完成第n个所述词条元素的组句操作时，获取所述组句操作得到的词条组句内容；若所述词条组句内容与所述句子样本的内容一致，则停止获取第一专注力数据。
36.在本实施例中，词条元素包括的词条内容指的是文字内容，与词条内容描述的图像指的是与该文字内容匹配的图像。例如，词条内容为“电脑”，则词条内容描述图像即为计算机图标或者计算机图像。这里，组句操作得到的词条组句内容，指的是用户对词条元素操作后，各词条元素的词条内容依次拼凑得到的词条组句内容。当词条组句内容与句子样本的内容一致时，表示用户组句操作正确，此时即可停止获取第一专注力数据。
37.在具体实现时，可以通过在组句操作界面中配置相应的操作检测埋点，通过这些检测埋点可以监听用户对组句操作界面中各个词条元素的操作情况。
38.例如，对每个词条元素配置相应的操作检测埋点，当通过操作检测埋点检测到用户对首个词条元素的预设操作后，响应用户对n个词条元素的组句操作，也即开始获取第一专注力数据。
39.容易理解的是，由于专注力数据表征的是用户的专注程度，而专注力数据可以是通过采集用户脑电波进行处理分析得到，且在用户进行组句训练是个持续的过程，因此在该过程中可以持续采集用户的脑电波数据进而持续获得专注力数据。
40.在其他实施例中，词条元素还可以包括音频播放按钮。相应地，在步骤s11之后，还可以包括与步骤s12并列的步骤：响应于用户对所述音频播放按钮的点击操作，播放与所述句子样本和/或所述词条内容对应的音频内容。
41.在本实施例中，音频播放按钮为用户可反复触发的虚拟按钮。在具体实现时，也可以为该音频播放按钮配置相应的埋点，用于检测用户的点击操作或者拖拽操作。
42.在具体实现时，音频播放按钮可以是与n个词条元素分别对应的按钮，和/或与句子样本对应的按钮。当用户对词条元素的音频播放按钮进行点击操作时，则播放与词条内容对应的音频内容。当用户句子样本的音频播放按钮进行点击操作时，则播放与句子样本对应的音频内容。
43.容易理解的是，词条元素的音频播放按钮可以设置在词条元素周围，句子样本的音频播放按钮可以是设置在组句操作界面中的填空区域。通过配置音频播放按钮，响应于用户对该音频播放按钮的点击操作进而播放相应的音频内容，可以便于用户从听觉上获悉句子样本的内容和/或词条元素的内容。
44.s13：根据所述第一专注力数据获取并显示新的句子样本的词条元素。
45.在步骤s13中，新的句子样本的组句操作难度等于或大于句子样本的组句操作难度。
46.在本实施例中，新的句子样本与句子样本不同之处在于，新的句子样本的组句操作的难易程度高于句子样本的组句操作的难易程度。这里，当第一专注力数据表征的用户专注度较低时，可以获取组句操作难易程度简单或者适中的句子样本作为新的句子样本。当第一专注力数据表征的用户专注度较高时，可以获取组句操作难易程度为困难的句子样本作为新的句子样本。
47.在具体实现时，可以在电子设备中预先配置不同新的句子样本与不同第一专注力数据之间的对应关系。示例性的，在电子设备中配置新的句子样本数据库，该数据库中的信息用于描述不同新的句子样本与不同第一专注力数据之间的对应关系。根据第一专注力数据从该数据库中获取到新的句子样本，并显示该新的句子样本的词条元素。
48.需要说明的是，在显示组句操作界面时，组句操作界面中词条元素对应的句子样本，可以是组句训练时的热身训练样本，其难以程度可以适中或者较低。当用户在该组句操作界面中对词条元素进行了组句操作后，可以通过获取用户在该过程中的第一专注力数据，重新选取与用户专注度适配的新的句子样本正式进行组句训练。
49.容易理解的是，在具体应用中，新的句子样本可以是组句操作难以程度相同或相当的多条样本或多个样本。也可以是组句操作难易程度依次递增的多条样本或多个样本。由于用户在进行组句操作过程中，用户的专注度实施变化，也即专注力数据存在一定的波动性。
50.在一些实施例中，在新的句子样本为多个时，可以根据用户的实时专注度调整新的句子样本的显示顺序。如此一来，可以在适配用户当前专注度提供新的句子样本的同时，还可以进一步优化实施训练内容，适配与用户实施专注度更高的训练样本。
51.s14：响应于用户对所述新的句子样本的词条元素的组句操作，获取组句操作结果，以及获取第二专注力数据。
52.在步骤s14中，组句操作结果指的是用户对词条元素进行组句操作后，所有词条元素按照操作后的顺序拼凑成的句子内容。第二专注力数据用于表征用户对所述新的句子样本进行组句操作时的专注度。
53.在本实施例中，当用户对显示的新的句子样本的词条元素进行组句操作时，即可开始获取用户的第二专注力数据。在用户对显示的新的句子样本的所有词条元素进行组句操作完成后，即可获取用户对词条元素进行组句操作后，所有词条元素按照操作后的顺序拼凑成的句子内容作为组句操作结果。以及，停止获取用户的第二专注力数据。
54.理解的是，在具体实现时，由于用户对显示的词条元素进行组句操作时，依次对n个词条元素进行操作，也即对单个句子样本进行组句训练需要一定的时长。因此无论是获取第一专注力数据还是第二专注力数据，都可以是在用户实际组句操作过程所采集得到，还可以是在组句操作过程中通过采集实际的专注力数据进行平均值计算得到。由于专注力数据的采集以及处理，属于脑机接口数据采集处理的一部分，因此本领域技术人员在具体实现时，可以选用已有的相关技术实现，此处不再赘述。
55.为了提高用户的组句训练效率，在步骤s14之后，还可以根据获取到的第二专注力数据决定是否继续进行组句训练，也即执行步骤s15。
56.s15：在所述组句操作结果为正确时，根据所述第二专注力数据继续显示下一条新的句子样本的词条元素，或者显示预设趣味内容。
57.在本技术的所有实施例中，组句操作结果为正确，指的是用户对词条元素进行组句操作后，所有词条元素按照操作后的顺序拼凑成的句子内容与句子样本的内容一致。
58.在实际应用中，当组句操作结果为正确时，表示用户可能已经掌握了该句子样本的组句训练，进而可以选择难度更高的或者同等难度的句子样本进行训练，也即继续显示下一条新的句子样本的词条元素。
59.示例性的，如图3所示，组句操作界面10还包括填空区域12。以句子样本为“女孩坐着看电脑”，组句操作界面中的词条元素即为分别包含词条内容“女孩”、“坐着”、“看”以及“电脑”的元素。相应地，不同的词条内容对应不同的词条元素。在图3中，词条元素11a的词条内容为“坐着”，词条元素11b的词条内容为“看”，词条元素11c的词条内容为“女孩”，词条
元素11d的词条内容为“电脑”。用户在该操作界面中进行组句操作可以是长按词条元素11并将各个词条元素拖拽至填空区域12所在的位置。当用户将词条元素11a、词条元素11b、词条元素11c以及词条元素11d，分别拖拽至填空区域12b、填空区域12c、填空区域12a以及填空区域12d，则词条元素拼凑成的句子内容与句子样本内容一致。
60.在一些实施例中，还可以在组句操作结果为正确时，显示奖励界面。例如，显示给予用户小星星的奖励。相应的，在组句操作结果为错误时，则所有词位元素回弹至初始位置，供用户重新进行组句操作。
61.容易理解的是，由于人的专注力容易随专注的时间延长而衰减，因此在本实施例中，为了能够令用户有更好的组句训练体验，还可以根据第二专注力数据决定是否显示预设趣味内容。这里，预设趣味内容用于重聚用户的专注度，也即当用户的专注度下降时，可以通过显示预设趣味内容吸引用户的注意力，有利于重聚用户的专注度。
62.作为一个实施例，步骤s15包括：当所述第二专注力数据表征的专注度等于或大于预设专注度阈值时，继续显示下一条新的句子样本的词条元素；当所述第二专注力数据表征的专注度小于预设专注度阈值时，显示预设趣味内容。
63.在本实施例中，预设专注度阈值用于表征用户适合进行组句训练的最低专注度。在第二专注力数据表征的专注度等于或大于预设专注度阈值时，则表示用户当前专注度仍然适合进行组句训练，进而继续显示下一条新的句子样本的词条元素。在第二专注力数据表征的专注度小于预设专注度阈值时，则表示用户当前专注度不再适合进行组句训练，进而显示预设趣味内容，以重新聚焦用户的专注度。
64.在具体实现时，预设趣味内容可以是具有交互内容的游戏或者视频内容，通过显示该预设趣味内容，能够给用户耳目一新的感觉，进而能够重聚用户的注意力，也即重聚用户专注度。
65.作为一个实施例，在示预设趣味内容的步骤之后，还可以包括：获取第三专注力数据；所述第三专注力数据用于表征用户在观看所述预设趣味内容时的专注度；当所述第三专注力数据表征的专注度等于或大于预设专注度阈值时，停止显示所述预设趣味内容，且继续显示下一条新的句子样本的词条元素。
66.在本实施例中，在第三专注力数据表征的专注度等于或大于预设专注度阈值时，则表示用户专注度再次适合进行组句训练，进而可以通过停止显示预设趣味内容，且继续显示下一条新的句子样本的词条元素，供用户继续进行组句训练。
67.作为一个实施例，在步骤s14之后还可以包括：在所述组句操作结果为正确时，显示录音按钮；响应于用户对所述录音按钮的点击操作，接收并保存用户录入的语音内容。
68.在本实施例中，录音按钮用于供用户触发录音操作，当用户点击该录音按钮后，电子设备即可通过麦克风接收用户录入的语音内容进行保存。
69.示例性的，在用户对单个句子样本进行了组句训练之后，都可以供用户录入语音内容。作为一个示例，针对单个句子样本的训练来说，可以供用户录入多次语音内容，如果当用户多次录入语音内容均与词条元素或者句子样本一致，则表示用户已掌握该句子样本的组句操作。示例性的，保存最近5次录音，可以重复听。电子设备可以通过语音识别录音内
容，以决定后续是否继续选择该句子样本作为新的句子样本供用户进行组句训练。例如，电子设备的系统判断这句子样本是否被用户掌握的标准是：过去5天内，连续6次的练习，系统认定4次 录音内容正确，即判定用户已经掌握该句子样本的组句。
70.本实施例通过接收并保存用户录入的语音内容，不仅可以记录用户的组句训练进度，还可以为用户提供读音校验服务。
71.作为一个实施例，在步骤s14之后还可以包括：在所述组句操作结果为正确时，获取与所述新的句子样本关联的预设扩展句子样本；所述预设扩展句子样本的组句操作难度大于所述新的句子样本的组句操作难度；显示所述预设扩展句子样本的词条元素。
72.在本实施例中，预设扩展句子样本指的是以新的句子样本为基础，进行组句内容扩展得到。这里，进行组句内容扩展可以是为句子样本中增加词条元素和词条内容。例如，地点、时间等词条。
73.在具体实现时，预设扩展句子样本可以是针对每条新的句子样本单独配置，例如，可以预先构建扩展句子样本的数据库，基于此，在每次显示新的句子样本之后，即可根据该句子样本从扩展句子样本的数据库中获取到预设扩展句子样本。
74.本实施例通过在组句操作结果为正确时，获取并显示与新的句子样本关联的预设扩展句子样本，可以在用户已经进行了组句训练的基础上，提供进一步的进阶组句训练，由此来丰富组句训练策略。
75.请参阅图4，图4是本技术另一实施例提供的一种基于脑机接口的组句训练操作界面的交互方法的实现流程图。与图1对应的实施例相比，图4示出的基于脑机接口的组句训练操作界面的交互方法在步骤s11之前还包括步骤s21只s23。如图2所示，具体地：s21：显示视频播放窗口。
76.s22：在所述视频播放窗口中播放与所述句子样本相应的视频内容；s23：当所述视频内容播放完时，缩小所述视频播放窗口；其中，缩小后的视频播放窗口小于所述组句操作界面。
77.在本实施例中，视频播放窗口用于播放与句子样本内容对应的视频内容。为了避免视频播放窗口对组句操作界面遮挡，在视频内容播放完之后，视频播放窗口可以自动缩小，进而为组句操作界面留出较大的视窗面积。
78.作为一个实施例，在步骤s23之后还包括：响应于用户对所述缩小后的视频播放窗口的操作，播放所述视频内容。
79.在本实施例中，视频播放窗口自动缩小后，仍然能够被再次放大并启用。当用户对缩小后的视频播放窗口进行操作，即可通过该视频播放窗口播放视频内容。
80.在具体实现时，播放视频内容可以是先将缩小后的视频播放窗口进行放大或者还原只预设播放大小后，再播放视频内容。或者，可以是在缩小后的视频播放窗口中播放视频内容，如此一下即可在不改变组句操作界面大小的情况下，也能够播放视频内容。
81.请参阅图5，图5是本技术再一实施例提供的一种基于脑机接口的组句训练操作界面的交互方法的实现流程图。与图1或图4对应的实施例相比，图5示出的空调控制方法在步骤s14之后还包括步骤s31至s32。如图5所示，具体地：s31：在所述组句操作结果为错误时，记录错误次数。
82.s32：若错误次数等于预设错误阈值，则在用户再次进行组句操作时按照预设的辅助策略辅助用户进行组句操作。
83.在本实施例中，错误次数指的是用户针对单个句子样本进行组句操作结果为错误的累计次数。这里，当错误次数等于预设错误阈值，则表示用户对当前组句训练的句子样本未掌握。此时如果持续任由用户继续做组句操作，一方面达不到应有的训练效果，另一方面容易消磨用户的兴趣。基于此，在错误次数等于预设错误阈值时，如果用户再次进行组句操作，则按照预设的辅助策略辅助用户进行组句操作。
84.在具体实现时，辅助策略可以是一种引导用户进行正确的组句操作的交互策略。例如，当用户将词条元素拖拽至填空区域时，如果该词条元素不属于该填空区域，则提醒用户将其移除，或者直接将该词条元素恢复至初始位置。
85.作为一个实施例，步骤s32包括：在用户将所述词条元素从初始位置拖拽至第一组句位置时，判断所述第一组句位置是否为所述词条元素对应的目标组句位置；若所述第一组句位置不是所述目标组句位置，则将所述词条元素复位至所述初始位置；若所述第一组句位置是所述目标组句位置，则将所述词条元素固定在所述第一组句位置；当用户将所有词条元素分别从初始位置拖拽至相应的目标组句位置时，停止辅助用户进行组句操作。
86.在本实施例中，第一组句位置指的是词条元素被拖拽至填空区域的位置，也可以是指词条在句子样本中的位置。目标组句位置是指词条元素的正确位置。每个词条元素对应有一个目标组句位置，也即对应有一个正确位置。只有当所有词条元素均被拖拽至目标位置时，组句操作结果才为正确。
87.本实施例通过在第一组句位置不为目标组句位置时，将词条元素复位至初始位置，在第一组句位置是目标组句位置，则将词条元素固定在第一组句位置，当用户将所有词条元素分别从初始位置拖拽至相应的目标组句位置时，停止辅助用户进行组句操作。为用户提供了一种用于组句训练过程中的辅助策略，优化了用户组句训练的体验。
88.本技术实施例提供的一种基于脑机接口的组句训练操作界面的交互方法，通过显示包括句子样本的n个词条元素的组句操作界面，可以供用户通过该组句操作界面进行组句训练热身。当检测到用户在该组句操作界面中对n个词条元素的组句操作，则响应该组句操作，获取第一专注力数据。由于该第一专注力数据用于表征用户对句子样本进行组句操作时的专注度，因此根据该第一专注力数据获取到的新的句子样本与用户当前的专注度相适配，进而通过显示该新的句子样本的词条元素供用户进行正式的组句训练。当用户对新的句子样本的词条元素进行了组句操作，则获取该组句操作结果与第二专注力数据。因为第二专注力数据用于表征用户对新的句子样本进行组句操作时的专注度，所以在组句操作结果为正确时，一方面可以根据该第二专注力数据决定继续显示下一条新的句子样本的词条元素，也即供用户继续进行组句训练，另一方面可以根据该第二专注力数据决定切换至显示预设趣味内容，以重聚用户专注度。如此便实现了组句训练与重聚用户专注度，随用户的专注度变化而动态切换。进而为用户提供了更丰富的组句训练交互策略，提高了组句训练的智能化程度。
89.此外，根据该第一专注力数据获取与该专注度适配的新的句子样本的词条元素进行显示，使得往后的组句训练的句子样本与用户实际的专注度贴合度更高，以更灵活的适
配句子样本策略优化了组句训练步骤，不仅有助于提高用户进行组句训练的效率，还可以给用户带来更好的产品使用体验。
90.请参阅图6，图6是本技术实施例提供的一种基于脑机接口的组句训练操作界面的交互装置的结构示意图。
91.装置的结构框图。本实施例中该基于脑机接口的组句训练操作界面的交互装置包括的各单元用于执行图1、图4以及图5对应的实施例中的各步骤。具体请参阅图1、图4以及图5，以及图1、图4以及图5所对应的实施例中的相关描述。为了便于说明，仅示出了与本实施例相关的部分。参见图6，一种基于脑机接口的组句训练操作界面的交互装置60，包括：第一显示单元61，用于显示组句操作界面，所述组句操作界面包括句子样本的n个词条元素。
92.第一获取单元62，用于响应于用户在组句操作界面中对所述n个词条元素的组句操作，获取第一专注力数据，所述第一专注力数据用于表征用户对所述句子样本进行组句操作时的专注度。
93.第二显示单元63，用于根据所述第一专注力数据获取并显示新的句子样本的词条元素，所述新的句子样本的组句操作难度等于或大于所述句子样本的组句操作难度。
94.第二获取单元64，用于响应于用户对所述新的句子样本的词条元素的组句操作，获取组句操作结果，以及获取第二专注力数据，所述第二专注力数据用于表征用户对所述新的句子样本进行组句操作时的专注度。
95.第三显示单元65，用于在所述组句操作结果为正确时，根据所述第二专注力数据继续显示下一条新的句子样本的词条元素，或者显示预设趣味内容。作为一个实施例，交互装置60还包括：第三显示单元，用于显示视频播放窗口。
96.第一播放单元，用于在所述视频播放窗口中播放与所述句子样本相应的视频内容。
97.窗口缩小单元，用于当所述视频内容播放完时，缩小所述视频播放窗口；其中，缩小后的视频播放窗口小于所述组句操作界面。
98.作为一个实施例，交互装置60还包括：第二播放单元，用于响应于用户对所述缩小后的视频播放窗口的操作，播放所述视频内容。
99.作为一个实施例，交互装置60还包括：第三播放单元，用于响应于用户对所述音频播放按钮的点击操作，播放与所述句子样本和/或所述词条内容对应的音频内容。
100.作为一个实施例，交互装置60还包括：第四显示单元，用于在所述组句操作结果为正确时，显示录音按钮。
101.接收单元，用于响应于用户对所述录音按钮的点击操作，接收并保存用户录入的语音内容。
102.作为一个实施例，交互装置60还包括：第三获取单元，用于在所述组句操作结果为正确时，获取与所述新的句子样本关联的预设扩展句子样本；所述预设扩展句子样本的组句操作难度大于所述新的句子样本的
组句操作难度。
103.第五显示单元，用于显示所述预设扩展句子样本的词条元素。
104.作为一个实施例，交互装置60还包括：第四获取单元，用于获取第三专注力数据；所述第三专注力数据用于表征用户在观看所述预设趣味内容时的专注度。
105.第六显示单元，用于当所述第三专注力数据表征的专注度等于或大于预设专注度阈值时，停止显示所述预设趣味内容，且继续显示下一条新的句子样本的词条元素。
106.应当理解的是，本实施例提供的基于脑机接口的组句训练操作界面的交互装置，各单元用于执行图1、图4以及图5对应的实施例中的各步骤，而对于图1、图4以及图5对应的实施例中的各步骤已在上述实施例中进行详细解释，具体请参阅图1、图4以及图5，以及图1、图4以及图5所对应的实施例中的相关描述，此处不再赘述。
107.图7是本技术实施例提供的一种电子设备的结构框图。如图7所示，该实施例的电子设备7包括：处理器70、存储器71以及存储在所述存储器71中并可在所述处理器70上运行的计算机程序72，例如空调控制方法的程序。处理器70执行所述计算机程序72时实现上述各个基于脑机接口的组句训练操作界面的交互方法各实施例中的步骤，例如图1所示的各步骤，或者，图4或图5所示的各步骤。或者，所述处理器70执行所述计算机程序72时实现上述图6对应的实施例中各单元的功能。具体请参阅图6对应的实施例中的相关描述，此处不赘述。
108.示例性的，所述计算机程序72可以被分割成一个或多个单元，所述一个或者多个单元被存储在所述存储器71中，并由所述处理器70执行，以完成本技术。所述一个或多个单元可以是能够完成特定功能的一系列计算机程序指令段，该指令段用于描述所述计算机程序72在所述电子设备7中的执行过程。例如，所述计算机程序72可以被分割成工作频率获取单元、第一执行单元、环境温度检测单元以及第二执行单元各单元具体功能如上所述。
109.所述电子设备可包括，但不仅限于，处理器70、存储器71。本领域技术人员可以理解，图7仅仅是电子设备7的示例，并不构成对电子设备7的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件，例如所述电子设备还可以包括输入输出设备、网络接入设备、总线等。
110.所称处理器70可以是中央处理单元（central processing unit，cpu），还可以是其他通用处理器、数字信号处理器（digital signal processor，dsp）、专用集成电路（application specific integrated circuit，asic）、现成可编程门阵列（field-programmable gate array，fpga）或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
111.所述存储器71可以是所述电子设备7的内部存储单元，例如电子设备7的硬盘或内存。所述存储器71也可以是所述电子设备7的外部存储设备，例如所述电子设备7上配备的插接式硬盘，智能存储卡（smart media card，smc），安全数字（secure digital，sd）卡，闪存卡（flash card）等。进一步地，所述存储器71还可以既包括所述电子设备7的内部存储单元也包括外部存储设备。所述存储器71用于存储所述计算机程序以及所述电子设备所需的其他程序和数据。所述存储器71还可以用于暂时地存储已经输出或者将要输出的数据。
112.以上所述的仅为本发明的部分或优选实施例，无论是文字还是附图都不能因此限制本发明保护的范围，凡是在与本发明一个整体的构思下，利用本发明说明书及附图内容所作的等效结构变换，或直接/间接运用在其他相关的技术领域均包括在本发明保护的范围内。

技术特征：
1.一种基于脑机接口的组句训练界面的交互方法，其特征在于，所述方法包括：显示组句操作界面，所述组句操作界面包括句子样本的n个词条元素；响应于用户在组句操作界面中对所述n个词条元素的组句操作，获取第一专注力数据，所述第一专注力数据用于表征用户对所述句子样本进行组句操作时的专注度；根据所述第一专注力数据获取并显示新的句子样本的词条元素，所述新的句子样本的组句操作难度等于或大于所述句子样本的组句操作难度；响应于用户对所述新的句子样本的词条元素的组句操作，获取组句操作结果，以及获取第二专注力数据，所述第二专注力数据用于表征用户对所述新的句子样本进行组句操作时的专注度；在所述组句操作结果为正确时，根据所述第二专注力数据继续显示下一条新的句子样本的词条元素，或者显示预设趣味内容。2.根据权利要求1所述的方法，其特征在于，所述方法还包括：显示视频播放窗口；在所述视频播放窗口中播放与所述句子样本相应的视频内容；当所述视频内容播放完时，缩小所述视频播放窗口；其中，缩小后的视频播放窗口小于所述组句操作界面。3.根据权利要求2所述的方法，其特征在于，所述缩小所述视频播放窗口的步骤之后，还包括：响应于用户对所述缩小后的视频播放窗口的操作，播放所述视频内容。4.根据权利要求1所述的方法，其特征在于，所述词条元素包括词条内容与所述词条内容描述的图像；所述响应于用户在组句操作界面中对所述n个词条元素的组句操作，获取第一专注力数据，包括：在用户对首个所述词条元素进行组句操作时，开始获取第一专注力数据；当用户完成第n个所述词条元素的组句操作时，获取所述组句操作得到的词条组句内容；若所述词条组句内容与所述句子样本的内容一致，则停止获取第一专注力数据。5.根据权利要求4所述的方法，其特征在于，所述词条元素还包括音频播放按钮；在所述显示组句操作界面的步骤之后，还包括：响应于用户对所述音频播放按钮的点击操作，播放与所述句子样本和/或所述词条内容对应的音频内容。6.根据权利要求1所述的方法，其特征在于，在所述响应于用户对所述新的句子样本的词条元素的组句操作，获取组句操作结果，以及获取第二专注力数据的步骤之后，还包括：在所述组句操作结果为正确时，显示录音按钮；响应于用户对所述录音按钮的点击操作，接收并保存用户录入的语音内容。7.根据权利要求1所述的方法，其特征在于，在所述响应于用户对所述新的句子样本的词条元素的组句操作，获取组句操作结果，以及获取第二专注力数据的步骤之后，还包括：在所述组句操作结果为正确时，获取与所述新的句子样本关联的预设扩展句子样本；所述预设扩展句子样本的组句操作难度大于所述新的句子样本的组句操作难度；
显示所述预设扩展句子样本的词条元素。8.根据权利要求1至7任一项所述的方法，其特征在于，在所述显示预设趣味内容的步骤之后，还包括：获取第三专注力数据；所述第三专注力数据用于表征用户在观看所述预设趣味内容时的专注度；当所述第三专注力数据表征的专注度等于或大于预设专注度阈值时，停止显示所述预设趣味内容，且继续显示下一条新的句子样本的词条元素。9.一种电子设备，其特征在于，所述电子设备包括：存储器、处理器以及存储在所述存储器中并可在所述电子设备上运行的计算机程序，所述处理器执行所述计算机程序时实现如权利要求1至8任一项所述基于脑机接口的组句训练界面的交互方法的步骤。10.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至8任一项所述基于脑机接口的组句训练界面的交互方法的步骤。

技术总结
本申请适用于人机交互技术领域，提供了一种基于脑机接口的组句训练操作界面的交互方法、基于脑机接口的组句训练操作界面的交互装置、电子设备及计算机可读存储介质。其中，一种基于脑机接口的组句训练操作界面的交互方法，在显示了包括句子样本的N个词条元素的组句操作界面后，如果检测到用户在该组句操作界面中对N个词条元素的组句操作，则获取第一专注力数据。根据用户对新的句子样本的词条元素进行了组句操作的操作结果与第二专注力数据，决定继续显示下一条新的句子样本的词条元素或者切换至显示预设趣味内容，使得组句训练与重聚用户专注度随专注度变化而动态切换，丰富了组句训练交互策略，提高了组句训练操作界面的智能化程度。能化程度。能化程度。


技术研发人员：韩璧丞 杨锦陈 张扬 周超前
受保护的技术使用者：深圳市心流科技有限公司
技术研发日：2023.08.10
技术公布日：2023/9/14