一种基于点读笔的辅助阅读方法与流程

1.本发明涉及辅助阅读技术领域，更具体地说，它涉及一种基于点读笔的辅助阅读方法。


背景技术：

2.点读笔是采用最新光学图像识别技术和先进的数码语音技术开发而成的新一代智能阅读和学习工具。它体现了电子产品与教育行业的完美融合，实现了科技以人为本的理念。点读笔能同时实现点读、复读、跟读、录音、娱乐等诸多功能，现有点读笔在获取当前待读文字后立马进行语音播放，通过这种方式引导读者进行识字，因此现有点读笔不能获取读者朗读时的发音信息，即不能判断读者朗读时发音是否准确，因此不能调整确定点读笔从识别文字到语音播放的反应速度。


技术实现要素：

3.针对现有技术存在的不足，本发明的目的在于提供一种基于点读笔的辅助阅读方法。
4.为实现上述目的，本发明提供了如下技术方案：一种基于点读笔的辅助阅读方法，该方法包括以下步骤：获取当前待读文字的图像，通过点读笔将待读文字的图像进行识别处理得到待读文字的第一发音信息，并使第一发音信息处于不播放状态。
5.获取读者朗读当前文字的第二发音信息以及读者朗读时的停顿信息，将待读文字的第一发音信息与读者朗读当前文字的第二发音信息进行比较判断得到读者朗读当前文字的错误率。
6.提取读者读错第二发音对应的纠正文字，根据纠正文字在第一发音信息中进行筛选得到纠正文字的第三发音信息，并使第三发音信息处于待播放状态。
7.将读者朗读时的停顿信息进行处理分析得到播放反应时间，根据播放反应时间对第三发音信息进行播放。
8.本发明将当前待读文字的第一发音信息与读者朗读当前文字的第二发音信息进行对比比较，从而判断读者朗读当前文字的第二发音是否正确，如果读者朗读当前文字的第二发音不正确，则统计读者朗读完所有文字后的错误率，因此本技术可以对读者的读音正确与否作出判断，同时也能统计读者朗读的错误率，从而能够对读者朗读时的表现进行评价，如果读者朗读时的错误率较高，则读者朗读时的表现不佳，反之，如果读者朗读时没有错误，则读者朗读时的表现较好。
9.同时，本技术并不是通过点读笔获取当前待读文字的图像后立即进行语音播放，而是等待读者对文字进行朗读，并获取读者朗读当前文字的第二发音信息，在读者朗读时出现读音错误，才对读者读错的文字进行语音播放。
10.本发明根据读者朗读时的停顿信息对第三发音信息进行播放，如果读者能够顺利
读完当前待读文字，即没有出现明显卡顿现象，则等待读者朗读完文字后播放第三发音信息；如果读者在朗读文字时出现明显卡顿，则在出现明显卡顿时播放第三发音信息，因此本发明根据读者朗读时的停顿信息确定第三发音信息的播放反应时间。
11.优选地，获取读者朗读当前文字的总数信息，将读者朗读当前文字的总数信息进行取值和标记得到文字总数值wzz。
12.需要注意的是，获取读者朗读当前文字的总数信息，比如获取读者朗读当前文字的字数为106，则文字总数值wzz的取值为106；比如获取读者朗读当前文字的字数为316，则文字总数值wzz的取值为316。
13.优选地，将待读文字的第一发音信息与读者朗读当前文字的第二发音信息进行比较判断得到读者朗读当前文字的错误率，具体为：获取待读文字中每个文字的第一发音信息以及读者朗读文字中每个文字的第二发音信息。
14.将待读文字中每个文字的第一发音信息以及读者朗读文字中每个文字的第二发音信息进行比较，统计待读文字中第一发音信息与读者朗读文字第二发音信息不同的字数数量cws。
15.通过分析函数计算得到错误率cwl。
16.需要注意的是，比如读者朗读的总字数为100，其中有10个文字的第二发音信息与第一发音信息不一样，则待读文字中第一发音信息与读者朗读文字第二发音信息不同的字数数量cws的取值为10，通过分析函数计算得到错误率cwl为10%。
17.优选地，将读者朗读时的停顿信息进行取值和标记得到停顿时间值tds。
18.需要说明的是，读者朗读时的停顿信息主要指两个文字之间停顿的时间信息，比如读者朗读两个文字之间的停顿时间为1秒，则停顿时间值tds的取值为1，比如读者朗读两个文字之间的停顿时间为10秒，则停顿时间值tds的取值为10，比如读者朗读两个文字之间的停顿时间为30秒，则停顿时间值tds的取值为30。
19.将停顿时间值tds与预设的时间阈值q进行比较：需要注意的是，其中预设的时间阈值q为10，将停顿时间值tds与预设的时间阈值q进行比较，从而能够根据情况对第三发音信息进行播放。
20.如果停顿时间值tds≤预设的时间阈值q，则暂时对第三发音信息不播放，获取读者朗读的速度信息，并将读者朗读的速度信息进行取值和标记得到读书速度值dsd，通过时间公式计算得到播放反映时间sjz。
21.需要注意的是，如果停顿时间为1秒，则停顿时间值tds的取值为1，由于停顿时间值tds＜预设的时间阈值q，则暂时对第三发音信息不播放，此时获取读者朗读的速度信息，如果读者在朗读时的速度为每秒钟3个文字，并且需要读者朗读的文字总数值wzz为99，则根据时间公式计算得到播放反映时间sjz为33秒，即读者从开始朗读后的33秒对第三发音信息进行播放。
22.如果停顿时间值tds＞预设的时间阈值q，则此时对第三发音信息进行播放，获取读者开始朗读至出现停顿的时间信息，并将该时间信息标记为播放反应时间。
23.需要注意的是，如果停顿时间信息为12秒，则停顿时间值tds的取值为12，由于停顿时间值tds＞预设的时间阈值q，则此时对第三发音信息进行播放，获取读者开始朗读至出现停顿的时间信息，比如读者开始朗读至出现停顿的时间为10秒，则读者从开始朗读后的10秒对第三发音信息进行播放。
24.优选地，获取读者朗读时的状态信息，所述状态信息包括声音大小信息、坐姿信息和眼睛注视方向信息。
25.将声音大小信息、坐姿信息、眼睛注视方向信息和待读文字中第一发音信息与读者朗读文字第二发音信息不同的字数数量cws进行联合处理分析得到状态值。
26.根据状态值对读者的朗读状态进行评价。
27.需要注意的是，通过将声音大小信息、坐姿信息和眼睛注视方向信息进行联合处理分析得到状态值，并根据状态值对读者的朗读状态进行评价，从而可以对读者的朗读情况进行监督。
28.比如读者在朗读时的声音较大，则说明读者朗读状态较好，如果读者在朗读时的声音较小，则说明读者朗读状态较差；如果读者在朗读时的坐姿为腰部挺直，则说明读者朗读状态较好，如果读者在朗读时的坐姿为趴在桌上，则说明读者朗读状态较差；如果读者在朗读时的眼睛注视课本，则说明读者对课本文字不熟练，如果读者在朗读时的眼睛没有注视课本，则说明读者对课本文字熟练。
29.优选地，将声音大小信息、坐姿信息和眼睛注视方向信息进行取值和标记，得到声音大小值syz、坐姿状态值ztz和眼睛注视值yjz。
30.需要注意的是，如果读者朗读时的声音大小为40分贝，则声音大小值syz的取值为40，如果读者朗读时的声音大小为60分贝，则声音大小值syz的取值为60；如果读者在朗读时的坐姿为腰部挺直，则说明读者朗读状态较好，即坐姿状态值ztz的取值为50，如果读者在朗读时的坐姿为趴在桌上，则说明读者朗读状态较差，则坐姿状态值ztz的取值为10；如果读者在朗读时的眼睛注视课本，则说明读者对课本文字不熟练，则眼睛注视值yjz的取值为10，如果读者在朗读时的眼睛没有注视课本，则说明读者对课本文字熟练，则眼睛注视值yjz的取值为50。
31.优选地，通过计算公式计算得到状态值ldz；其中，a1、a2、a3和a4为影响因子且大于零。
32.这里将a1、a2、a3和a4的取值均设定为1，在声音大小值syz的取值为60、坐姿状态值ztz的取值为50、眼睛注视值yjz的取值为50、待读文字中第一发音信息与读者朗读文字第二发音信息不同的字数数量cws的取值为10的情况下，通过计算公式计算得到状态值ldz为150。
33.在声音大小值syz的取值为40、坐姿状态值ztz的取值为10、眼睛注视值yjz的取值为10、待读文字中第一发音信息与读者朗读文字第二发音信息不同的字数数量cws的取值为10的情况下，通过计算公式计算得到状态值ldz为50。
34.优选地，将状态值ldz与预设的状态阈值[p1、p2]进行比较：
如果状态值ldz≤预设的状态阈值p1，则读者朗读时的表现为不及格。
[0035]
如果预设的状态阈值p1＜状态值ldz≤预设的状态阈值p2，则读者朗读时的表现为及格。
[0036]
如果状态值ldz＞预设的状态阈值p2，则读者朗读时的表现为优秀。
[0037]
与现有技术相比，本发明具备以下有益效果：本发明中，提取读者读错第二发音对应的纠正文字，根据纠正文字在第一发音信息中进行筛选得到纠正文字的第三发音信息，将读者朗读时的停顿信息进行处理分析得到播放反应时间，根据播放反应时间对第三发音信息进行播放，本技术并不是通过点读笔获取当前待读文字的图像后立即进行语音播放，而是等待读者对文字进行朗读，并获取读者朗读当前文字的第二发音信息，在读者朗读时出现读音错误，本发明根据读者朗读时的停顿信息确定第三发音信息的播放反应时间，即根据读者朗读时的停顿信息判断点读笔从识别文字到第三发音信息播放的反应速度；同时本技术从而能够更直观的发现读者发音错误，便于读者及时进行纠正。
附图说明
[0038]
图1为本发明提出一种基于点读笔的辅助阅读方法的流程示意图；图2为本发明提出一种基于点读笔的辅助阅读方法中对读者朗读状态进行评价的流程示意图。
具体实施方式
[0039]
参照图1至图2。
[0040]
实施例一对本发明提出的一种基于点读笔的辅助阅读方法做进一步说明。
[0041]
一种基于点读笔的辅助阅读方法，该方法包括以下步骤：获取当前待读文字的图像，通过点读笔将待读文字的图像进行识别处理得到待读文字的第一发音信息，并使第一发音信息处于不播放状态。
[0042]
获取读者朗读当前文字的第二发音信息以及读者朗读时的停顿信息，将待读文字的第一发音信息与读者朗读当前文字的第二发音信息进行比较判断得到读者朗读当前文字的错误率。
[0043]
提取读者读错第二发音对应的纠正文字，根据纠正文字在第一发音信息中进行筛选得到纠正文字的第三发音信息，并使第三发音信息处于待播放状态。
[0044]
其中，纠正文字为读者读错第二发音信息对应的文字，根据纠正文字在第一发音信息中进行筛选得到纠正文字的第三发音信息。
[0045]
将读者朗读时的停顿信息进行处理分析得到播放反应时间，根据播放反应时间对第三发音信息进行播放。
[0046]
本发明将当前待读文字的第一发音信息与读者朗读当前文字的第二发音信息进行对比比较，从而判断读者朗读当前文字的第二发音是否正确，如果读者朗读当前文字的第二发音不正确，则统计读者朗读完所有文字后的错误率，因此本技术可以对读者的读音正确与否作出判断，同时也能统计读者朗读的错误率，从而能够对读者朗读时的表现进行
评价，如果读者朗读时的错误率较高，则读者朗读时的表现不佳，反之，如果读者朗读时没有错误，则读者朗读时的表现较好。
[0047]
同时，本技术并不是通过点读笔获取当前待读文字的图像后立即进行语音播放，而是等待读者对文字进行朗读，并获取读者朗读当前文字的第二发音信息，在读者朗读时出现读音错误，才根据读者朗读时的停顿信息对第三发音信息进行播放。
[0048]
本发明根据读者朗读时的停顿信息对第三发音信息进行播放，如果读者能够顺利读完当前待读文字，即没有出现明显卡顿现象，则等待读者朗读完文字后播放第三发音信息；如果读者在朗读文字时出现明显卡顿，则在出现明显卡顿时播放第三发音信息，因此本发明根据读者朗读时的停顿信息确定第三发音信息的播放反应时间。
[0049]
由于点读笔上设置有显示屏，在点读笔播放第三发音信息时，显示屏上显示播放第三发音信息对应的文字。
[0050]
获取读者朗读当前文字的总数信息，将读者朗读当前文字的总数信息进行取值和标记得到文字总数值wzz。
[0051]
需要注意的是，获取读者朗读当前文字的总数信息，比如获取读者朗读当前文字的字数为106，则文字总数值wzz的取值为106；比如获取读者朗读当前文字的字数为316，则文字总数值wzz的取值为316。
[0052]
将待读文字的第一发音信息与读者朗读当前文字的第二发音信息进行比较判断得到读者朗读当前文字的错误率，具体为：获取待读文字中每个文字的第一发音信息以及读者朗读文字中每个文字的第二发音信息。
[0053]
将待读文字中每个文字的第一发音信息以及读者朗读文字中每个文字的第二发音信息进行比较，统计待读文字中第一发音信息与读者朗读文字第二发音信息不同的字数数量cws。
[0054]
通过分析函数计算得到错误率cwl。
[0055]
需要注意的是，比如读者朗读的总字数为100，其中有10个文字的第二发音信息与第一发音信息不一样，则待读文字中第一发音信息与读者朗读文字第二发音信息不同的字数数量cws的取值为10，通过分析函数计算得到错误率cwl为10%。
[0056]
将读者朗读时的停顿信息进行取值和标记得到停顿时间值tds。
[0057]
需要说明的是，读者朗读时的停顿信息主要指两个文字之间停顿的时间信息，比如读者朗读两个文字之间的停顿时间为1秒，则停顿时间值tds的取值为1，比如读者朗读两个文字之间的停顿时间为10秒，则停顿时间值tds的取值为10，比如读者朗读两个文字之间的停顿时间为30秒，则停顿时间值tds的取值为30。
[0058]
将停顿时间值tds与预设的时间阈值q进行比较：需要注意的是，其中预设的时间阈值q为10，将停顿时间值tds与预设的时间阈值q进行比较，从而能够根据情况对第三发音信息进行播放。
[0059]
如果停顿时间值tds≤预设的时间阈值q，则暂时对第三发音信息不播放，获取读者朗读的速度信息，并将读者朗读的速度信息进行取值和标记得到读书速度值dsd，通过时
间公式计算得到播放反映时间sjz。
[0060]
需要注意的是，如果停顿时间为1秒，则停顿时间值tds的取值为1，由于停顿时间值tds＜预设的时间阈值q，则暂时对第三发音信息不播放，此时获取读者朗读的速度信息，如果读者在朗读时的速度为每秒钟3个文字，并且需要读者朗读的文字总数值wzz为99，则根据时间公式计算得到播放反映时间sjz为33秒，即读者从开始朗读后的33秒对第三发音信息进行播放。
[0061]
如果停顿时间值tds＞预设的时间阈值q，则此时对第三发音信息进行播放，获取读者开始朗读至出现停顿的时间信息，并将该时间信息标记为播放反应时间。
[0062]
需要注意的是，如果停顿时间信息为12秒，则停顿时间值tds的取值为12，由于停顿时间值tds＞预设的时间阈值q，则此时对第三发音信息进行播放，获取读者开始朗读至出现停顿的时间信息，比如读者开始朗读至出现停顿的时间为10秒，则读者从开始朗读后的10秒对第三发音信息进行播放。
[0063]
实施例二在实施例一的基础上增加如下技术特征：一种基于点读笔的辅助阅读方法，获取读者朗读时的状态信息，状态信息包括声音大小信息、坐姿信息和眼睛注视方向信息。
[0064]
将声音大小信息、坐姿信息、眼睛注视方向信息和待读文字中第一发音信息与读者朗读文字第二发音信息不同的字数数量cws进行联合处理分析得到状态值。
[0065]
根据状态值对读者的朗读状态进行评价。
[0066]
需要注意的是，通过将声音大小信息、坐姿信息和眼睛注视方向信息进行联合处理分析得到状态值，并根据状态值对读者的朗读状态进行评价，从而可以对读者的朗读情况进行监督。
[0067]
比如读者在朗读时的声音较大，则说明读者朗读状态较好，如果读者在朗读时的声音较小，则说明读者朗读状态较差；如果读者在朗读时的坐姿为腰部挺直，则说明读者朗读状态较好，如果读者在朗读时的坐姿为趴在桌上，则说明读者朗读状态较差；如果读者在朗读时的眼睛注视课本，则说明读者对课本文字不熟练，如果读者在朗读时的眼睛没有注视课本，则说明读者对课本文字熟练。
[0068]
将声音大小信息、坐姿信息和眼睛注视方向信息进行取值和标记，得到声音大小值syz、坐姿状态值ztz和眼睛注视值yjz。
[0069]
需要注意的是，如果读者朗读时的声音大小为40分贝，则声音大小值syz的取值为40，如果读者朗读时的声音大小为60分贝，则声音大小值syz的取值为60；如果读者在朗读时的坐姿为腰部挺直，则说明读者朗读状态较好，即坐姿状态值ztz的取值为50，如果读者在朗读时的坐姿为趴在桌上，则说明读者朗读状态较差，则坐姿状态值ztz的取值为10；如果读者在朗读时的眼睛注视课本，则说明读者对课本文字不熟练，则眼睛注视值yjz的取值为10，如果读者在朗读时的眼睛没有注视课本，则说明读者对课本文字熟练，则眼睛注视值yjz的取值为50。
[0070]
通过计算公式计算得到状态值ldz；
其中，a1、a2、a3和a4为影响因子且大于零。
[0071]
这里将a1、a2、a3和a4的取值均设定为1，在声音大小值syz的取值为60、坐姿状态值ztz的取值为50、眼睛注视值yjz的取值为50、待读文字中第一发音信息与读者朗读文字第二发音信息不同的字数数量cws的取值为10的情况下，通过计算公式计算得到状态值ldz为150。
[0072]
在声音大小值syz的取值为40、坐姿状态值ztz的取值为10、眼睛注视值yjz的取值为10、待读文字中第一发音信息与读者朗读文字第二发音信息不同的字数数量cws的取值为10的情况下，通过计算公式计算得到状态值ldz为50。
[0073]
将状态值ldz与预设的状态阈值[p1、p2]进行比较：如果状态值ldz≤预设的状态阈值p1，则读者朗读时的表现为不及格。
[0074]
如果预设的状态阈值p1＜状态值ldz≤预设的状态阈值p2，则读者朗读时的表现为及格。
[0075]
如果状态值ldz＞预设的状态阈值p2，则读者朗读时的表现为优秀。
[0076]
需要注意的是，这里将预设的状态阈值p1设定为60，将预设的状态阈值p1设定为100，在状态值ldz为50的情况下，由于状态值ldz＜预设的状态阈值p1，则读者朗读时的表现为不及格；在状态值ldz为80的情况下，由于预设的状态阈值p1＜状态值ldz＜预设的状态阈值p2，则读者朗读时的表现为及格；在在状态值ldz为150的情况下，由于状态值ldz＞预设的状态阈值p2，则读者朗读时的表现为优秀。
[0077]
本发明将声音大小信息、坐姿信息、眼睛注视方向信息和待读文字中第一发音信息与读者朗读文字第二发音信息不同的字数数量信息进行处理分析，从而对读者在朗读时的状态进行评价。
[0078]
以上所述仅是本发明的优选实施方式，本发明的保护范围并不仅局限于上述实施例，凡属于本发明思路下的技术方案均属于本发明的保护范围。应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理前提下的若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

技术特征：
1.一种基于点读笔的辅助阅读方法，其特征在于，该方法包括以下步骤：获取当前待读文字的图像，通过点读笔将待读文字的图像进行识别处理得到待读文字的第一发音信息，并使第一发音信息处于不播放状态；获取读者朗读当前文字的第二发音信息以及读者朗读时的停顿信息，将待读文字的第一发音信息与读者朗读当前文字的第二发音信息进行比较判断得到读者朗读当前文字的错误率；提取读者读错第二发音对应的纠正文字，根据纠正文字在第一发音信息中进行筛选得到纠正文字的第三发音信息，并使第三发音信息处于待播放状态；将读者朗读时的停顿信息进行处理分析得到播放反应时间，根据播放反应时间对第三发音信息进行播放。2.根据权利要求1所述的一种基于点读笔的辅助阅读方法，其特征在于，获取读者朗读当前文字的总数信息，将读者朗读当前文字的总数信息进行取值和标记得到文字总数值wzz。3.根据权利要求2所述的一种基于点读笔的辅助阅读方法，其特征在于，将待读文字的第一发音信息与读者朗读当前文字的第二发音信息进行比较判断得到读者朗读当前文字的错误率，具体为：获取待读文字中每个文字的第一发音信息以及读者朗读文字中每个文字的第二发音信息；将待读文字中每个文字的第一发音信息以及读者朗读文字中每个文字的第二发音信息进行比较，统计待读文字中第一发音信息与读者朗读文字第二发音信息不同的字数数量cws；通过分析函数计算得到错误率cwl。4.根据权利要求3所述的一种基于点读笔的辅助阅读方法，其特征在于，将读者朗读时的停顿信息进行取值和标记得到停顿时间值tds；将停顿时间值tds与预设的时间阈值q进行比较：如果停顿时间值tds≤预设的时间阈值q，则暂时对第三发音信息不播放，获取读者朗读的速度信息，并将读者朗读的速度信息进行取值和标记得到读书速度值dsd，通过时间公式计算得到播放反映时间sjz；如果停顿时间值tds＞预设的时间阈值q，则此时对第三发音信息进行播放，获取读者开始朗读至出现停顿的时间信息，并将该时间信息标记为播放反应时间。5.根据权利要求4所述的一种基于点读笔的辅助阅读方法，其特征在于，获取读者朗读时的状态信息，所述状态信息包括声音大小信息、坐姿信息和眼睛注视方向信息；将声音大小信息、坐姿信息、眼睛注视方向信息和待读文字中第一发音信息与读者朗读文字第二发音信息不同的字数数量cws进行联合处理分析得到状态值；根据状态值对读者的朗读状态进行评价。6.根据权利要求5所述的一种基于点读笔的辅助阅读方法，其特征在于，将声音大小信息、坐姿信息和眼睛注视方向信息进行取值和标记，得到声音大小值syz、坐姿状态值ztz和
眼睛注视值yjz。7.根据权利要求6所述的一种基于点读笔的辅助阅读方法，其特征在于，通过计算公式计算得到状态值ldz；其中，a1、a2、a3和a4为影响因子且大于零。8.根据权利要求7所述的一种基于点读笔的辅助阅读方法，其特征在于，将状态值ldz与预设的状态阈值[p1、p2]进行比较：如果状态值ldz≤预设的状态阈值p1，则读者朗读时的表现为不及格；如果预设的状态阈值p1＜状态值ldz≤预设的状态阈值p2，则读者朗读时的表现为及格；如果状态值ldz＞预设的状态阈值p2，则读者朗读时的表现为优秀。

技术总结
本发明公开了一种基于点读笔的辅助阅读方法，涉及辅助阅读技术领域，其技术方案要点包括以下步骤：获取当前待读文字的图像，通过点读笔将待读文字的图像进行识别处理得到待读文字的第一发音信息，并使第一发音信息处于不播放状态；获取读者朗读当前文字的第二发音信息以及读者朗读时的停顿信息，将待读文字的第一发音信息与读者朗读当前文字的第二发音信息进行比较判断得到读者朗读当前文字的错误率；提取读者读错第二发音对应的纠正文字，效果是即根据读者朗读时的停顿信息判断点读笔从识别文字到第三发音信息播放的反应速度，同时本申请从而能够更直观的发现读者发音错误，便于读者及时进行纠正。便于读者及时进行纠正。便于读者及时进行纠正。


技术研发人员：颜榅辉 徐柏勇 陈许忠
受保护的技术使用者：深圳市小彼恩文教科技有限公司
技术研发日：2023.06.08
技术公布日：2023/7/12