中国专利搜索 世界专利搜索 专利分类查询 专利引用检索 专利族检索
登陆 | |

基于发音器官形态行为偏差可视化的发音矫正方法
审中-实审

Pronunciation correction method based on vocal organ form and behavior deviation visualization

申请号:201810800559.0 申请日:2018-07-20
CN201810800559
CN108877319A
微信扫码查看/分享专利
摘要:本发明是一种基于发音器官形态行为偏差可视化的发音矫正方法,针对学习者进行外语学习建模,获取学习者语音内容和对应发音时的器官动作,再根据学习者选择的目标外语,调出标准库中的对应发音模块。通过对学习者和标准库的相同发音内容和器官动作形态进行对比,找到学习者唇位、舌位、齿位、呼气量和下颌高度等位置和标准库中对应数据的偏差,可视化地把学习者和标准音的器官形态差异,以及两者偏差反馈给学习者,后更新学习者的基本信息,随时记录学习者的学习能力等信息,为学习者提供相应外语学习的连贯可执行方式。
Abstract: The invention discloses a pronunciation correction method based on vocal organ form and behavior deviation visualization. The method comprises the steps: performing the foreign language learning modeling for a learner, acquiring the voice content of the learner and the organ motion corresponding to the pronunciation, and then calling a corresponding pronunciation module in a standard library according to the target foreign language selected by the learner; searching the deviations of the lip position, tongue position, tooth position, expiratory volume and jaw height of the learner and the corresponding data in the standard library by comparing the same pronunciation contents and organ movement patterns of the learner and the standard library, and visually feeding back the difference of the organ forms between the learner and the organ of the standard sound and the deviation between the two to the learner, and then updating the basic information of the learner. The method achieves therecording of the learning ability of the learner at any time to provide the learner with a coherent executable way of learning foreign languages.
申请人: 海南大学
Applicant: UNIV HAINAN
地址: 570228 海南省海口市美兰区********(隐藏)
发明(设计)人: 段玉聪 张欣悦 宋正阳 黄梦醒 胡俊
Inventor: DUAN YUCONG; ZHANG XINYUE; SONG ZHENGYANG; HUANG MENGXING; HU JUN
主分类号: G09B5/02(2006.01)I
分类号: G09B5/02(2006.01)I G10L15/02(2006.01)I G10L15/08(2006.01)I
  • 法律状态
2018-12-18  实质审查的生效IPC(主分类):G09B 5/02申请日:20180720
2018-11-23  公开
注:本法律状态信息仅供参考,即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
  • 其他信息
主权项  1.本发明是一种基于发音器官形态行为偏差可视化的发音矫正方法,针对学习者进行外语学习建模,获取学习者语音内容和对应发音时的器官动作,再根据学习者选择的目标外语,调出标准库中的对应发音模块;通过对学习者和标准库的相同发音内容和器官动作形态进行对比,找到学习者唇位、舌位、齿位、呼气量和下颌高度等位置和标准库中对应数据的偏差,可视化地把学习者和标准音的器官形态差异,以及两者偏差反馈给学习者,后更新学习者的基本信息,随时记录学习者的学习能力等信息,为学习者提供相应外语学习的连贯可执行方式,具体流程如下:步骤1)收集标准发音时的语音内容和器官动作,将标准音按字母、单词和句子的形式映射到标准发音器官形态行为库中,使用映射函数mapping()把字母、单词和句子的标准发音,与对应的器官位置进行匹配,记为SP={Pi,SAj};在进行匹配时,将用语音识别模块收集到的发音参数根据其内容情况存入Pi={num,cont},num为Pi的总数,cont为Pi内容,字母存为P1,单词存为P2,句子存为P3,在每一个发音时会收集到SAj,用mapping(Pi,SAj)对应起来,存入标准库存储单元;步骤2)将SP={Pi,SAj}存入标准库对应的发音模块,后循环至步骤1),直到完成对所有发音的收集和存储;步骤3)根据学习者的选择,调出对应的外语标准库;标准库中存有根据不同语言规则构建的外语SP;步骤4)获取学习者的发音,在语音识别模块中分析出学习者的发音内容为P1、P2或者P3;步骤5)调出标准库中记录的对应的外语的连读规则,进行对比后记录入学习者的Pi中;例如在英语学习中,“It is an old book”可以连读为“It~is~an~old book”,当学习者连读时,记录进入学习者的P3中,当学习者没有连读时,提取出P2的发音信息,调取标准库中的P3连读情况进行偏差对比,做好矫正的准备;步骤6)每当记录一个Pi后,就记录对应器官的形态行为变化数据组,最后存入LP={Pi,LAj},之后循环到步骤4),继续进行识别和存储,直到所有发音都识别完全;步骤7)当把学习者的发音识别完全,并将Pi和LAj全部记录进入LP后,将LP存入学习者对应的发音模块;步骤8)根据识别出的学习者的Pi,找出具有相同Pi的标准库中的SAj;步骤9)算出LP={Pi,LAj}与SP={ Pi,SAj }的偏差DFLS,DFLS的计算公式如下:步骤10)根据DFLS的结果,以SAj对应的3D成像动画为标准,根据LAj和SAj调节学习者发音时器官的位置,用以可视化显示;步骤11)根据DFLS的结果,计算学习者的LAbility,LAbility中Ti由计时器确定,Si的计算公式如下,α通过大量数据训练得出,⊗表示α和DFLS之间的关系,Si越大,说明用户的口语发音越接近标准发音:步骤12)将目标发音的标准器官形状和学习者本人器官形状动画同时放映在可视化界面上,同时显示出具体偏差情况和得分Si;步骤13)保存可视化记录以及LAbility={Ti,Si},为以后及时跟踪学习者的学习能力做准备。
公开号  108877319A
公开日  2018-11-23
专利代理机构  
代理人  
颁证日  
优先权  
 
国别 优先权号 优先权日 类型
CN  201810800559  20180720 
国际申请  
国际公布  
进入国家日期  
  • 专利对比文献
类型 阶段 文献号 公开日期 涉及权利要求项 相关页数
注:不保证该信息的有效性、完整性、准确性,以上信息也不具有任何效力,仅供参考。使用前请另行委托专业机构进一步查核,使用该信息的一切后果由用户自行负责。
X:单独影响权利要求的新颖性或创造性的文件;
Y:与检索报告中其他 Y类文件组合后影响权利要求的创造性的文件;
A:背景技术文件,即反映权利要求的部分技术特征或者有关的现有技术的文件;
R:任何单位或个人在申请日向专利局提交的、属于同样的发明创造的专利或专利申请文件;
P:中间文件,其公开日在申请的申请日与所要求的优先权日之间的文件,或会导致需核实该申请优先权的文件;
E:单独影响权利要求新颖性的抵触申请文件。
  • 期刊对比文献
类型 阶段 期刊文摘名称 作者 标题 涉及权利要求项 相关页数
  • 书籍对比文献
类型 阶段 书名 作者 标题 涉及权利要求项 相关页数
  • 附加信息
同族专利
 
引用文献
 
被引用文献
CN111047922A