【技术实现步骤摘要】
本专利技术涉及数字家庭
，尤其涉及一种标记语言驱动的中国手语合成系统。
技术介绍
随着人机交互技术的不断发展,具有高度真实感的虚拟形象(Embodied Agent)因其更低的人力消耗、更灵活的产生、编辑方式被广泛应用于各种交互领域，推动人机交互接口向着更为友好、自然的方式发展，手语合成更是其中的一项重要应用。由于聋人对由口语文法创建的书面文本存在阅读障碍使其对信息的接收效率远低于健听人，所以目前手语合 成研究主要集中在自然文本到手语动画的实时翻译、合成技术，其核心作用是辅助聋人无障碍地接受和理解健听人创建的信息，为其搭建无障碍的信息交流平台。手语作为一种独立的视觉语言，它的主要特点就是多模式(手、头部、面部表情、身体)协同发音，主要目的是表达语义和交流情感.在语言学中，韵律的概念最为突出的体现了人类表达中最有别于机器合成语言的特征节奏、音调和情感等。在手语表达中，这种韵律特征更是通过多种发音方式协同表达，而且和语义、语法密切相关。现有手语合成系统主要研究手势的可视化方法，缺乏对于韵律特征的有效表达，尤其是非手部行为的表达，不仅影响合成效果的真实感还会导致...
【技术保护点】
【技术特征摘要】
1.一种标记语言驱动的中国手语合成系统，其特征在于，该系统由两个模块组成手语韵律控制器和手语行为合成器，并采用中国手语标记语言作为系统输入和模块间的数据接口，具有功能层和音韵层两层结构；手语韵律控制器模块处于韵律实现模型的最上层，完成韵律控制模型定义的功能，将抽象韵律描述转化为具体行为描述的能力，提供对于不同层次文档的处理能力，即识别功能层元素的能力，并提供将其转化为音韵层元素的处理能力，处理能力的高低取决于系统所能识别的元素数量和具体的韵律控制模型；手语韵律控制器应首先根据标记语言的DTD文件验证文档元素的有效性，对不符合标记语言设计规范的文档提出警告，并有权拒绝接受处理；手语行为合成器模块处于韵律实现模型的最下层，完成韵律产生模型定义的功能，将韵律参数转化为可被直接绘制的参数，并提供最终的实现。2.如权利要求I所述的系统，其特征在于，手语韵律控制器的核心功能是对手语标记语言文档进行处理，实现功能层元素标记到音韵层标记的转化，具体的实现流程为韵律控制器首先将未处理过的手语标记语言文档读入内存，解析并建立用于修改和查找的DOM树，并执行如下的处理a.语法行为的计算即对功能层标记进行展开，在DOM中插入相应的音韵层描述，韵律控制器会从根节点开始顺序扫描文档，为每个词和词根元素建立默认的音韵层描述，包括手部语法行为描述；b.韵律行为选择和韵律参数调整从输入文档的韵律结构可分析得出，按照内部结构优先的原则，控制器从文档的最内层韵律结构开始遍历查找是否存在抽象韵律描述。3.如权利要求I所述的系...
【专利技术属性】
技术研发人员：罗笑南，陈家熙，谭刘源，刘海亮，林谋广，
申请(专利权)人：中山大学，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。