基于多模态人机交互的听障者无障碍技术研究

内容简介

[

　　《基于多模态人机交互的听障者无障碍技术研究》主要研究利用先进的信息技术和手段，消除残障者在言语康复、教育学习、生活及交流中所遇到的各种障碍，将可视语音等多模态技术引入康复领域，结合现代信息技术中的人工智能、物联网、群智计算等将无障碍技术扩展到融合教育、生活无障碍、交流无障碍等领域。该书研究内容主要包括：应用可视语音及虚拟现实技术解决听障儿童言语康复难题；应用多模态交互技术研究听障学生高等教育课堂教学辅助装置，解决听障学生融入正常课堂无障碍学习难题；应用群智计算技术与多模态技术解决听障者与健听者无障碍交流难题。　　《基于多模态人机交互的听障者无障碍技术研究》可以作为人机交互、康复工程与技术、残障者无障碍技术等相关专业的本科生、研究生的教材或参考书，也可作为相关工程技术人员和研究人员的参考书。

]

作者简介

[

　　赵剑，博士后、副教授、硕士研究生导师，吉林省中青年科技领军人才、吉林省第七批拔尖创新人才第三层次、吉林省残障无障碍技术及智能设备创新团队负责人、吉林省人体健康状态辨识与机能增强重点实验室副主任、中国青年科技工作者协会信息与电子科学委员会委员、中国计算机学会高级会员、中国电子学会嵌入式系统与机器人分会委员。主要从事人工智能、人机交互、虚拟现实、康复工程等研究。主持科研项目18项，包括国家自然科学基金、博士后科学基金、教育部项目、省科技厅项目等。申请专利20项、计算机软件著作权46项，发表论文56篇，出版专著2部、教材1部，参与制定国家标准1项。获吉林省科技进步奖三等奖2项，长春市科技进步奖一等奖1项，吉林大学优秀博士后奖。

]

目录

第0篇 基础篇第1章 绪论1．1 基于多模态人机交互的听障者无障碍技术研究背景1．1．1 社会背景1．1．2 应用背景1．2 多模态人机交互技术研究现状1．2．1 多模态人机交互技术国外发展现状1．2．2 多模态人机交互技术国内发展现状1．3 无障碍技术研究现状1．3．1 言语康复无障碍技术研究现状1．3．2 融合教育无障碍技术研究现状1．3．3 生活无障碍技术研究现状1．4 本书主要研究内容及章节安排参考文献第1篇 基于多模态人机交互的言语康复无障碍技术研究第2章 基于可视语音的言语康复无障碍方法研究2．1 基于三维扫描数据的三维可视语音人脸建模2．2 三维扫描数据获取及预处理2．2．1 三维激光扫描技术的基本原理2．2．2 人脸点云数据获取的采集环境设置2．3 三维点云数据预处理2．4 三维扫描数据与通用人脸模型的匹配2．4．1 人脸模型特征点提取2．4．2 人脸模型几何变形2．4．3 人脸模型纹理映射2．5 三维人脸动态特征提取2．5．1 系统框架2．5．2 基于人脸运动捕捉技术的面部及唇部信息提取2．5．3 面向听障儿童言语康复训练的人脸特征点标记排布方式2．5．4 人脸模型驱动方法研究2．6 基于汉语三维可视语音库的听障儿童发音康复方法2．6．1 汉语三维可视语音库建立2．6．2 基于汉语三维可视语音库的发音康复过程2．7 语音康复标准2．8 本章小结参考文献第3章 基于不可视语音的多模态言语康复无障碍方法研究3．1 不可视语音概念3．2 人舌腭三维建模方法3．2．1 基于生理结构的三维舌部建模3．2．2 人舌肌肉模型的几何描述3．2．3 舌部模型控制3．3 基于动态腭位的舌部发音运动3．3．1 基于动态腭位的舌部数据采集3．3．2 建立EPG对应音素的发音样本3．4 听障儿童言语康复中基于动态腭位的人舌模型驱动方法研究3．4．1 面向听障儿童多模态言语康复的动态腭位样本数据库的建立3．4．2 改进的腭位参数描述3．4．3 参数设置3．4．4 舌部模型驱动动作合成3．4．5 实验及结果分析3．5 本章小结参考文献第4章 基于多模态人机交互的言语康复呼吸训练无障碍技术研究4．1 多模态呼吸训练方法4．1．1 传统的呼吸训练方法4．1．2 PC端和移动智能终端训练方法4．1．3 计算流体力学训练方法4．1．4 VR沉浸式呼吸训练方法……第2篇 基于多模太人机交互听障学生融合教育无障碍支撑体系第3篇 基于多模态人机交互的听障者生活无障碍技术研究

封面

书名:基于多模态人机交互的听障者无障碍技术研究

作者:赵剑

页数:206

定价:¥108.0

出版社:科学出版社

出版日期:2020-03-01

ISBN:9787030612908

PDF电子书大小:146MB 高清扫描完整版