适读人群 ：本书适合从事语音交互、VR、AR、智能座舱和智能家居的产品经理和设计师阅读，希望本书能帮助读者更清晰地知道未来的科技走向

√系统总结了多模态交互的发展历程∣设计原则∣理论依据，指引人们探索新的交互体验

√剖析各模态的特点和局限性，勾勒出多模交互的设计模型

√从语音、手势设计到多模融合，构建具有增长能力的图形语音界面融合模型

随着科技的进步，互联网逐渐从电脑、手机屏幕走向VR、AR、智能座舱、智能家居等三维空间，为了让用户更自然地获取信息，多模态交互将起到关键作用。本书从人工智能、用户体验和技术的角度出发，介绍不同模态之间的差异，本书重点讲解语音交互设计、手势设计、图形和语音界面融合设计三个方面的知识。 本书适合从事人工智能、语音交互、VR、AR、智能座舱和智能家居的产品经理和设计师阅读，希望本书能帮助读者更清晰地知道未来的科技走向。

薛志荣，一名拥有技术背景的设计师，先后在百度、小鹏汽车和华为从事交互设计和人机交互设计相关工作，《AI改变设计――人工智能时代的设计师生存手册》作者。平时喜欢研究新领域，包括人工智能、智能设计、智能座舱和虚拟现实等，拥有多项发明和外观专利。个人微信公众号为“薛志荣”，定期更新前沿领域的设计文章，欢迎阅读和交流。

下一个阶段有趣的设计是什么？这是笔者工作以来一直在思考的问题。2016年，谷歌的AlphaGo在围棋领域以四胜一负的成绩击败了韩国围棋九段棋手李世乭，以深度学习为代表的人工智能成为业界关注的重点，人工智能和艺术的结合也层出不穷。出于兴趣，笔者在2019年出版了人工智能和设计相关的图书《AI改变设计——人工智能时代的设计师生存手册》，工作的重心也从移动互联网和交互设计逐渐转向人工智能和人机交互。随着不断的研究和探索，笔者从2020年开始创作本书。

本书的重点是多模交互，因为多模交互是信息时代下一步发展的基础。随着技术的进步，信息逐渐从单个屏幕延展到多个屏幕，甚至延展到用户所处的空间，基于鼠标、键盘和触摸屏的近场交互方式已经不能较好地满足人们在空间中快捷获取信息的需求，以语音、肢体交互为代表的远场交互方式成为人工智能和人机交互的研究重点，将多种交互方式自然地融合在一起更为关键。

多模交互也是下一代人工智能的基础。众所周知，大数据为人工智能技术带来新的突破，数据的增长速度也越来越快。希捷科技与国际数据公司IDC在2017年共同发布的白皮书《数据时代2025》预测，2025年全球的数据量将达到163ZB（1ZB约等于1亿块1TB容量的硬盘），是2016年全球数据量的10倍左右，而如何规范化并利用数据一直是困扰研究人员的问题。回顾历史，人机交互的本质是将人们产生的信息转换为计算机能理解的数据，而人工智能能为人机交互技术带来更多的突破，尤其是对人们的行为进行建模和理解，能为后续的空间交互，甚至城市交互奠定良好的基础。因此，人工智能和人机交互是相互促进的关系，通过多模交互技术构建优秀的用户体验将成为两者的关键桥梁。

多模交互体验是有趣且复杂的，关键是未被定型。什么样的多模交互体验是优秀的？如何定义下一代交互设计规范，类似苹果公司的 HIG（Human Interface Guidelines）或谷歌公司的Material Design？笔者认为这是研究和设计多模交互体验的最大乐趣。从现有的资料来看，当前大部分的多模交互研究集中在学术界的论文、期刊和会议中，面向工业界和广大群体的资料极少且零散。因此，如何将学术界前沿的多模交互研究内容及笔者在多模交互领域的设计经验传递给广大设计师是笔者编写本书的初衷。

本书内容分为6章：第1章介绍多模交互的发展历史；第2章介绍多模态的相关特点和现有技术；第3章和第4章分别详细讲述语音交互和隔空手势交互应该如何设计；第5章围绕如何将语音界面和图形界面融合进行编写；第6章介绍多模交互和跨设备交互之间的关系。书中提及的视频和资料可以在公众号“薛志荣”中获取，希望本书的内容能对读者有所启发和帮助。