本书主要研究多模态智能信息处理，包括多模态表示学习、多模态信息融合、多模态信息检索、多模态内容理解、多模态内容生成、多模态脑机智能与应用等内容。本书系统地介绍了多模态智能信息处理从底层特征提取到高层语义理解的完整技术路线，重点关注基于深度学习技术的多模态智能信息研究，包含了最新出现的视觉问答及时域语言定位等多模态信息理解新方向，同时介绍了经典的传统非深度方法，力图搭建从传统经典技术到现有先进技术的过渡桥梁，进而加深对传统技术的理解，并促进对当前技术的进一步思考。本书内容丰富，结构清晰，理论由浅入深，具有内容的易读性、知识的全面性以及技术的先进性等特点。