本书深入剖析OpenHarmony操作系统和NIBIRU引擎，为构建国产化高效、互动的虚实融合系统提供了坚实的技术基础。本书涵盖OpenHarmony和NIBIRU的核心知识，以及它们在虚实融合交互系统技术发展中的关键作用，并提出基于国产操作系统OpenHarmony的虚实融合引擎——融智OS，详细介绍OpenHarmony和NIBIRU在底层技术、应用开发和国产化虚实融合系统方面的知识。

更多科学出版社服务，请扫码获取。

2013-10至2014-11, 多伦多大学, 生物医学工程, 联合培养博士生 2011-03至2015-06, 国防科学技术大学, 控制科学与工程, 博士 2008-09至2010-12, 国防科学技术大学, 控制科学与工程, 硕士 2004-09至2008-07, 吉林大学, 自动化, 学士2021.12－至今 军事科学院国防科技创新研究院 研究员/室主任 2018.01－2021.12 军事科学院国防科技创新研究院 副研究员/室主任 2015.07－2018.01 中国航天员科研训练中心（陆军第三十一常规兵器试验训练基地技术部代职锻炼） 工程师主持科技委智创基金1项"xxx行动的人机智能融合媒介与机理研究"（115万元，全国共13项）主持科技委军事脑科学主题项目1项"多模态xxx脑机交互系统及关键技术研究"（200万元）国防“卓青”人才中国电子学会智能人机交互专委会副主任、中国指挥与控制学会虚拟现实与人机交互副主任

目录
“智能人机交互前沿技术丛书”序
前言
第1章 虚实融合交互系统概述 1
1.1 虚实融合交互概念内涵 1
1.2 虚实融合交互操作系统简介 4
1.3 三维引擎简介 5
1.3.1 三维引擎的发展 6
1.3.2 三维引擎与硬件的关系 8
1.3.3 三维引擎的应用技术 8
1.4 操作系统和虚实融合操作系统 10
1.5 本章小结 13
第2章 OpenHarmony操作系统概述 15
2.1 OpenHarmony发展历程 15
2.2 OpenHarmony操作系统架构介绍 16
2.2.1 技术特性 16
2.2.2 系统类型 17
2.2.3 系统架构 18
2.3 OpenHarmony应用开发框架ArkUI介绍 20
2.4 本章小结 21
第3章 OpenHarmony应用开发入门 22
3.1 OpenHarmony应用开发之运行HelloWorld 22
3.2 OpenHarmony应用安装与调试 24
3.2.1 预览器使用与log调试 24
3.2.2 开发板运行程序与HDC使用 27
3.2.3 Debug调试 28
3.3 ArkUI入门 30
3.3.1 HelloWorld工程详解 30
3.3.2 声明式UI描述 31
3.3.3 UI数据渲染 32
3.3.4 常用UI组件和布局 37
3.3.5 页面路由与组件导航 40
3.3.6 案例：直播平台首页 41
3.4 本章小结 44
第4章 OpenHarmony多媒体应用开发 45
4.1 OpenHarmony图形开发 45
4.1.1 Image组件使用 45
4.1.2 绘制几何图形 49
4.1.3 Canvas绘制自定义图形 52
4.1.4 案例：绘制一个仪表盘 55
4.2 OpenHarmony动画开发 58
4.2.1 属性动画 58
4.2.2 显式动画 62
4.2.3 转场动画 64
4.2.4 路径动画 74
4.2.5 案例：星空特效 75
4.3 OpenHarmony音视频录制 81
4.3.1 权限申请 81
4.3.2 音视频录制实现流程与相关接口 84
4.3.3 相机拍照实现流程与相关接口 88
4.3.4 相机录制视频实现流程与相关接口 94
4.3.5 案例：音视频录制 98
4.4 本章小结 111
第5章 OpenHarmony分布式特性开发 112
5.1 OpenHarmony分布式技术特性 112
5.1.1 硬件互助、资源共享 112
5.1.2 分布式软总线 112
5.2 分布式流转开发 113
5.2.1 分布式流转简介 113
5.2.2 分布式跨端迁移开发 115
5.2.3 分布式多端协同开发 119
5.3 分布式数据同步开发 125
5.3.1 分布式数据同步简介 125
5.3.2 键值型数据库分布式开发 126
5.3.3 关系型数据库分布式开发 135
5.3.4 分布式数据对象开发 141
5.4 本章小结 151
第6章 OpenHarmony内核图形子系统概述 152
6.1 Linux图形子系统 152
6.1.1 Linux GUI 152
6.1.2 Linux窗口系统 153
6.1.3 Linux X11 153
6.1.4 Wayland 155
6.1.5 3D渲染、硬件加速和OpenGL 157
6.2 OpenHarmony Graphic图形子系统 159
6.2.1 Graphic系统架构 159
6.2.2 Graphic简介 160
6.2.3 Graphic系统源码目录结构 170
6.3 本章小结 174
第7章 NIBIRU引擎概述 175
7.1 NIBIRU引擎简介 175
7.2 NIBIRU引擎编辑器 175
7.2.1 菜单栏 176
7.2.2 资源窗口 176
7.2.3 场景编辑窗口 177
7.2.4 控件窗口 177
7.2.5 场景管理窗口 177
7.2.6 属性窗口 178
7.2.7 视图导航及工具栏 179
7.2.8 快捷键定义 182
7.2.9 外部资源的导入 182
7.3 编辑器内置控件 183
7.3.1 添加内置控件到场景 183
7.3.2 添加内置组件到对象 183
7.3.3 自定义组件 184
7.4 NIBIRU引擎脚本系统 185
7.4.1 代码开发环境的配置 185
7.4.2 了解面向组件开发 186
7.4.3 创建自定义脚本组件 187
7.4.4 事件函数的执行顺序 189
7.4.5 项目目录结构说明 194
7.4.6 脚本序列化 195
7.4.7 脚本反射 196
7.5 NIBIRU引擎基本模块 200
7.5.1 基本对象 200
7.5.2 对象管理器 201
7.5.3 变换组件 202
7.6 NIBIRU引擎组件 202
7.6.1 模型组件 202
7.6.2 摄像机组件 204
7.6.3 粒子系统 204
7.6.4 UI系统组件 208
7.6.5 物理系统组件 215
7.6.6 灯光组件 217
7.6.7 音效组件 218
7.6.8 网络组件 219
7.6.9 JSON解析组件 219
7.7 NIBIRU引擎系统模块 219
7.7.1 事件系统 219
7.7.2 资源系统 226
7.7.3 时间管理系统 228
7.7.4 场景管理系统 229
7.7.5 图像系统 229
7.7.6 数据持久化 229
7.7.7 自定义材质系统 230
7.8 本章小结 234
第8章 NIBIRU引擎应用开发实战 235
8.1 NIBIRU引擎开发环境搭建 235
8.2 NIBIRU引擎应用开发案例——XR Launcher 235
8.2.1 创建项目工程 235
8.2.2 项目使用的资源导入 235
8.2.3 Launcher界面布局 236
8.2.4 创建AppManager脚本组件 242
8.2.5 编写AppManager组件功能 242
8.2.6 应用打包 256
8.3 本章小结 257
第9章 OpenHarmony虚实融合交互——融智OS 258
9.1 融智OS框架概述 258
9.1.1 融智OS框架 258
9.1.2 融智OS组件 259
9.2 融智OS功能特性 261
9.2.1 系统低延迟渲染特性 261
9.2.2 系统高性能调度特性 267
9.2.3 光学预处理特性 269
9.2.4 头部姿态跟踪交互特性 272
9.2.5 空间多窗口交互特性 274
9.2.6 虚实融合交互特性 276
9.3 融智OS的虚实融合渲染 281
9.3.1 融智OS的虚实融合渲染框架 281
9.3.2 融智OS的虚实融合渲染工作流 284
9.4 本章小结 285
第10章 融智OS应用开发 286
10.1 OpenHarmony Native开发 286
10.1.1 Native API应用工程创建 286
10.1.2 Native API开发流程 288
10.2 XComponent整合OpenGL开发 292
10.2.1 XComponent基本使用 292
10.2.2 OpenGL使用C++绘制图形 294
10.3 基于NIBIRU引擎的开发 300
10.3.1 NIBIRU引擎在OpenHarmony中的相关API介绍 300
10.3.2 NIBIRU引擎在OpenHarmony中的开发调试介绍 303
10.4 本章小结 305
第11章 趋势与展望 306