强化学习作为机器学习及人工智能领域的一种重要方法，在游戏、自动驾驶、机器人路线规划等领域得到了广泛的应用。 本书结合了李宏毅老师的“深度强化学习”、周博磊老师的“强化学习纲要”、李科浇老师的“世界冠军带你从零实践强化学习”公开课的精华内容，在理论严谨的基础上深入浅出地介绍马尔可夫决策过程、蒙特卡洛方法、时序差分方法、Sarsa、Q学习等传统强化学习算法，以及策略梯度、近端策略优化、深度Q网络、深度确定性策略梯度等常见深度强化学习算法的基本概念和方法，并以大量生动有趣的例子帮助读者理解强化学习问

如何即时、有效地应对不断变化的、复杂的需求和状况，是VUCA时代企业所面临的一项挑战。敏捷项目管理方法正在成为企业应对这个时代的有效工具，它不仅仅适用于软件和互联网行业，其他行业在产品开发中同样需要应用敏捷的思想和方法。 《敏捷项目管理（第3版）》将Scrum作为基本框架，对精益和极限编程等方法加以整合，重点阐述了敏捷产品开发方法在制定产品愿景，创建产品路线图，管理范围、采购、时间、成本、质量、风险，预测进度，快速开发及发布产品，创造敏捷环境，以及领导敏捷转型过程中的实践应用。另外，本书反映了近

本书共7章，首先通过对建筑能耗和建筑清洁供暖进行简要介绍讨论了蓄热技术在清洁供暖中的重要性，随后详细介绍了跨季节蓄热技术、BTES系统单井蓄热体建模方法与性能分析、BTES系统影响因素及敏感性分析方法、BTES系统井群模型及性能特性，列举了BTES供热系统典型应用实例，最后展望并介绍了新型BTES技术。本书具有较强的专业性和先进性，可供从事储能、跨季节储热、清洁供暖、可再生能源利用、余热废热回收利用、建筑节能、暖通等相关行业的工程设计人员参考，也可供高等学校环境、暖通、能源、建筑等专业相关师生参

如何快速成为Office办公高手？如何快速掌握思维导图的制作技巧？如何用你的演示文稿征服你的上司和客户？做出来的办公文档如何能一次性达到领导要求？本书从“案例线＋技能线”两条线，帮助读者快速从入门到精通成为办公高手！同时，每个案例都录制了教学视频，供读者直观学习和参考！案例线，本书主要由11大专题内容组成，从企业各项工作入手，包括办公、行政、设计、人事、薪资、销售、营销、宣传、培训、规划及复盘等内容。技能线，本书安排了33个经典常用的企业管理案例进行讲解，内容涉及Word/Excel/PPT/思

本书从强化学习的基础知识出发，结合PyTorch深度学习框架，介绍深度强化学习算法各种模型的相关算法原理和基于PyTorch的代码实现。作为一本介绍深度强化学习知识的相关图书，本书介绍了常用的强化学习环境，基于价值网络的强化学习算法和基于策略梯度的强化学习算法，以及一些常用的比较流行的深度强化学习算法（如蒙特卡洛树搜索）等。另外，还介绍了深度强化学习算法在实际问题中的一些应用。

这是一本注重思维引导与方法实践的游戏界面设计教程。专门介绍有关游戏UI设计方面的内容，循序渐进地讲解游戏行业现状、基本功的训练、图标的绘制、界面的绘制等内容。本书是一本讲解游戏UI设计方法与案例应用解析方面的书籍，作者循序渐进地讲解游戏UI设计的基础知识、图标的绘制、界面的绘制等内容。书中全面介绍了游戏UI设计方法，涵盖游戏界面设计的基础知识、设计规范、设计流程、游戏图标设计的基础知识与方法、游戏界面的设计制作和游戏附加功能等内容。本书对游戏界面设计的流程，游戏界面设计的视觉规范，游戏界面设计师

本书通过一个奇幻故事的外壳讲解React开发必备的核心思维模型，即如何用React的独特方式思考和解决问题。故事主角用脑机进入“Web宇宙”，登陆“React星”。通过体验各种离奇见闻，由浅入深地介绍React开发的核心知识点，例如声明式和响应式编程、不可变约定、单向数据流、组件组合的运用、组件渲染特性、Hook的基本原理和常见模式、组件构架设计和State管理，等等。“让读者在娱乐中学习”，这是作者的初衷。为了帮助读者理解和记忆，本书为每一个思维模型都配备了生动有趣的故事桥段和漫画插图。本书强

本书分为10章。第1章，主要介绍负载均衡技术的背景、发展历史、现状、原理和不同产品。第2章～第5章，主要介绍四层负载均衡和七层负载均衡的工作原理、功能应用和实现方式，以及负载均衡技术在云计算、微服务领域中的应用。第6章～第8章，主要从协议和实现两个层面，深入介绍负载均衡的性能优化和安全设计，并详细介绍基于DPDK技术的高性能并发网关DPVS的设计与实现。第9章，结合负载均衡技术在爱奇艺的落地实践，主要介绍负载均衡服务的部署方法、监控告警、故障处理、性能分析等实例，以及负载均衡技术在云计算、边缘计

业务架构是跨系统的业务蓝图，应用架构、数据架构、技术架构是解决方案的不同方面。多年来，业界已在业务架构、应用架构、数据架构、技术架构方面积累了大量经验。近几年，数字化转型更是呼唤“懂行人”打通四种架构，确保技术支撑业务、业务支撑战略。本书的主要内容即在于此。首先，解读战略、业务架构、应用架构、数据架构、技术架构五者的对应岗位、产物、脉络关系。然后，结合大案例，详探下列实战法：战略驱动的业务架构设计；业务驱动的应用架构设计；业务驱动的数据架构设计；业务和技术趋势双轮驱动的技术架构设计。再后，分享业

本书通过实际案例深入介绍了基于Python的开源商业智能工具ApacheSuperset。本书立足于为企业建立一套开源免费的BI（商业智能）数据分析平台，实现自助数据处理、数据分析、数据可视化，概述了该系统的基本情况、总体需求、解决方案和业务理解等。本书从企业BI系统建设的实际需求出发，详细阐述了商业智能系统开发的概念、流程及相关技术，同时结合实际案例介绍了基于ApacheSuperset的最新且常用的商业智能技术，包括Redis、Hive、Presto、Vertica、ClickHouse、T