醉染图书OPENSTACK架构分析与实践9787113249632

章 走进OpenStack1.1 OpenStack是什么 11.1.1 OpenStack的作用 11.1.2 OpenStack的应用场景 21.1.3 什么类型的工作要学OpenStack 31.2 为什么要学习OpenStack 31.2.1 OpenStack在云计算中的地位 31.2.2 云计算新时代：容器vs虚拟化 41.3 如何学习OpenStack 41.3.1 对学习者的技术要求 41.3.2 OpenStack的学习路线 41.4 OpenStack的基本架构 51.5 OpenStack的核心组件 71.5.1 计算资源管理：Nova组件 71.5.2 存储资源管理：Cinder/Swift组件 81.5.3 网络资源管理：Neutron组件 9第2章 OpenStack部署与社区贡献流程2.1 OpenStack部署方式 122.1.1 DevStack方式部署 132.1.2 手动部署分布式OpenStack环境 182.1.3 RDO方式部署OpenStack 222.2 为OpenStack社区作贡献 252.2.1 提交前的环境准备 262.2.2 代码贡献流程 28【示例2-1】代码贡献流程之bug Fix 282.. 文档贡献流程 30【示例2-2】以heat为例来演示HTML的生成过程 312.2.4 内容的贡献流程 32. 开发工具之Pycharm 33..1 Pycharm的安装与配置 33..2 使用Pycharm对代码进行远程调试 34【示例-】通过Pycharm调试OpenStack中nova list的代码 34.. Pycharm与PDB的选用比较 35【示例2-4】开发工具之PDB断点调试 35第3章 虚拟化3.1 虚拟化技术的现状 373.2 KVM的管理工具Libvirt 383.2.1 Libvirt简介 38【示例3-1】通过Libvirt提供的API virsh对虚拟机生命周期实现管理 393.2.2 Libvirt的体系结构 403.3 OpenStack与虚拟化的结合 4.4 虚拟机配置libvirt.xml详解 45第4章 OpenStack通用技术4.1 RPC服务实现分析 49【示例4-1】在OpenStack RPC中创建Server并实现Client向Server发送请求（以rpc、calll为例） 534.2 消息队列服务分析 544.2.1 透彻理解中间件RabbitM 【示例4-2】通过“Hello World”演示如何RabbitM的消息收发过程 554.2.2 RabbitM实现RPC通信 58【示例4-3】RabbitM之RPC通信案例 584.3 RESTful API开发框架 644.3.1 灵活但不易用：基于Pastedeploy和Routes的API框架 65【示例4-4】通过nova list获取虚拟机的命令，根据Nova的api-paste.ini来说明是如何路由的 684.3.2 基于Pecan的API框架 694.4 TaskFlow的实现 724.4.1 TaskFlow常见使用场景 724.4.2 TaskFlow中必须理解的重要概念 734.4.3 TaskFlow具体实现 74【示例4-5】TaskFlow仔细看，重实践得体感 74【示例4-6】TaskFlow功能多，长流程特别火 764.5 基于Eventlet的多线程技术 784.5.1 进程、线程与协程 784.5.2 Eventlet依赖的两个库：greenlet和select.epoll 79【示例4-7】greenlet库应用之协程切换 794.5.3 创建协程的常用API 804.5.4 定时和监听：Hub 814.5.5 Eventlet中的并发机制 83第5章 Nova—计算组件5.1 Nova架构 845.1.1 Nova基本架构及服务组成 855.1.2 Nova内部服务间的通信机制 865.1.3 Nova内部服务间协同工作 885.2 nova-api服务 895.2.1 nova-api服务的作用 895.2.2 nova-api服务的启动流程 915.3 nova-scheduler服务 955.3.1 基本原理及代码结构 965.3.2 调度过程 975.3.3 配置分析 1005.4 nova-compute服务 1015.4.1 nova-compute服务的作用 1015.4.2 nova-compute服务的启动流程 1035.4.3 nova-compute服务的日志分析 1055.5 周期任务的实现 1065.5.1 什么是周期任务 1075.5.2 周期任务的代码 1085.6 资源及服务刷新机制 1115.6.1 服务上报机制 1115.6.2 主机资源刷新机制 1125.7 典型流程分析 1175.7.1 nova-scheduler服务的启动流程 1175.7.2 虚拟机创建的流程 1205.8 案例实战—Nova以Ceph作为后端存储 122第6章 Neutron—网络组件6.1 Neutron的发展历程 1266.2 网络基础 1276.2.1 网络的基本概念 1276.2.2 常用的网络设备 1316.. 虚拟网络技术 1316.2.4 Neutron网络的基本概念 1336.3 Neutron核心架构 1356.3.1 Neutron部署结构 1356.3.2 Neutron组成部件 1366.3.3 ML2 Core Plugin 1386.3.4 DHCP服务 1416.3.5 路由服务 1426.3.6 元数据服务 1446.3.8 Neutron使用示例 1476.4 不错服务（Advanced Services） 1496.4.1 Load Balancer as a Service（LBaaS） 1496.4.2 Firewall as a Service（FWaaS） 1536.4.3 VPN as a Service（VPNaaS） 1556.5 典型网络模型分析 1566.5.1 Linux Bridge + Flat/VLAN网络模型 1566.5.2 Open vSwitch LAN网络模型 1616.5.3 小结 171第7章 Heat—服务编排组件7.1 Heat架构分析 1727.1.1 Heat组件的基本架构 1737.1.2 Heat对资源的管理 1757.1.3 认识HOT模板 1777.1.4 小实例：通过HOT模板创建虚拟机 1807.2 Heat中的锁机制 1827.3 Heat中的Hook机制 184【示例7-1】在通过Heat进行资源定义时，应该如何使用Hook（钩子） 185【示例7-2】通过Heat创建一个Stack，在创建Stack时，需要通过Environment来定义Hook（钩子） 1867.4 案例实战—Heat典型案例 1897.4.1 通过Heat模板创建Stack 1897.4.2 Heat Stack创建流程 195第8章 Keystone—认组8.1 Keystone的架构 1988.1.1 Keystone的作用 1998.1.2 Keystone与组件间的关系 2018.1.3 基本架构解析 2038.1.4 自定义Keystone Plugin 2058.1.5 支持使用External Plugin 2068.2 Keystone中的基本概念 2078.2.1 API V2和API V3 2078.2.2 常见概念 2088.. 多区域multi-region 2098.3 Keystone的安装部署与基本操作 2118.3.1 Keystone的安装部署 2118.3.2 Keystone基本操作 212【示例8-1】使用OpenStack user create创建一个名为test的用户 2128.4 Keystone的认流程 2158.4.1 认方式 215【示例8-2】以查看虚拟机列表为例，使用X-Auth-Token构造一个合法的HTTP请求 2158.4.2 令牌生成方式 2168.4.3 Keystone工作流程 220第9章 Cinder—块存储组件9.1 Cinder架构分析 2229.2 Cinder的安装 2259.2.1 安装与配置存储节点 2259.2.2 安装与配置控制节点 2279.. 安装与配置Backup服务 1.2.4 安装正确验及Cinder基本操作 2.2.5 Cinder配置存储后端 4【示例9-1】LVM作为Cinder的后端存储 4.3 案例实战—通过Heat模板创建Cinder Volume 5.4 Cinder API服务启动过程分析 9.4.1 cinder-api代码目录结构 .4.2 cinder-api服务启动流程 2409.4.3 REST请求的路由 2429.5 案例实战—关键代码分析 2459.5.1 Volume创建示例 2459.5.2 代码分析之cinder-api接收请求 2479.5.3 代码分析之cinder-scheduler进行资源调度 2499.5.4 代码分析之cinder-volume调用Driver创建Volume 2510章 Ceilometer—数据采集组件10.1 Ceilometer架构分析 25410.1.1 Ceilometer中的基本概念 25510.1.2 旧版Ceilometer架构 25610.1.3 新版Ceilometer架构 25810.2 数据处理 26010.2.1 Notification Agents数据收集 26110.2.2 Polling Agents数据收集 26210.. 数据转换与发布 26310.3 Pipelines 26510.4 计量项 26710.5 Agent和Plugin 26910.5.1 Polling Agents 27010.5.2 Plugins 27210.6 案例实战—Heat与Ceilometer结合，搭建一个弹伸缩系统 27410.6.1 系统介绍 27410.6.2 准备模板 27510.6.3 创建系统 2771章 Glance—镜像组件11.1 Glance架构分析 27911.2 状态分析 28011.3 代码结构与概念分析 28111.3.1 Metadata定义 28311.3.2 Domain模型 285【示例11-1】自定义Gateway方法 28511.3.3 Task定义 28711.4 Glance的安装与配置 28711.4.1 Glance安装部署 28811.4.2 Glance基本配置 292【示例11-2】修改Glance后端存储为RBD 29211.5 镜像缓存 29311.6 案例实战—Glance常见场景之镜像创建 2942章 智能运维Vitrage—RCA组件12.1 Vitrage架构 29712.1.1 High Level架构设计 29812.1.2 Low Level架构设计 30012.2 Vitrage安装部署 30112.2.1 手动方式安装部署Vitrage 30112.2.2 通过DevStack安装Vitrage 3031. Vitrage 模板 3041..1 Templates（模板）的结构 304【示例12-1】Host处于ERROR状态时，触发告警的模板 3051..2 模板的加载过程 3061.. 添加自定义模板 30712.4 Vitrage Evaluator 31012.5 自定义Datasources 31212.6 案例实战—Vitrage中的告警解决方案 3143章 OpenStack组件及智能运维方案13.1 Mistral—工作流组件 31713.1.1 Mistral应用场景 31813.1.2 Mistral中的重要概念 31813.1.3 Mistral功能介绍 32013.1.4 Mistral架构分析 32213.1.5 Mistral实战应用 322【示例13-1】为Mistral添加用户自定义Action 322【示例13-2】通过Mistral获取虚拟机数据 31.2 OpenStack智能运维解决方案 32613.2.1 可视化的Dynatrace 32713.2.2 VirtTool Networks 32713.. 智能运维Vitrage 3294章 OpenStack应用实战：自动编排和配置高可用Redis系统14.1 利用cloud-init配置虚拟机 33214.1.1 cloud-init的安装与配置 33314.1.2 cloud-init对VM进行配置 338【示例14-1】通过cloud-init配置虚拟机 34114.1.3 cloud-init调试过程与问题分析 34314.2 Redis数据库的HA实现及Redis集群的创建 34714.2.1 Redis HA方案实现 34714.2.2 Redis Cluster集群实现 3585章 OpenStack架构与代码实践15.1 OpenStack架构设计思路 36615.1.1 业务架构设计思路 36615.1.2 部署架构设计思路 36815.1.3 平台用户角色设计 36915.2 案例实战—向Heat中添加自定义资源 37015.2.1 实现原理及思路分析 37015.2.2 向Heat中添加Zabbix资源 37115.. 定义Zabbix Action 37315.2.4 实现AutoScaling模板 37515.2.5 资源查看 377

管增辉 中国海洋大学硕士，曾先后在Alcatel-Lucent和金山云工作，现在供职于。拥有丰富的IMS核心网和云计算设计开发经验，对云计算解决方案及AIOps拥有独到见解，专注于云计算、容器及AIOps相关领域。热衷开源，先后参与过MIT MOOS-IvP项目和OpenStack项目的开发。具有丰富的云平台及K8S平台开发经验，设计开发了电信级云存储平台、嵌套虚拟化云平台、云平台可视化资源管理、云平台计算服务垃圾资源回收机制、云平台智能运维系统、基于K8S的SaaS平台及轻量PaaS平台。除此之外，对于云平台的资源编排服务、弹伸缩、负载均衡服务也有丰富的经验。现在主要负责阿里云SaaS平台和PaaS平台的设计与开发。 曾凡浪中南大学学士，曾先后在艺龙旅行网和联想北京研究院担任系统开发和不错研究员，目前就职于神州优车集团总部。有多年的OpenStack和Kubernetes构建、开发经验，专注于云计算相关领域。参与过多套私有云平台的方案调研、技术选型和部署实施，以及OpenStack深度定制，OpenStack、Kubernetes、Ceph集中管理平台，统一认授权系统等项目开发工作。

本书缘起仿就在一夜之间，云计算火了，一跃成为业内很受关注的热点话题之一。如果读者关注互联网圈子的话，应该听说过早在2011年时，国内大大小小的公司就瞄准了云计算的百万级市场，也就是从那时起，云计算成了互联网上毫无疑问的又一大风口。2018年新年伊始，小米就与微软达成了云计算合作意向，进一步深化战略合作伙伴关系，以微软在云计算、人工智能等域的进技术实力，与小米在多样化的移动、智设备服务领域的市场优势相结合，共同致力于打造更加优质的产品和服务，并全力推小米产品进军国际市场。通信巨头华为更是把云计算作为2018年的重点投入领域，并着力发展其公有云和私有云业务。AWS推出的无服务器计算功能，从另一个方面力于云计算的发展。无服务器计算，意味着开发人员不再需要担心设置或管理服务器。相反，他们可以将代码上传到云上运行。万物互联的物联网（IOT）时代，更是要求云计算为基础设施层提供更强大的能力和更加丰富的功能。从移动互联网向IoT的迅速转变会对基础设施带来新一轮的挑战。这个挑战表现在几个层面：个是敏捷，第二个是成本，第三个是复杂。以上三个层面的问题可以通过云平台轻松得以解决。诸如此类，我们这里就不一一列举了，但云计算的火爆程度，已然可见一斑。OpenStack作为云计算领域大的开源项目，结构复杂、内容繁多，官网上给出的参考资料不足以让初学者达到快速入门的目的；目前图书市场上关于OpenStack的图书不少，但写作水平参差不齐，大部分书籍都是基于较低版本的OpenStack进行写作的，内容上略显陈旧，相较于OpenStack每年发布两个新版本的速度而言，不足以让读者全面细致地了解OpenStack的新功能和它所采用的前沿技术。除此之外，OpenStack对其中的一些组件做了较大的变动，如果不是专业的开发及架构人员，很难全面把握应用与实践的方向。考虑到以上因素，本书基于官方资料及个人相关从业经验，立足架构、着眼开发、兼顾实践，包含系统的OpenStack架构原理与云平台实践方法，全面提高读者的OpenStack实战能力。本书特色尽管云计算引入我国不过七八年时间，但在这短短的时间里，其相关的教学和科研成果层出不穷，与云计算相关的书籍可谓是“百花齐放，百家争鸣”，因此，读者在学习云计算时，可供选择的参考资料更多了、可以研习的材料也更多了，在众多的选择中，却让人感到有些无所适从。观察目前市面上的云计算书籍，大部分教材注重原理介绍和理论阐述，在很大程度上忽略了相关知识的应用与实现，作为典型的理工类书籍，脱离实战讲理论，对于初学者而言，难免枯燥与晦涩，对于具备一定经验的而言，这样的书籍又显得毫无营养可言。本书力求避其短而扬其长，以典型模块、典型案例为研究与讲解对象，将理论及原理介绍与实战相结合，巧妙地将大量实战经验与原理介绍融入到本书的每一个章节，大限度地提高本书的含金量，以给读者奉上一顿云计算的营养大餐。笔者一直本着重点突出、结合实战、求同存异的思想努力将本书写好。总体上而言，本书的主要特色有以下三点：1．深入浅出、通俗易懂注意从实际生产中择取典型问题，针对关键模块本着“模块分析，架构先行”的理念进行重点分析，配备典型实战案例，引导读者一步一步学习，以期达到“学中做，做中学”的学习效果。2．问题典型、案例经典始终本着“关键问题，重点分析”的宗旨，本书介绍的基本理论知识，都是使用贴近生活场景的实例来引导的，这样就避免了知识讲述过于抽象，易于理解。通过对典型问题的分析和经典案例的讲解，增加了本书的趣味和实效，以期达到“理论联系实际”的佳效果。3．道法自然、内外兼修笔者在过去的工作当中，累积了大量生产实践经验，可以帮学有所长的读者快速进入到一个实际操作的场景中进一步提高自己的实操能力，从而使得学习之路变得不那么坎坷。4．基于OpenStack较新版本进行写作，技术实效强本书基于Ocata版本（个别章节会涉及P版本的内容），从技术新颖度与成熟度而言，都极具参考。P版本的OpenStack新能的添加并不是很多，更多的是针对OpenStack易用的改进；而新版本版本中尚有许多不足之处，并且生产实践中部署比较少。5．描述清晰，讲解透彻书中尽量避免使用大量的文字进行描述，能用图表来说明的地方尽量使用简单明了的图表表示，坚持“一图胜千言”的原则。本书愿景在信息化飞展的今天，由于大量时间的碎片化，学完的东西总感觉不是那么的系统，知识是学到了，但是结构比较零散，遇到实际问题的时候还是会有一种“知之但难用之”的感觉。作为技术类的书籍，本书希望从浅显易懂的知识切入，贯穿实操，做到既能满足大家系统掌握基础知识的，也要能让读者在学习的过程中品尝到新鲜有营养的高规格“饕餮盛宴”。“授之以鱼，不如授之以渔”，看别人写的书只是我们学习的一种途径，我们更希望读者在看完本书的内容后，在实际工作中可以“自行其书”、“不囿于书”，将本书中学到的知识应用到实际问题的解决中去。读其书会其书，是为法；学习其书用其书，是为道。这是我们对每一位读者的期望，更是本书的真诚愿景。赠君云梯万丈高楼平地起，层层都会设楼梯。本书考虑到不同层次的读者水平，在内容组织方面也是有所考虑，目的是让每一位“小白”都能一步一个台阶的登堂入室，踏实地迈向OpenStack高手的云中楼阁。云中楼阁梯：成为圈中人。技术是开放的，开源的技术更是如此，谈开源但又不迈入开源，那么只能是门外汉；开篇向大家介绍了如何更好更快地加入到OpenStack的开源社区中。云中楼阁第二梯：云中拾零。武侠中我们经常会看到这样一幕：一位武林高手使出“大招”后，可以瞬间定胜负。这个“大招”其实并非简单的一招一式，而是经过马步、梅花桩等小技巧的点滴修炼共集而成。OpenStack就像是这个“大招”，它是一个庞大的系统，但是无论系统多么的庞大，它也总是由一个个小的“部分”组成，在这里我们称之为服务或组件。这里的“云中拾零”，拾的就是这些零零散散的组件，各个组件各个击破。云中楼阁第三梯：云中舞剑。本书的学习过程中，我们会嵌入有许许多多的实践示例，意在让大家能够理论实践相结合，在实践中领略个中乐趣的同时，还能将知识学扎实了。云中楼阁高梯：云中望月。我们期望读者在学完本书后，能在脑海中形成一幅相关OpenStack架构和实践的云天大图，在实践中游刃有余。学习建议书中个别章节相对独立，目的在于顾及不同读者需求的同时，但又不失系统化。章节为入门章节，主要介绍如何“入门”社区。后续章节是分别对OpenStack中不同的模块进行讲解，理论讲解的同时还有实操。● 如果您具有一定的开发经验又对开源有过切身经历，那么章节可以略过，直接开始正文的学习。● 如果你对OpenStack已经轻车熟路，只是想学习了解其中的某一个模块，那么您大可以单刀直入，直接进入到您感兴趣的章节。● 如果您是一名初学者，建议您从章节开始就仔细研读所有的知识点，这对后续的学习重要。二维码下载包● 书中源代码● OpenStack Super User本书读者● IT部门首席信息官（CIO）● 企业首席技术官（CTO）● 云计算基础设施建设者● IT主管● IT技术● 互联网公司员工● 网络运维人员除以上关键人员，教育机构的师生通过阅读本书，可以很好地建构自己的云计算知识体系。总之，每位读者都能从中获益，至少对云计算不再“云里雾里”了。编者2018年5月