⑨OpenStack高可用集群部署方案—CentOS8安装与配置Ceph集群

⑨OpenStack高可用集群部署方案—CentOS8安装与配

置Ceph集群

CentOS8安装与配置Ceph Octopus版

1. Ceph介绍

1.1 为什么要用Ceph

Ceph是当前非常流行的开源分布式存储系统，具有高扩展性、高性能、高可靠性

等优点，同时提供块存储服务(rbd)、对象存储服务(rgw)以及文件系统存储服务(cephfs)，Ceph在存储的时候充分利用存储节点的计算能力，在存储每一个数据时都会通过计算得出该数据的位置，尽量的分布均衡。目前也是OpenStack的主流

后端存储，随着OpenStack在云计算领域的广泛使用，ceph也变得更加炙手可热。国内目前使用ceph搭建分布式存储系统较为成功的企业有x-sky,深圳元核云，上

海UCloud等三家企业。

分布式存

储Ceph GFS HDFS Swift Lustre

平台属性开源闭源开源开源开源

系统架构去中心化架构中心化架构中心化架构去中心化

架构

中心化架构

数据存储

方式

块、文件对象文件文件对象文件

元数据节

点数量

多个1个1个(主备) 多个1个

数据冗余多副本/纠删

码多副本/纠

删码

多副本/纠

删码

多副本/纠

删码

无

数据一致

性

强一致性最终一致性过程一致性弱一致性无

分块大小4MB 64MB 128MB 视对象大

小

1MB

适用场景频繁读写场景

/IaaS 大文件连续

读写

大数据场景云的对象

存储

大型集群/

超算

1.2 Ceph架构介绍

Ceph使用RADOS提供对象存储，通过librados封装库提供多种存储方式的文件和对象转换。外层通过RGW（Object，有原生的API，而且也兼容Swift和S3的API，适合单客户端使用）、RBD（Block，支持精简配

置、快照、克隆，适合多客户端有目录结构）、CephFS（File，Posix接

口，支持快照，社会和更新变动少的数据，没有目录结构不能直接打开）

将数据写入存储。

•高性能 a. 摒弃了传统的集中式存储元数据寻址的方案，采用CRUSH算法，数据分布均衡，并行度高 b.考虑了容灾域的隔离，能够实现各类负载的副本放置规则，例如跨机房、机架感知等 c. 能够支持上千个存储节点的规模，

支持TB到PB级的数据

•高可扩展性 a. 去中心化 b. 扩展灵活 c. 随着节点增加而线性增长

•特性丰富 a. 支持三种存储接口：块存储、文件存储、对象存储 b. 支持自定义接口，支持多种语言驱动

目前来说，ceph在开源社区还是比较热门的，但是更多的是应用于云计算的后端存储。官方推荐使用ceph的对象式存储，速度和效率都比较高，而cephfs官方并不推荐直接在生产中使用。以上介绍的只是ceph的沧海一粟，ceph远比上面介绍的要复杂，而且支持很多特性，比如使用纠删码就行寻址，所以大多数在生产环境中使用ceph的公司都会有专门的团队对ceph进行二次开发，ceph的运维难度也比较大。但是经过合理的优化之后，ceph的性能和稳定性都是值得期待的。

1.3 Ceph核心概念

==RADOS==

全称Reliable Autonomic Distributed Object Store，即可靠的、自动化的、分布式对象存储系统。RADOS是Ceph集群的精华，用户实现数据分配、Failover等集群操作。

==Librados==

Rados提供库，因为RADOS是协议很难直接访问，因此上层的RBD、RGW和CephFS都是通过librados访问的，目前提供PHP、Ruby、Java、Python、C和

C++支持。

==Crush==

Crush算法是Ceph的两大创新之一，通过Crush算法的寻址操作，Ceph得以摒弃了传统的集中式存储元数据寻址方案。而Crush算法在一致性哈希基础上很好的考虑了容灾域的隔离，使得Ceph能够实现各类负载的副本放置规则，例如跨机房、机架感知等。同时，Crush算法有相当强大的扩展性，理论上可以支持数千个存储节点，这为Ceph在大规模云环境中的应用提供了先天的便利。

==Pool==

Pool是存储对象的逻辑分区，它规定了数据冗余的类型和对应的副本分布策略，默认存储3份副本；支持两种类型：副本（replicated）和纠删码（ Erasure Code）；

==PG==

PG（ placement group）是一个放置策略组，它是对象的集合，该集合里的所有对

象都具有相同的放置策略，简单点说就是相同PG内的对象都会放到相同的硬盘上，PG是 ceph的逻辑概念，服务端数据均衡和恢复的最小粒度就是PG，一个PG包

含多个OSD。引入PG这一层其实是为了更好的分配数据和定位数据；

==Object==

简单来说块存储读写快，不利于共享，文件存储读写慢，利于共享。能否弄一个读写快，利于共享的出来呢。于是就有了对象存储。最底层的存储单元，包含元数据和原始数据。

1.4 Ceph核心组件

OSD

是负责物理存储的进程，一般配置成和磁盘一一对应，一块磁盘启动一个OSD进程。主要功能是存储数据、复制数据、平衡数据、恢复数据，以及与其它OSD间

进行心跳检查，负责响应客户端请求返回具体数据的进程等；

Pool、PG和OSD的关系：

•一个Pool里有很多PG；

•一个PG里包含一堆对象，一个对象只能属于一个PG；

•PG有主从之分，一个PG分布在不同的OSD上（针对三副本类型）; Monitor

一个Ceph集群需要多个Monitor组成的小集群，它们通过Paxos同步数据，用来

保存OSD的元数据。负责监视整个Ceph集群运行的Map视图（如OSD Map、Monitor Map、PG Map和CRUSH Map），维护集群的健康状态，维护展示集群状

态的各种图表，管理集群客户端认证与授权；生产中建议最少要用3个Monitor，

基数个的Monitor组成组件来做高可用。

MDS

MDS全称Ceph Metadata Server，是CephFS服务依赖的元数据服务。负责保存文

件系统的元数据，管理目录结构。对象存储和块设备存储不需要元数据服务；

Mgr

ceph 官方开发了 ceph-mgr，主要目标实现 ceph 集群的管理，为外界提供统一的

入口。例如cephmetrics、zabbix、calamari、promethus

RGW

RGW全称RADOS gateway，是Ceph对外提供的对象存储服务，接口与S3和Swift兼容。

Admin

Ceph常用管理接口通常都是命令行工具，如rados、ceph、rbd等命令，另外Ceph还有可以有一个专用的管理节点，在此节点上面部署专用的管理工具来实现近乎集群的一些管理工作，如集群部署，集群组件管理等。

1.5 Ceph三种存储类型

块存储（RBD）

优点：

•通过Raid与LVM等手段，对数据提供了保护；

•多块廉价的硬盘组合起来，提高容量；

•多块磁盘组合出来的逻辑盘，提升读写效率；

缺点：

•采用SAN架构组网时，光纤交换机，造价成本高；

•主机之间无法共享数据；

使用场景

•docker容器、虚拟机磁盘存储分配；

•日志存储；

•文件存储；

如果满足以下所有条件，则认为存储设备可用

•硬盘设备必须没有分区。

•设备不得具有任何LVM状态。

•不得安装设备。

•该设备不得包含文件系统。

•该设备不得包含Ceph BlueStore OSD。

•设备必须大于5 GB。

注意：Ceph拒绝在不可用的设备上配置OSD；也就是说配置OSD时，要保证挂载的硬盘设备是没有分区过的空盘

文件存储（CephFS）

优点：

•造价低，随便一台机器就可以了；

•方便文件共享；

缺点：

•读写速率低；

•传输速率慢；

使用场景

•日志存储；

•FTP、NFS；

•其它有目录结构的文件存储

对象存储（Object）

适合更新变动较少的数据

优点：

•具备块存储的读写高速；

•具备文件存储的共享等特性；

使用场景

•图片存储；

•视频存储；

2. 安装与配置

2.1 环境介绍

IP地址配置主机名Ceph版本

10.15.253.161 c2m8h300 cephnode01 Octopus 15.2.4

10.15.253.193 c2m8h300 cephnode02 Octopus 15.2.4

10.15.253.225 c2m8h300 cephnode03 Octopus 15.2.4

2.1.1 Ceph安装与版本选择

ceph-deploy 是用于快速部署群集的工具；社区不再积极维护ceph-deploy。仅支持Nautilus版之前的Ceph版本上进行。它不支持RHEL8，CentOS 8或更新的操作系统。

这里的系统环境是centos8系统，所以需要使用cephadm部署工具部署octopus 版的ceph

2.1.2 基础环境准备

全部Ceph节点上操作；以cephnode01节点为例；

3. 添加Octopus版yum源

4. cephadm工具部署

•在15版本，支持使用cephadm工具部署，ceph-deploy在14版本前都支持

4.1 拉取最新的cephadm并赋权

在cephnode01节点配置；

4.2 使用cephadm获取octopus最新版本并安装

已手动配置为国内yum源，不需要按官方文档的步骤再进行添加yum源

5. 创建ceph新集群

5.1 指定管理节点

创建一个可以被任何访问Ceph集群的主机访问的网络，指定mon-ip，并将生成的配置文件写进/etc/ceph目录里

可登陆URL: ，首次登陆要修改密码，进行验证

5.2 将ceph命令映射到本地

•Cephadm不需要在主机上安装任何Ceph包。但是，建议启用对ceph命令的简单访问。

•cephadm shell命令在安装了所有Ceph包的容器中启动一个bash shell。默认情况下，如果在主机上的/etc/ceph中找到配置和keyring文件，它们将被传递到容器环境中，这样就可以完全正常工作了。

查看状态

5.4 部署添加 monitor

选择需要设置mon的节点，全选

具体验证是否安装完成，其他两台节点可查看下

6. 部署OSD

6.1 查看可使用的硬盘

6.2 使用所有可用硬盘

添加单块盘的方式

6.3 验证部署情况

7. 存储部署

7.1 CephFS部署

部署cephfs的mds服务，指定集群名及mds的数量

7.2 部署RGW

创建一个领域

创建一个zonegroup区域组

创建一个区域

为特定领域和区域部署一组radosgw守护进程，这里只指定了两个节点开启rgw 验证

为RGW开启dashborad

设置dashboard凭证

重启RGW

3. ceph的监控

1. 安装grafana

部署到cephnode03上；生产环境建议单独分离

2. 安装prometheus

3. mgr、prometheus插件配置

在cephnode01上配置；

4. 配置prometheus

4.1 在scrape_configs:配置项下添加

4.2 重启prometheus服务

systemctl restart prometheus

4.3 检查prometheus服务器中是否添加成功

5.1 浏览器登录 grafana 管理界面

5.2 添加Data Sources

点击configuration--》data sources

添加prometheus

设置prometheus的访问地址

5.3 添加ceph监控模板

ceph的dashboard模板

点击HOME--》Import dashboard, 选择合适的dashboard，记录编号检测成功

⑨OpenStack高可用集群部署方案—CentOS8安装与配置Ceph集群

⑨OpenStack高可用集群部署方案—CentOS8安装与配 置Ceph集群 CentOS8安装与配置Ceph Octopus版 1. Ceph介绍 1.1 为什么要用Ceph Ceph是当前非常流行的开源分布式存储系统，具有高扩展性、高性能、高可靠性 等优点，同时提供块存储服务(rbd)、对象存储服务(rgw)以及文件系统存储服务(cephfs)，Ceph在存储的时候充分利用存储节点的计算能力，在存储每一个数据时都会通过计算得出该数据的位置，尽量的分布均衡。目前也是OpenStack的主流 后端存储，随着OpenStack在云计算领域的广泛使用，ceph也变得更加炙手可热。国内目前使用ceph搭建分布式存储系统较为成功的企业有x-sky,深圳元核云，上 海UCloud等三家企业。 分布式存 储Ceph GFS HDFS Swift Lustre 平台属性开源闭源开源开源开源 系统架构去中心化架构中心化架构中心化架构去中心化 架构 中心化架构 数据存储 方式 块、文件对象文件文件对象文件 元数据节 点数量 多个1个1个(主备) 多个1个 数据冗余多副本/纠删 码多副本/纠 删码 多副本/纠 删码 多副本/纠 删码 无 数据一致 性 强一致性最终一致性过程一致性弱一致性无 分块大小4MB 64MB 128MB 视对象大 小 1MB 适用场景频繁读写场景 /IaaS 大文件连续 读写 大数据场景云的对象 存储 大型集群/ 超算 1.2 Ceph架构介绍 Ceph使用RADOS提供对象存储，通过librados封装库提供多种存储方式的文件和对象转换。外层通过RGW（Object，有原生的API，而且也兼容Swift和S3的API，适合单客户端使用）、RBD（Block，支持精简配

CEPH分布式存储部署

CEPH分布式存储部署 PS：本文的所有操作均在mon节点的主机进行，如有变动另有注释 作者：网络技术部徐志权 日期：2014年2月10日 VERSION 1.0 更新历史： 2014.2.10:首次完成ceph部署文档，块设备及对象存储的配置随后添加。

一、部署前网络规划 1.1 环境部署 主机名公网IP（eth0）私网IP（eth1）操作系统运行服务node1 192.168.100.101 172.16.100.101 CentOS6.5 mon、mds node2 192.168.100.102 172.16.100.102 CentOS6.5 osd node3 192.168.100.103 172.16.100.103 CentOS6.5 osd ◆操作系统使用CentOS6.5，因为系统已经包含xfs的支持可以直接使用不需要再次 编译。 ◆由于CentOS6.5系统的内核为2.6.32，因此要关闭硬盘的写入缓存，若高于此版本 不需要关闭。 #hdparm -W 0 /dev/sdb 0 ◆本次部署一共有一个监控节点、一个元数据节点、两个数据节点，每个数据节点拥 有两个硬盘作为数据盘。 1.2 网络拓扑

1.3 配置服务器、安装ceph ●添加ceph的rpm库key #rpm --import 'https://https://www.wendangku.net/doc/1f19301880.html,/git/?p=ceph.git;a=blob_plain;f=keys/release.asc' #rpm --import 'https://https://www.wendangku.net/doc/1f19301880.html,/git/?p=ceph.git;a=blob_plain;f=keys/autobuild.asc' ●添加ceph-extras库 #vi /etc/yum.repos.d/ceph-extras [ceph-extras] name=Ceph Extras Packages baseurl=https://www.wendangku.net/doc/1f19301880.html,/packages/ceph-extras/rpm/centos6/$basearch enabled=1 priority=2 gpgcheck=1 type=rpm-md gpgkey=https://https://www.wendangku.net/doc/1f19301880.html,/git/?p=ceph.git;a=blob_plain;f=keys/release.asc [ceph-extras-noarch] name=Ceph Extras noarch baseurl=https://www.wendangku.net/doc/1f19301880.html,/packages/ceph-extras/rpm/centos6/noarch enabled=1 priority=2 gpgcheck=1 type=rpm-md gpgkey=https://https://www.wendangku.net/doc/1f19301880.html,/git/?p=ceph.git;a=blob_plain;f=keys/release.asc [ceph-extras-source] name=Ceph Extras Sources baseurl=https://www.wendangku.net/doc/1f19301880.html,/packages/ceph-extras/rpm/centos6/SRPMS enabled=1 priority=2 gpgcheck=1 type=rpm-md gpgkey=https://https://www.wendangku.net/doc/1f19301880.html,/git/?p=ceph.git;a=blob_plain;f=keys/release.asc ●添加ceph库 #rpm -Uvh https://www.wendangku.net/doc/1f19301880.html,/rpms/el6/noarch/ceph-release-1-0.el6.noarch.rpm ●添加epel库 #rpm -Uvh https://www.wendangku.net/doc/1f19301880.html,/pub/epel/6/x86_64/epel-release-6-8.noarch.rpm ●安装ceph #yum update -y && yum install ceph -y

②OpenStack高可用集群部署方案—Keystone

②OpenStack高可用集群部署方案—Keystone 十、Keystone集群部署 Keystone 的主要功能： •管理用户及其权限； •维护 OpenStack 服务的 Endpoint； •Authentication（认证）和 Authorization（鉴权）。 1. 配置keystone数据库 在任意控制节点创建数据库，数据库自动同步，以controller01节点为例； 在全部控制节点安装keystone，以controller01节点为例； 3. 配置Keystone配置文件 要对接有状态服务时都修改为解析过的vip(myvip) 将配置文件拷贝到另外两个节点： scp -rp /etc/keystone/keystone.conf controller02:/etc/keystone/keystone.conf scp -rp /etc/keystone/keystone.conf controller03:/etc/keystone/keystone.conf 4. 同步keystone数据库 4.1 在任意控制节点操作；填充Keystone数据库 4.2 初始化Fernet密钥存储库，无报错即为成功; #在/etc/keystone/生成相关秘钥及目录 keystone-manage fernet_setup --keystone-user keystone --keystone-group keystone keystone-manage credential_setup --keyst one-user keystone --keystone-group keystone #并将初始化的密钥拷贝到其他的控制节点 scp -rp /etc/keystone/fernet-keys /etc/keystone/credential-keys controller 02:/etc/keystone/ scp -rp /etc/keystone/fernet-keys /etc/keystone/credential-key s controller03:/etc/keystone/ #同步后修改另外两台控制节点fernet的权限 chow n -R keystone:keystone /etc/keystone/credential-keys/ chown -R keystone:keyston e /etc/keystone/fernet-keys/ 5. 认证引导 任意控制节点操作；初始化admin用户（管理用户）与密码，3种api端点，服务实体可用区等 注意：这里使用的是VIP

OpenStack高可用集群实施案例

OpenStack高可用集群实施案例

1. 规划与部署 本次分享提炼自我们在某企业部署OpenStack高可用集群的实际案例，初期平台面向公网给部分部门提供虚拟化基础设施，但仍属于私有云。其中我借鉴了以往操作比如oVirt（RHEV）、VMWare、Citrix 等项目的经验。考虑到时间关系，本次内容将以方法为主，减少细节描述。还有本次涉及到的工具多以开源形式呈现，尽量不涉及到产品，以方便大家集成或开发。 架构简图可参考如下，稍后我们会就其中细节进行讲解。两个架构图的区别在于控制节点的高可用方式。

因为客户网络环境复杂，为了节省部署时间与减少返工率，我们需要在去现场之前准备好以下三种安装方式： l PXE LiveCD l 定制系统安装盘 l 安装包与安装脚本 第一种方式即在用户网络环境下使用现场人员笔记本或者客户服务器启动PXE服务，配置好系统架构（服务器MAC地址、网络配置、存储配置、对应的OpenStack模块与角色、定制包、系统微调与优化措施等），然后开始全自动安装，功能与Mirantis类似，但对网络要求低很多。 第二种方式既是采用定制的系统安装盘，里面需要准备尽可能多的存储设备与网络设备的驱动，以尽可能适配客户服务器与实施人员的自带存储设备。 第三种方式作为前两种方式的替补选项，主要是因为某些客户环境中安装非标系统需要走很多流程，我们提前让客户准备好操作系统，再到现场安装。如果给你准备的系统是RHEL、SUSE或者其他标准Linux 系统的倒还好，如果他有情怀地花了一两天给你现编译上了Gentoo甚至给你准备了一台小机，那就没办法了（开玩笑，尚未遇到过这样的客户，在进厂之前要把基本环境沟通清楚）。另外，它也可以作为以上两种安装方式失败后的最佳选项。

服务器集群搭建

服务器集群搭建 在当今互联网时代，服务器扮演着企业信息化建设中至关重要的角色。随着企业业务规模和用户量的不断增长，单一服务器已无法满足大规模的数据存储和处理需求。为此，搭建服务器集群成为了一种常见的解决方案。本文将从硬件选型、网络架构、软件配置等方面进行探讨，帮助读者理解服务器集群的搭建过程。 一、硬件选型 服务器集群的搭建首先要选购适合的硬件设备。在选择服务器时，应根据企业的实际需求和负载量进行合理的估算。其中，主要包括以下几个方面： 1. 处理器：应选择具备较高性能的服务器处理器，例如Intel Xeon 系列或AMD EPYC系列。这些处理器拥有多核心和高频率，能够提供强大的计算能力。 2. 内存：内存是服务器集群运行效能的关键因素。大容量的内存可以提高集群对并发访问请求的处理能力。通常，服务器集群的内存配置应该在每个节点上达到几十GB甚至上百GB。 3. 存储：在服务器集群中，存储设备也非常重要。可以选择硬盘阵列（RAID）或固态硬盘（SSD）来提供高速的数据读写能力，并确保数据的可靠性和冗余性。

4. 网卡：由于服务器集群需要进行高速数据传输，网卡的选择也至 关重要。优先考虑千兆以太网卡或者更高速率的网络接口，以满足集 群内节点之间的快速通信需求。 二、网络架构 服务器集群的网络架构决定了节点之间的通信速度和可靠性。合理 设计网络拓扑能够显著提高集群的性能和稳定性。以下是几种常见的 网络架构方案： 1. 总线架构：最简单的网络架构方式，所有节点连接到一根总线上 进行通信。优点是成本低、易于安装和维护，但是随着节点数量增加，总线的带宽将成为瓶颈，影响集群的性能。 2. 环形架构：每个节点连接到一个环形网络上，通过环路传递消息。环形架构适用于节点数量较少的情况，能够较好地解决总线架构的带 宽问题，提供更高的性能。 3. 星形架构：所有节点都连接到一个中心节点（交换机或路由器），通过中心节点进行数据传输。相比总线和环形架构，星形架构具有更 高的可靠性和扩展性，但需要更多的网络设备和布线工作。 4. 树状架构：在星形架构的基础上，通过交换机之间的互联，形成 多个层次的树状结构。树状架构能够更好地解决集群规模扩大时的带 宽问题，提供更高的处理能力和可靠性。 三、软件配置

openstack 实施方案

openstack 实施方案 OpenStack是一个开源的云计算平台，可以通过提供一系列模块来搭建和管理整个云计算基础架构，包括计算、存储和网络等资源。针对不同的需求，实施OpenStack方案可分为以下几个环节： 1. 架构设计：根据客户需求和现有IT基础设施，设计OpenStack的整体架构。这包括确定所需的计算、存储和网络资源规模，以及安装和配置OpenStack所需的硬件和软件。 2. 硬件选型：根据架构设计，选择合适的硬件设备来构建OpenStack云平台。通常需要考虑服务器的性能、存储容量、网络带宽等因素，以满足用户的需求。 3. 软件部署：基于架构设计和硬件选型，进行OpenStack软件的部署。这包括安装和配置OpenStack的不同模块，如Nova （计算）、Cinder（块存储）、Neutron（网络）、Glance（镜像）、Keystone（认证）等。 4. 网络配置：根据用户的网络需求，进行OpenStack网络的配置。这包括网络拓扑设计、IP地址规划、VLAN配置、安全组规则等。 5. 存储配置：根据客户的存储需求，配置OpenStack存储。这包括选择适当的存储后端，如Ceph、NFS、Swift等，以及配置存储卷、对象存储等。

6. 用户管理：配置和管理OpenStack的用户、角色和权限。这 包括创建和删除用户，设置用户角色和权限，以及管理用户认证和访问控制等。 7. 监控和运维：配置和管理OpenStack平台的监控和运维系统。这包括配置监控工具，如Zabbix、Grafana等，以及设置告警 规则、日志收集和故障排除等。 8. 数据迁移和备份：根据需要，进行数据的迁移和备份。这可以通过OpenStack的API和命令行工具来实现，如使用Cinder 进行卷的备份和迁移，使用Swift进行对象存储的备份和迁移等。 9. 安全和高可用性：配置和管理OpenStack的安全和高可用性 特性。这包括设置防火墙、加密通信、访问控制等安全措施，以及配置和测试高可用性功能，如故障转移和负载均衡等。 10. 培训和支持：为客户提供OpenStack的培训和支持服务。 这包括培训客户的管理员和用户，以及提供技术支持和故障排除等服务。 总之，实施OpenStack方案需要进行架构设计、硬件选型、软 件部署、网络配置、存储配置、用户管理、监控和运维、数据迁移和备份、安全和高可用性、培训和支持等环节。通过合理的规划和执行，可以帮助客户搭建和管理稳定、安全、高可用的云计算平台。

openstack操作手册

openstack操作手册 一、OpenStack简介与架构 1.OpenStack概述 OpenStack是一个开源的云计算平台，它提供了一整套解决方案，用于部署私有云和公有云。OpenStack具有高度可扩展、弹性和易于管理的特点，广泛应用于全球各大企业及政府机构。 2.OpenStack核心组件 OpenStack主要由以下几个核心组件组成： （1）Nova：计算服务组件，负责虚拟机实例的创建、启动、停止和删除等操作。 （2）Glance：镜像服务组件，用于管理虚拟机镜像的创建、存储和分发。 （3）Swift：对象存储服务组件，提供海量、高可用的对象存储服务。 （4）Keystone：认证服务组件，负责OpenStack整个系统的身份认证和权限管理。 二、OpenStack部署与运维 1.部署流程 OpenStack部署主要包括以下步骤： （1）准备环境：包括硬件、网络、操作系统等基础设施。 （2）安装OpenStack：根据官方文档，遵循相应的安装教程。 （3）配置OpenStack：配置各个组件之间的关系，如数据库、消息队列

等。 （4）启动OpenStack：启动各个组件，并确保它们正常运行。 2.运维策略 运维OpenStack时，需要注意以下几点： （1）监控：定期检查系统性能、资源使用情况，确保OpenStack稳定运行。 （2）备份：定期对关键数据进行备份，以防数据丢失或损坏。 （3）安全：确保OpenStack集群的安全性，采取必要的防火墙、加密等措施。 （4）升级：根据OpenStack版本更新计划，及时进行组件升级。 三、OpenStack常用操作教程 1.创建与删除实例 （1）登录OpenStack控制台，进入Nova组件。 （2）选择实例类型、镜像、存储等信息。 （3）确认配置无误后，创建实例。 （4）实例创建完成后，可以登录到虚拟机进行操作。 （5）若需要删除实例，请在Nova组件中进行操作。 2.配置网络与存储 （1）进入Neutron组件，配置虚拟网络、子网和路由器。 （2）在Cinder组件中，创建卷、快照和镜像。 3.管理镜像与快照 （1）在Glance组件中，创建、上传和删除镜像。

openstack部署方案

openstack部署方案 OpenStack是一种开源的云计算平台，可以帮助用户自己搭建私有 云环境。它由一系列的组件组成，包括计算、存储、网络等。在本篇 文章中，我将讨论OpenStack的部署方案，并介绍其中的一些关键问题和考虑因素。 在开始之前，我们需要明确一个问题：为什么要选择OpenStack？ 首先，OpenStack是开源的，可以免费使用，并且有一个庞大的社区支持，因此可以获得及时的技术支持和更新。其次，OpenStack提供了丰 富的功能和灵活的架构，可以根据需求进行定制化开发。此外，OpenStack的可扩展性也非常好，可以满足不同规模的需求。 现在，让我们来讨论一下OpenStack的部署方案。首先，需要选择 合适的硬件平台。OpenStack对硬件的要求比较高，因此需要具备一定 的计算和存储能力。一般来说，推荐使用服务器级别的硬件，包括多 个物理服务器和存储设备。此外，还需要考虑网络设备的选择，以保 证数据的传输效率和安全性。 接下来，需要选择合适的操作系统。OpenStack支持多种操作系统，包括CentOS、Ubuntu等。不同的操作系统有不同的优势和适用场景， 因此需要根据自己的需求进行选择。同时，还需要考虑操作系统的版 本和更新情况，以确保系统的稳定性和安全性。 在部署过程中，网络配置是一个非常重要的问题。OpenStack的网 络模块提供了丰富的功能和选项，可以根据需求使用不同的网络类型，

比如物理网络、VLAN、VXLAN等。此外，还需要考虑网络的拓扑结 构和安全策略，以确保数据的传输和访问的安全性。 此外，还需要考虑存储方案的选择。OpenStack支持多种存储类型，包括本地存储、网络存储等。对于存储的选择，需要根据数据的访问 频率和访问速度的要求进行考虑。同时，还需要考虑数据的备份和恢 复策略，以确保数据的可靠性和可用性。 另外一个重要的问题是安全性。OpenStack涉及到大量的数据传输 和访问，因此需要采取安全措施来保护数据的安全性和隐私。这包括 使用安全协议、加密数据传输、访问控制等。此外，还需要进行定期 的安全审计和漏洞扫描，以确保系统的安全性。 最后，还需要考虑系统的监控和管理。OpenStack提供了丰富的监 控和管理工具，可以帮助用户监控系统的运行状态、资源的使用情况等。同时，还需要建立健全的管理流程和规范，确保系统的稳定性和 高效性。 以上，就是关于OpenStack部署方案的一些讨论。当然，由于OpenStack的复杂性和灵活性，实际的部署过程会更加详细和复杂。希 望这篇文章能给读者带来一些启发和帮助，让大家能够更好地部署和 管理自己的OpenStack环境。

ceph必会知识点

ceph必会知识点 Ceph必会知识点 一、Ceph简介 Ceph是一个开源的分布式存储系统，它提供了高性能、高可靠性、高可扩展性和高可用性的存储解决方案。Ceph以对象存储、块存储和文件系统的形式提供存储服务，并且具备自动数据复制和恢复的功能。 二、Ceph架构 1. Ceph集群由多个节点组成，包括监视器节点、对象存储节点和元数据服务器节点。 2. 监视器节点负责存储集群的状态信息，维护监视器映射和存储集群的监视器列表。 3. 对象存储节点用于存储和管理数据，每个对象存储节点都包含OSD（对象存储守护进程）。 4. 元数据服务器节点负责管理文件系统的元数据，提供文件系统服务。 三、Ceph存储模型 1. 对象存储：Ceph以对象的形式存储数据，每个对象包含一个唯一的标识符和数据内容。 2. 块存储：Ceph可以将存储空间划分为大小相等的块，并以块的

形式提供存储服务。 3. 文件系统：Ceph提供了一个分布式文件系统，可以像使用本地文件系统一样使用Ceph文件系统。 四、Ceph数据复制与恢复 1. Ceph使用CRUSH算法确定数据在集群中的位置，保证数据的可靠性和可用性。 2. 数据自动复制：Ceph将数据自动复制到多个节点上，提供数据冗余和容错能力。 3. 数据恢复：当某个节点发生故障时，Ceph会自动将复制的数据恢复到其他节点上。 五、Ceph的优点 1. 高性能：Ceph采用了分布式架构和并行计算技术，提供了出色的存储性能。 2. 高可靠性：Ceph通过数据复制和恢复机制，保证数据的可靠性和可用性。 3. 高扩展性：Ceph可以根据需求进行灵活的扩展，满足不同规模的存储需求。 4. 高可用性：Ceph提供了多副本数据备份和自动故障恢复的功能，保证存储系统的持续可用性。 六、Ceph的应用场景

ceph使用方法

ceph使用方法 摘要： 1.Ceph简介 2.Ceph组件及其作用 3.安装Ceph 4.Ceph使用方法 5.Ceph的日常维护与管理 6.Ceph性能优化 7.常见问题与解决方案 正文： Ceph是一款开源的分布式存储系统，具有高性能、可靠性高、可扩展性强等特点。它主要由以下几个组件构成： 1.Ceph Monitor（CMS）：负责维护整个Ceph集群的元数据信息，包括监控各个节点的状态、集群映射关系等。 2.Ceph OSD：负责存储数据，包括数据存储和数据恢复。OSD节点之间通过CRUSH算法实现数据分布和平衡。 3.Ceph Metadata Server：为Ceph客户端提供元数据服务，包括存储卷配置、快照、克隆等。 接下来，我们来了解一下如何安装和配置Ceph。 1.安装Ceph：首先，确保操作系统为CentOS 7及以上版本。然后，按照官方文档的指引，依次安装Ceph Monitor、OSD和Metadata Server组

件。 2.配置Ceph：安装完成后，需要对Ceph进行配置。编辑Ceph配置文件（/etc/ceph/ceph.conf），设置相关参数，如：osd pool默认配置、monitor 选举算法等。 3.初始化Ceph：使用ceph-init命令初始化Ceph，之后启动Ceph相关服务。 4.创建存储池：使用ceph-volume命令创建存储池，为存储池分配OSD 节点。 5.创建卷：使用ceph-volume命令创建卷，并将卷挂载到客户端节点。 6.扩容存储池：当存储池空间不足时，可以通过添加OSD节点或调整pool参数进行扩容。 7.维护与管理：定期检查Ceph集群状态，使用ceph命令监控性能指标，如：osd tree、health monitor等。 8.性能优化：根据实际需求，调整Ceph配置文件中的相关参数，如：调整osd的osd_cache_size、osd_timeout等。 9.常见问题与解决方案：遇到问题时，可通过查询官方文档、社区论坛等途径寻求解决方案。 通过以上内容，我们可以了解到Ceph的使用方法。在实际应用中，还需根据具体场景和需求进行调整。

在OpenStack中使用Ceph

在OpenStack中使用Ceph OpenStack和Ceph是两个非常流行的开源软件项目。OpenStack是云计算基础设施，而Ceph是一种可扩展的分布式存 储系统。在OpenStack中使用Ceph是比较常见的选择，因为它可 以提供高可用性和可扩展性。 本文将介绍如何在OpenStack中使用Ceph，并且讨论一些实现 细节和最佳实践。 一、什么是Ceph Ceph是一种可扩展的分布式存储系统。它可以提供对象、块和文件存储，同时也支持自动数据复制、数据分散、故障恢复等功能。Ceph是开源的，它的目标是提供一个可靠、高可用性的存储 系统。 Ceph集群通常由多个节点组成，每个节点都可以提供存储服务。Ceph使用RADOS作为底层对象存储引擎。RADOS是一种冗余数据分散的对象存储引擎，可以在不同的节点之间分散数据。Ceph

还提供了RBD（块存储）和CephFS（文件系统）两种接口，使得可以方便地建立不同的存储层次结构。 二、在OpenStack中使用Ceph OpenStack是一个云计算基础设施，它可以提供虚拟机、网络 和存储等服务。OpenStack中的存储服务主要包括对象存储（Swift）和块存储（Cinder）两种类型。如果要在OpenStack中使用Ceph，就需要配置Cinder和Glance（OpenStack中的镜像服务）。 1. 配置Cinder 在配置Cinder之前，需要安装Ceph和RBD驱动程序。Ceph 的安装可以参考Ceph官方文档。安装完成后，可以通过以下命令 检查Ceph是否正常工作： ``` ceph -s ```

ceph运维手册

ceph运维手册 一、介绍 Ceph是一个分布式存储系统，具有高性能、高可靠性和高可扩展性的特点。在大规模数据存储领域，Ceph已经成为一种非常流行的解决方案。本文将深入探讨Ceph的运维手册，包括必要的配置、监控、故障处理等方面。 二、环境准备 在进行Ceph的运维工作之前，需要准备以下环境： 1.硬件设备：Ceph要求至少3台服务器，并且每台服务器要有足够的计算和 存储资源。 2.操作系统：推荐使用Linux操作系统，例如CentOS、Ubuntu等。 3.网络配置：确保服务器之间能够正常通信，并且网络带宽要足够支持存储系 统的数据传输。 三、Ceph集群部署 3.1 安装Ceph软件包 在每台服务器上执行以下命令，安装Ceph软件包： $ sudo apt-get install ceph -y 3.2 配置Ceph集群 1.创建一个用于存储Ceph配置文件的目录： $ sudo mkdir /etc/ceph 2.在主节点上执行以下命令，生成配置文件： $ sudo ceph-deploy new <主节点> 3.编辑生成的Ceph配置文件，添加以下内容：

osd pool default size = 2 osd crush chooseleaf type = 1 4.在主节点上执行以下命令，部署配置文件到所有节点： $ sudo ceph-deploy --overwrite-conf config push <所有节点> 3.3 启动Ceph集群 在主节点上执行以下命令，启动Ceph集群： $ sudo ceph-deploy mon create-initial 四、Ceph监控 Ceph提供了一套监控工具，可以用于实时监控集群的状态和性能。 4.1 安装和配置监控工具 在主节点上执行以下命令，安装和配置监控工具： $ sudo apt-get install ceph-mgr ceph-mgr-dashboard -y 4.2 访问监控面板 通过浏览器访问主节点的IP地址和监控面板端口，例如：主节点IP地址>:7000。 4.3 查看集群状态 在监控面板上可以查看集群的状态和性能指标，包括OSD的状态、存储池的使用情况、客户端连接数等。 五、Ceph故障处理 在Ceph集群中，可能会出现各种故障，例如硬件故障、网络故障等。下面是一些常见故障的处理方法：

ceph 集群配置案例

ceph 集群配置案例 Ceph是一个开源的分布式存储系统，可以提供高可靠性、高性能的存储服务。在配置Ceph集群时，需要考虑多个因素，包括硬件要求、网络配置、监控和调优等。下面是一些Ceph集群配置的案例，用于提供参考。 1. 硬件配置：Ceph集群的性能和可靠性与硬件配置密切相关。一般建议使用性能较高的服务器，包括多核CPU、大内存和高速硬盘。同时，硬盘的选择也很重要，可以使用SSD来提高性能，使用HDD来降低成本。此外，还需要考虑网络适配器的类型和带宽，以及RAID控制器的选择等。 2. 网络配置：Ceph集群使用多个节点进行数据复制和数据传输，因此需要进行网络配置来保证高性能和低延迟。可以使用双网卡进行数据传输和管理网络的隔离，同时使用高带宽的网络设备来提高传输速度。此外，还可以使用Jumbo Frame来减少网络开销。 3. 存储池配置：Ceph集群使用存储池来管理数据，可以根据不同的需求创建不同的存储池。例如，可以为不同的应用程序创建独立的存储池，并设置不同的副本数和数据分布策略。还可以根据数据的访问模式和重要性来设置存储池的性能和可靠性等参数。 4. 数据复制策略：Ceph集群使用数据复制来提高数据的可靠性。可以根据需求设置数据的副本数，一般建议设置为3个副本。此外，

还可以使用EC编码来替代副本，以减少存储空间的消耗。 5. MON节点配置：Ceph集群需要至少一个MON节点来进行监控和管理。一般建议使用奇数个MON节点，以提高故障容忍能力。可以将MON节点部署在独立的服务器上，也可以将其与其他组件部署在同一台服务器上。 6. OSD节点配置：Ceph集群的数据存储和处理由OSD节点负责。可以根据需求设置OSD节点的数量，一般建议使用多个节点来提高性能和可靠性。同时，还需要配置OSD节点的存储设备和文件系统等。 7. 安全配置：Ceph集群的数据安全性非常重要，可以通过配置防火墙和访问控制列表来限制网络访问。此外，还可以使用SSL证书来进行节点之间的安全通信。 8. 监控配置：Ceph集群的监控非常重要，可以使用Ceph自带的监控工具来监控集群的状态和性能。可以配置监控工具来定期收集和报告集群的指标，以及发送警报和通知。 9. 调优配置：Ceph集群的性能可以通过优化配置来提高。可以通过调整各种参数来提高存储和网络性能，例如调整缓存大小、调整数据块大小和调整数据分布策略等。 10. 故障恢复配置：Ceph集群的故障恢复非常重要，可以使用

ceph 集群配置iscsi的操作步骤 -回复

ceph 集群配置iscsi的操作步骤-回复 Ceph是一种开源的分布式对象存储系统，它提供了高可靠性、高可扩展性以及高性能的存储解决方案。在Ceph集群中，我们可以配置iSCSI （Internet Small Computer System Interface）来提供块级存储服务。本文将提供一步一步的操作步骤，以帮助您配置Ceph集群以支持iSCSI。 在开始之前，确保您已经搭建好了一个Ceph集群，并配置好了适当的硬件设备。如果您还没有完成这些步骤，您可以参考Ceph官方文档来进行安装和配置。 以下是配置Ceph集群以支持iSCSI的操作步骤： 1. 检查iSCSI支持：首先，您需要确保Ceph集群的所有节点都支持iSCSI。您可以通过运行以下命令来检查内核模块是否加载： lsmod grep rbd lsmod grep target 如果返回的结果为空，则需要加载相应的内核模块。您可以使用modprobe命令来加载内核模块：

modprobe rbd modprobe target_core_user 2. 创建iSCSI池：要使用iSCSI，您需要先创建一个用于存储iSCSI卷的池。您可以使用以下命令在Ceph集群中创建一个新的池： ceph osd pool create iscsi 128 128 其中，"iscsi"是池的名称，"128"是最小数量的副本数，"128"是最大数量的副本数。 3. 创建iSCSI卷：一旦您创建了iSCSI池，就可以在其中创建iSCSI卷。您可以使用以下命令在Ceph集群中创建一个新的iSCSI卷： rbd create iscsi/myvolume size 10G pool iscsi

openstack生产集群部署

openstack生产集群部署 OpenStack是一种开源的云计算软件平台，它允许用户在私有云环境中构建和管理弹性和可扩展的云基础设施。在生产环境中进行OpenStack 集群部署是一个复杂的过程，需要仔细规划和准备。以下是一个关于OpenStack生产集群部署的详细解释，超过1200字。 第一步是规划和准备。在开始OpenStack集群部署之前，您需要先进行规划并准备好所需的硬件和软件环境。您需要评估您的需求，并选择合适的硬件来支持您的OpenStack集群。这包括服务器、存储设备和网络设备。您还需要选择一个适合您的操作系统来运行OpenStack，如CentOS、Ubuntu等。同时，您需要确保硬件和软件环境的可靠性和稳定性。 第二步是安装和配置OpenStack服务。在部署之前，您需要选择一种OpenStack的发行版来使用，如Red Hat OpenStack、Canonical OpenStack等。在选择发行版后，您需要按照其提供的文档和指南来安装和配置OpenStack服务。这包括设置控制节点和计算节点、配置网络和存储等。您可能还需要安装和配置一些额外的服务和工具来增强OpenStack 的功能和性能，如容器管理工具Docker、大数据处理工具Hadoop等。 第三步是测试和调优。在完成OpenStack集群的安装和配置后，您需要进行测试和调优来确保其稳定运行和性能。您可以使用一些测试工具和负载生成器来模拟实际使用情况，并进行性能测试。根据测试结果，您可以调整和优化OpenStack的配置和参数来提高其性能和可靠性。此外，您还可以监控OpenStack集群的运行状态和资源使用情况，并根据需要进行调整和优化。

基于 OpenStack 高可用云计算平台研究与部署

基于 OpenStack 高可用云计算平台研究与部署 摘要】云计算是继互联网、计算机后在信息时代有一种新的革新，云计算是信 息时代的一个大飞跃，未来的时代可能是云计算的时代。随着云计算兴起与发展，对OpenStack的研究也风起云涌。不同的云平台也都研究openstack技术，在此 基础上搭建各自的私有云或公有云，本文深入分析OpenStack技术，并给出搭建 云平台的不同部署方案。 【关键词】OpenStack；高可用云计算平台；研究；部署 1. OpenStack技术概述 1.1什么是云计算 云计算（cloud computing）是分布式计算的一种，指的是通过网络“云”将巨 大的数据计算处理程序分解成无数个小程序，然后，通过多部服务器组成的系统 进行处理和分析这些小程序得到结果并返回给用户。云计算早期，简单地说，就 是简单的分布式计算，解决任务分发，并进行计算结果的合并。因而，云计算又 称为网格计算。通过这项技术，可以在很短的时间内（几秒种）完成对数以万计 的数据的处理，从而达到强大的网络服务。云计算不是一种全新的网络技术，而 是一种全新的网络应用概念，云计算的核心概念就是以互联网为中心，在网站上 提供快速且安全的云计算服务与数据存储，让每一个使用互联网的人都可以使用 网络上的庞大计算资源与数据中心。 1.2什么是openstack OpenStack是一个开源的云计算管理平台项目，是一系列软件开源项目的组合。由NASA(美国国家航空航天局)和Rackspace合作研发并发起，以Apache许可证（Apache软件基金会发布的一个自由软件许可证）授权的开源代码项目。OpenStack为私有云和公有云提供可扩展的弹性的云计算服务。项目目标是提供 实施简单、可大规模扩展、丰富、标准统一的云计算管理平台。 1.3Openstack组件类型 OpenStack覆盖了网络、虚拟化、操作系统、服务器等各个方面。下面介 绍10个核心项目 1、计算（Compute）：Nova。一套控制器，用于为单个用户或使用群组管理虚拟机实例的整个生命周期，根据用户需求来提供虚拟服务。负责虚拟机创建、开机、关机、挂起、暂停、调整、迁移、重启、销毁等操作，配置CPU、内存等信息规格。自Austin版本集成到项目中。 2、对象存储（Object Storage）：Swift。一套用于在大规模可扩展系统中通过内 置冗余及高容错机制实现对象存储的系统，允许进行存储或者检索文件。可为Glance提供镜像存储，为Cinder提供卷备份服务。自Austin版本集成到项目中。3、镜像服务（Image Service）：Glance。一套虚拟机镜像查找及检索系统，支持 多种虚拟机镜像格式（AKI、AMI、ARI、ISO、QCOW2、Raw、VDI、VHD、VMDK），有创建上传镜像、删除镜像、编辑镜像基本信息的功能。自Bexar版本集成到项目中。 4、身份服务（Identity Service）：Keystone。为OpenStack其他服务提供身份验证、服务规则和服务令牌的功能，管理Domains、Projects、Users、Groups、Roles。 自Essex版本集成到项目中。 5、网络&地址管理（Network）：Neutron。提供云计算的网络虚拟化技术，为OpenStack其他服务提供网络连接服务。为用户提供接口，可以定义Network、

服务器集群搭建

服务器集群搭建 在当今的数字化时代，对服务器的需求与日俱增。无论是大型企业，还是小型组织，都需要一个高效、稳定、可扩展的服务器架构来支持其业务运营。然而，单一的服务器往往无法满足这些需求，因此我们需要搭建服务器集群，以提高服务器的性能、可用性和可扩展性。一、服务器集群的概念 服务器集群是由多台服务器组成的系统，通过负载均衡技术和网络设备将这些服务器整合成一个整体，以提供更高效、更稳定、更可扩展的服务。当访问请求到来时，负载均衡器将根据预设的规则将请求分配给不同的服务器，从而平衡每台服务器的负载，提高整体性能。 二、搭建服务器集群的步骤 1、确定需求 在搭建服务器集群之前，我们需要明确我们的需求。这包括我们需要支持多少用户，需要什么样的性能，需要多少存储空间等等。这些需求将直接影响我们的服务器集群的设计。 2、选择合适的服务器

选择合适的服务器是搭建服务器集群的重要步骤。我们需要考虑服务器的性能、可用性、可扩展性等因素。我们还需要考虑服务器的品牌、型号、配置等因素，以确保我们的服务器可以满足我们的需求。3、安装操作系统和软件 在每台服务器上安装相同的操作系统和软件是搭建服务器集群的必要步骤。这可以确保我们的服务器具有一致的环境，从而避免由于环境差异导致的问题。 4、配置负载均衡器 负载均衡器是服务器集群的核心组件之一。我们需要选择一个适合我们的负载均衡器，并将其配置为根据预设的规则将请求分配给不同的服务器。 5、配置网络设备 网络设备是服务器集群的重要组成部分。我们需要配置网络设备，以确保服务器之间的通信畅通无阻。这包括配置路由、交换机、防火墙等设备。 6、测试和优化

ceph详细安装部署教程

ceph 详细安装部署教程（多监控节点） 一、前期准备安装ceph-deploy 工具所有的服务器都是用root 用户登录的1、安装环境系统centos-6.5 设 备：1台admin-node (ceph-ploy) 1台monistor 2 台osd2 、关闭所有节点的防火墙及关闭selinux ，重启机器。service iptables stop sed -i '/SELINUX/s/enforcing/disabled/' /etc/selinux/config chkconfig iptables off 3 、编辑admin-node 节点的ceph yum 仓库vi /etc/yum.repos.d/ceph.repo [ceph-noarch]name=Ceph noarch packagesbaseurl=https://www.wendangku.net/doc/1f19301880.html,/rpm/el6/noarch/enabled =1gpgcheck=1type=rpm-mdgpgkey=https://https://www.wendangku.net/doc/1f19301880.html,/git/? p=ceph.git;a=blob_plain;f=keys/release.asc4 、安装搜狐的epel 仓库rpm -ivh https://www.wendangku.net/doc/1f19301880.html,/fedora- epel/6/x86_64/epel-release -6-8.noarch.rpm5 、更新admin-node 节点的yum 源yum clean all yum update -y6 、在admin-node 节点上建立一个ceph 集群目录mkdir /ceph cd /ceph7 、在admin-node 节点上安装ceph 部署工具yum install ceph-deploy -y8 、配置admin-node 节点的hosts 文件vi /etc/hosts10.240.240.210 admin-node10.240.240.211

Ceph安装部署文档

Ceph安装部署文档D

ano de1 172.16.1 00.35 mon、osd CentO S6.7 主 节点 ano de2 172.16.1 00.36 mon、osd CentO S6.7 ano de3 172.16.1 00.37 mon、osd CentO S6.7 三：集群配置准备工作 3.1 : 生成SSH证书，节点建立连接 1)所有节点修改hostname vim /etc/sysconfig/network 2)安装SSH (主节点) sudo apt-get install openssh-server 3)s sh登陆证书（主节点） ssh-keygen 将配置完成的证书传输到其它服务器： ssh-copy-id {其他节点用户名}@{其他节点IP} Example: ssh-copy-id root@anode2

4)创建并编辑~/.ssh/config 文件，添加其他Host Host {Hostname} Hostname {https://www.wendangku.net/doc/1f19301880.html,} User {Username} Example: Host anode1 Hostname 172.16.100.35 User root Host anode2 Hostname 172.16.100.36 User root Host anode3 Hostname 172.16.100.37 User root 3.2 : 建立ip地址list, 修改host文件 1)创建工作文件夹，建立ip地址list，为文件传输做准备主节点执行 mkdir /workspace/ cd /workspace/ vim cephlist.txt 主机列表 写入：