赞
踩
目录
完成了 Ceph 集群的部署,但是我们如何向 Ceph 中存储数据呢?首先我们需要在 Ceph 中定义一个 Pool 资源池。Pool 是 Ceph 中存储 Object 对象抽象概念。我们可以将其理解为 Ceph 存储上划分的逻辑分区,Pool 由多个 PG 组成;而 PG 通过 CRUSH 算法映射到不同的 OSD 上;同时 Pool 可以设置副本 size 大小,默认副本数量为 3。
Ceph 客户端向 monitor 请求集群的状态,并向 Pool 中写入数据,数据根据 PGs 的数量,通过 CRUSH 算法将其映射到不同的 OSD 节点上,实现数据的存储。 这里我们可以把 Pool 理解为存储 Object 数据的逻辑单元;当然,当前集群没有资源池,因此需要进行定义。
- #创建一个 Pool 资源池,其名字为 mypool,PGs 数量设置为 64,设置 PGs 的同时还需要设置 PGP(通常PGs和PGP的值是相同的):
- PG (Placement Group),pg 是一个虚拟的概念,用于存放 object,PGP(Placement Group for Placement purpose),相当于是 pg 存放的一种 osd 排列组合
- cd /etc/ceph
- ceph osd pool create mypool 64 64
ceph osd pool ls或ceph osd lspools
- ceph osd pool get mypool size
- ceph osd pool get mypool pg_num
- ceph osd pool get mypool pgp_num
默认创建pool的副本数都为3,如何修改默认副本数
- admin服务器
- cd /etc/ceph
- vim ceph.conf
- osd_pool_default_size = 2 #添加配置
-
- 推送 ceph.conf 配置文件给所有 mon 节点
- ceph-deploy --overwrite-conf config push node01 node02 node03
-
- 所有节点重启 ceph-mon 服务
- systemctl restart ceph-mon.target
- ceph osd pool set mypool size 2 #修改 Pool 副本数量为 2
-
- #修改 pg_num 和 pgp_num 的数量为 128
- ceph osd pool set mypool pg_num 128
- ceph osd pool set mypool pgp_num 128
- admin节点
- 1)删除存储池命令存在数据丢失的风险,Ceph 默认禁止此类操作,需要管理员先在 ceph.conf 配置文件中开启支持删除存储池的操作
- vim ceph.conf
- 添加以下
- [mon]
- mon_allow_pool_delete = true
-
- 2)推送 ceph.conf 配置文件给所有 mon 节点
- ceph-deploy --overwrite-conf config push node01 node02 node03
-
- 3)所有节点重启 ceph-mon 服务
- systemctl restart ceph-mon.target
-
- 4)执行删除 Pool 命令
- ceph osd pool rm mypool mypool --yes-i-really-really-mean-it
OSD总数
小于5个,官方推荐 PG数为128
5~10个,官方推荐 PG数为512
10~50 个,官方推荐 PG数为1024
大于50个,参考公式 PG 数=( Target PGs per OSD )* (OSD # )* ( %Data ) / (Size)
Target PGs per OSD:表示每个OSD对应的PG数(如近期不扩容OSD数量可设置为100,如近期要扩容OSD数量可设置为200)
OSD #:表示当前OSD总数
%Data:当前Pool预计会占用ceph总存储空间的百分比
Size:当前Pool的副本数
举例:
现有新建的Ceph集群,OSD不扩容,共60个OSD,Pool占用总空间50%,3个副本:
100x60x50%/3=1000->取最接近2的次方值 1024
Copyright © 2003-2013 www.wpsshop.cn 版权所有,并保留所有权利。