运维日常

1. 介绍 一个集群可以只有一个 monitor，我们推荐生产环境至少部署 3 个。 Ceph 使用 Paxos 算法的一个变种对各种 map 、以及其它对集群来说至关重要的信息达成共识。建议（但不是强制）部署奇数个 monitor 。Ceph 需要 mon 中的大多数在运行并…

1. 增加 OSD（手动） 要增加一个 OSD，要依次创建数据目录、把硬盘挂载到数据目录、把 OSD 加入集群、然后把它加入 CRUSH Map。 Tip： Ceph 喜欢统一的硬件，与存储池无关。如果你要新增容量不一的硬盘驱动器，还需调整它们的权重。但是，为实现最佳性能，CR…

1. 环境介绍 2. 测试场景 下表以测试随机写IOPS的命令为例，说明命令中各种参数的含义。 3. 测试结论 4. 集群能力评估 由于Ceph存储结构不同于物理硬件，所以影响其IOPS的因素主要有网络、副本数量、日志、OSD(硬盘)数量、OSD服务器数量、OSD IOPS等。…

1. Cephfs 异常测试方案 CephFS允许客户端缓存metadata 30s，所以这里测试对MDS stop/start的时间间隔取为：2s，10s，60s。 2. 测试环境 3. 测试工具 fio也是我们性能测试中常用的一个工具，详细介绍Google之。 4. 测试步…

一、集群环境1.1部署环境说明mon组件部署：ceph-xxx-osd00,ceph-xxx-osd01,ceph-xxx-osd02osd组件部署：ceph-xxx-osd00,ceph-xxx-o

1. 心跳介绍 心跳是用于节点间检测对方是否故障的，以便及时发现故障节点进入相应的故障处理流程。 故障检测时间和心跳报文带来的负载之间做权衡。 心跳频率太高则过多的心跳报文会影响系统性能。 心跳频率过低则会延长发现故障节点的时间，从而影响系统的可用性。 及时：节点发生异常如宕机…

1. 数据分布算法挑战 a. 数据分布均衡，使数据能均匀的分布到各个节点上。 b. 负载均衡，使数据访问读写操作的负载在各个节点和磁盘的负载均衡。 a. 系统可以方便的增加或者删除节点设备，并且对节点失效进行处理。 b. 增加或者删除节点设备后，能自动实现数据的均衡，并且尽可能…

1. Ceph IO流程及数据分布 client 创建cluster handler。 client 读取配置文件。 client 连接上monitor，获取集群map信息。 client 读写io 根据crshmap 算法请求对应的主osd数据节点。 主osd数据节点同时写入…

一、前言首先来一段英文关于PG和PGP区别的解释：以上是来自邮件列表的KaranSingh的PG和PGP的相关解释，他也是LearningCeph和CephCookbook的作者，以上的解释没有问题，