运维日常

ZookeeperTransporter同样提供了SPI扩展，默认使用curator方式；接下来重点看一下Zookeeper注册中心。 监控中心启动时: 订阅/dubbo/...

现在大家使用MQ，基本都是会把数据进行持久化，MQ默认存储持久化数据使用kahaDB，但是鉴于大家对mysql比较熟悉，很多人会选择mysql进行数据的持久化，因为mysq...

本文主要分析 SpringCloud 中 Ribbon 负载均衡流程和原理。 SpringCloud版本为：Edgware.RELEASE。 可以看到，在整合 Ribbon...

1. 查看FS客户端连接 2. 查看RBD块存储客户端连接 3. 查看RGW客户端连接...

1. 查看数据分布是否均衡 2. reweight-by-pg 按归置组分布情况调整 OSD 的权重 3. reweight-by-utilization 按利用率调整 O...

1. 介绍 一般来说，你应该在运行时增加调试选项来调试问题；也可以把调试选项添加到 Ceph 配置文件里来调试集群启动时的问题，然后查看 /var/log/ceph （默认...

1. 介绍 CRUSH 算法通过计算数据存储位置来确定如何存储和检索。 CRUSH 授权 Ceph 客户端直接连接 OSD ，而非通过一个中央服务器或代理。数据存储、检索算...

1. 介绍 一个集群可以只有一个 monitor，我们推荐生产环境至少部署 3 个。 Ceph 使用 Paxos 算法的一个变种对各种 map 、以及其它对集群来说至关重要...

1. 增加 OSD（手动） 要增加一个 OSD，要依次创建数据目录、把硬盘挂载到数据目录、把 OSD 加入集群、然后把它加入 CRUSH Map。 Tip： Ceph 喜欢...

1. 环境介绍 2. 测试场景 下表以测试随机写IOPS的命令为例，说明命令中各种参数的含义。 3. 测试结论 4. 集群能力评估 由于Ceph存储结构不同于物理硬件，所以...

1. Cephfs 异常测试方案 CephFS允许客户端缓存metadata 30s，所以这里测试对MDS stop/start的时间间隔取为：2s，10s，60s。 2....

一、集群环境1.1部署环境说明mon组件部署：ceph-xxx-osd00,ceph-xxx-osd01,ceph-xxx-osd02osd组件部署：ceph-xxx-os...

1. 心跳介绍 心跳是用于节点间检测对方是否故障的，以便及时发现故障节点进入相应的故障处理流程。 故障检测时间和心跳报文带来的负载之间做权衡。 心跳频率太高则过多的心跳报文...

1. 数据分布算法挑战 a. 数据分布均衡，使数据能均匀的分布到各个节点上。 b. 负载均衡，使数据访问读写操作的负载在各个节点和磁盘的负载均衡。 a. 系统可以方便的增加...

1. Ceph IO流程及数据分布 client 创建cluster handler。 client 读取配置文件。 client 连接上monitor，获取集群map信息...

一、前言首先来一段英文关于PG和PGP区别的解释：以上是来自邮件列表的KaranSingh的PG和PGP的相关解释，他也是LearningCeph和CephCookbook...

1. 模块简介 分别是 MONMap，OSDMap，PGMap，LogMap，AuthMap，MDSMap。 其中 PGMap 和 OSDMap 是最重要的两张Map。 2...

1. mds存储 元数据的内存缓存，为了加快元数据的访问。 2. mds冷备/热备 冷备就是备份的mds，只起到一个进程备份的作用，并不备份lru元数据。主备进程保持心跳关...