ceph数据均衡方式比较

ceph mgr module ls ceph mgr module enable balancer ceph balancer on ceph balancer mode crush-compat ceph config-key set “mgr/balancer/max_misplaced”: “0.01” ceph config-key dump ceph balancer status c...

设置集群仅支持 Luminous（或者L之后的）客户端 我采用octopus: ceph osd set-require-min-compat-client octopus 或 ceph osd set-require-min-compat-client octopus --yes-i-really-mean-it 步骤： 1.获取集群当前的osdmap信息 为防止文件混乱，特意新建了文件夹 (在cephadm shell中执行) mkdir /root/data ceph osd getmap -o

ceph balancer

【ceph】ceph生产常见操作之一---ceph扩容以及注意事项 扩容过程主要分为4步（文档有具体描述）： （1）业务规模的评估 （2）扩容前的准备工作（包括环境的检查，pg数的计算，pg分布的统计） （3）扩容过程中的故障处理（mon、osd进程故障，pg状态异常故障） （4）扩容完的收尾动作（统计pg的分布图，调节迁移的速度等） 二、迁移过程中的状态详解 Remapped、backfill等 三、迁移速度调整

【ceph】使用 upmap 在 OSD 上手动重新平衡数据，比前面用reweight、balance香多了 要求版本：L版以上 centos系统： ceph osd getmap -o osd_map osdmaptool --test-map-pgs --pool 5osd_map #这里6是我的数据盘pool的id号，自行寻找 osdmaptool osd_map--upmap output_upmap--upmap-pool mydata --upmap-max 100 --upmap

故障描述 openstack环境中若干台虚拟机无法正常操作，尝试从horizon中重启虚拟机，重启过程中虚拟机状态一直停留在”powering on”的状态，无法进入系统 查看openstack环境，发现后端ceph的状态异常,一个OSD full，一个near full。（clock是这个集群已知问题，这里不做介绍） (ceph-mon)[root@Node-160 /]# ceph -s cluster 8a946765-1bb5-40bc-a0bc-4cd830aee2a4

前言 从15年3月接触Ceph分布式存储系统，至今已经5年了；因为工作的需要，对Ceph的主要模块进行了较深入的学习，也在Ceph代码层面做了些许改进，以满足业务需要（我们主要使用M版本）。最近得闲，将过往的一些改进以及优化思路记录下了，希望能对后来者有所帮助。 之前有分享过RBD持久化缓存以及卷QoS，感兴趣的读者可以翻阅前文 这是第一篇：Ceph Peering以及数据均衡的改进 背景知识...

基于ceph-deploy部署Ceph 集群

Ceph发展历程，优缺点，架构简介； RADOS等层面分析，OSD,MON等核心组件分析； 为什么引入PG概念，PG数怎么计算？设置成多少合适； Ceph日常操作命令ceph -s等

文章目录一、Ceph 简介二、Ceph 特点三、Ceph 应用场景四、Ceph 核心组件五、Ceph 存储系统的逻辑层次结构六、RADOS 的系统逻辑结构七、Ceph 数据存储过程八、Ceph IO 流程及数据分布1. 正常 IO 流程图2. 新主 IO 流程图九、Ceph Pool 和 PG 分布情况 一、Ceph 简介   ceph 是一种统一的分布式文件系统，具有优秀的性能、高可用性和可扩展性。ceph 的统一体现在可以提供文件系统、块存储和对象存储，分布式体现在可以动态扩展。在国内一些公司的云环境

我们相恋的季节，从夏天到冬天，记忆一页页翻阅，你却留下了思念。

1. Crush算法与作用 CRUSH算法，全称Controlled Replication Under Scalable Hashing （可扩展哈希下的受控复制），它是一个可控的、可扩展的、分布式的副本数据放置算法， 通过CRUSH算法来计算数据存储位置来确定如何存储和检索数据。 保障数据分布的均衡性 让数据能够均匀的分不到各个节点上面，同时让数据访问的读写操作在各个节点和磁盘上保持负载均衡。 集群的灵活伸缩性 可以方便快速的增加或删除节点，对失效的节点自动检测处理，能够自动实现数据的均衡，并且尽可

【1】DAS（直接附加存储，是直接接到计算机的主板总线上去的存储）IDE、SATA、SCSI、SAS、USB 接口的磁盘所谓接口就是一种存储设备驱动下的磁盘设备，提供块级别的存储【2】NAS（网络附加存储，是通过网络附加到当前主机文件系统之上的存储）文件系统级别的存储，本身就是一个做好的文件系统，通过nfs接口在用户空间输出后，客户端基于内核模块与远程主机进行网络通信，把它转为好像本地文件系统一样来使用，这种存储服务是没办法对它再一次格式化创建文件系统块的【3】SAN（存储区域网络）

RADOS 基础存储系统。

​#分布式文件系统存储使用架构clientnamenode 元数据服务器-管理服务器，存储这个文件的数据存放的位置信息datanode datanode datanode #存储数据，数据节点#对象存储使用架构​​​clientnamenode 元数据服务器-管理服务器，存储这个文件的属性信息datanode datanode datanode #存储数据的数据节点。

Ceph是统一存储系统，支持三种接口。 Object：有原生的API，而且也兼容Swift和S3的APIBlock：支持精简配置、快照、克隆File：Posix接口，支持快照 Ceph也是分布式存储系统，它的特点是： 高扩展性：使用普通x86服务器，支持10~1000台服务器，支持TB到PB级的扩展。高可靠性：没有单点故障，多数据副本，自动管理，自动修复。高性能：数据分布均衡，并

Ceph、TFS、FastDFS、MooseFS（MFS）、HDFS、GlusterFS（GFS），存储机制会把数据分散存储到多个节点上，具有高扩展性、高性能、高可用性等优点。Ceph使用C++语言开发，是一个开放、自我修复和自我管理的开源分布式存储系统。具有高扩展性、高性能、高可靠性的优点。Ceph目前已得到众多云计算厂商的支持并被广泛应用。RedHat及OpenStack，Kubernetes都可与Ceph整合以支持虚拟机镜像的后端存储。

介绍了ceph的一些概念和如何快速搭建ceph。 docker部署ceph集群 容器部署ceph集群 ubuntu部署ceph