Ceph 分布式文件系统

布满荆棘的人生 2022-08-30 04:22 175阅读 0赞

Ceph是加州大学Santa Cruz分校的Sage Weil（DreamHost的联合创始人）专为博士论文设计的新一代自由软件分布式文件系统。自2007年毕业之后，Sage开始全职投入到Ceph开 发之中，使其能适用于生产环境。Ceph的主要目标是设计成基于POSIX的没有单点故障的分布式文件系统，

![20210719091030833.png][]

## Ceph 架构 ##

现在，让我们先在上层探讨 Ceph 架构及其核心元素。之后深入到其它层次，来辨析 Ceph 的一些主要方面，从而进行更详细的分析。

Ceph 生态系统可以大致划分为四部分（见图1）：客户端（数据使用者）、元数据服务器（缓冲及同步分布的元数据）、对象存储集群（以对象方式存储数据与元数据，实现其它主要职责），及集群监控（实现监控功能）

**Ceph 生态系统的概念架构**

![Conceptual flowchart showing the architecture of the Ceph ecosystem: clients, metadata server cluster, object storage cluster, and cluster monitors][Conceptual flowchart showing the architecture of the Ceph ecosystem_ clients_ metadata server cluster_ object storage cluster_ and cluster monitors]

** Ceph 生态系统的简化分层视图**

![Block diagram showing a simplified layered view of the Ceph ecosystem, including the server, metadata servers, and object storage ddaemon][Block diagram showing a simplified layered view of the Ceph ecosystem_ including the server_ metadata servers_ and object storage ddaemon]

**Ceph 生态系统**

![Block diagram of a simple Ceph ecosystem][]

**Ceph 中国社区 ——** [**http://www.ceph.org.cn**][http_www.ceph.org.cn]

Ceph 中文文档：[http://docs.ceph.org.cn/][http_docs.ceph.org.cn]

<table> 
 <tbody> 
  <tr> 
   <td style="width:81px;"> <p>对比说明</p> <p>/文件系统</p> </td> 
   <td style="width:77px;">TFS</td> 
   <td>FastDFS</td> 
   <td>MogileFS</td> 
   <td>MooseFS</td> 
   <td>GlusterFS</td> 
   <td>Ceph</td> 
  </tr> 
  <tr> 
   <td style="width:81px;">开发语言</td> 
   <td style="width:77px;">C++</td> 
   <td>C</td> 
   <td>Perl</td> 
   <td>C</td> 
   <td>C</td> 
   <td>C++</td> 
  </tr> 
  <tr> 
   <td style="width:81px;">开源协议</td> 
   <td style="width:77px;">GPL V2</td> 
   <td>GPL V3</td> 
   <td>GPL</td> 
   <td>GPL V3</td> 
   <td>GPL V3</td> 
   <td>LGPL</td> 
  </tr> 
  <tr> 
   <td style="width:81px;">数据存储方式</td> 
   <td style="width:77px;">块</td> 
   <td>文件/Trunk</td> 
   <td>文件</td> 
   <td>块</td> 
   <td>文件/块</td> 
   <td>对象/文件/块</td> 
  </tr> 
  <tr> 
   <td style="width:81px;">集群节点通信协议</td> 
   <td style="width:77px;">私有协议（TCP）</td> 
   <td>私有协议（TCP）</td> 
   <td>HTTP</td> 
   <td>私有协议（TCP）</td> 
   <td>私有协议（TCP）/ RDAM(远程直接访问内存)</td> 
   <td>私有协议（TCP）</td> 
  </tr> 
  <tr> 
   <td style="width:81px;">专用元数据存储点</td> 
   <td style="width:77px;">占用NS</td> 
   <td>无</td> 
   <td>占用DB</td> 
   <td>占用MFS</td> 
   <td>无</td> 
   <td>占用MDS</td> 
  </tr> 
  <tr> 
   <td style="width:81px;">在线扩容</td> 
   <td style="width:77px;">支持</td> 
   <td>支持</td> 
   <td>支持</td> 
   <td>支持</td> 
   <td>支持</td> 
   <td>支持</td> 
  </tr> 
  <tr> 
   <td style="width:81px;">冗余备份</td> 
   <td style="width:77px;">支持</td> 
   <td>支持</td> 
   <td>-</td> 
   <td>支持</td> 
   <td>支持</td> 
   <td>支持</td> 
  </tr> 
  <tr> 
   <td style="width:81px;">单点故障</td> 
   <td style="width:77px;">存在</td> 
   <td>不存在</td> 
   <td>存在</td> 
   <td>存在</td> 
   <td>不存在</td> 
   <td>存在</td> 
  </tr> 
  <tr> 
   <td style="width:81px;">跨集群同步</td> 
   <td style="width:77px;">支持</td> 
   <td>部分支持</td> 
   <td>-</td> 
   <td>-</td> 
   <td>支持</td> 
   <td>不适用</td> 
  </tr> 
  <tr> 
   <td style="width:81px;">易用性</td> 
   <td style="width:77px;">安装复杂，官方文档少</td> 
   <td>安装简单，社区相对活跃</td> 
   <td>-</td> 
   <td>安装简单，官方文档多</td> 
   <td>安装简单，官方文档专业化</td> 
   <td>安装简单，官方文档专业化</td> 
  </tr> 
  <tr> 
   <td style="width:81px;">适用场景</td> 
   <td style="width:77px;">跨集群的小文件</td> 
   <td>单集群的中小文件</td> 
   <td>-</td> 
   <td>单集群的大中文件</td> 
   <td>跨集群云存储</td> 
   <td>单集群的大中小文件</td> 
  </tr> 
 </tbody> 
</table>

[20210719091030833.png]: /images/20220829/2f2d946ae2f94353b75b55541dd5b827.png
[Conceptual flowchart showing the architecture of the Ceph ecosystem_ clients_ metadata server cluster_ object storage cluster_ and cluster monitors]: /images/20220829/0ed3cce7e5c542c8952885b47aeedc2f.png
[Block diagram showing a simplified layered view of the Ceph ecosystem_ including the server_ metadata servers_ and object storage ddaemon]: /images/20220829/ab45d5de42fb493ba3c44b1622fc12b7.png
[Block diagram of a simple Ceph ecosystem]: /images/20220829/0adcd4c89f9e408f9ea8f592c13a3e89.png
[http_www.ceph.org.cn]: http://www.ceph.org.cn
[http_docs.ceph.org.cn]: http://docs.ceph.org.cn/