分布式存储系统之Ceph集群CephFS基础使用 _生活百科

前文我们了解了ceph之上的RBD接口使用相关话题，回顾请参考https://www.cnblogs.com/qiuhom-1874/p/16753098.html；今天我们来聊一聊ceph之上的另一个客户端接口cephfs使用相关话题；
CephFS概述
文件系统是至今在计算机领域中用到的存储访问中最通用也是最普遍的接口；即便是我们前面聊到的RDB块设备，绝大多数都是格式化分区挂载至文件系统之上使用；使用纯裸设备的场景其实不多；为此，ceph在向外提供客户端接口中也提供了文件系统接口cephfs；不同于rbd的架构，cephfs需要在rados存储集群上启动一个mds的进程来帮忙管理文件系统的元数据信息；我们知道对于rados存储系统来说，不管什么方式的客户端，存储到rados之上的数据都会经由存储池，然后存储到对应的osd之上；对于mds（metadata server ）来说，它需要工作为一个守护进程，为其客户端提供文件系统服务；客户端的每一次存取操作，都会先联系mds，找对应的元数据信息；但是mds它自身不存储任何元数据信息，文件系统的元数据信息都会存储到rados的一个存储池当中，而文件本身的数据存储到另一个存储池当中；这也意味着msd是一个无状态服务，有点类似k8s里的apiserver，自身不存储数据，而是将数据存储至etcd中，使得apiserver 成为一个无状态服务；mds为一个无状态服务，也就意味着可以有多个mds同时提供服务，相比传统文件存储系统来讲metadata server成为瓶颈的可能也就不复存在；

文章插图
提示：CephFS依赖于专用的MDS（MetaData Server）组件管理元数据信息并向客户端输出一个倒置的树状层级结构；将元数据缓存于MDS的内存中，把元数据的更新日志于流式化后存储在RADOS集群上，将层级结构中的的每个名称空间对应地实例化成一个目录且存储为一个专有的RADOS对象；
CephFS架构

文章插图
提示：cephfs是建构在libcephfs之上，libcephfs建构在librados之上，即cephfs工作在librados的顶端，向外提供文件系统服务；它支持两种方式的使用，一种是基于内核空间模块（ceph）挂载使用，一种是基于用户空间FUSE来挂载使用；
创建CephFS
通过上述描述，cephfs的工作逻辑首先需要两个存储池来分别存放元数据和数据；这个我们在前边的ceph访问接口启用一文中有聊到过，回顾请参考https://www.cnblogs.com/qiuhom-1874/p/16727620.html；我这里不做过多说明；
查看CephFS状态
[root@ceph-admin ~]# ceph fs status cephfscephfs - 0 clients======+------+--------+------------+---------------+-------+-------+| Rank | State | MDS | Activity | dns | inos |+------+--------+------------+---------------+-------+-------+| 0 | active | ceph-mon02 | Reqs: 0 /s | 10 | 13 |+------+--------+------------+---------------+-------+-------++---------------------+----------+-------+-------+| Pool | type | used | avail |+---------------------+----------+-------+-------+| cephfs-metadatapool | metadata | 2286 | 280G || cephfs-datapool | data | 0 | 280G |+---------------------+----------+-------+-------++-------------+| Standby MDS |+-------------++-------------+MDS version: ceph version 13.2.10 (564bdc4ae87418a232fc901524470e1a0f76d641) mimic (stable)[root@ceph-admin ~]#