这里有一个ceph的原则,就是所有存储的不管是块设备、对象存储、文件存储最后都转化成了底层的对象object,这个object包含3个元素data,xattr,omap。data是保存对象的数据,xattr是保存对象的扩展属性,每个对象文件都可以设置文件的属性,这个属性是一个key/value值对,但是受到文件系统的限制,key/value对的个数和每个value的大小都进行了限制。如果要设置的对象的key/value不能存储在文件的扩展属性中,还存在另外一种方式保存omap,omap实际上是保存到了key/vaule ?值对的数据库levelDB中,在这里value的值限制要比xattr中好的多。
????一开始不太明白?key/value是做什么的?在ceph中起到什么作用??这里要说明的是这些key/value是保存对象的元数据相关信息,这些元数据相关信息是可以单独创建和设置的,等于对象存储的扩展,支持属性的值对存储。这个作用就是提供给ceph内部使用,暂时用处不大。
一、块存储设备元数据管理
对于块存储,在存储的过程中主要是块的相关信息。块的元数据信息管理,创建一个块设备后会创建一个默认的rbd的元数据文件。
0001:这里首先创建一个块设备,该块设备的大小为100M。
0002:使用命令查询这个rbd的详细信息。
0008:这里会有一个叫做rbd1.rbd的对象,他不是用来存储数据的,而且用来保存元数据信息。真实的元数据信息不会保存在这个文件中,而是保存在这个文件的xattr或者omap中。
0010:这里有个叫做rbd_directory的对象,该对象中会保存所有创建的块设备名字。
二、对象存储的元数据管理
对象存储存在
0001:列出当前pool中存储的对象。在对象存储中还是封装一层叫做bucket,由bucket隔离object对象。
0006:查看一个objectone对象的状态信息,包含名字、创建时间、size。
0008:自己创建一个objectone对象的属性,该属性key为owner、value为xyj。
0009:查询一个objectone对象的所有属性,发现这时只有刚刚创建的owner。
0011:查询objectone对象的owner属性值,这里可以显示出刚刚设置的xyj。
三、文件系统cephfs:
这里cephfs就不多说了,因为目前广大群众都说cephfs在生产环境中存在一些问题。cephfs?有一个叫做mds的节点,该节点负责管理namespace,但是数据块的映射则交给了crush算法,cephfs的元数据同样会以对象的方式存储在rados中,有一个叫做meta的文件夹中。同样这些顶层的对象,可以通过key/value存储来自文件系统设置的属性集。