优云数智 | Ceph 开发者月报 2018-07

UMCloud存储团队 UMCloud优云数智 昨天

微信头图1.png

本篇为 2018 年度《Ceph 开发者月报》专栏的第七篇，在《Ceph 开发者月报》中，我们 UMCloud 存储团队将以月度为单位，为大家分享当月 Ceph 社区的有趣的提交和重要的变更，方便大家即刻掌握一手 Ceph 社区开发资料。

每篇将以对象存储、块存储、统一存储层、集群管理、基础库等模块组织，为大家一一介绍。

本月看点：

Ceph 对象存储认证支持 CNCF项目 OPA 实现细粒度的访问控制

对象存储

完善 radosgw-admin sync error trim 命令

radosgw-admin: ‘sync error trim’ loops until complete

( https://github.com/ceph/ceph/pull/23032 )

之前

radosgw-admin sync error trim

命令最多只能清理 1000 条记录，即使通过 start_time/end_time 或是 start_marker/end_marker 指定了清理范围，但仍最多只能清理 1000 条记录，
这就意味着若指定范围内的 sync error 日志记录多于 1000 条，则该命令只能处理一部分日志记录。

在上面的提交中，社区对该命令进行了完善，支持清理指定范围内的所有错误日志记录。同时，还新增了 –trim-delay-ms 参数，用于控制清理操作的执行频率。

Ceph RGW 集成 OPA 策略引擎

rgw: Initial work for OPA-Ceph integration

( https://github.com/ceph/ceph/pull/22624 )

OPA 是一个轻量级的开源通用策略引擎，可以在整个项目开发堆栈中实现统一的、上下文感知的策略实施。
当前社区希望在 RGW 中集成 OPA。在上面的提交中，社区为 RGW 和 OPA 的集成进行了一部分初期工作。

块存储

librbd 支持 FUA

librbd:optionally support FUA (force unit access) on write requests

( https://github.com/ceph/ceph/pull/22945 )

在上面的提交中，社区为 librbd 新增了对 FUA 的支持。若设置为 FUA 模式，对于写操作请求，必须将数据写入到存储卷后，才返回成功信息。所有的写请求处理都完全跳过缓存。

统一存储层

mon 新增 pg repeer 命令

mon/OSDMonitor: add ‘osd repeer ’ command

( https://github.com/ceph/ceph/pull/22940 )

在上面的提交中，社区为 mon 新增了

pg repeer

命令，用于强制 pgid 参数指定的 PG 执行 peer 处理。

集群管理

mgr 新增 crash 插件

mgr/pybind/crash: handle crashdumps

( https://github.com/ceph/ceph/pull/22703 )

在上面的提交中，社区为 mgr 实现了 crash 插件，用于收集集群中各组件的 crash dump 信息，并存储在 Ceph 集群中，方便日后进行分析。

针对 crash 插件，主要新增了如下命令

启用 crash 插件

ceph mgr module enable crash

保存一个 crash dump 信息

ceph crash post -i

移除一个指定的 crash dump 信息

ceph rm

罗列出保存的所有 crash dump 信息

ceph crash ls

对所保存的 crash dump 信息进行统计和总结

ceph crash stat

获取所保存的指定 crash 过程的具体细节信息

ceph crash info

移除所有保存时间大于 keep 字段所指定天数的 crash dump 信息

ceph crash prune

实现 mgr 内部各模块之间可以相互调用

mgr: enable inter-module calls

( https://github.com/ceph/ceph/pull/22951 )

dashboard 新增用户管理界面

mgr/dashboard: Ceph dashboard user management from the UI

( https://github.com/ceph/ceph/pull/22758 )

工具库

ceph-volume 新增批量操作命令及相关的操作处理

ceph-volume batch command

( https://github.com/ceph/ceph/pull/23075 )

vstart.sh 支持启用 SPDK

vstart.sh: Support SPDK in Ceph development deployment

( https://github.com/ceph/ceph/pull/22975 )

本月提交情况

提交情况.png