在Ceph分布式存储系统中,OSD（对象存储守护进程）扫描是维护数据健康的核心操作，主要用于检测和修复数据不一致性，以下是详细操作流程：
扫描类型及适用场景
-
Scrub（轻量扫描）
- 每日自动运行,检查OSD的元数据一致性（如对象大小、属性）。
- 手动启动命令：
ceph osd scrub <osd-id> # 替换<osd-id>为实际OSD编号（如osd.0）
-
Deep-Scrub（深度扫描）
- 每周自动运行,逐位校验对象数据完整性（耗时较长）。
- 手动启动命令：
ceph osd deep-scrub <osd-id>
**二、关键操作步骤
步骤1：检查OSD状态
执行扫描前，确认OSD处于active+clean状态：
ceph osd tree # 查看所有OSD状态 ceph -s # 检查集群整体健康
步骤2：执行扫描
- 单OSD扫描：
ceph osd scrub osd.1 # 轻量扫描osd.1 ceph osd deep-scrub osd.1 # 深度扫描osd.1
- 全集群扫描（谨慎使用）：
ceph osd scrub all # 轻量扫描所有OSD ceph osd deep-scrub all # 深度扫描所有OSD
步骤3：监控扫描进度
通过日志实时跟踪：
tail -f /var/log/ceph/ceph-osd.<id>.log # 替换<id>为OSD编号
或使用集群命令：
ceph pg ls scrubbing # 查看正在扫描的PG（归置组）
步骤4：处理扫描结果
- 无错误：日志显示
scrub ok即正常。 - 发现错误：
- 自动修复：Ceph默认尝试修复（需配置
osd scrub auto repair = true）。 - 手动修复：若自动修复失败，需检查PG状态：
ceph pg repair <pg-id> # 替换<pg-id>为问题归置组编号
- 自动修复：Ceph默认尝试修复（需配置
高级参数配置
-
调整扫描频率/时间
编辑ceph.conf文件：[osd] osd_scrub_interval = 86400 # 轻量扫描间隔（秒，默认1天） osd_deep_scrub_interval = 604800 # 深度扫描间隔（默认7天） osd_scrub_begin_hour = 2 # 扫描开始时间（凌晨2点） osd_scrub_end_hour = 6 # 扫描结束时间（早6点）
重载配置：
ceph orch apply osd --all-available-devices -
限制扫描资源（避免影响业务）
osd_scrub_sleep = 0.1 # 每次操作后休眠0.1秒 osd_scrub_chunk_min = 1 # 最小扫描块大小 osd_scrub_chunk_max = 5 # 最大扫描块大小
故障排查
- 扫描卡住：
ceph osd set noscrub # 暂停轻量扫描 ceph osd set nodeep-scrub # 暂停深度扫描 ceph osd unset noscrub # 恢复扫描
- OSD未响应：重启OSD服务：
systemctl restart ceph-osd@<id>.service
注意事项
- 避开业务高峰：深度扫描消耗I/O资源，建议在低负载时段执行。
- 监控集群状态：扫描期间使用
ceph -w实时观察健康状态。 - 版本兼容性：命令适用于Ceph Luminous（v12.2.x）及以上版本。
- 生产环境慎用
all参数：全集群扫描可能导致性能下降。
引用说明
本文操作基于Ceph官方文档（ceph.io/docs）及最佳实践，参数解释参考自Ceph源码注释（v18.2.0），技术细节经IBM Cloud及Red Hat技术白皮书交叉验证（2025年更新）。
原创文章，发布者：酷番叔，转转请注明出处：https://cloud.kd.cn/ask/6714.html
