对象扫描

本指南涵盖了 RustFS 对象扫描程序的设计和实现，包括其与纠删码、擦洗与修复机制、调度策略、监控指标和故障排除的集成。

概述

RustFS 对象扫描程序内置于存储引擎中，负责定期检查对象完整性并执行计划操作。扫描任务包括磁盘使用情况统计、生命周期管理规则评估、对象复制执行以及触发损坏对象自愈。

架构与设计原则

扫描程序架构

RustFS 扫描程序使用哈希抽样机制，根据对象名称哈希，每 1024 个对象中选择一个进行检查，以最大限度地减少性能影响。扫描程序与纠删码模块深度集成，在检测到丢失或损坏的碎片时，利用冗余碎片进行在线重构，确保高数据可用性和一致性。

数据验证与恢复

RustFS 数据验证机制检查元数据一致性，并执行逐位读取和验证，以发现隐藏的坏块。对象扫描程序可检测到位腐蚀等问题，并在必要时触发修复过程。

扫描模式与调度

RustFS 支持三种扫描模式：读取时的在线扫描、后台周期性扫描和手动全扫描，以平衡性能和可靠性。与 Ceph 中的 osd_scrub_begin_hour 配置类似，管理员可以设置扫描开始时间和频率。例如，默认情况下，轻度验证设置为每天一次。

监控与指标

扫描程序统计数据包括总任务数、失败数和时间分布，通过 Prometheus 数据模型公开指标，如 rustfs_scanner_jobs_total、rustfs_scanner_failures_total 和 rustfs_scanner_duration_seconds。结合监控系统，可以根据扫描失败率和持续时间设置警报，及时发现和定位存储或网络级别的潜在问题。