节点故障恢复
如果 MinIO 节点发生完全的硬件故障(例如所有驱动器、数据丢失等),该节点在重新加入部署后将开始 修复操作。MinIO 修复只发生在替换的硬件上,通常不会影响部署性能。
MinIO 修复可确保所有恢复到驱动器上的数据的一致性和正确性。
对驱动器的独占访问
MinIO 需要 对用于对象存储的驱动器或卷进行独占访问。任何其他进程、软件、脚本或人员不得对提供给 MinIO 的驱动器或卷,以及 MinIO 放置在其上的对象或文件执行任何直接操作。
除非 MinIO 工程师指示,否则请勿使用脚本或工具直接修改、删除或移动提供给驱动器的任何数据分片、奇偶校验分片或元数据文件,包括从一个驱动器或节点移动到另一个驱动器或节点。此类操作很可能导致广泛的损坏和数据丢失,超出 MinIO 的修复能力。
替换节点硬件应与故障节点基本相似。使用改进的硬件不会对性能产生负面影响。
替换驱动器硬件应与故障驱动器基本相似。例如,用相同容量的另一个 SSD 驱动器替换故障的 SSD。虽然可以使用容量更大的驱动器,但 MinIO 使用最小驱动器的容量作为 服务器池 中所有驱动器的上限。
以下步骤提供更详细的节点替换流程。这些步骤假设 MinIO 部署,其中每个节点都根据 记录的先决条件 具有 DNS 主机名。
1) 启动替换节点
确保新节点已收到根据行业、监管或组织标准和要求的所有必要的安全、固件和操作系统更新。
新节点的软件配置必须与部署中的其他节点相匹配,包括但不限于操作系统和内核版本和配置。异构软件配置可能会导致部署中出现意外或不希望有的行为。
2) 更新新节点的主机名
可选 此步骤仅在替换节点的 IP 地址与故障主机不同时才需要。
确保与故障节点关联的主机名现在解析到新节点。
例如,如果 https://minio-1.example.net
以前解析到故障主机,它现在应该解析到新主机。
3) 下载并准备 MinIO 服务器
按照部署流程下载并运行 MinIO 服务器,使用与部署中所有其他节点匹配的配置。
MinIO 服务器版本 *必须* 在所有节点上保持一致。
MinIO 服务和环境文件配置 *必须* 在所有节点上保持一致。
4) 将节点重新加入部署
在节点上启动 MinIO 服务器进程,并使用 mc admin logs
监控进程输出,或者使用 journalctl -u minio
监控 MinIO 服务日志(对于 systemd
管理的安装)。
服务器输出应表明它已检测到部署中的其他节点,并已开始进行修复操作。
使用 mc admin heal
监控部署的整体修复状态。MinIO 会积极修复节点,以确保从降级状态快速恢复。
5) 下一步
继续监控部署,直到修复完成。对于持续出现节点故障的部署,应安排专门的维护工作以确定根本原因。考虑使用 MinIO SUBNET 与 MinIO 工程师协调,以获取此类操作的指南。