跳到主要内容

Curve 重启mds

  1. 适用环境:
  2. 版本号: v2.6+
  3. CurveAdm版本：v0.2.0+
  4. 最后更新日期: 2023/09/30
  5. 层面: 管控面
  6. 运维级别: P1
  7. 所属产品: 存储
  8. 需求明细: 节点名称，具体的mds服务
  9. 验收标准: 指定的mds服重启成功，集群健康，并且可以正常对外提供服务
  10. 参考步骤:
1. 使用工具查看集群是否健康，当前mds是否异常：
   $ curve fs status cluster
   结果输出有下面字样则集群健康：Cluster health is:  ok
   
   注：1. 集群健康（ok）：如果集群健康，继续执行后续步骤。重启当前服务后需确保集群仍是健康状态。
      2. 集群异常（warn/error）：
         2.1 如果是当前要重启的服务导致的异常（warn/error）并希望重启恢复，则继续执行后续步骤。但重启之后不能保证集群是健康状态。
         2.2 如果当前要重启的服务正常，其他的服务异常导致的集群不健康，则继续执行后续步骤。但是重启当前服务后集群仍然处于不健康状态。
      
2. 使用如下命令重启mds服务：

   如果是重启某个指定的mds服务，使用--id选项：
   $ curveadm restart --id <Id>
   
   如果要重启某个节点下的所有的mds服务，使用如下命令：
   $ curveadm restart --host <host> --role mds
   
   （一般不会做此操作）如果要重启集群中所有的mds服务，使用如下命令：
   注意：如果重启所有的mds，则导致集群短暂不可用，在重启期间所有IO出错，请谨慎进行下列操作。
   $ curveadm restart --role mds
   
3. 再次查看集群服务状态，查看指定mds服务是否重启成功：
   $ curveadm status
   
4. 查看集群是否健康：
   $ curve fs status cluster
   结果输出有下面字样则集群健康：Cluster health is:  ok

   注：如果集群在重启之前健康，则需要保证重启服务后集群仍是健康状态；
      如果集群在重启之前异常，则有以下两种情况：
      1. 重启之前，是由当前服务导致的集群异常，重启当前服务后不能保证集群仍然是健康的，是符合预期的。
      2. 重启之前，不是当前服务导致的集群异常，则重启后集群仍然是不健康的状态，是符合预期的。
  1. 参考影响:

  • 情况1：重启部分mds服务

    • 时间: 无

    • 业务方: 无

    • 影响主题: 无

    • 用户：无

  • 情况2：同时重启所有的mds服务

    • 时间: 在所有的mds重启过程中，集群不可用

    • 业务方: 所有使用当前集群的业务方

    • 影响主题: mds正在重启

    • 用户：所有使用当前集群的用户

  1. 参考风险:

  • 情况1：重启部分mds服务

    • 数据面：无

    • 管控面：无

    • 恢复能力：无需恢复

  • 情况2：同时重启所有的mds服务

    • 数据面：可能有短暂的IO抖动。如果客户端缓存没有过期，则IO无影响。

    • 管控面：管理服务暂不可用

    • 恢复能力：无需恢复

  1. 参考回滚策略: 无

  2. 需求发起方: CURVE

  3. 接收方:

  4. 评审责任人: SRE负责人，SA负责人，CURVE负责人

  5. 用户通知责任人: 技术支持

  6. 执行责任人: CURVE/SA

  7. 测试回归责任人: CURVE

  8. 执行审核责任人: SA/CURVE/SRE