跳到主要内容

Curve 停止chunkserver

  1. 适用环境:
  2. 版本号: v1.2.6+
  3. CurveAdm版本：v0.2.0+
  4. 最后更新日期: 2023/09/30
  5. 层面: 数据面
  6. 运维级别: P1
  7. 所属产品: 存储
  8. 需求明细: 节点名称，具体的chunkserver服务
  9. 验收标准: 该指定的chunkserver服务停止成功，并且集群仍然健康
  10. 参考步骤:
1. 查看集群服务状态和指定的chunkserver状态：
   $ curveadm status
   
   注：如果指定的chunkserver已经处于退出状态（Status为Exited状态），则不用再次执行停止操作。
   
2. 使用如下命令停止chunkserver服务：

   如果是停止某个指定的chunkserver，使用--id选项:
   $ curveadm stop --id <Id>
   
   如果要停止某个节点上的所有的chunkserver服务，使用如下命令：
   $ curveadm stop --host <host> --role chunkserver
   
   如果要停止集群中所有的chunkserver服务，使用如下命令（一般不会做此操作）
   警告：如果要停掉所有的chunkserver，则整个集群不可用，请谨慎确认之后再进行操作。
   $ curveadm stop --role chunkserver
   
3. 再次查看集群服务状态，查看指定chunkserver服务是否已经退出（Status为Exited状态）：
   $ curveadm status
   
4. 使用工具查看当前集群是否健康：
   $ curve bs status cluster
   结果输出有下面字样则集群健康：Cluster health is:  warn
   
   当停掉部分的chunkserver的时候，集群状态是warn状态，符合预期。
   如果停掉部分chunkserver，集群状态是error状态，则表示集群出错，需要重新拉取刚才停掉的chunkserver。
   （一般不会做此操作）停掉所有的chunkserver，集群状态是error状态，符合预期。
  1. 参考影响:

  • 情况1：停止某个chunkserver服务（按照id）/停掉某个副本域的所有chunkserver（按照host）

    • 时间: 无

    • 业务方: 无

    • 影响主题: 无

    • 用户：无

  • 情况2：同时停掉涉及多个副本域的chunkserver

    • 时间: 在chunkserver重启成功之前，可能发生IO hang

    • 业务方: 所有使用当前集群的业务方

    • 影响主题: 跨副本域的chunkserver挂掉

    • 用户：所有使用当前集群的用户

  • 情况3：同时停掉所有的chunkserver服务（一般不会做此操作）

    • 时间: 待集群中有chunkserver被重新拉取之前，整个集群不可用。

    • 业务方: 所有使用当前集群的业务方

    • 影响主题: chunkserver挂掉

    • 用户：所有使用当前集群的用户

  1. 参考风险:

  • 情况1：停止部分chunkserver服务

    • 数据面：无

    • 管控面：无

    • 恢复能力：无需恢复

  • 情况2：同时停掉涉及多个副本域的chunkserver

    • 数据面：有可能发生IO hang。

    • 管控面：无

    • 恢复能力：无需恢复

  • 情况3：同时停掉所有的chunkserver服务（一般不会做此操作）

    • 数据面：集群不可用，IO hang

    • 管控面：无

    • 恢复能力：无需恢复

  1. 参考回滚策略: 重启chunkserver

  2. 需求发起方: CURVE

  3. 接收方:

  4. 评审责任人: SRE负责人，SA负责人，CURVE负责人

  5. 用户通知责任人: 技术支持

  6. 执行责任人: CURVE/SA

  7. 测试回归责任人: CURVE

  8. 执行审核责任人: SA/CURVE/SRE