美文网首页
ceph:如何计算集群数据恢复时间

ceph:如何计算集群数据恢复时间

作者: ypdai | 来源:发表于2021-02-24 20:13 被阅读0次

1、前言

很多场景会导致集群数据进行迁移、恢复,比如磁盘损坏后换盘操作、集群扩容操作、机器下电维护后再次上电等等。数据恢复的时候会一定程度的影响客户端io,我们迫切需要大概知道数据啥时候可以恢复完成,下面就描述一种计算方法。

2、计算数据恢复需要的时间

计算方式:需要恢复的总对象数 / 每秒恢复的对象数 = 需要恢复的时间
比如下面的我测试环境例子:

[root@node6 ~]# ceph -s -f json-pretty|grep pgmap -A 50
    "pgmap": {
        ...
        "num_pgs": 256,
        "num_pools": 3,
        "num_objects": 23004,
        "data_bytes": 96398382554,
        "bytes_used": 163841966080,
        "bytes_avail": 1554111397888,
        "bytes_total": 1717953363968,
        "inactive_pgs_ratio": 0.01171875,
        "degraded_objects": 9046,
        "degraded_total": 46008,
        "degraded_ratio": 0.19661797948182921,
        "recovering_objects_per_sec": 10,
        "recovering_bytes_per_sec": 19948622,
        "recovering_keys_per_sec": 0,
        "num_objects_recovered": 30,
        "num_bytes_recovered": 125829120,
        "num_keys_recovered": 0
    }

按照计算公式来计算:
需要恢复的对象总数 = "degraded_objects" + "misplaced_objects"(这里没有misplaced_objects,也就不用加了)
当前恢复的的速度 = "recovering_objects_per_sec"(这里的恢复速度是在变动的,可以多获取几次取个平均值)
需要恢复的时间 = 9046 / 10 = 大概900s

上面是计算整个集群的,如果需要计算某个pool级别的,可以使用 ceph osd pool stats -f json-pretty 来获取pool的 degraded_objects misplaced_objects和recovering_objects_per_sec值,然后计算方式和整个集群的计算方式一样。

好了,通过上面简单的计算就可以大概推算集群恢复完成的时间了。

相关文章

  • ceph:如何计算集群数据恢复时间

    1、前言 很多场景会导致集群数据进行迁移、恢复,比如磁盘损坏后换盘操作、集群扩容操作、机器下电维护后再次上电等等。...

  • ceph性能统计实现

    0. ceph是如何查看集群性能数据的 通过ceph -s显示本次查看的集群性能数据 通过ceph -w实时更新集...

  • Ceph I / O

    介绍 Ceph客户端接口从Ceph存储集群读取数据并将数据写入Ceph存储集群。客户端需要以下数据才能与Ceph存...

  • MySQL部署到k8s实例

    k8s && ceph 环境信息 ceph 部署以及配置 搭建ceph集群 ceph 集群配置 ceph 创建My...

  • ceph命令

    ceph集群的监控检查集群的健康情况 # ceph health # ceph health detail 得到集...

  • (一) Ceph集群环境准备

    Ceph集群环境准备 基于本机搭建ceph集群及cephfs、cephrgw、cephrbd服务。 集群规划 生产...

  • ceph 简介

    ceph:对象存储、块设备、文件系统... ceph存储集群的部署都始于一个个ceph节点,网络,ceph存储集群...

  • 分布式(集群)计算VS云计算VS大数据

    分布式(集群)计算是指在集群环境下完成计算任务的框架设计,核心在于如何高效能的在集群上分配数据和计算。 云计算一般...

  • ceph常用运维技巧总结1

    格式 json 数据增强可读性 ceph集群报 Monitor clock skew detected 错误问题排...

  • ceph分布式存储-全局Ceph节点宕机处理

    4. 全局Ceph节点宕机处理 在极端情况下,如数据中心断电,造成 Ceph 存储集群全局宕机,可以按照本节所示流...

网友评论

      本文标题:ceph:如何计算集群数据恢复时间

      本文链接:https://www.haomeiwen.com/subject/kmfefltx.html