0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看威廉希尔官方网站 视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

EC改进方案选型:容灾方案在性能和可靠性方面如何做验证

Ceph对象存储方案 来源:Ceph对象存储方案 作者:Ceph对象存储方案 2021-01-06 17:27 次阅读

EC改进方案选型

接上篇,介绍一下整个容灾方案在性能和可靠性方面如何做验证。

3个机柜,每个机柜15台机器,总共45台,需要在RBD场景下,找到成本、性能、数据可靠性的三者平衡点。

c7301826-4ff6-11eb-8b86-12bb97331649.jpg

跨机柜容灾方案1

c79cfb12-4ff6-11eb-8b86-12bb97331649.jpg

支持2个机柜级别的容灾,跨3个机柜单个分组共9个节点,共5个分组,对应的理论收益情况如下

名称 K M D 3副本得盘率 EC得盘率 硬件成本节约比率 磁盘数据迁移量(ISA) 磁盘数据迁移量(CLAY) 数据恢复负载降低比率
3+2 3 2 4 33.33333333 60 180 3 2 33.33333333

o4YBAF_1gsKARJG0AAAqUIurg1U783.jpg


对应的crush rule如下

o4YBAF_1guyAACb2AAA9zwM_7SE979.jpg

单机柜容灾方案2

c82775c6-4ff6-11eb-8b86-12bb97331649.jpg

支持1个机柜级别的容灾,单个分组共5个节点,共9个分组,对应的理论收益情况如下

名称 K M D 3副本得盘率 EC得盘率 硬件成本节约比率 磁盘数据迁移量(ISA) 磁盘数据迁移量(CLAY) 数据恢复负载降低比率
4+3 4 3 6 33.33333333 57.14285714 171.4285714 4 2 50
5+3 5 3 7 33.33333333 62.5 187.5 5 2.333333333 53.33333333
6+3 6 3 8 33.33333333 66.66666667 200 6 2.666666667 55.55555556

从性能最优原则,K+M总和最小则对应的理论性能最优,所以单机柜容灾模型下,4+3成为最优方案。

对应的ec配置如下

o4YBAF_1gwKAEo-pAAApeoYi218109.jpg

对应的crush rule如下

o4YBAF_1gxWAU4z4AAA9bNt8K54717.jpg

crush rule的生成与rule的验证interwetten与威廉的赔率体系

o4YBAF_1gymAXPN_AABFMkPvAw4057.jpg

容灾能力测试场景

性能测试

RBD场景,模拟大、小文件,顺序/随机读写,获取对应的fio性能基准数据,对比3副本与EC的性能差距。
3副本 vs CLAY_3+2 vs CLAY_4+3

场景名称 iops 带宽 90th延时 99th延时 备注
3副本-4M顺序读
3+2-4M顺序读
4+3-4M顺序读
3副本-4M顺序写
3+2-4M顺序写
4+3-4M顺序写
3副本-4k随机写
3+2-4k随机写
4+3-4k随机写
3副本-4k随机读
3+2-4k随机读
4+3-4k随机读

故障恢复效率

前置条件:集群提前写入容量60%,模拟已有数据场景
目标:对比ISA和CLAY在K+M相同的情况下,RBD场景下持续读写数据,模拟单块OSD、单个OSD节点故障、多个OSD节点故障(可选),数据迁移所需的时长,同时记录对应的CPU、内存、网卡负载消耗情况,以及性能波动情况。

容灾能力

前置条件:集群提前写入容量60%,模拟已有数据场景
目标:RBD场景下持续读写数据,模拟最小故障域、单机柜、双机柜故障,记录对应的性能波动情况,考察在极端情况下整个集群的服务可用性和数据可靠性。

跨机柜容灾方案1

c87ec0d8-4ff6-11eb-8b86-12bb97331649.jpg

单机柜容灾方案2

c8b68284-4ff6-11eb-8b86-12bb97331649.jpg

责任编辑:xj

原文标题:Ceph最新的EC-CLAY插件调研-下

文章出处:【微信公众号:Ceph对象存储方案】欢迎添加关注!文章转载请注明出处。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机柜
    +关注

    关注

    0

    文章

    45

    浏览量

    10340
  • 容灾实现
    +关注

    关注

    0

    文章

    2

    浏览量

    6730
  • Ceph
    +关注

    关注

    1

    文章

    22

    浏览量

    9402

原文标题:Ceph最新的EC-CLAY插件调研-下

文章出处:【微信号:cephbook,微信公众号:Ceph对象存储方案】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    不同制造商TOPCon光伏组件的老化测试:性能、稳定性与可靠性

    随着TOPCon威廉希尔官方网站 市场份额的快速增长,对其可靠性评估需求迫切。尽管早期报告认为TOPCon比PERC更可靠,但该威廉希尔官方网站 光伏组件可靠性方面
    的头像 发表于 12-05 01:06 323次阅读
    不同制造商TOPCon光伏组件的老化测试:<b class='flag-5'>性能</b>、稳定性与<b class='flag-5'>可靠性</b>

    GaN可靠性测试新突破:广电计量推出高压性能评估方案

    ,GaN的可靠性评估及全面性能测试仍面临挑战,尤其是高耐性、优异热阻及极低界面电容等性能测试威廉希尔官方网站 国内尚待成熟。基于此,广电计量集成电路测试与分析研究所推出了GaN功
    的头像 发表于 11-28 09:56 259次阅读
    GaN<b class='flag-5'>可靠性</b>测试新突破:广电计量推出高压<b class='flag-5'>性能</b>评估<b class='flag-5'>方案</b>

    半导体封装的可靠性测试及标准

    的第三方检测与分析机构,提供全面的可靠性测试服务,帮助客户确保产品各种条件下的稳定性与性能。产品可靠性的重要产品
    的头像 发表于 11-21 14:36 190次阅读
    半导体封装的<b class='flag-5'>可靠性</b>测试及标准

    PCB高可靠性化要求与发展——PCB高可靠性的影响因素(上)

    可靠性提出了更为严格的要求,特别是焊接点的结合力、热应力管理以及焊接点数量的增加等方面。本文将探讨影响PCB可靠性的关键因素,并分析当前和未来提高PCB
    的头像 发表于 10-11 11:20 332次阅读
    PCB高<b class='flag-5'>可靠性</b>化要求与发展——PCB高<b class='flag-5'>可靠性</b>的影响因素(上)

    基于可靠性设计感知的EDA解决方案

    产品可靠性,包括制造和运营方面,正在成为芯片-封装-系统迭代设计周期中设计的关键方面,尤其是那些有望承受更长使用寿命和可能的恶劣操作环境的产品,例如汽车电子系统、高性能计算 (HPC)
    的头像 发表于 07-15 09:56 421次阅读
    基于<b class='flag-5'>可靠性</b>设计感知的EDA解决<b class='flag-5'>方案</b>

    汽车功能安全与可靠性的关系

    当前,随着汽车领域的飞速发展,汽车也被重新定义。汽车电子电气系统设计时,离不开对功能安全和可靠性设计的考虑。正确理解两者之间的关系,有助于更好地分析问题和解决问题。什么是汽车可靠性汽车可靠性
    的头像 发表于 07-13 08:28 3220次阅读
    汽车功能安全与<b class='flag-5'>可靠性</b>的关系

    DCAC电源模块:效率与可靠性兼备的能源转换解决方案

    BOSHIDA DC/AC电源模块:效率与可靠性兼备的能源转换解决方案 随着科技的迅速发展和人工智能威廉希尔官方网站 的逐渐成熟,各种电子设备的需求也日益增加。然而,这些设备往往需要不同的电压和电流来正常工作,而
    的头像 发表于 06-27 13:12 567次阅读
    DCAC电源模块:效率与<b class='flag-5'>可靠性</b>兼备的能源转换解决<b class='flag-5'>方案</b>

    华为云 618 营销季来袭,数据方案为云端业务筑牢安全防线

    不可或缺的前提和基础。 在数智化进程中,备份能够确保企业业务的连续和稳定性。但中小企业如何选择适合自己的方案,又成为新的难题。华为
    的头像 发表于 06-21 17:29 312次阅读
    华为云 618 营销季来袭,数据<b class='flag-5'>灾</b>备<b class='flag-5'>方案</b>为云端业务筑牢安全防线

    半导体封装威廉希尔官方网站 的可靠性挑战与解决方案

    随着半导体威廉希尔官方网站 的飞速发展,先进封装威廉希尔官方网站 已成为提升芯片性能、实现系统高效集成的关键环节。本文将从生态系统和可靠性两个方面,深入探讨半导体先进封装威廉希尔官方网站 的内涵、发展趋势及其面临的挑战。
    的头像 发表于 05-14 11:41 1073次阅读
    半导体封装威廉希尔官方网站
的<b class='flag-5'>可靠性</b>挑战与解决<b class='flag-5'>方案</b>

    谷景成功为客户汽车双滑轨项目提供电感替代方案

    方案,满足了客户新项目中对多套威廉希尔官方网站 方案验证的需求。 客户需求背景: 该客户新项目的汽车双滑轨应用中,原来的电感
    的头像 发表于 04-18 13:27 238次阅读

    数仓中搭建细粒度应用的主要步骤

    对于MPPDB集群的而言,目前业界的常见方案要么是部署两套规格配置同等的集群,要么通过逻辑双加载方式去实现,这两个方案缺点比较明显,存在架构复杂、建设成本高等问题,不仅使得
    的头像 发表于 02-22 11:19 408次阅读
    数仓中搭建细粒度<b class='flag-5'>容</b><b class='flag-5'>灾</b>应用的主要步骤

    线路板变形对电路性能可靠性有影响吗?

    线路板变形对电路性能可靠性有影响吗? 线路板是连接和组织电子元件的重要组成部分。线路板的设计和制造对电路性能可靠性有着重要的影响。线路板的变形可能会导致电路的信号传输受损、电子元件
    的头像 发表于 01-29 13:58 679次阅读

    美国站群服务器优化:提升性能可靠性的关键功能

    随着互联网的迅猛发展,网站的性能可靠性成为了企业成功的关键因素之一。美国作为全球互联网的中心,其站群服务器全球范围内都有着广泛的应用。本文将探讨美国站群服务器优化的关键功能,以提升其性能
    的头像 发表于 01-25 11:56 341次阅读

    安森美IGBT常规进行的可靠性测试方案

    用于确定漏电流的稳定性,这与IGBT的场畸变有关。HTRB 通过高温反向偏置测试来增强故障机制,因此是器件质量和可靠性的良好指标,也可以验证过程控制的有效
    发表于 01-17 09:57 759次阅读
    安森美IGBT常规进行的<b class='flag-5'>可靠性</b>测试<b class='flag-5'>方案</b>

    IGBT的可靠性测试方案

    在当今的半导体市场,公司成功的两个重要因素是产品质量和可靠性。而这两者是相互关联的,可靠性体现为在产品预期寿命内的长期质量表现。任何制造商要想维续经营,必须确保产品达到或超过基本的质量标准和可靠性
    的头像 发表于 01-17 09:56 1452次阅读
    IGBT的<b class='flag-5'>可靠性</b>测试<b class='flag-5'>方案</b>