硬核|深信服分布式存储通过泰尔实验室压力测试,多项指标成业界标杆!
  

sangfor_基础架构 4003

{{ttag.title}}


​存储成本高、扩容难?

当数据量达到一定程度时,性能严重衰减?

可靠性保障只能被动防御,不能主动出击?

这款分布式存储,让问题迎刃而解。


     

      日前,某公司企业级分布式存储EDS正式通过中国某公司权威机构测试验证。本次测试,某公司对某公司分布式存储EDS的性能、可靠性、海量文件处理能力、多中心部署等20项能力进行了严格的验证。在此20项测试指标中,某公司EDS均拿下优良成绩。


尤其在性能测试中,某公司EDS 3节点标准配置实现高达34万以上的IOPS(图1);轻松承载100亿小文件(图2),且性能抖动不超过5%;对象上传速度达到15,000个/s(图3),对象下载速度达到40,000个/s,一跃成为了存储业界性能标杆。


中国某公司
      中国某公司是国内领先的通信产业测试机构,由信息产业部和某公司授权设立,主要面向通信技术、标准研究,产品测试验证等方向的科研机构,是目前中国通信技术领域最权威的评测机构之一。


      你知道么?某公司EDS在3节点标准配置下,块存储性能4KB随机读达到34W IOPS,可以媲美传统中端全闪存存储,但成本节省一半!

      某公司分布式存储EDS的块存储在3节点,每节点配置2块SSD+6块HDD的环境下,跑出了传统中端SAN存储29块SSD的性能参数,4KB随机读达到34W IOPS,可以支持2,000用户对Oracle数据库进行并发访问(TPM达到40万)。这其中的核心技术包括分层技术智能淘汰算法,以及自适应条带化技术


      某公司EDS通过自适应条带化技术将一块连续的数据切分成很多个小的数据块,然后并发地存储到不同物理硬盘上,实现对数据进行写入或读取时可以获得最大程度上的I/O 并发能力。在向不同物理硬盘存储数据时,分层技术与智能淘汰算法派上用场。分层技术包括三层机制,即内存、SSD、HDD,并以此区分存储资源性能。再通过智能淘汰算法,将热点数据通过副本的方式保存到SSD高性能存储资源中,提供高效的读写缓存能力。分层技术与智能淘汰算法充分发挥了SSD性能,从而大幅提高IOPS。

在块存储应用场景中,某公司EDS通过自适应条带化技术,再结合SSD与HDD的完美搭配,可以将随机读写的速度提高3-5倍。通过实际对比测试,某公司EDS采用3节点的2U存储设备,性能就可以媲美传统中端全闪存存储,建设成本至少节省一半。



      你知道么?某公司EDS在3节点标准配置下,对象存储可以承载100亿个小文件,且100亿时性能抖动不超过5%

      100亿个小文件相当于某个城市1万个摄像头,每个摄像头每天抓拍1万张照片,累积3个月产生的照片数量,意味着有几百亿甚至上千亿的元数据,某公司EDS能高效处理如此海量的元数据,具备极高的性能和承载能力。


      为此,某公司分布式存储EDS创新推出分布式数据库PhxKV。PhxKV具备优秀的性能扩展能力,EDS通过分布式数据库PhxKV承载元数据,使得存储集群在处理海量小文件时具备更高的性能与更优秀的性能稳定性,性能抖动不超过5%,为EDS在高效处理百亿级海量小文件的场景下发挥了重要作用,已经成为行业领先。



      你知道么?某公司EDS在3节点标准配置下,对象存储在100亿级别小文件规模下,性能达到上传15,000个/s,下载40,000个/s,相比业内对象存储产品,取得突破!

      某公司分布式存储EDS的对象存储在100亿规模小文件场景下的上传下载性能,得益于智能缓存小对象合并的技术突破,3节点性能达到上传15,000个/s(相当于15,000个摄像头,每秒各抓拍1张照片同时上传至存储系统),下载40,000个/s,与业内其他厂家的对象存储产品进行POC对比,有更好的表现。


      随着非结构化数据的爆发式增长,传统存储很容易面临着文件数量增长而性能急剧下降的难题。某公司EDS在海量小文件场景下依然保持高效的存取能力:

l  在文件上传场景下,EDS通过智能缓存技术将大文件直接写入HDD,而将小文件追加写入SSD中即返回,并在此过程中同时将小文件在线合并为一个EC满分条,然后按每个条带(大IO)写入HDD,极大地提高了文件上传性能。

l  在文件下载场景下,EDS利用SSD进行文件汇聚,并保留元数据在智能缓存中,减少系统频繁访问HDD的性能开销,大幅提升了文件下载性能。



      你知道么?某公司EDS在面对磁盘和主机叠加故障时,平台依旧稳定运行,不为所动!

      在测试中,某公司分布式存储EDS经受了中国某公司长时间的稳定性考验。在3节点EDS集群中,断电一台主机,同时再拔掉一块剩余节点的磁盘,模拟极端情况下的故障叠加,EDS依然可以做到故障自动切换,保障平台稳定,这归功于EDS健全的可靠性机制。


      传统存储的可靠性一般是通过冗余机制来达成,比如双控、RAID、热备盘等。分布式存储有多副本、纠删码、快照复制、多数据中心等技术,但这还是相对被动的保护方式。


      某公司EDS除了具备传统被动式保护机制之外,增加了多重主动防御能力来保障整个平台的高可靠性。

举个例子,硬盘属于易损件,在出故障前会有一段时间的亚健康状态。处于亚健康状态的硬盘,业务依旧可以运行,但体验、性能比正常要差一些,比如频繁抖动、时延变高、温度升高等。

某公司EDS可以通过AI智能检测系统,尽早发现寿命即将完结的SSD硬盘或者出现慢盘的硬盘,并第一时间给管理员告警。并且经过长时间和大量的错误代码训练,某公司EDS AI智能检测准确率高达98.5%。通过这种主动防御,EDS能做到防患于未然,避免突发故障造成的业务访问中断,可靠性完胜传统存储。



      你知道么?某公司EDS虽然是某公司推出的新品,但实际上某公司在存储领域已经有超过5年的技术积累和实践。

      2013年某公司存储就成立独立研发部门,为各个产品线提供存储技术支撑;2014年开始应用于桌面云的数据承载;2015年又应用于超融合平台,并在当年就完成了第一个Oracle RAC项目的交付。

目前已经有大量用户采用某公司分布式存储EDS来支撑桌面虚拟化和数据中心业务,其中桌面虚拟化终端用户超过95万(截至2019年6月底);超融合用户超过5,000家,且有超过一半的用户用于承载数据库等核心业务。某公司EDS通过大规模部署实践和经验积累,长期稳定、可靠承载用户业务数据,成为政府、教育、制造、广电、医疗、金融等行业用户信赖的存储方案。




      你知道么?某公司EDS一直在大步跨越,创造惊喜,助力云存储、海量非结构化数据存储等场景用户通过“一套架构”实现块、对象、文件和数据服务的有效整合,带给用户极简、可靠、高性能的品质存储体验。

附(某公司EDS中国某公司测试内容及结果):

关于某公司新IT
某公司基于软件定义重塑IT基础架构,为用户提供敏捷、智能、安全的新一代IT基础设施,包括桌面云aDesk、应用交付AD、软件定义广域网SD-WAN、企业级分布式存储EDS等。某公司打造的新一代IT基础设施解决了传统基础设施面临的效率低、成本高、安全性差等一系列问题,加速用户的数字化转型进程。

打赏鼓励作者,期待更多好文!

打赏
暂无人打赏

发表新帖
热门标签
全部标签>
西北区每日一问
技术盲盒
【 社区to talk】
安全效果
干货满满
技术笔记
每日一问
信服课堂视频
GIF动图学习
新版本体验
技术咨询
2023技术争霸赛专题
功能体验
产品连连看
安装部署配置
通用技术
秒懂零信任
技术晨报
自助服务平台操作指引
原创分享
标准化排查
排障笔记本
玩转零信任
排障那些事
SDP百科
深信服技术支持平台
畅聊IT
答题自测
专家问答
技术圆桌
在线直播
MVP
网络基础知识
升级
安全攻防
上网策略
测试报告
日志审计
问题分析处理
流量管理
每日一记
运维工具
云计算知识
用户认证
解决方案
sangfor周刊
VPN 对接
项目案例
SANGFOR资讯
专家分享
技术顾问
信服故事
功能咨询
终端接入
授权
设备维护
资源访问
地址转换
虚拟机
存储
迁移
加速技术
产品预警公告
信服圈儿
S豆商城资讯
技术争霸赛
「智能机器人」
追光者计划
社区帮助指南
答题榜单公布
纪元平台
卧龙计划
华北区拉练
天逸直播
以战代练
山东区技术晨报
文档捉虫活动
齐鲁TV
华北区交付直播
每周精选
2024年技术争霸赛
北京区每日一练
场景专题
故障笔记
高手请过招
升级&主动服务
高频问题集锦
社区新周刊
POC测试案例
全能先锋系列
云化安全能力

本版达人