热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

以太网的分层架构_【观察】西部数据:再定义分层存储架构,赋能数据中心新基建...

申耀的科技观察读懂科技,赢取未来!今年以来,“新基建”成为社会各界关注的焦点,“新基建”在各领域的加速建设,将
65171b4cea5b6600508fb8e393142ca8.png

申耀的科技观察

读懂科技,赢取未来!

85200ebb130d25b204b9e9930ea55636.png85200ebb130d25b204b9e9930ea55636.png85200ebb130d25b204b9e9930ea55636.png85200ebb130d25b204b9e9930ea55636.png今年以来,“新基建”成为社会各界关注的焦点,“新基建”在各领域的加速建设,将会极大地推动数据爆发性增长,这既是企业未来发展最重要的驱动力,但同时也给企业在数据管理的方方面面提出了更大的挑战。

42c7fbaf8ca7ea5d08f70656420e1ccb.png

 正如西部数据公司副总裁兼中国区业务总经理刘钢,在今年的ODCC峰会上所言:“数据是数字经济的关键要素,今天的数据不仅在快速增长,而且其使用场景也在多元化和多样化。因此,数据的精细化规划与运营变得十分重要,而分层存储正是解决这一问题的最佳方式。”在此过程中,作为专注存储市场50年的西部数据,始终站在技术与应用的最前沿,且随着环境和用户需求的变化而不断地进化和迭代,通过对分层存储架构的创新,并提供全场景存储解决方案,不仅为企业数据中心基础设施的转型和升级提供了重要的支撑,更驱动了数据管理进入了精细化的时代。毫无疑问,西部数据一系列的创新与实践,将让它在未来的存储市场变革中,实现“长跑”乃至“领跑”都将起到更加至关重要的作用,并为释放数据中心“新基建”更大潜能奠定坚实的基石。再定义分层存储架构事实上,过去业界对企业级HDD市场似乎有一个认识误区,认为其未来可能会缓慢甚至是停滞增长,但Gartner的预测数据却显示,企业级SSD从2018年到2023年的年复合平均增长率为47%,同时企业级HDD的年复合平均增长率也能达到39%,可见二者都仍然处在快速的增长的通道之中。在刘钢看来,这背后反映了一个新的变化趋势,那就是今天企业的数据不但保持着指数级的增长,同时其类型也越来越多样化,这就要求存储的稳定性、可扩展性以及性能同样也需要“与时俱进”地保持进化与迭代。确实如此,目前海量的数据正从核心、边缘和终端快速产生,这些不同应用场景下对数据存储的需求往往也是不相同的,有的需要大容量、低功耗,甚至低成本的存储数据;有的则需要对数据进行快速反馈、实时分析,能够作出预测判断,这就需要快数据;此外,海量的数据传输并存储于边缘节点、核心节点以及终端节点,也需要不同的存储解决方案。“这些不同的要求叠加在一起,很难用一种或者两种简单的分类方式来存储,比如仅用固态硬盘、传统硬盘来做,同时数据中心中的存储对性能、成本的要求占比越来越大。所以,精细化的规划与运营尤其重要,这就需要对存储进行重新分层。”刘钢说。但在过去,企业通常会根据业务的不同需求,将数据划分为三个分层,即热数据、温数据和冷数据,或者更加简单的划分为快数据或者大数据,显然这样的划分方式是相当粗放的,也是不够精细化的。那么,如何更精细化的划分存储分层呢?刘钢表示,在“存储金字塔”中可以根据应用场景的不同划分为五层,同时每一个分层中也需要不同的产品来满足这种差异化的需求,具体来看:

2d49f0421a511d88aff43855511c3c84.png

 处在“塔顶”的是极热存储,需要靠近处理器的DRAM来进行存储;而往下是热存储,它往往是那些持续低延时、高IOPS、高带宽应用的需求,如OLTP、DSP、自动驾驶等,那么高性能的SSD就“不可或缺”;再往下是温存储,它的特征是有较高性能IOPS、带宽要求、但其性能峰值不稳定,主要应用在AI训练和传统企业应用工作负载之中,而主流SSD就可以满足其需求。接下来是对性能没有那么高要求,但对成本有比较苛刻的数据分层,即冷存储和极冷存储。其中,冷存储的特点是少量写入、多次读取,数据与温数据有较强的相关性,典型的应用场景是存储备份,在线交易用户画像分析等,而CMR HDD是其存储的最佳选择;最后是处于“塔底”的极冷存储,其特征是一次写入、极少读取,往往是一些持久数据,通常面向监控,归档等存储需求,典型应用可见于金融、医疗、广电行业数据长期归档,那么使用SMR HDD就可以满足其应用需求。不难发现,随着海量数据的不断增长,应用场景的不断变化,过去传统存储架构也到了转型和升级的关键时刻,因此重构分层存储架构,同时基于不同的存储产品来应对不同的工作负载,以最大化的提升性能和响应速度,并降低成本已是大势所趋。全场景存储化解挑战也正是洞察到这种变化,作为业内少有的几家能够提供全场景存储解决方案的公司,西部数据为企业客户提供了从芯片到系统广泛而完整的产品组合,包括面向超大规模数据中心和云计算等冷存储存储需求的Ultrastar DC HC550&650 HDD;适用于温存储的70/30读写混合工作负载的主流SSD Ultrastar DC SN640;以及为热存储提供最佳性能的Ultrastar DC SN840 SSD,以完整全面的存储解决方案,满足客户的多样化需求。在企业级HDD领域,西部数据Ultrastar DC HC550&650具备超大容量支持,单盘能够提供16TB、18TB以及20TB的选择,这类大容量HDD的好处在于能够以更大容量、更低能耗、更高效率提供更优的TCO。测试数据显示,如果以14TB和18TB HDD相对比的话,18T的HDD在存储密度上提高29%,功耗上降低21%,整体成本却降低了11%。

4bcdc4214de52c3058f8bec151257847.png

 刘钢告诉我:“我们在大容量硬盘技术上的优势,建立在西部数据在几个核心关键技术上的突破:一是氦气封装,它可以非常紧密的悬浮在存储介质上读写,可以形象的比喻为一架波音777飞机,能够贴近地面的距离持续飞行5年;二是叠瓦式磁记录(SMR)和能量辅助磁记录(EAMR)的广泛使用,由此进一步提高了HDD的存储密度,因此它们在冷存储与极冷存储的应用场景当中都能够承担重任。”在企业级SSD领域,西部数据此前发布了针对主流工作负载的DC SN640 NVMe 固态硬盘,今年又发布了新款 Ultrastar DC SN840 NVMe 固态硬盘,两款企业级SSD都具有最佳的计算存储和缓存性能。其中,西部数据Ultrastar DC SN640 NVMe SSD主要针对混合应用场景,具备高达469K的IOPS,适用于70%读 30%写混合工作负载;而西部数据Ultrastar DC SN840 NVMe SSD,则针对高性能计算场景,可实现50%读和50%写的工作负载,具备高达780K的IOPS,能够确保负载着关键业务应用的服务器的稳定运行。“西部数据在企业级SSD领域拥有三大核心技术优势,即集成完全自主的NAND Flash、先进的SSD控制器和高性能固件于一体,这种纵向集成的能力不仅能够让SSD实现高效能,而且是持续稳定的提供高效能。此外,西部数据的NAND Flash,其市占率也占全球NAND总体颗粒数的35%以上。”刘钢说。

744cc60e2839ff31e5cf90913a3f97ed.png

 正因为如此,在今年的ODCC峰会上,西部数据 Ultrastar DC SN840 NVMe SSD 荣获综合性能奖、Ultrastar DC HC550 CMR HDD 18TB荣获CMR技术集成奖,这也另一个侧面印证了西部数据存储产品的优异性能与创新能力。此外,在企业级存储平台上,西部数据还推出新款的OpenFlex Data24 NVMe-oF JBOF,它可以将高性能Ultrastar DC SN840 SSD延展到整个低延迟以太网数据结构中,提供高达368TB的共享存储容量,这也为超大规模数据中心,OEM和企业级用户提供了更多的选择。由此可见,未来的存储架构必须是灵活多变的,并能够为各种复杂的工作负载提供持续的、可靠的且按需扩展的高性能服务,而西部数据无论是在企业级HDD、还是企业级SSD,以及在企业级存储平台上,都以其出色的容量密度、超高的性能和极大的扩展性,为现代数据中心提供了最大的工作负载性能优化和更低的总体拥有成本。赋能数据中心新基建正所谓“耳听为虚,眼见为实”,凭借一系列的技术上的创新,西部数据如今也赢得了越来越多中国企业级客户的信任和支持。今年8月,UCloud 发布的新一代公有云归档存储,就应用了西部数据Ultrastar HelioSeal SMR HDD 及 JBOD 存储平台。针对企业用户的大数据、冷数据存储以及超算等业务场景,通过混合云架构迁入UCloud优刻得乌兰察布数据中心,使其基础设施成本将直降50%,对外的价格仅为0.024元/GB/月,真正为企业级用户提供了更经济的冷数据存储。不仅如此,网宿专有云也应用了西部数据Ultrastar DC HC650 HDD,SN840/SN640 NVMe SSD及JBOD存储平台,由此实现了日均处理万亿级的服务请求,可分发超过123 亿个流媒体文件。

e96726906d07a31bc88d07e912406717.png

 对此,刘钢说:“UCloud、网宿这样的客户选择西部数据,其实正是存储变化多样性的体现,未来西部数据还会坚持和不同的云服务商上一起,探索在具体应用场景中如何去优化存储,进一步提高效能并降低成本。”以西部数据Ultrastar DC SN840 SSD为例,这款SSD看似是一款产品,但其有单通道和双通道,通过不同通道数的组合其实可以形成四款产品,那么用户选择哪种产品组合,哪种配置最合适?这就需要贴近用户的应用场景去做优化。据介绍,目前西部数据在中国已搭建专门的云服务商团队,可对新一代云服务商、互联网服务商客户提供满足不同应用场景的定制化解决方案。在此基础上,作为一家拥有从芯片到系统全栈能力的公司,西部数据在HDD和SSD领域也有非常深厚的技术优势和研发积累,未来也希望加入到ODCC这样的开放计算组织中,贡献西部数据在基础架构方面的力量,推动存储新技术能更快的落地。而针对大量企业级客户的需求,刘钢认为加强精细化规划与运营已经“势在必行”。例如,很多企业习惯在招标采购中采用统一的硬盘容量,但这种方式无论从成本还是从性能上来说,都不是最优化的。换句话说,试图用一种存储介质去适配所有的存储数据,并不是“最优解”,而正确的做法是,一定要根据存储的分层去采购不同介质的存储,以及选择最适合的存储容量,由此才能化解存储分层带来的新挑战。

9cf492ca2a27bd5d40c814996d34d8b3.png

 “很多企业在数据中心构建的过程中,往往把精力花在计算的部分,但其实存储对企业的预算和性能的影响也非常大,使用粗放的方式规划存储的方法,有点忽略了存储的影响力。因此,我们建议未来企业采购存储时,要特别注意两个方向:首先是要关注异构存储,这就需要做好精细化的存储规划;其次是大数据存储,这方面大容量的硬盘往往是企业最佳的选择。”刘钢最后表示。结语总的来说,未来企业利用创新的存储介质和技术实现对“存储金字塔”中存储的升级和替换速度还会加快,而西部数据无疑会是企业存储架构重构之路上的最佳合作伙伴,而也正是西部数据始终坚持技术创新所体现出来的价值和意义所在。从这个角度来看,西部数据未来不仅能够在数据中心“新基建”中发挥出更加重要的作用,同样也可以在企业数字化转型升级过程中扮演更为关键的角色。

cbf08de52eff77b274366844db4f2b3a.gif

申耀的科技观察,由科技与汽车跨界媒体人申斯基(微信号:shenyao)创办,18年企业级媒体工作经验,专注产业互联网、企业数字化、渠道生态以及汽车科技内容的观察和思考。

119e122b61ea363a2bcd8808ef8ceb40.png




推荐阅读
  • 我一直都有记录信息的习惯,不知是从什么时候开始,大约是在工作后不久。如今还真有点庆幸从那时开始记了点东西,当然是电子版的,写 ... [详细]
  • 基于PgpoolII的PostgreSQL集群安装与配置教程
    本文介绍了基于PgpoolII的PostgreSQL集群的安装与配置教程。Pgpool-II是一个位于PostgreSQL服务器和PostgreSQL数据库客户端之间的中间件,提供了连接池、复制、负载均衡、缓存、看门狗、限制链接等功能,可以用于搭建高可用的PostgreSQL集群。文章详细介绍了通过yum安装Pgpool-II的步骤,并提供了相关的官方参考地址。 ... [详细]
  • 开发笔记:加密&json&StringIO模块&BytesIO模块
    篇首语:本文由编程笔记#小编为大家整理,主要介绍了加密&json&StringIO模块&BytesIO模块相关的知识,希望对你有一定的参考价值。一、加密加密 ... [详细]
  • 图解redis的持久化存储机制RDB和AOF的原理和优缺点
    本文通过图解的方式介绍了redis的持久化存储机制RDB和AOF的原理和优缺点。RDB是将redis内存中的数据保存为快照文件,恢复速度较快但不支持拉链式快照。AOF是将操作日志保存到磁盘,实时存储数据但恢复速度较慢。文章详细分析了两种机制的优缺点,帮助读者更好地理解redis的持久化存储策略。 ... [详细]
  • 如何在服务器主机上实现文件共享的方法和工具
    本文介绍了在服务器主机上实现文件共享的方法和工具,包括Linux主机和Windows主机的文件传输方式,Web运维和FTP/SFTP客户端运维两种方式,以及使用WinSCP工具将文件上传至Linux云服务器的操作方法。此外,还介绍了在迁移过程中需要安装迁移Agent并输入目的端服务器所在华为云的AK/SK,以及主机迁移服务会收集的源端服务器信息。 ... [详细]
  • 服务器上的操作系统有哪些,如何选择适合的操作系统?
    本文介绍了服务器上常见的操作系统,包括系统盘镜像、数据盘镜像和整机镜像的数量。同时,还介绍了共享镜像的限制和使用方法。此外,还提供了关于华为云服务的帮助中心,其中包括产品简介、价格说明、购买指南、用户指南、API参考、最佳实践、常见问题和视频帮助等技术文档。对于裸金属服务器的远程登录,本文介绍了使用密钥对登录的方法,并提供了部分操作系统配置示例。最后,还提到了SUSE云耀云服务器的特点和快速搭建方法。 ... [详细]
  • 一句话解决高并发的核心原则
    本文介绍了解决高并发的核心原则,即将用户访问请求尽量往前推,避免访问CDN、静态服务器、动态服务器、数据库和存储,从而实现高性能、高并发、高可扩展的网站架构。同时提到了Google的成功案例,以及适用于千万级别PV站和亿级PV网站的架构层次。 ... [详细]
  • 本文介绍了Redis中RDB文件和AOF文件的保存和还原机制。RDB文件用于保存和还原Redis服务器所有数据库中的键值对数据,SAVE命令和BGSAVE命令分别用于阻塞服务器和由子进程执行保存操作。同时执行SAVE命令和BGSAVE命令,以及同时执行两个BGSAVE命令都会产生竞争条件。服务器会保存所有用save选项设置的保存条件,当满足任意一个保存条件时,服务器会自动执行BGSAVE命令。此外,还介绍了RDB文件和AOF文件在操作方面的冲突以及同时执行大量磁盘写入操作的不良影响。 ... [详细]
  • Vagrant虚拟化工具的安装和使用教程
    本文介绍了Vagrant虚拟化工具的安装和使用教程。首先介绍了安装virtualBox和Vagrant的步骤。然后详细说明了Vagrant的安装和使用方法,包括如何检查安装是否成功。最后介绍了下载虚拟机镜像的步骤,以及Vagrant镜像网站的相关信息。 ... [详细]
  • 本文介绍了操作系统的定义和功能,包括操作系统的本质、用户界面以及系统调用的分类。同时还介绍了进程和线程的区别,包括进程和线程的定义和作用。 ... [详细]
  • 篇首语:本文由编程笔记#小编为大家整理,主要介绍了软件测试知识点之数据库压力测试方法小结相关的知识,希望对你有一定的参考价值。 ... [详细]
  • 单页面应用 VS 多页面应用的区别和适用场景
    本文主要介绍了单页面应用(SPA)和多页面应用(MPA)的区别和适用场景。单页面应用只有一个主页面,所有内容都包含在主页面中,页面切换快但需要做相关的调优;多页面应用有多个独立的页面,每个页面都要加载相关资源,页面切换慢但适用于对SEO要求较高的应用。文章还提到了两者在资源加载、过渡动画、路由模式和数据传递方面的差异。 ... [详细]
  • 一次上线事故,30岁+的程序员踩坑经验之谈
    本文主要介绍了一位30岁+的程序员在一次上线事故中踩坑的经验之谈。文章提到了在双十一活动期间,作为一个在线医疗项目,他们进行了优惠折扣活动的升级改造。然而,在上线前的最后一天,由于大量数据请求,导致部分接口出现问题。作者通过部署两台opentsdb来解决问题,但读数据的opentsdb仍然经常假死。作者只能查询最近24小时的数据。这次事故给他带来了很多教训和经验。 ... [详细]
  • 服务网关与流量网关
    一、为什么需要服务网关1、什么是服务网关传统的单体架构中只需要开放一个服务给客户端调用,但是微服务架构中是将一个系统拆分成多个微服务,如果没有网关& ... [详细]
  • 寻求更强大的身份和访问管理(IAM)平台的企业正在转向云,并接受身份即服务(IDaaS)的灵活性。要为IAM选择正确的场外解决方案,业务管理人员和IT专业人员必须在实施之前评估安全 ... [详细]
author-avatar
爱的记忆2502913597
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有