这段时间有点忙,好久没有更新公众号了。昨天有个粉丝催更,所以,我只能周末花点时间,和你们继续分享个人存储学习经验。数据库
这个时代变化很快,纳斯达克100指数拼多多取代NetApp,这个新闻令我特别感慨。编程

PingWest品玩8月15日讯,纳斯达克交易所宣布,拼多多将在2020年8月24日开盘前取代NetApp成为纳斯达克100指数成分股。服务器

拼多多,原来特别讨厌,如今我用得不少,淘宝已经基本不用了。由于拼多多假货少了,价格也比淘宝实惠,关键所有免邮,购物体验很是好。淘宝的邮费太乱了,8块钱的东西,邮费收你20块,这种订价模式,让你比价的时候永远不知道那个最便宜。而拼多多就没有这个烦恼,我基本都是快速下单,由于所有包邮,直接比价就能够了。微信
拼多多表明互联网新贵,而NetApp表明传统科技企业。这种喜新厌旧,表明一个新的时代开始了。网络
但存储技术也在快速发展,虽然没有互联网的巨变,可是也没有一潭死水。今天,我就分享一下Gartner今年的存储技术成熟度曲线,看看和去年有什么变化。架构

在"Hype Cycle for Storage and Data Protection Technologies, 2020"报告里,app
,Gartner评估了IT领导者必须评估以解决企业快速发展的需求的24种最相关的存储和数据保护技术。
机器学习
2020年炒做周期中审查的技术有一半以上将在将来五到十年内成熟,而若是真正的业务需求推进,则有60%的技术有可能带来高收益。为了向读者提供更清晰,更专一的研究以支持他们的分析和计划,今年Gartner删除了一些再也不被大肆宣传的创新配置文件。编辑器
2020年的曲线和2019年的曲线,咱们对比一下,发现:
分布式
云存储网关创新配置文件已删除,由于它在高原以前已过期。
如下配置文件已被删除,由于它们已经到期而且再也不被炒做:
-
企业端点备份 -
虚拟机备份和恢复
2020年增长了三个新的创新配置文件:计算存储,容器备份和dHCI。尽管这些技术在价值主张上有很大不一样,但它们反映了IT领导者优先考虑利用新的闪存技术,改进和现代化数据保护以及为存储和数据保护平台利用新的部署模式。
今年快速发展的技术包括存储级内存固态硬盘、NVMe-oF和超融合,这些技术的采用率都在不断提升,这主要是因为人们但愿利用存储软件创新来实现基于行业标准硬件的高性能而又有弹性的存储基础设施。
以下描述的配置文件已更改:
NVMe和NVMe-oF更改成NVMe-oF。
存储级内存已分为两个配置文件:持久内存DIMM和存储级内存SSD。
关于优先级矩阵,咱们来看看其变化:
咱们看到,和2019年同样,具有transformational(变革性)优先级的仍是只有Infrasturcture SDS(简称iSDS)。但也还须要5-10年才能到达部署高峰。
其余的一些变化,你们能够本身寻找。
今天,咱们主要来仔细展开看看今年新入围的3个技术:计算存储,容器备份和dHCI。
计算存储(Computational Storage)
定义:计算存储(CS)结合了处理和存储介质,以容许应用程序在存储介质上运行,从而减轻了CPU主存储器的主机处理负担。目的是经过直接在存储设备内处理数据来减小数据移动。CS包含位于存储设备上的更复杂的处理功能。CS存储产品采用ASIC和SSD上的低功耗CPU内核的形式,具备更大的处理能力。
位置和采用速度的理由:计算存储为存储带来了计算能力,以减小存储和计算资源之间的数据移动中的性能低下和对延迟敏感的问题。基于CS的系统可能包括数据压缩,加密和独立磁盘冗余阵列(RAID)管理。随着数据量的增长,数据移动成为瓶颈。因为存储大小一般远远超过内存,所以必须从存储介质中读取数据。这阻碍了应用程序性能,破坏了大多数数据集的实时分析。存储与处理分开的原则仍然是大多数企业IT系统的核心原则。数据密集型应用程序,例如AI / ML,高性能计算,分析,经过消除瓶颈,高频交易以及身临其境的混合现实流媒体将最大程度地受益。边缘计算以及支持分布式处理的应用程序仍然是一个机会。此外,与包括工业标准固态介质的存储系统相比,在存储介质上进行处理能够提供显着的性能提高,更好的内存管理和节能。
用户忠告: CS市场仍处于开发阶段,少数供应商开始使用POC,限量和小批量生产系统。CS的早期用例正在迅速出现,包括机器学习处理,实时数据分析,高频交易,多媒体制做和高性能计算。跨多个CS节点运行的应用程序将表现最佳,并提供最大的收益。CS系统体系结构更加复杂,可能须要从新编译应用程序,可能须要其余API,或者使主机系统知道CS系统提供的服务。
建议I&O主管探索从特定用例中可能得到的收益,但应仔细权衡成本与性能收益之间的关系。在某些工做负载很是受输入/输出限制的状况下,尤为是在存储工做中受益最大的状况下,尤为如此。该部门由小型初创公司领导,所以建议I&O领导进行充分的尽职调查。另外,监视正在进行中的存储网络行业协会(SNIA)CS技术工做组(TWG)的发展状况,正在积极开展标准和互操做性工做,有20多家公司参与其中。
商业冲击:改组数TB的数据涉及成本和时间因素。CS能够为数据密集型应用程序提供实质性的性能优点,尤为是在边缘计算中。结合其低功耗,CS提升了每瓦性能比,从而下降了边缘应用的功耗成本。CS为增值存储服务(例如擦除编码和数据库分析功能)提供了一个可编程平台,从而大大下降了应用程序和服务器/计算成本。CS是对容器工做负载的补充。在固态媒体控制器中使用功能更强大的计算将提升存储效率并下降整体应用程序成本,从而使应用程序能够直接访问CS驱动器内部的NAND闪存芯片。经过利用通用闪存互连通道标准,能够在应用程序和固态媒体设备/控制器之间大幅增长带宽。可是,计算存储供应商面临的挑战是如何利用资源和功能将目标受众扩展到一些高级客户以外,以执行具备显着ROI优点的重要内部应用程序开发和测试。
福利等级:高
市场渗透率:不到目标受众的1%
成熟度:新兴
样本供应商: Eideticom; NETINT Technologies; NGD Systems; Nyriad; Samsung; ScaleFlux
西瓜哥认为,计算存储有点相似超融合,应该在边缘有较高的价值,但在数据中心,计算和存储多数状况仍是分开更好。如今服务器和存储之间的带宽已经不是问题,加上SDS的普及,使得大规模的计算和存储独立扩展更加灵活。
容器备份(Container Backup)
定义:容器备份解决方案主要经过管理具备集成功能的数据的其余副本的复制过程来保护使用持久性存储的容器中的数据,以将数据恢复为一致状态。容器备份解决方案既能够做为传统备份解决方案的一部分提供,也能够做为存储解决方案的一部分提供,也能够做为专用解决方案提供。
位置和采用速度的合理性:容器备份解决方案是一种新兴技术,能够保护组织在容器化环境中免受数据丢失。因为容器具备无状态架构,所以与在虚拟机或物理机中运行的传统应用程序相比,它们须要不一样的备份过程。领先的备份供应商开始经过与存储供应商提供的容器存储接口(CSI)插件提供的快照功能集成来保护持久性数据。容器备份在很大程度上是新生的,可是,企业环境中容器的采用曲线加速了对该领域数据保护解决方案的需求。
用户建议:在企业中采用容器的组织应根据应用程序的重要性评估容器备份的需求。此外,采用容器备份解决方案不只是技术选择,并且还须要与组织结构保持一致。与传统基础架构不一样,容器备份操做将由应用工程团队执行。所以,工程团队和备份团队之间可能须要必定程度的协调。保护容器还须要对备份基础架构进行额外的投资。与企业中的全部其余数据源同样,组织应采用一种容器备份策略。组织可能首先须要采用专门的容器备份解决方案,由于它们会成为重点,而企业供应商的采用会随着时间的推移逐渐成熟。
业务影响:容器备份解决方案可解决与容器环境相关的数据丢失风险。随着企业生产环境中容器的使用开始逐渐增长,保护数据的工做应与企业要求保持一致,就像全部企业数据同样。此外,在企业环境中备份容器将进一步推进容器的采用,由于它更好地与企业数据保护策略保持一致。可是,从数据保护治理的角度来看,容器备份将是另外一个须要照顾的数据源,这会增长组织的负担。
福利等级:中等
市场渗透率:不到目标受众的1%
成熟度:新兴
供应商样本:Cohesity; Commvault; Dell EMC; IBM; Kasten; Portworx; Rubrik; Trilio
西瓜哥仍是比较看好容器备份,由于存储有了CSI标准,在支持有状态容器这块发展很快,推进了容器在生产环境的应用,也大大增长了对容器备份的需求。容器备份将来的地位,就和如今虚拟机备份的地位相似,应该是每个备份厂商必备的功能。
dHCI(disaggregated HCI)
定义:分离式HCI是使用单独的计算和存储节点的三层存储体系结构。存储能够是基于外部控制器的横向扩展存储,也能够是专用的SDS。dHCI提供了简化的HCI管理模型,同时容许独立扩展计算和存储。
位置和采用速度的合理性:基于外部控制器(ECB)和软件定义的存储(SDS)的供应商已经推出了分离式HCI(dHCI)产品,以针对但愿易于使用超融合系统但又须要非对称扩展的客户计算和存储。与超融合相比,dHCI还能够支持裸机工做负载,而且能够提供更可预测的延迟和更高的存储吞吐量。
Datrium于2016年推出了首个dHCI解决方案(DVX)。紧随其后的是其余供应商,包括2017年的NetApp HCI和2019年的HPE Nimble Storage dHCI。随着愈来愈多的供应商进入市场,dHCI愈来愈受到青睐,并推进了集成基础架构系统(IIS)的增加。
用户建议: dHCI解决方案提供了ECB存储解决方案的许多优势,并结合了超融合解决方案的简单性和VM级别的存储供应功能。当I&O主管的工做负载知足如下条件时,应评估dHCI解决方案:
须要混合使用不一样的服务器大小和配置。
占用大量存储容量。
有不平衡的计算和存储增加要求。
要求极高的交易速率或吞吐量。
须要可预测的延迟。
在考虑实施dHCI解决方案时,I&O主管应:
肯定适合dHCI系统的特定工做量或计划。
服务器,存储和虚拟化团队共同实施,由于这三者都须要技能和项目一致性。
首先部署做为概念验证,以确保知足性能,可用性,自动化和易用性指望。
业务影响: dHCI能够提供更高的敏捷性,下降的服务成本以及增长达到服务水平的可能性。成功实施dHCI解决方案的I&O领导者将把dHCI视为一项战略投资,该投资可实现自动化,敏捷的体系结构,从而提供现代业务所需的灵活性和可扩展性。
福利等级:中等
市场渗透率:目标受众的1%至5%
成熟度:新兴
供应商样本: Datrium;HPE;NetApp
咱们知道,Nutanix发明了HCI,并且Nutanix也是HCI市场的领导者,虽而后来VMware迎头遇上。dHCI这个概念是Datrium发明的,但Datrium作得并很差,目前已经被VMware收购,并且其dHCI产品线中止销售,VMware只保留其DRaaS产品。如今市场上主推dHCI的主要是NetApp(NetApp没有HCI),后来HPE也加入(HPE一直有HCI)。西瓜哥比较看好dHCI,存储的厂商都比较喜欢dHCI,服务器厂商更喜欢HCI。dHCI若是采用SDS的方式,存储和计算独立扩展,但使用体验和HCI同样。你们须要注意的是,dHCI在市场数据统计的时候,Gartner是算在融合系统里,但不算在超融合里,但IDC是算在HCI市场里的。所以,之后dHCI市场若是起来的话,Gartner说的超融合和IDC说的HCI的市场数据可能差距会很大。
咱们看到,存储技术也在发展,虽然没有互联网发展那么快。但存储是以稳为主的,可靠性比速度更重要。虽然存储如今没有那么火了,但我仍是会继续坚持研究存储,继续和你们分享存储的学习经验。这个Gartner的报告其实7月6日就发布了,我一直没有解读,是但愿里面有一些样本公司购买这份报告的reprint权限,这样我解读的时候就能够把原文分享给你们。但惋惜的是,到目前为止,没有任何一家公司免费分享这份报告,你们只能看个人解读了,暂时没有机会看原文了。
本文分享自微信公众号 - 高端存储知识(High-end_Storage)。
若有侵权,请联系 support@oschina.cn 删除。
本文参与“OSC源创计划”,欢迎正在阅读的你也加入,一块儿分享。