大数网的作者群有一个叫“大王”的,专门研究存储。近期写了一系列的科普文章,知识点很多。这里把他说的资料全部整理了一下,来一起研究存储的未来。
存储有什么未来?可以预见的是,由于SSD的价格的不断下降,以及PCIe接口的不断完善,加上NVMe协议的逐渐成熟,正在为整个存储系统带来颠覆性的改变,这种趋势明显。
如果再加上明年新材料TLC、3D-NAND、3D-Xpoint等面世和大规模商业化,PCIe+NVMe完全可能进入数据中心充当主存储系统,而不是只当缓存。
一直以来,缓存都是二房丫头的命,帮主子(数据)救急,过度一下IO;可二房丫头虽然颜值高,可价格贵,身子娇贵,主子可不敢把金银财宝(数据)完全交给她。现在二房丫头可以成为正房了。
我们看看这一切如何发生的。
壹 存储当前的瓶颈在哪里?
一定程度上,闪存将磁盘换掉之后,引发的连锁效应非常广泛,从接口到协议,从存储系统到网络架构,整个系统性的改变;但改变是缓慢的,就那NVMe来说,也是经过几年在互联网行业的成熟,才慢慢被接受。
现在,服务器、网络甚至于各种板卡和芯片厂商都着实为SSD方方面面骚动了一番。
具体有这么几个方面:
接口来说,磁盘时代6Gb/s的SATA和12Gb/s 的SAS,已经是带宽非常高的接口了,但SSD的出现立即把这些踢到了垃圾桶。
数据保护来说,之前PCIe SSD一般在Tie0层,主要的充当角色是缓存,主要作用是顶IO压力,而不是对应用数据的长时间储存。但是现在,PCIe SSD要做主存储,首先要解决的就是如何将多个PCIe SSD组合成为一个存储池了。
再用硬盘时代的RAID技术?NONO。比如RAID6效率非常低,而且写入次数太多,闪存使用寿命会缩短。当下针对PCIe SSD的数据保护技术可以说还处于初级阶段,闪存厂商可能会自己做一个数据保护软件。但是由于闪存厂商多有硬件的基因,所以这类软件未来必然走向闪存阵列。另一方面,针对固态存储的数据保护软件也将是软件厂商必争的一个领域。
可以预料的是,PCIe SSD有望成为主流,虽然会有新的固态介质和新的硬件接口,但是这需要时间也需要大量的投入,同时磁盘走向没落已经是没跑的事了。
其次,虽然PCIe SSD很热,特别是NVMe成熟之后,但是现在PCIe SSD仍在一个发展的前期,很多系统和网络层面的事还没有做。
贰 NVMe over Fabric统一网络结构?
说SSD正在改变所有,数据中心的网络协议就可能彻底改变。为什么?
因为未来数据中心有可能是上千片PCIe SSD充当存储主系统,用的就是NVMe over Fabric搭建。NVMe over Fabric的作用是,如何解决网络互联的问题。
NVMe over Fabric就是要将NVMe嫁接在各种网络上面,这里的网络可以是以太网(iWARP或者是RoCE)、InfiniBand等等,当然为了进一步缩减延迟,RDMA(Remote Direct Memory Access,远程直接数据存取)在NVMe over Fabric中也是非常重要的角色。
这个架构有三点需要说明。
首先,前端和后端都是基于NVMe的,并且与iSCSI和TCP/IP共用一个网络;
其次,对于RDMA的支持可以使得数据传输跳过操作系统进行,所以延迟可以得到进一步降低;
最后,随着网络技术的不断演进,iWARP RDMA不是唯一的选择,基于Omni和FC的方案应该也会有。
NVMe联盟早在去年9月就已经发布一个新闻稿,说是在旧金山的IDF上会有NVMe over Fabric的解决方案demo展出,而最早成型的解决方案有望在2016年出现。
既然说是网络中的问题,很多网络厂商也有相关的动向,比如InfiniBand领域的高手Mellanox有一个NBDx架构,两块PCIe SSD可以实现百万级的IOPS性能。还有EMC的DSSD,也是大规模的基于NVMe SSD的存储系统,资料太少,就不说了。
- 蜜度索骥:以跨模态检索技术助力“企宣”向上生长
- 美媒聚焦比亚迪“副业”:电子代工助力苹果,下个大计划瞄准AI机器人
- 微信零钱通新政策:银行卡转入资金提现免手续费引热议
- 消息称塔塔集团将收购和硕印度iPhone代工厂60%股份 并接管日常运营
- 苹果揭秘自研芯片成功之道:领先技术与 整合是关键
- 英伟达新一代Blackwell GPU面临过热挑战,交付延期引发市场关注
- 马斯克能否成为 AI 部部长?硅谷与白宫的联系日益紧密
- 余承东:Mate70将在26号发布,意外泄露引发关注
- 无人机“黑科技”亮相航展:全球首台低空重力测量系统引关注
- 赛力斯发布声明:未与任何伙伴联合开展人形机器人合作
- 赛力斯触及涨停,汽车整车股盘初强势拉升
免责声明:本网站内容主要来自原创、合作伙伴供稿和第三方自媒体作者投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。任何单位或个人认为本网站中的网页或链接内容可能涉嫌侵犯其知识产权或存在不实内容时,应及时向本网站提出书面权利通知或不实情况说明,并提供身份证明、权属证明及详细侵权或不实情况证明。本网站在收到上述法律文件后,将会依法尽快联系相关文章源头核实,沟通删除相关内容或断开相关链接。