【7点科技】| 站在未来看现在:智能时代数据存储产业谈,Σco时间( 二 )


智能时代存储如何打通数据孤岛 , 实现从端到云的融合互通能力 , 华为认为有几个地方需要重点考虑:异构融合、多服务融合、分级归档融合、生产分析融合、端-云融合 。
当然 , 面向实际的业务场景 , 还需要考虑包括数据库与存储融合、万核级调度等 , 这些都是华为持续要构建的存储能力 , 让数据存得下、流得动、用得好 。
极致可靠
智能时代存储三大特征 , 除了智能、融合这两个非常重要的特征之外 , 面向实际业务需求 , 还需要高效的数据存储与管理 。 这里面可分解为极致可靠、极致容量和极致性能三个方面来分析 。
在高可靠性领域 , 不仅仅是在架构层面 , 在组件(硬盘)、系统(RAID)、解决方案(双活)层面同时要有大量的创新 。
硬盘的可靠性是存储系统的基础 , 华为在盘级可靠性上做了大量的研究 , 并把结果应用到华为自研的SSD上 , 比如擦写次数是SSD盘片寿命的主要因素 , 华为在硬盘上采用了SSD全局磨损均衡&全局反磨损均衡的专利技术 , 来提升SSD寿命 。
【7点科技】| 站在未来看现在:智能时代数据存储产业谈,Σco时间
文章图片
在架构可靠方面 , 智能时代存储架构也需要考虑通过前端共享互联、控制器全互联、后端共享互联 , 真正意义上实现:全局互联、全局负载均衡 , 做到更可靠更均衡 。 而目前华为存储的架构可靠性已经领先于业界同类产品 。
在系统可靠方面 , 随着趋势的发展 , 大盘时代来临 , 硬件+算法才能构筑系统级的高可靠能力 。 华为RAID-TP , 通过创新的数据校验算法 , 可以实现系统内3个盘同时失效 , 业务不受影响 。
在方案可靠方面 , 要实现免网关双活的极致可靠 , 站点间要求实现负载均衡 , RPO=0&RTO≈0 。 此外 , 专属硬件设备可以做到存储互通 , 在3DC更高级别可靠性上可以实现灵活组网 , 同时降低容灾系统建设成本 。
在云级可靠方面 , 在生产中心方案级可靠的基础上 , 通过存储系统的容灾特性 , 如秒级快照、备份、统一管理等 , 实现灾备中心 , 以及云上中心的融合数据管理 , 做到中心间分钟级的可靠性 , 和云上云下小时级的灾备与恢复 。
极致容量
面对海量数据爆炸式增长 , 新业务对数据存储和管理不但要求持久化、数据不丢失 , 更要考虑极致的容量和性价比 。
面向全闪存的时代 , 存储具备了智能芯片 , 弹性EC算法提出了EC聚合方案 , 多个数据块可以在一个EC分条上进行聚合 , 以获得性能和EC利用率的双重保证 。 通过弹性EC技术 , 可以将EC比例提升到22+2 , 磁盘利用率达到91.6% , 并且 , 在相同的硬件条件下 , 其性能可与传统三副本性能持平 , 让存储利用率和可靠性提升有商用价值 , 支撑企业在云时代转型走得更远 。
在计算存储分离方面 , 华为提供基于原生HDFS协议的分布式存储 , 不但简化了大数据海量数据存储的配置和管理 , 同时可以使能计算与存储按需扩容 , 实现价值最大化 。
极致性能
华为认为 , 对于智能时代的存储 , 要充分利用芯片+算法+架构来全面提升性能、降低延时 , 为业务带来新的价值 。
为了实现端到端关键路径加速 , 从传、算、智、管、存上引入关键芯片 。 同时在算法方面 , 华为存储以创新的Flashlink盘控配合算法 , 能够实现控制器、硬盘框和SSD盘的联动 。
而为了支持数据中心的网络存储 , 华为通过NVMeoverFabric可以实现NVMe标准在多种网络上的扩展 , 达到降低存储网络协议栈处理开销并提供高并发低延时应用 , 适应SSD介质驱动的存储架构演进 。
同时 , 为了在前端数据传输阶段 , 加速NVMe协议传输效率 , 华为存储还设计了新的DTOE智能网卡 。 上一代使用的TOE网卡 , 只是较传统网卡 , 实现了部分数据传输卸载处理 , 依然存在内核中断产生的高延迟开销 。