进入5G时代,5G的广泛接入激活了万物,万物的觉醒带来了数据的激增。 中国移动物联网监测数据显示,截至今年9月,设备产生的数据已超过人产生的数据。 IDC报告指出,人类每年创造的数据总量相当于过去人类历史产生的数据总量。 据预测,2023年人类数据的产生量将超过103 ZB(数据单元级别GB\TB\PB\EB\ZB)! 当你阅读本文时,世界各地已经产生了如此多的数据(这似乎不包括中国互联网公司产生的数据)
正如西部数据产品营销部副总裁朱海翔在西部数据媒体发布会上指出的那样:“我们正在大踏步进入ZB级数据时代。2018年,全球共产生了32ZB的数据,而四年后这个数字将增长到100ZB,推动这种数据爆发式增长的是5G、人工智能、机器学习和视频监控等一些新兴应用,或者是高清、超高清的广泛应用。高清4K、8K视频。但到了ZB时代,存储却面临着巨大的挑战。
西部数据公司产品营销部副总裁朱海翔在媒体发布会上
ZB时代的巨大挑战
在9月19日举行的中国闪存市场峰会上,西部数据公司中国区高级副总裁兼总经理Steven Craig发表了《ZB时代的数据存储核心架构——机遇、挑战与阶段》的主题演讲,详细分析了大数据时代存储行业的发展现状和面临的挑战。
Steven Craig,西部数据公司高级副总裁兼中国区总经理
他指出,存储行业已经止跌。 事实上,2018年以来,由于各大原厂产能扩张,导致市场供应过剩,智能手机出货量下降,PC需求疲软。 不过,好消息是,到了6月份,NAND Flash价格开始止跌。 “近期市场出现筑底趋势,整个NAND Flash行业结束了下行趋势,开始爬升。” 他指出,“目前市场已经出现筑底趋势,行业进入良性循环,整个行业的营收尤其是闪存营收开始上升。如此乐观的预测主要来自于可预见的需求”用于海量数据存储。”
闪存显示停止迹象
不过,Steven Craig指出,虽然行业在向好,但存储也面临着很大的挑战,那就是存储行业的增长速度跟不上数据的增长速度。
从过往数据来看,2018年全球产生了32ZB的数据,但仅存储了5ZB的数据。 预计到2023年,全球将产生103ZB的数据,但只能存储12ZB的数据! 所以存储的数据还不到10%!
因此,全球范围内数据的生成和保留之间存在巨大差距。 数据将是未来的“石油”,是人工智能的基石。 如何保存尽可能多的数据? 这是整个存储行业需要解决的重要问题。
西部数据的回应
他指出,当前存储行业的主要举措是增加存储介质的密度,即通过增加平面闪存孔的密度来增加存储容量。 例如,通过增加3D NAND的层数,目前3D NAND的层数已经增加到了96层。然而,这种改进的挑战也越来越大。
而这样的改进带来了巨大的资本支出,因此这样的改进变得越来越困难。
他认为存储密度可以从基础存储逻辑开始提升。 目前的存储架构已经从MLC转变为TLC。 西部数据还发布了三款TLC工业级产品。 这是业界首次采用TLC产品。 “而且QLC架构有一个存储单元。 可以存储4位,可以大大提高数据中心的存储密度。 QLC未来可以发展成PLC,一个存储单元可以存储5个单元。”他指出,“但在大规模部署方面,QLC存在写入、写入和放大等诸多困难。”
朱海翔补充道,西部数据需要解决数据中心批量部署QLC的写入问题。 写放大问题不能仅限于介质本身。 它必须通过开源和标准化重新审视整个数据基础设施,并与行业各方共同推动。 问题解决了。
“西部数据6月推出分区存储技术后,已携手全球几乎所有大型云服务商,包括中国大型云服务商和大型OEM系统厂商,实现全系统层面的智能数据安全,并且让我们共同努力,推动QLC在数据中心的大规模部署。” 朱海翔指出。
闪存峰会期间,西部数据还在中国首次向全球发布了三款专为工业4.0时代和物联网设备设计的全新解决方案——iNAND IX EM132嵌入式闪存驱动器,这是西部数据首款基于3D NAND技术的闪存驱动器。专为工业和物联网设备打造的e.MMC EFD最大容量已增至256GB。 另外两款产品是西部数据的IX LD342 SD存储卡和IX QD342 microSD存储卡,这两款产品都具有强大的生命周期,能够以其高耐用的产品性能支持工业和物联网设备的存储需求。
朱海翔指出,此次发布的新品采用先进、高耐用性的3D NAND技术,以多种产品形态为工业系统设计人员提供适合工业市场的解决方案,可应用于边缘计算网关、机器人、医疗和监控/安防等领域,还为工业和物联网系统设计者提供人工智能和机器学习应用领域的解决方案。
这三款新品也在闪存峰会展会上展出。
朱海翔表示,西部数据工业级存储产品是保证设备存储在恶劣环境(如高温、潮湿、极端海拔或强烈振动)下正常运行的理想解决方案。 这些解决方案通过延长数据保留期限来存储和处理更多数据。
西部数据高管亲自上台,向观众介绍多款新品。
从左至右:西部数据公司全球产品营销部总监万俊梅女士、西部数据公司产品营销部副总裁朱海翔先生、西部数据公司产品营销部总监张丹女士数码公司
朱海翔此次在接受媒体专访时介绍了几款主打产品。
据他介绍,西部数据iNAND IX EM132嵌入式闪存盘是该公司首款专为工业和物联网设备设计的3D NAND e.MMC,并配备了西部数据高可靠性64层3D NAND技术。 该产品有两个版本,具有宽温度范围:-25°C 至 +85°C 和 -40°C 至 85°C。 西部数据已将该产品的 e.MMC 寿命延长至 2D NAND 之外,为基于先进操作系统、传感器融合和机器学习技术的工业和消费应用提供更高容量的选择。 该产品还具有专为密集型工业工作负载而设计的功能。
包括:
−先进的健康管理
−热管理
−可分区
−自动和手动读取刷新
−强大的电源管理
−数据保留符合 JEDEC(固态技术委员会)标准
新款西部数据工业级IX LD342 SD存储卡和IX QD342 micro SD存储卡是针对工业和物联网市场的高耐用性SD存储卡和microSD存储卡。 他们是原始设备制造商、经销商、分销商和集成商。 和工业系统设计人员提供高度耐用的产品功能,为新兴工业应用领域带来更大的灵活性:
·采用西部数据领先的3D NAND技术
·提供16GB至512GB容量选择
·高耐用性(3,000 P/E 循环)确保更长的使用寿命
·存储卡健康管理可以检测存储卡的剩余耐用度,并在需要时主动维护存储卡
分区存储:西部数据解决ZB级存储挑战的大动作
除了上述举措和新产品之外,Steven Craig还通过重构存储架构来支持和应对ZB时代的挑战。 具体措施是采用分区存储技术,提高效率,智能存储数据。
他指出,为了下一代数据的发展,业界需要一种新的数据中心结构——可编程的分簇基础设施。 随着越来越多的数据具有顺序写入特性西部数据硬盘分区软件,例如视频、物联网/边缘数据、监控,并且可以分组或“分区”为更大的数据块(例如大型 AI/ML 数据集)数据,这可以加速提升分区存储设备,合理优化工作负载,从而提高性能和效率,并尽早降低总体拥有成本。
朱海翔还补充道,分区存储技术可以从一个新的维度帮助整个行业,尤其是存储密度最高的QLC在数据中心的快速部署。
分区存储的本质是在存储组件中创建不同的分区,并根据不同类型的数据在存储固件中存储、传输和管理数据,从而提高整体存储性能。 并且作为定制化的数据基础设施,控制和智能协作可以从原来的系统硬件层面降低到系统存储组件层面。
西部数据基于开源技术提出了分区存储技术方案。 这种新的存储技术不仅包括开源工具和文件系统支持,还包括用于数据中心的SMR(叠瓦式磁记录)超大容量HDD和ZNS。 NVMe SSD开发平台。
分区存储使应用层、主机和存储能够相互协调数据存储位置,以充分利用采用新兴分区命名空间 (ZNS) 标准的 SMR HDD 和 NVMe SSD 可以实现的最大存储容量。 更好的耐用性、可预测的低延迟和 QoS(服务质量)性能。
ZNS是NVMe标准计划中的新功能,也是对SMR技术的补充。 它允许开发人员在通用软件堆栈下有效地调用SMR和ZNS,而不管存储介质类型如何。 Steven预计西部数据硬盘分区软件,到2023年,西部数据将在SMR上提供50%的HDD容量,客户可以利用其SMR应用开发工作来覆盖大容量ZNS SSD。 SMR和ZNS也将通过提供智能应用架构成为当前和未来ZB级数据时代的关键基石。
可以说,SMR和ZNS正在从根本上重塑云和企业数据中心,以确保未来长期节省总拥有成本。 随着生态系统的不断发展和SMR的推广,西部数据致力于发展能量辅助磁记录技术,同时提供高容量。
Steven指出,西部数据Ultrastar DC HC620 SMR15TB硬盘已批量发货。 此外,西部数据还在展位上展示了一款20TB SMR HDD,不过这款产品预计要到2020年才会出货。
总之,通过引入智能数据存储机制和提高存储密度,ZB时代的存储问题有望得到缓解,但要真正解决挑战,需要像西部数据这样的公司和业界共同努力。
“西部数据有一个非常重要的优势,就是垂直整合或者垂直创新能力。以闪存为例,我们以NAND技术为核心,从晶圆制造和封装到我们的固件、控制器和最终测试。我们可以推出根据不同的应用,推出更适合相关应用市场的解决方案。我们可以让这么多不同的要素更好地协调,更好地创新,推出更符合各行业发展需求的存储解决方案。”
由于西部数据多年来帮助消费者在各种设备上创建、体验和保存数字内容,并为消费者创造了最好的产品和多元化的服务,西部数据在中国闪存大会上荣获存储行业“最佳品牌影响力”市场峰会。 “力量”奖,我们期待西部数据为全球存储行业带来更多创新解决方案。 (超过)