随着生成式AI技术的快速发展,数据量呈爆炸式增长,存储行业迎来新的发展机遇。
在2024年开放数据中心大会(ODCC 2024)上,希捷中国区产品部总监刘嘉深刻剖析了AI对数据存储的影响及未来趋势,探讨了机械硬盘在新一代技术浪潮中所扮演的角色。
AI催动数据加速增长,利好存储行业发展
IDC:2028年,全球将产出393.9ZB数据
刘嘉在大会上分享了IDC的预测数据,到2028年,全球将产出393.9ZB的数据。与此前预测的2025年175ZB的数据相比,有了大幅提升,之所以有如此变化,与AI技术有着莫大的关系。IDC的最新数据还提到,仅AIGC就能在4年间创造100ZB的数据。
刘嘉还提到,数据加速增长的背后有两个关键驱动因素。首先,AI生成的数据内容更加丰富,从传统的文字扩展到视频,甚至生成视频。其次,更多的数据会被长期保存,特别是通过云存储等方式进行的备份和搜索操作,使得存储需求进一步上升。
有鉴于此,AI对存储行业的影响也将逐步显现。刘嘉解释称,在AI技术发展的早期,重点主要集中在模型训练,投资主要集中在算力提升上,但随着模型逐步的成熟,未来1到2年内,企业对数据存储的需求将显著提升。
面对AI技术浪潮,闪存盘与机械硬盘各有优势
从存储市场来看,AI训练阶段对存储的需求更看重闪存的性能优势,而随着容量的进一步增长,机械硬盘则要承担更重要的存储任务。刘嘉表示,AI刺激下,闪存存储的价格增长更快,而机械硬盘的成本优势更为明显,机械硬盘的TCO优势在未来1到2年内将更加明显。
机械硬盘和固态硬盘TCO对比
2023年,整个存储市场表现欠佳,2024年存储市场快速升温。从刘嘉的介绍中了解到,市场回暖过程中,机械硬盘的需求增长速度其实是快于固态硬盘的。其中,一个明显的原因就是,固态硬盘价格上涨过快,而机械硬盘在大容量存储中更具性价比。
从刘嘉的介绍中了解到,在AI等对存储性能有要求的场景中,机械硬盘方案有三种使用方式。
第一种方式,用户主要看重机械硬盘容量大的优势,用机械硬盘处理顺序读写负载,为了弥补随机读写性能上的不足,通常可以搭配闪存存储来使用。这种方式虽然会增加一定的软件开发投入,但最终能够节省硬件成本。
第二种方式,用户只使用成本较低的机械硬盘,但为了获得较高的性能表现,通常不会选择容量最大的磁盘。为了平衡性能和成本,单盘容量会限制到12TB左右,这种方式既得到了较有优势的TCO,同时,也有相对较高的性能。
第三种方式,如果用户想要获得更高的性能,同时,又不想选择闪存方案,其实还可以选择双磁臂硬盘的方案。双磁臂硬盘主要的优势是,在增加容量的同时,单TB的性能会保持不变,不会降低性能。
具体到AI应用中,机械硬盘也可以在很多场景中发挥作用。比如,可以将一些不经常读取的Checkpoint存放到机械硬盘上,可以利用机械硬盘存储多个不同的模型版本,最后,机械硬盘可以用来存放生成式AI模型生成的图片以及视频等大容量数据内容。
希捷一直看重机械硬盘市场的发展
刘嘉在采访中指出,希捷持续关注数据生成加速和存储需求增长的两大趋势,特别是在企业级市场中,企业产生的90%数据都存储在企业级硬盘或云平台上。为此,希捷将重点放在如何进一步优化这些市场的产品和服务。
一直以来,希捷都更专注于机械硬盘方面的发展。今年年初,希捷发布Mozaic 3+(魔彩盒3+)平台,基于该平台的硬盘单碟片容量已经来到了3TB以上。目前,30TB以上的磁盘也陆续走向市场,未来几年还将有40TB甚至50TB的。
用提高盘片密度的方式来提高单盘容量的做法对于功耗和成本都会有帮助。刘嘉介绍,希捷会使用10个碟片和20个磁头的方式打造大容量盘。如果达不到这样的密度,则只能寄希望于增加碟片和磁头的方式,但这会导致功耗和成本的增加。
Mozaic 3+每TB能效优势
Mozaic 3+平台在面对更大规模数据时更有优势。更高的存储密度,意味着数据中心能够在相同的物理空间内存储更多数据,节约了机房空间以及运营成本。同时,它还有助于降低能耗成本。下一阶段要发布的Mozaic 4+容量更大,而成本变化不大,会进一步放大成本优势。
事实证明,大容量机械硬盘确实更受市场欢迎。在7月23日公布希捷2024年第四季度财报中提到,超大容量硬盘出货量占其总出货量的90%以上。而且,平均机械硬盘的容量来到了9.3TB,与一年前相比增长了45%。
过去几年中,陆续听到了外界对于希捷固守机械硬盘领域的做法的不理解,闪存技术产品更新迭代快,市场关注度高。而现在,随着时间的推移以及客户的应用反馈,希捷的这种做法被证明更有远见。
刘嘉回应了希捷在机械硬盘和固态硬盘市场的不同投资策略。他指出,希捷一直更倾向于机械硬盘,因为机械硬盘的投资回报率更高。在相同的投资额下,机械硬盘能提供比固态硬盘更多的存储容量,成本相对更低,许多企业用户更关注机械硬盘的TCO。
相比之下,固态硬盘虽然在技术上更新快、容量增长较快,但对资本的要求更高。不断更迭的闪存技术对于产线的要求也很高,产线生产设备的更新频繁会比较高,总体投资回报率较低,这两种业务的投入产出比并不相同,而希捷更稳妥地选择了机械硬盘的路线。