继南水北调、西电东送之后,又一国家战略工程——东数西算全面启动。
"东数西算"的"数"指数据,"算"是算力,"东数西算"是通过构建数据中心、云计算、大数据一体化的新型算力网络体系,将东部的算力需求有序引导到西部,优化数据中心建设布局,促进东西部协同联动。
近日,国家发展改革委、中央网信办、工业和信息化部、国家能源局联合印发通知,同意在京津冀、长三角、粤港澳大湾区、成渝、内蒙古、贵州、甘肃、宁夏等8地启动建设算力枢纽节点,并规划了10个数据中心集群。至此,东数西算工程全面启动。
实施东数西算工程,需要构建大批新型数据基础设施,存储作为数据要素核心载体,直接关系到数据的高效流通与价值发挥,在东数西算新工程中扮演着重要角色。
筑牢“东数西算”存储底座
随着东数西算工程的不断深入,可以预测,未来将有一大批新建数据中心建设围绕国家圈定的“8个枢纽、10个数据中心集群”展开,随之产生的大量数据的存储和访问问题是需要首要考虑的关键环节之一。
元核云青鸾分布式存储系统是一款专注于云原生、AI、HPC等业务场景的稳定、高效、智能的分布式存储系统软件产品。支持公有云、私有云、混合云多种部署模式,赋能各种环境下非结构化数据访问需求,可广泛应用于海量数据存储需求的高性能场合。
01.助力数据中心高效运转、弹性扩容
东数西算要求集群内数据中心平均上架率不低于65%,且数据中心建设要最小化起步,避免资源浪费。
元核云青鸾分布式存储系统性能相较市场开源存储产品提升数倍,随着业务增长,可以通过扩展节点增加容量及性能,单一集群最高支持超过5000个节点横向扩展,单一命名空间支持EB级容量;而通过在一个数据中心内部署多个集群,以ZB级数据空间为东数西算新基建“挑大梁”。
02.实现超大规模数据中心智能运维
相比于算力资源丰富的东部地区,西部地区在数据中心专业人员储备、管理运维方面都存在很大挑战。
元核云青鸾分布式存储系统可以让运维更简单,IT 成本更低,同时为业务提供更好的敏捷性。
通过管理平台智能监测集群状态、服务状态、硬件资源利用情况,异常状态告警上报,便于运维人员了解集群真实状态,并根据告警采取相应应对措施。
同时,产品体验设计遵循极简理念,运维人员只需掌握基本的服务器运维知识,无需深入理解元核云青鸾分布式存储系统,即可做到轻松出色的运维。
03.保证数据更加安全可靠
在安全可靠性方面,元核云青鸾分布式存储系统具有极高的可用性和可靠性,通过数据冗余、故障恢复、数据备份等策略多层次保障数据安全,严密控制存储系统的访问权限,通过基础网络或者是VPC网络的安全组,并搭配权限组,实现访问的权限控制。
全面支持“东数西算”多场景应用
为更好地保障数据安全以及业务连续性,专家表示:一些对于后台加工、离线分析、存储备份等对网络要求不高的业务,可率先向西部转移;东部枢纽处理工业互联网、金融证券、灾害预警、远程医疗、视频通话、人工智能推理等对网络延迟有高要求的业务。
元核云青鸾分布式存储系统深度覆盖多种应用场景,全面适配“东数西算”多种应用需求。
01.高性能计算场景
在如气象气候、地质勘探、航空航天、工程计算、材料工程等领域,基于集群的高性能计算,已成为必需的辅助工具。
元核云青鸾分布式存储系统为应对计算集群对存储极致的性能要求,采用了自主设计的独立高效的元数据存取访问策略;缩短了IO访问路径,海量文件场景下文件访问性能无衰减,且突破了以往单个命名空间可承载的文件数量限制带来的瓶颈。通过存储系统性能的提升,使计算平台持续处于高效率运转状态,从而缩短平台运转工作时间。
02.AI业务场景
元核云青鸾分布式存储系统为AI业务平台提供一个横向扩展的底层存储平台,可承载上百亿KB级小文件,为机器学习平台成千上万的客户端提供并发访问支持,满足AI训练中计算集群的高带宽、低延时的访问需求,使计算资源得到最大化利用,且在数十亿文件数量下仍然能够提供稳定的数据访问性能,有效提升训练效率。
03.云原生
目前,云原生将成为市场主流,存储系统需要更好地满足云原生应用需求。元核云青鸾分布式存储系统为用户提供标准CSI插件无缝对接Kurbernetes,简化使用流程,提升可用性和数据访问性能,并以此提供众多企业级功能,如支撑容器化AI训练平台,满足业务使用、管理运维等方面需求。
04.流媒体应用
视频编辑、影音制作、广播处理、声音设计和渲染等媒体工作流程通常依赖于共享存储来操作大型文件。元核云青鸾分布式存储系统通过强大的数据一致性模型加上高吞吐量和共享文件访问,极大提高处理效率,高性能特性满足4K/8K高清视频渲染需求。
05.内容管理和 Web 服务
元核云青鸾分布式存储系统可以作为一种持久性强、吞吐量高的存储系统,用于各种内容管理系统,为网站、在线发行、存档等各种应用存储和提供信息。
打造自主可控的IT基础设施
东数西算是对坚持新发展理念、构建新发展格局的贯彻落实,将为我国数字产业化和产业数字化发展打好坚实底座,是国家级重要战略工程。作为支撑东数西算工程建设的底层关键技术,数据存储的安全可靠的重要性不言而喻。
元核云坚持核心技术自主开发,实现源代码自主安全,深度适配国产服务器以及国产操作系统,允许在一个集群内,并存X86、申威服务器,允许灵活的元数据服务和数据服务分工组合,兼顾高性能和国产化需要,使得逐步国产化全替代容易在线实现。
东数西算工程刚刚拉开帷幕,面向未来,元核云将始终坚守产品品质,不断加快创新脚步,以更高效率、更低成本,支撑数字化创新应用,推动东数西算迈向新征程。