9月21日,在“数聚万象 澎湃未来”宏杉科技分布式存储线上研讨会暨新一代产品发布活动上,宏杉科技正式发布“万象”分布式存储家族。宏杉科技“万象”分布式存储采用分布式去中心化的架构,支持文件、块、对象、大数据等多样化的存储服务,通过搭载不同的硬件平台,能够满足AI、HPC等海量数据存储场景的需求,为企业构建坚实的海量存储数据底座,助力实现数字化转型。
承载宏杉科技分布式存储的创新积淀
根据中国信通院调查数据显示,2021年中国分布式存储市场规模达到178亿元,年增速44%;预计未来三年,市场仍将保持40%以上的增长率。在数据爆发式增长的今天,企业数据中心在承载海量、多元数据的同时,如何快速从海量非结构化数据中获取数据价值,将是企业数据基础设施建设的关键。凭借敏捷扩展、经济性等特点,分布式存储已经成为承载海量非结构化数据的重要载体,除了满足传统的海量存储场景需求外,分布式存储还被广泛需求于大数据、AI、高性能计算等高并发、低延迟新型应用存储场景,这也成为存储技术的重要趋势。
近年来,宏杉科技在分布式存储领域已进行了大量探索——推出CloudSUN统一存储平台,将各类存储通过特殊网络联系在一起,形成可以统一调度管理的存储资源池;针对高性能计算业务,推出定制化分布式存储产品、基于存储阵列的分布式存储系统引擎。
目前,宏杉科技分布式存储产品已经广泛赋能金融票据、医疗影像、国土测绘、大数据分析等产生海量数据的应用场景。本次发布的“万象”,是宏杉科技在分布式存储领域的最新成果,融入了大量创新特性。
构建海量数据存储底座
安全承载业务系统产生的海量数据是企业对于分布式存储的基础需求。这意味着,分布式存储系统在为爆发式增长的数据提供海量、高扩展、高性价比存储空间的同时,也要确保海量数据在存储过程中的安全性与可靠性。依托优秀的软硬件创新能力,宏杉科技“万象”分布式存储具备高扩展能力的存储架构、丰富的协议支持以及多平台的适应能力,无惧海量数据存储挑战。
在架构上,宏杉科技“万象”分布式存储采用分布式去中心化架构,提供了灵活的扩展能力:在该架构的支持下,“万象”分布式存储元数据配置更加灵活,拥有支持上万个节点的扩展能力。另外,“万象”分布式存储还采用了先进的元数据集群架构,通过宏杉科技自研的元数据分布算法,可以消除单Master的瓶颈或Hash算法的规模限制,在实现全对称部署的前提下极大提升了存储规模。
在网络、协议与平台支持上,宏杉科技“万象”分布式存储几乎支持所有主流协议,便于数据跨平台部署与流动:“万象” 分布式存储同时支持10Gb、25Gb和100Gb的以太网、高性能计算常用的InfiniBand组网,以及RDMA技术;访问协议方面,丰富的接口确保万象与任何主流业务实现无缝对接——拥有融合了目前主流的文件、对象、块和大数据接口,包括NFS、CIFS、Http、FTP、S3、Swift、iSCSI、HDFS等;面对多云应用场景,“万象”分布式存储可以在各种主流的虚拟化、容器、云环境中部署,支持OpenStack的Cinder、Kubernetes的CSI等,同时,数据可通过云桥软件实现在云端的流动。
在可靠性方面,“万象”分布式存储提供了极致可靠的存储机制,全面保护用户数据安全:“万象”分布式存储充分利用宏杉科技SAN存储双控制器高可靠性,解决传统分布式存储节点稳定性较低的问题,提升整体分布式存储系统的健壮性。“万象”还提供基于系统内部客户端和用户的精细化访问控制机制,支持多副本和目录级纠删码、双活、复制、两地三中心等多种冗余保护措施,为用户提供多层级的数据保护和容灾功能,进一步实现了用户数据存储的极致可靠。
在扩展性方面,“万象”分布式存储能够灵活扩展、充分利旧:“万象”分布式存储统一命名空间,将块、对象、文件、HDFS等存储协议打通,实现一池多用,所有应用端均可在线访问全空间实时数据。此外,“万象”产品在同一个分布式存储集群中,实现了服务器节点和SAN存储节点混用,建立不同的数据资源池,能满足不同应用对于分布式存储性能的不同需求,并充分利旧,降低投资成本。
在性能方面,“万象”分布式存储拥有极致性能,能够极大提升数据利用效率:“万象”分布式存储采用面向未来的磐石架构,集成全内核态协议栈,可以无限压低时延;支持端到端NVMe协议;支持使用RDMA智能加速充分发挥硬件能力。凭借宏杉科技自研的并行文件系统、高性能客户端、小文件聚合等功能,“万象”能够实现千亿小文件快速低延时访问;同时,它还拥有业界最彻底的协议共享能力,实现所有非结构化数据协议互通,数据0迁移拷贝,提高访问效率,节省存储成本。
“万象”分布式存储实现了智能存储管理:“万象”分布式存储搭载宏杉科技自研的云桥智能数据处理平台,能够连接多种非结构化、半结构化和结构化数据源,通过多个并行处理的工作流对数据进行加工处理,形成统一的数据资产图谱。
驱动数据价值高效发挥 助力企业数字化转型
除了具备高扩展、高可靠、多平台融合的数据存储特性,“万象”分布式存储还提供了高性能的存储响应能力、复杂环境下的数据处理能力以及跨平台的数据调度能力,通过四大产品系列——C系列、P系列、V系列、M系列,面向不同行业场景提供不同的性能、功能、扩展性等选项,帮助企业高效利用数据,充分发挥数据价值。
万象C系列:面向虚拟化、云平台、数据库等业务场景;
万象P系列:面向人工智能、自动驾驶、高性能等对IOPS、低延时、高吞吐的业务场景;
万象V系列:通过搭载高密度硬件平台,单节点实现6U118盘位,单节点达到2.3PB, 适用于海量数据长期保存业务场景;
万象M系列:融合宏杉科技SAN基础架构,适用于对高可靠有极致要求的场景,可以充分利用SAN存储高靠优势,同时可以降低用户投资。
数据已成为新型生产要素,云、大数据、AI等新技术的快速普及带来海量非结构化数据,分布式存储市场将持续稳健增长。宏杉科技凭借全面的自主研发能力,经过多年创新积累,成功打造“万象”分布式存储家族,以解决方案为核心,聚焦多样化应用场景,释放数据生产力,全力帮助百行百业构建数据智能管理平台,存好、用好、管好数据。