天极大咖秀

登录 | 申请注册

软件定义存储2.0,谁领风骚?

郭涛 2021-05-26 阅读: 6,150 次

中国的软件定义存储(SDS)市场就像是早上八九点钟的太阳,那样耀眼,生机勃勃,富有朝气。IDC的报告显示,2020年全年,中国SDS市场规模同比增长51.7%,相比2019年,即使有新冠疫情的影响,仍然保持了快速增长的态势;在存储的所有产品品类中,SDS的市场份额增长最快,而传统存储有被SDS、HCI等继续蚕食的趋势;SDS在政府、电信、金融等行业的应用普及程度持续增加。SDS的未来似乎是一马平川。

但是,俗话说,人无远虑,必有近忧。当前正在使用的SDS技术大多脱胎于十多年前的开源技术,或者基于旧的硬件架构设计,并不能充分发挥SDS软件本身在性能、可扩展性等方面的优势。在企业云化全面提速的情况下,当前的SDS还能否满足企业上云、跨云,以及数据驱动业务创新的需求吗?在这里,我们可能要打一个问号!

以数据为核心,SDS的嬗变

“实现数字化转型的企业正在经历一场深刻的转变,从以应用和业务流程为驱动,转变为以数据为驱动。企业的IT基础架构发生变革,数据更加分散,但同时对海量数据的处理能力要求更高。在这种情况下,企业迫切需要构建新一代数据基础设施。”ExponTech(华瑞指数云科技)首席技术官(CTO)曹羽中谈到了SDS由1.0向2.0跃升的必要性和紧迫性,“SDS 2.0是在1.0基础上的继承和发展,它在适应新兴的硬件和网络技术要求的同时,还能更好地满足数据跨越混合多云及边缘的应用需求。”

图片1
ExponTech CTO 曹羽中

从业务的视角而不是仅仅从“存储”数据的技术视角,SDS 2.0要实现统一存储,实现数据的全透明存储、调度和管理,支持业务更好的流动;SDS 2.0要满足全面云化的要求,支撑全容器化、微服务化部署,并与计算协调一致,实现智能运维、支持云原生应用等;SDS 2.0采用组合式的架构,用一套存储就可以解决所有的数据需求,从数据感知到提供不同的存储模型,适配不同的硬件资源,以满足各类应用对不同性能和可靠性的要求;SDS 2.0向下支持大规模的数据存储,向上则通过提供丰富的应用接口,支持数据管理、服务和价值利用,提供更大的便利性,以及跨越本地、云和边缘的调度及元数据管理能力。

其实,已经有一些高科技巨头正在布局下一代统一存储和数据平台,公有云巨头如阿里云推出的极速云盘,可以更加充分发挥新硬件的能力,提供极致的性能和资源利用率;阿里云基于统一分布式存储引擎,形成统一存储底座和存储资源池,除了面向大规模的多租户场景提供块存储,对象存储,文件存储之外,还与数据类服务形成合力,提供“湖仓一体”平台,甚至于分布式数据库也构建于这个统一的存储引擎之上。而一些传统存储厂商,也在积极探索如何跳出传统的存储盒子的束缚,推动存储的软件化和云化。这些都与SDS 2.0所定义的大趋势是一致的。

SDS 2.0是大势所趋,而所有相关厂商的研发和实践可谓殊途同归。不过,当前业界并没有一个统一的SDS 2.0定义。曹羽中表示,ExponTech希望引领SDS 2.0的发展,树立新的标杆,更好地满足未来的存储和数据应用需求。

不过,ExponTech心中的格局显然不限于SDS。作为基于新一代分布式架构的数据基础设施整体解决方案提供商,ExponTech致力于帮助企业和组织建设“以数据为中心”的基础架构,提供跨越企业数据中心、多公有云及海量边缘的混合多云数据平台,实现一个数据平台存储和管理企业内的所有数据,克服数据孤岛以及数据价值无法利用的挑战。“我们的目标是打造下一代的数据基础设施,而SDS是最好的载体,它在性能、灵活性和可扩展性等诸多方面的优势,正好契合海量数据驱动业务发展的未来需求。”曹羽中如是说。

据记者进一步了解,ExponTech的骨干团队从十多年前就开始自研SDS产品,曾经成功研发中国第一款完全自研的商用分布式存储,该产品至今也是中国SDS市场标杆产品,也曾主导大型科技公司私有云产品的架构设计和研发,以及大规模公有云平台的架构设计,研发和运维等。从战略思考,技术积累、研发能力、人才储备、工程实践,以及对客户需求的把握、市场判断和对未来前景的预测等方面来看,SDS 2.0时代给了ExponTech脱颖而出的机会。

应用更广,全面超越SDS 1.0
从SDS 1.0到2.0,是市场趋势与技术发展相结合之后的一次换代的变革,将实现SDS从存储向统一数据平台的全面跃进。

阿里云分布式存储引擎2.0(内部代号盘古2.0)是SDS 2.0的代表之一。ExponTech的SDS 2.0产品在分布式存储引擎层面可以达到与盘古2.0类似的能力,但是面向不同的应用场景具有差异化设计。盘古2.0是依托阿里云公有云体系和平台所打造,主要面向公有云服务设计,其很多能力直接与阿里云的服务集成。ExponTech的SDS 2.0产品面向企业数据中心设计,天然具备小规模起步和产品化交付能力,同时也支持从企业的数据中心向公有云延伸,而且不是只支持某一朵特定的云,而是能够支持异构的混合多云环境。

相比SDS 1.0,SDS 2.0在性能、可扩展性等方面有了大幅度提升。曹羽中举例说,在时延上,SDS 1.0是毫秒级,而SDS 2.0达到了微秒级,甚至达到百微秒以内;在IOPS吞吐能力方面,在相同硬件的情况下,SDS 2.0的IOPS吞吐能力相比SDS 1.0提升5倍左右;在可扩展性方面,SDS 2.0产品可以跨越地理边界,天然具备从本地数据中心向多公有云和边缘延伸的能力。

与传统存储厂商需要“革自己的命”不同,ExponTech没有任何传统存储甚至SDS 1.0的负担,可以完全面向未来的数据基础设施的需求,设计下一代的SDS 2.0。自研高性能存储引擎、统一的元数据服务、组合式的架构、云原生、跨越混合多云IT环境等,这些都是ExponTech SDS 2.0产品最核心的基础,在此基础上,进一步发展、叠加,并结合不同的存储协议和接口,推出多样化的数据服务等。“一套引擎+多种协议接口+多种服务,我们正按照既有的节奏,先推出对象、块、文件等经典存储接口,然后再适时推出新的数据接口,比如面向大数据的HDFS,以及非结构化数据的KV存储接口等。”曹羽中表示,“协议接口、数据服务成熟一项,我们就推出一项,再配合最新的硬件,比如NVMe SSD、SCM等,充分发挥SDS 2.0软件功能的同时,也能更好地满足不同客户对高中低存储的需求。”

未来,SDS的应用面会越来越广,但是SDS并不能完全取代传统存储,各自都有最适合的业务场景。但是可以肯定的是,相对于SDS 1.0主要适用于数据价值密度相对较低的业务场景,比如非结构化海量数据的备份和归档,或是应用于开发测试环境等非关键应用,SDS 2.0有能力承载更多企业的核心业务应用,取代一些传统存储阵列,即使是像Oracle RAC、SAP HANA这样的关键应用也都不在话下。另外,像云原生、混合云、实时的大规模数据分析处理,以及对扩展性要求极高的新兴应用场景,更是能够彰显SDS 2.0价值的用武之地。

面向未来,打造混合多云数据平台

从以应用为中心转向以数据为中心,数据将成为企业管理的“一等公民”。

以前,企业的IT团队主要是管理各种软硬件,而没有一个专业的数据管理团队。现在,数据驱动业务成为刚需,数据类的应用不断增加,企业必须通过加强数据管理,消除数据孤岛,使数据更易流动和共享。

企业需要构建新一代以数据为中心的IT基础设施,SDS将是一种主要的形态和承载主体。从数据的视角,企业不仅要很好地将数据存储起来,而且还要知道存储的数据类型、特质,将数据的共享与服务统一起来。曹羽中表示:“南向支撑数据存储,北向与数据服务相结合,通过组合式架构,向‘湖仓’一体化演进。这样的数据基础设施,就是面向混合多云的数据平台,也是ExponTech努力的方向和目标。”

需要强调的是,这个面向混合多云的数据平台,天然具有SDS 2.O的存储能力,可以实现数据的统一存储、调度和管理,具备数据“湖仓”所需要的元数据服务能力,其数据管理能力也是原生的,能够跨越混合多云实现集成与管理,并且简单易用。通过这个面向混合多云的数据平台,可以与上层的各类数据应用和服务对接,通过丰富的生态来满足不同客户的数据应用需求。

当前信创大潮的兴起对于SDS的创新和生态发展无疑是一大利好。借信创之东风,ExponTech在SDS 2.0的研发上可以更好地实现自主可控,与国产芯片、板卡、操作系统等对接和适配。ExponTech通过标准化的接口,与现有的SDS 1.0产品生态对接,实现对现有应用环境的集成和兼容,并且更好地集成数据类的生态,包括大数据处理框架、新兴存储格式、AI框架等,同时针对不同行业和场景,加强与各行业ISV的合作。另外,ExponTech还与高校携手进行联合创新与研发。

自主创新没有捷径,反而因为自主研发周期长、投入资源多,并且需要经过长期的市场和用户检验才能最终得到认可,而充满风险和不确定性,但是,ExponTech团队基于自身长期的产品研发经验,相关领域深厚的技术积累,对市场趋势的判断以及雄厚的资金支持,有足够的信心和决心投入基础软件的自主创新研发,能够在技术研发上面坚持长期的,压强式的投入,专注于打磨自己的全新架构的下一代产品。SDS 2.0将是ExponTech打造以数据为中心的新一代企业基础架构的突破口和基石,希望打造中国企业在大规模数据存储和管理领域深化自主创新的新平台。

郭涛
以“云”为基,以“数”为魂,以“智”为道,新IT,新经济。

特别声明:文章版权归原作者所有,文章内容为作者个人观点,不代表大咖秀专栏的立场,转载请联系原作者获取授权。(有任何疑问都请联系wemedia@yesky.com)