随着数字化转型进程的加快,企业对于数据基础设施的存储和计算能力要求越来越高。如何进行数据资产的统一管理和共享?通过数据构建企业关键能力、实现数据智能型组织?应对企业的数字化转型需要,数据基础软件领域的技术也在不断升级迭代。
每一次技术的演进,都会孕育和诞生独角兽的新赛道。近年来,在数据基础软件领域,也出现了新的机会窗口。 2020年,行业首次提出湖仓一体的技术升级架构,2021年,湖仓一体架构首次写入 Gartner 数据管理领域成熟度模型报告。湖仓一体通过实现了数据资产统一管理、降低数据冗余、降低大数据平台架构运维复杂性,被认为是未来主流的技术引擎,在互联网、电信、金融行业得到了广泛应用。目前,阿里云、华为云、腾讯云等都围绕这一架构做了布局。 在 IDC《中国人工智能与大数据技术图谱,2022》中,湖仓一体被列为递增型代表技术,调研显示,有 66.9%的企业了解湖仓一体架构,有85%的企业正在部署或考虑评估部署湖仓一体架构。行业预测,通过与AI能力的融合,市场的进程还将进一步加快。湖仓一体可以提供全方位的数据管理能力,而AI则可以通过学习和预测分析来提高企业的创新能力和决策水平。
湖仓一体的出现,正是数据库市场从集中式向分布式转变的时期,数据管理软件也正在逐步由集中式架构向分布式架构演进。在这个市场变化和技术演进的时期,传统的国内外巨头优势被减弱,具备创新技术的国产基础软件企业,有希望实现弯道超车。
增长率86%,跑赢大盘
大数据平台软件市场,是近些年来的新兴市场。根据IDC的数据,中国大数据平台软件市场2022-2026年复合增长率接近 28%。
高增长率的背后,一是国家相关部门的政策推进,另一个,是通用大模型的出现。
从2020年起,国家层面便把数据纳入生产要素,进入2022年,相关部门先后发布《关于构建数据基础制度更好发挥数据要素作用的意见》等重要文件。通用大模型在2022年下半年横空出世,也为大数据平台软件市场的发展起到了推波助澜的作用。
在大数据平台软件市场,湖仓一体化市场增长更是跑赢大盘。根据爱分析预测,2025 年,中国湖仓一体平台软件市场规模将达近 100 亿元,2022-2025 年三年复合增长率为 86%。
相比之前的数据库、数据仓库、数据湖架构,湖仓一体化的优势显而易见。业内专家认为,湖仓一体化的架构,将高效建仓和灵活建湖的能力结合在了一起,既能挖掘数据湖中的数据价值,又有数据仓库的数据治理能力。
湖仓一体平台软件市场规模及增速情况 ?来源:爱分析
市场增长快,客户关注度高,代表先进技术能力的湖仓一体化市场已经悄然崛起。
国产基础软件的红利和机遇
湖仓一体化架构的出现,对于国产基础软件来说,是发展红利。
从大环境上来讲,数据底层国产化,可以为中国企业数字化转型提供更安全、可控和高效的技术底座支撑。在大数据行业,解决核心技术关键环节“卡脖子”问题至关重要,这将为中国的数字经济发展带来重要的意义和长远的价值。这个趋势已然不可逆转。
今天的企业数据库市场,正处在从集中式向分布式转变的时期,传统的关系型数据库在高并发、分析等方面存在劣势,相应地,数据管理软件逐步由集中式架构向分布式架构演进。在这个过程中,国外的传统巨头既有优势无法发挥作用,国产厂商有希望在这场技术演进中实现弯道超车。
在国产替代初期,大数据软件市场正面临着巨大的机遇。湖仓一体新市场的出现,必将进一步加速和推动这一趋势的发生。
加速国产化替代浪潮席卷而来,然而,我们也应该认识到,国产化替代是个系统的工程。中国企业数字化转型,需要国产基础软件企业以先进的技术和领先的数字化理念提供产品和解决方案。
目前看来,在大数据基础软件领域,本土企业不仅拥有雄厚的技术实力,而且具备高速成长和快速创新的空间。
市场的调研数据,也支持这一结论。根据爱分析调研,2022年中国湖仓一体平台软件市场规模15.2亿元。排在前列的,均为国产基础软件公司。其中,科杰科技市场份额占比 11.1%,华为云占比 9.5%,星环科技占比 7.3%。
2022 年湖仓一体平台软件市场份额占比 来源:爱分析
「国产基础软件,无论在技术创新上,还是在数字化理念上,都具备弯道超车的能力。」
比如科杰科技湖仓一体数据智能平台KeenData Lakehouse,拥有50余项专利,150余项自主知识产权,自主研发的分布式计算引擎具备很好的扩展性和容错性,可以支持PB量级的数据处理,并支持表、图、文档等多种数据格式,对国产软硬件实现了全面兼容。
在实际的产品服务上,国内外湖仓一体厂商产品理念的差别,也使得国产替代软件有着国外同行难以比拟的优势。国外湖仓融合厂商,更侧重垂直技术能力的实现,而国内的厂商,平台属性更明显。
科杰科技湖仓一体数据智能平台KeenData Lakehouse,侧重一站式数据平台能力,提供从数据采集、数据开发、数据治理、数据资产管理、数据建模分析到数据服务等全链路数据能力,更适应国内企业的需求。
这背后的原因,是国内外企业数字化程度和应用场景的差异,国内顶级数字原生企业的数字化建设、场景复杂程度以及应用落地,都走在全球的领先行列;以及与海外厂商相比,国内的厂商更懂国内的企业需求,给出的方案更加落地。 既有政策大环境带来的发展红利,又有创新技术驱动和本土化优势,这一轮湖仓一体化市场角逐,国内基础软件企业对国外企业的弯道超车,已经是必然的趋势。
追光的企业,在弯道胜出
湖仓一体化已是行业大势所趋,巨头当然也不会等闲视之。
近年来,各大云厂商纷纷推出湖仓一体化产品。AWS推出了智能湖仓,阿里云推出了MaxCompute湖仓一体,华为云推出了FusionInsight MRS,腾讯云也推出了云原生智能数据湖。湖仓一体化成为一条新赛道,已经是行业共识。 那么,创新型的国产基础软件企业,面对国内巨头有没有机会?
IDC中国研究总监卢言霞认为,数据管理架构升级或者重建是近几年大数据市场的关键词,“关于市场格局,云厂商塑造大数据公有云市场的同时,具备技术创新能力的成长型企业也将在私有化部署市场占有一席之地。”
比如做私有化部署市场的科杰科技,创办于2019年,仅仅三四年的时间,就凭借着自己的技术创新能力,在行业崭露头角成为国家级高科技专精特新“小巨人”企业。近期IDC发布的2022年大数据市场平台份额,科杰科技成功跻身于TOP5厂商。
科杰科技湖仓一体数据智能平台KeenData Lakehouse将领先的大数据技术与多业态复杂场景最佳实践高度产品化,并融合DataOps、DataFabric、Active Metadata Management等先进技术理念,提供数据存储计算引擎、低代码开发工具、数据资产管理及组织性数据工作开展方法论等服务。帮助企业自主构建数据能力,打造高效、可靠的数据底座。
KeenData Lakehouse产品通过多架构融合纳管能力、数据工程能力、数据自治理能力、数据资产业务表达能力四大关键能力,为组织创造“创新赋能、持续运营、协同共享、汇聚统一”的核心价值,从而促进组织开放赋能和持续价值运营。 目前科杰科技数据底座产品已深入工业、能源、汽车、金融、零售等多个领域,服务中国联通、中石化、一汽集团、国家电网、吉利汽车、中金公司、中国人寿等行业头部公司。
不仅如此,KeenData Lakehouse还被选入IDC在2023年发布的《湖仓一体数据平台技术能力评估报告》,成为备受推崇的湖仓一体大数据平台;国际权威IT咨询机构Gartner更将科杰科技推荐为《2023 年中国数据、分析和人工智能技术成熟度曲线》可组合标杆厂商。
对于创新企业来说,数据库市场从集中式向分布式转变所带动的数据管理软件演进,面对国内传统巨头,同样也是一次弯道胜出的机会。湖仓一体化市场是以技术和理念为驱动的市场,以领先技术打造壁垒的创新企业,一定可以找到属于自己的市场空间。
我们坚信,那些追求卓越和创新的企业必将在市场上获得成功,并成为独角兽。那些不断追求发展的企业,必然会在数字化转型的浪潮中不断突破自我,创造更加美好的未来。