墨天轮2019年6月即推出了中国数据库流行度排行,排行榜中的数量也从50增加到194个,每月一日更新,同时发布上月的大事记以及排行榜解读文章,另外我们举办了各种类型与中国数据库相关的活动,见证了中国数据库近三年的蓬勃发展,也为数据库国产化贡献了一份力量。
墨天轮参考 gartner 的魔力象限模型,结合墨天轮数据库流行度排行表现,综合得出了2021年度中国数据库魔力象限。
魔力象限(gartner magic quadrant)由gartner于2006年推出,该模型是对某一特定企业级 it 技术市场的研究总结。
墨天轮选取2021年年度平均分排行前40的数据库产品,通过2021年平均分、最新得分、三方评测(tpc-c、tpc-ds、tpc-h、大数据产品能力以及电信行业能力)、生态(社区平台、高校合作、培训认证、开放文档、代码开源、介质下载)以及论文和专利数量综合评定,同时参考了该数据库在 gartner 全球云数据库魔力象限的表现以及 idc 全球数据库市场份额报告。最后将数据汇总到两个维度上 — ability to execute(执行层面,即当前产品、服务、销售等表现)和 completeness of vision (战略层面,即未来愿景的清晰完整性),根据各家供应商们的表现,将其划分入如下四个象限中,分别为:领导者、远见者、挑战者和特定领域者。
领导者象限
领导者象限代表当前数据库产品及服务能力强,市场销售表现好,客户满意度较高,同时有清晰完整的未来战略。该象限中有7个数据库:
● tidb
tidb 是 pingcap 公司研发的开源分布式关系型数据库,是一款同时支持在线事务处理与在线分析处理(htap)的融合型分布式数据库产品,具备水平扩容或者缩容、金融级高可用、实时 htap、云原生的分布式数据库、兼容 mysql 5.7 协议和 mysql 生态等重要特性。tidb技术创新能力处于世界领先水平,每年会进行超过 40% 的代码更新,在github上获得逾3万颗星,已应用于全球超过 2000 家头部企业。
● oceanbase
蚂蚁集团 oceanbase 连续 8 年稳定支撑双 11,创新推出“三地五中心”城市级容灾新标准,是全球唯一在 tpc-c 和 tpc-h 测试上都刷新了世界纪录的国产原生分布式数据库,具备高可用、高扩展、高兼容、易管理、部署灵活、高性价比等特点,已助力 200 行业客户实现核心系统升级。在区域性的银行、保险、证券及基金公司中,oceanbase市场占比达到行业第一。来自非金融类客户的营收占比已达到oceanbase总营收的35%,且在快速增长中。
● polardb
阿里云 polardb 是全球范围内业界首个实现了存储、内存及计算三层解耦的云原生数据库,为用户提供具备极致弹性、海量存储、高性能、低成本的数据库服务。polardb目前兼容三种数据库引擎:mysql、postgresql、高度兼容oracle语法。计算能力最高可扩展至1000核以上,存储容量最高可达 100t。polardb已经全面应用于天猫双11的交易、买家、卖家以及物流等系统,刷新了数据库处理峰值记录,高达1.4亿tps。
● 达梦
达梦数据库源代码100%自主研发,特别是 dm8,是国内第一款实现数据共享存储集群的数据库,支持超大规模并发事务处理和事务-分析混合型业务处理,动态分配计算资源,降低成本。达梦数据库系列产品及m6米乐安卓版下载的解决方案现已服务于国内外用户数十万家,装机产品累计近百万套,已在金融、电力、民航、通信、审计、公安、铁路、电子政务、应急救援等50多个关乎国计民生的行业领域取得广泛应用。
● gaussdb
华为 gauss 数据库是全球首款企业级 ai-native 分布式数据库,将ai能力植入到数据库内核的架构和算法中,使其具备一定的自运维、自管理、自调优、故障自诊断和自愈的能力。gauss 数据库异构计算支持x86、arm、gpu、npu,支持行存储和列存储,可增加节点实现存储、查询及加载性能的线性扩展,集群最大可扩展至 2048 个节点,支撑 pb 级数据管理能力。gaussdb已在1500 金融政企与泛互联网大客户取得规模商用。
● opengauss
opengauss 是华为推出的一款企业级开源关系型数据库。在主备模式下60%满负载故障切换时间10秒以内;利用 ai 进行智能参数调优和索引推荐,可减少 85% 的传统索引,且索引的推荐准确率达 90%;支持全密态计算;结合鲲鹏硬件优化,1000wh数据量可跑到150万tmpc,相对业界主流产品的性能超过50%。opengauss全球下载量超50万,超过2500名开发者参与技术贡献,诸多m6米乐安卓版下载的合作伙伴基于opengauss打造商业发行版。
● tdsql
tdsql 是腾讯云企业级分布式数据库,旗下涵盖金融级分布式、云原生、分析型等多引擎融合的完整数据库产品体系,提供业界领先的金融级高可用、计算存储分离、数据仓库、企业级安全等能力,同时具备智能运维平台、serverless版本等完善的产品服务体系 。tdsql已被3000多家来自金融、公共服务和电信垂直行业的客户采用,中国十大银行中的六家都应用了该产品,在金融行业的核心系统国产化替换场景中表现抢眼。
挑战者象限
挑战者象限代表产品及服务能力较强,经营状况良好,有一定的市场占有率,拥有强大的企业生存能力和财务稳定性,并表现出强大的客户支持。该象限中有2个数据库:
● gbase
南大通用 gbase 系列 主要包括分布式分析型数据库 gbase 8a、交易型数据库 gbase 8s、分布式交易型数据库 gbase 8c,以及目录型数据库 gbase 8d。目前已在金融、电信、政企、安全等关键领域得到规模化应用,服务范围覆盖全国 32 个省级行政区域,建立节点超过 30000 个,管理数据总量超过 300pb。
● 人大金仓
人大金仓 kingbasees 搭载高内聚、低耦合的可扩展内核架构,支持大数据分析,单机单表支持140tb级大数据量存储;具备自动发现问题、诊断问题、异常发生的自愈以避免业务中断;具有良好的容灾恢复能力,支持双机热备功能。金仓数据库广泛服务于电子政务、国防军工、能源、金融、电信等千行百业,累计装机部署近100万套。
远见者象限
远见者象限表示数据库市场有着深刻的市场理解和强大的技术路线图,虽然当前的市场份额相对较少,但是作为长期主义者,他们对未来有十足的把握和信心。该象限中有2个数据库:
● analyticdb
analyticdb是阿里云自主研发的云原生数据仓库,采用存储计算分离 多副本架构,支持最大5000节点规模的弹性扩容,对复杂sql查询速度比传统的关系型数据库快10倍以上。analyticdb高度兼容mysql、postgresql,oracle应用迁移成本低,可对万亿级别的数据进行实时的多维度分析透视,极大地提升了企业挖掘数据价值效率。
● sequoiadb
sequoiadb (巨杉)作为一款金融级分布式数据库,多数据中心间容灾可做到 rpo = 0,rto < 15秒。sequoiadb 基于湖仓一体架构,能支撑联机交易和联机分析的场景,支持acid事务一致性。在面向在线系统提供业务流程中,提供声纹指纹、人脸识别、音视频交互等联机处理的支持;更可以基于ai及机器学习,对非结构化的数据进行治理,实现与其他重要系统的交互。
特定领域者象限
特定领域者表示通过提供高度专业化的产品在某些场景下有独特的优势,能够高效解决特定问题,如客户明确产品及功能的使用定位,采用特定领域者产品也是一种好的选择。该象限中有8个数据库:
● 神舟通用
神通数据库是企业级大规模并行处理分布式关系型数据库,具备高兼容、高可靠、高安全、异地容灾等特点。神通数据库获得公安部国家安全四级的高安全等级认证,在长五火箭发射、“天问一号”探火、“天和”核心舱等任务中都有应用。神通数据库不仅成功应用于国防军工、航天等关键行业,也在政府、金融、电信、网安、能源等领域全面开花。
● goldendb
中兴通讯 goldendb 是一款具有银行基因的金融级分布式数据库产品,从架构层面保证事务强一致和数据高可靠,并可根据业务需要实现在线扩容,支持金融行业已有业务升级及创新业务快速部署的需求。goldendb 产品已覆盖国有大行、股份制银行、农信联社、城商行及农商行全系列银行。
● tcaplusdb
tcaplusdb 是腾讯专为游戏设计的分布式 nosql 数据库。结合内存和 ssd 高速磁盘,针对游戏业务的开发、运营需求,tcaplusdb 支持全区全服、分区分服的业务模式,为游戏业务爆发增长和长尾运维提供不停服扩缩容、自动合服等功能。tcaplusdb已应用于《王者荣耀》、《天涯明月刀手游》、《qq飞车》等数百款腾讯游戏。
● goldilocks
goldilocks 是科蓝软件拥有完整自主知识产权的分布式内存数据库,具有极强的高并发、高吞吐量、低延时的性能优势,支持在线横向扩展、收缩的能力,能够满足大数据处理的多样化业务需求,适用于金融、电信等对实时性要求较为严格要求的场景。
● uxdb
uxdb(优炫数据库)具备支持多种数据类型、在线弹性扩容、高可用性、高性能、高安全性、数据即服务等核心能力;可应用于高频联机系统、地理信息、数据仓库、商业智能等多业务场景;产品已完成与多数芯片、操作系统、应用软件厂家适配,支持众多应用软件的稳健运行;满足我国政府、军工、金融、能源、制造、医疗等各行业产业升级需求。
● tdengine
tdengine 是涛思数据专为物联网、车联网、工业互联网、it运维等设计和优化的时序数据库。除核心的快10倍以上的时序数据库功能外,还提供缓存、数据订阅、流式计算等功能,最大程度减少研发和运维的复杂度,且核心代码,包括集群功能全部开源。
● mogdb
mogdb 是云和恩墨基于基于华为opengauss内核推出的企业发行版。相较于mysql,mogdb主备之间的数据一致性更容易得到保障。同时,mogdb可以提供sql兼容性分析、性能压测对比分析、极限数据恢复等管理组件,帮助企业级用户方便高效地使用opengauss,减轻运维压力。目前,mogdb已应用在民生银行、哈尔滨银行、渤海财险、合众人寿等多个金融行业客户的核心或关键业务系统上。
● esgyndb
esgyndb(易鲸捷) 是一款企业级融合型分布式数据库。融合oltp与olap能力,支持结构化与非结构化数据统一存储。相较于传统数据库,esgyndb 的实时分析特性与分布式架构更能支撑5g时代的物联网、人工智能、智能制造、区块链等新兴技术对于实时海量数据的融合管理需求。
以上象限仅供参考,具体市场请根据各自项目需求进行选型及测试验证。
国产化背景
从2019年开始,中美贸易战常态化,华为等多家中国企业列入“实体清单”,同时芯片等多项技术及设备被列上“管制清单”,数据库、中间件、操作系统三大基础软件也在“卡脖子”之列,过去一直被美国巨头占据。结合国内数据产业的迅猛发展,数据库作为与之最紧密的软件成为国内企业争相突破的技术,追求自主创新、安全可控。
中国数据库主要分为以下三类:以达梦、人大金仓、南大通用、神舟通用四大传统数据库厂商,在政务、能源等行业保持较高的市场占有率;阿里、华为、腾讯、中兴等头部科技企业,首先自有场景的数据库替换,然后通过公有云对外通过提供服务,近几年又从云上数据库并下沉到私有云平台的市场;最后就是pingcap、易鲸捷、瀚高、巨杉等独立创业公司,通过分布式等技术在金融行业占据了半壁江山。
通过数据库发展源流图发现,当前中国数据库多数是从mysql以及postgresql演讲而来,然后在兼容性、易用性进行了大量改造,同事通过降低国外商业数据库迁移的成本,使得中国数据库慢慢发展起来,开源数据库已经成为中国数据库突破实现突围、发展自主可控产品的主要途径。从2020年6月,华为建立opengauss开源社区,并于2021年3月发布第一个release版本;2021年5月,阿里云宣布对外开放关系型数据库polardb for postgresql源代码,同年6月,蚂蚁集团宣布开源oceanbase。2022年1月11日中国软件行业协会发布《中国软件根技术发展白皮书(基础软件册)》,表明当前国内已经开始着手构建自己的基础软件根技术。同时,我们注意到2020年我国高校和企业在 vldb、icde 和 sigmod 数据库三大顶会上贡献占比为23.81%,也反映出目前中国数据库在技术创新上有了不错的成绩。
近三年中国数据库大事记
-
2019年-发展元年
- 2019年8月28日,腾讯云一次推出五大数据库新品,包括数据库智能管家dbbrain、云原生数据库cynosdb正式商业化、数据库tbase启动公测、灾备服务dbs启动邀测、redis混合存储版启动邀测。
- 2019年10月2日,oceanbase打破数据库基准性能测试(tpc-c)的世界纪录,其tpmc值超过6000万,排名第一。
- 2019年10月27日,采用中兴goldendb的中信银行信用卡中心核心业务系统上线运行。
-
2020年-百家争鸣
- 2020年6月30日,华为opengauss终于正式亮相,源代码开放、社区成立。
- 2020年10月19日,易鲸捷数据库4.2亿中标贵阳银行核心业务系统中国数据库应用项目,创造了中国数据库的单一采购项目记录。
- 2020年11月17日,pingcap 完成 d 轮 2.7 亿美元融资,创造全球数据库历史新的里程碑。
-
2021年-百花齐放
- 2021年2月24日,华为云正式发布云数据库gaussdb(for opengauss)全网商用。
- 2021年6月1日,蚂蚁集团自研数据库oceanbase宣布开源,开放近300万行源代码。
- 2021年12月17日,gartner 2021 云数据库管理系统魔力象限已经出炉。阿里云再次进入领导者象限,华为云进入特定领域者象限(niche players),是国内入选的仅有两家企业。
资本不断注入
2019年开始资本大量进入中国数据库行业,其中2021年更是井喷式爆发,融资次数达到了20多次,融资额度超过30亿人民币。其中部分如下:
时间 | 公司名称 | 轮次 | 金额 |
---|---|---|---|
2021年12月16日 | 人大金仓 | 战略融资 | 近2亿人民币 |
2021年12月9日 | 智臾科技 | b轮 | 1亿人民币 |
2021年12月6日 | 创邻科技 | a 轮 | 过亿人民币 |
2021年11月29日 | 四维纵横 | a轮 | 1亿元 |
2021年11月19日 | 拜贝思云计算科技 | 天使轮 | 300万美元 |
2021年9月29日 | 聚云位智 | b轮 | 近亿人民币 |
2021年8月25日 | 偶数科技 | b 轮 | 2亿人民币 |
2021年7月20日 | pingcap | e轮 | 数亿美元 |
2021年7月12日 | 睿帆科技 | a轮 | 5000万人民币 |
2021年6月22日 | 中科知道 | 天使轮 | 1200万人民币 |
2021年5月24日 | 涛思数据 | b轮 | 4700万美元 |
2021年5月9日 | 易鲸捷 | 战略投资 | 5769万人民币 |
2021年3月16日 | 青云科技 | ipo上市 | 7.644亿人民币 |
2021年2月26日 | 天云融创 | 战略投资 | 未披露 |
2021年2月10日 | 爱可生 | b轮 | 近亿人民币 |
2021年2月1日 | 创邻科技 | a 轮 | 数千万人民币 |
2021年1月21日 | 新炬网络 | ipo上市 | 5.59亿人民币 |
2021年1月18日 | 智臾科技 | a轮 | 数千万人民币 |
数据库相关的上市公司有:优炫软件、科蓝软件、海量数据、东方国信、创意信息、金山云、青云科技,另外据悉有几家数据库厂商正处于上市前冲刺阶段。
基础软件的投入成本和研发周期都非常长,在资本注入后,其中大部分都投入到研发中,只有数据库产品稳定、高效、安全,同时方便迁移和管理,替换原有市场也就变得非常容易,那么国内新增市场也就自然会优先采购中国数据库。
政策持续利好
当前中国数据库应用主要集中在金融、电信、政务、制造、互联网等行业,这离不开国家各种政策的引导,尤其是金融行业,人民银行等机构多次发文要求核心场景技术和产品自主可控,同时由于金融行业的高要求,也成了中国数据库的试炼场,经过近几年的高速发展和场景磨炼,已经有了非常成熟的金融行业案例。
2021年12月12日,为应对新形势新挑战,把握数字化发展新机遇,拓展经济发展新空间,推动我国数字经济健康发展,依据《中华人民共和国国民经济和社会发展第十四个五年规划和2035年远景目标纲要》,支持具有自主核心技术的开源社区、开源平台、开源项目发展,推动创新资源共建共享,促进创新模式开放化演进。
2022年1月16日出版的第2期《求是》杂志发表中共中央总书记的重要文章《不断做强做优做大我国数字经济》。文章指出要全面推进产业化、规模化应用,培育具有国际影响力的大型软件企业,重点突破关键软件,推动软件产业做大做强,提升关键软件技术创新和供给能力。
市场足够大
据idc预测,2021全年中国关系型数据库软件市场规模为27.5亿美元,到2025年将达到76.7亿美元,未来5年市场年复合增长率(cagr)为30.4%。
据信通院预测,中国数据库市场总规模将达到688亿元,市场年复合增长率(cagr)为23.4%,假如出现传统头部企业占据70%的市场,那就是480亿的营收。
以上两个预测数据库行业市场规模年复合增长率都超过20%,属于高新赛道,一定会有更多的“玩家”加入,让技术、产品、生态、服务等都会得到快速发展。
数据库私有云平台
gartner预测到2023年,全球数据库市场中75%的数据库将完成到云平台的迁移,公有云数据库的增速也将放缓,而下一个争夺的市场主要为数据库私有云平台,以云的方式部署在客户私有环境中,这样既享受了云的便捷,也打消了对公有云数据安全、可靠性等疑虑。
开源生态建设
2021年1月至今,在 db-engines 上开源数据库流行度超过商业数据库,开源生态建设既是帮助企业商业布局的利器,也是促进技术发展和推广的重要手段,国内以pingcap、opengauss等数据库为例,通过开源生态的建设,大大提升了品牌的影响力,未来阿里、腾讯等越来越多的厂商会加大开源生态的建设。
分布式
分布式数据库成为解决传统数据库瓶颈的主要手段。分布式数据库可以帮助企业应对海量数据和高增长的问题,在数据增大时可以平滑的水平扩展,解决了过去系统数据增大时需要人工进行分库分表的复杂和高风险的工作。
htap
htap数据库即需要同时支持oltp和olap场景,在报表实时性要求不断提升,htap数据库通过对计算、存储架构的调整省去数据同步的过程,在同一套数据库中完成交易和报表的请求。
ai
随着数据量的不断暴增,减轻人力维护成本以及避免故障,通过引入ai,让数据库自动驾驶,如自动调优、自诊断、自愈、自组装等,最终实现对管理员透明,只需提供简单api即可,在保证稳定和性能的情况下,让易用性达到极致。
从2019年开始中国数据库才正式大规模发展,当前产品或服务难免会有一些瑕疵,此时更需要得到大家的支持,助力中国数据库生态的建设,共同促进行业的进步。未来是百花齐放百家争鸣,还是几家独大?让我们拭目以待吧!