产品简介
海盒mpp数据库系统[简称:seaboxmpp],是北京东方金信科技股份有限公司自主开发的大规模分布式并行数据库集群系统,是典型的shared-nothing架构的mpp(大规模并行计算)数据库,集群规模可支持1024以上节点,同时满足传统物理服务器部署或云主机部署,支持x86架构及arm架构部署,能够与国产cpu、操作系统良好适配。
seaboxmpp数据库具备强大分析能力及事务处理能力,主要功能包括:
- 分布式并行计算架构
- 联邦架构集群管理机制
- 行列混合存储
- 库内高效压缩
- 高性能矢量化计算引擎
- 在线扩容、节点替换,硬件异常不中断服务能力
- 提供节点、实例、组件级的全方位高可用能力和自动恢复能力
- 提供等保2.0三级标准数据库安全能力,包括强制访问控制、审计、存储加密等
- 提供企业级流式入库组件,满足通过cdc机制实时入库需求,同时支持流批结合、增全量结合等特色能力
海盒mpp数据库适用于构建大规模的高性能数据仓库和商业智能査询(bi)平台,尤其擅长海量结构化数据的实时查询或批量加工。目前海盒mpp数据库已经在能源、政务等领域规模化应用,主要应用场景包括以下几类:
-
企业级数据仓库及大数据平台
seaboxmpp数据库产品是典型shared-nothing架构的大规模并行处理集群,满足超过1000节点部署,支持10pb以上结构化数据的存储与管理,产品支持的列存储、高效压缩、高性能关联聚合分析均适用于大规模企业级数据仓库及大数据平台的建设,满足银行、保险、电信等数亿用户的集团企业全面数据分析与治理需求。
seaboxmpp数据库与同类型国外开源产品对比,tpch、tpc-ds等基准测试性能有3-5倍的显著提升。 -
高并发查询系统
seaboxmpp数据库支持的行列混合存储、高效压缩、稀疏索引、高性能汇总分析等能力对银行、电信、证券等领域的实时账单查询、bi查询系统有良好的支撑,在数千并发的复杂查询场景下,能够保证秒级响应;对上百并发的多表关联与汇总分析场景,能够支持10秒级响应。
-
实时数据湖场景
海盒数据库自主研发的data-flow组件支持实时将oltp数据库通过cdc机制抽取的变化数据同步至seaboxmpp,该组件支持多项特性,包括增全量衔接、流批结合、两阶段入库,同时提供针对表结构不一致、ddl变化等异常的跳过及自动处理机制,尤其满足企业级实时数据湖的建设需求。
产品架构
seaboxmpp数据库基本架构如下:
- 集群协调节点
- 是整个集群的入口,提供集群管理、全局事务管理、sql解析及分布式调度等功能。集群协调节点支持多入口及高可用,内部通过一致性协议自动保证集群一致性。
- 分布式计算节点
- 接收管理节点发来的执行计划并执行,负责集群的数据处理功能。支持分布式并行及实例内并行,可充分发挥出分布式架构的多节点及多cpu性能优势。支持行执行引擎和向量执行引擎,可同时满足oltp和olap应用需求。
- 存储系统
- 支持本地存储和分布式存储方式,由集群自动实现存储的高可用、数据重分布、数据恢复等功能。支持行存储和列存储,可根据应用需要选择不同的存储格式。
- 外部数据源
- 提供集群的装载及导出服务,可通过sql直接完成对外部数据的访问、处理、导入等。支持多节点并行及高可用,无单点瓶颈。支持hadoop、关系型数据库等多种数据源。
所属公司
北京东方金信科技股份有限公司(简称东方金信)成立于2013年,是一家专注于大数据产品和行业m6米乐安卓版下载的解决方案的大数据企业,致力于为政府、金融、工业、能源、交通等各行业客户,提供有高性能海量数据处理能力的、安全可靠的大数据产品、m6米乐安卓版下载的解决方案与服务。
东方金信系首批通过中国信通院大数据基础能力和性能双认证的企业,是gartner认证的国际主流hadoop发行版厂商之一。
相关资料
东方金信m6米乐安卓版下载官网: