星环科技湖仓一体平台依托多模型数据管理平台,打破传统Hadoop+MPP混合架构,提供统一资源管理、统一存储管理、统一计算引擎和统一数据操作四层统一架构,真正实现湖仓技术架构统一。贯穿这四层架构,星环科技湖仓一体平台还提供全生命周期的数据管控能力,可以实现多模态数据以及元数据的统一管控,同时支持统一的多租户管理,可确保在湖仓一体平台上的租户从资源层、数据层、应用层等都能实现完整隔离。
统一资源管理:提供基于云原生技术的容器化操作系统TCOS,向下可兼容信创自主可控硬件生态,向上提供统一的资源调度框架,通过容器化编排,能够统一调度计算、存储、网络等各类基础资源。
统一存储管理:星环分布式数据管理系统TDDMS,为不同存储引擎提供公共的存储管理服务,目前接入了9款存储引擎,支持10种数据模型的存储。通过统一的存储管理,降低运维管理成本,避免数据孤岛。同时分布式数据管理系统的插件特性,支持业务灵活扩展,可按需接入其他存储引擎。
统一计算引擎:星环分布式计算引擎Transwarp Nucleon根据不同的存储引擎自动匹配高性能算法,支持跨模态数据的融合分析,降低开发难度,提升开发效率。
统一数据接口:提供标准的SQL语法支持,实现统一接口处理不同业务和数据模型,只需简单的SQL语句即可完成各种复合跨模型数据查询。解决因场景切换、数据库切换而造成接口、开发语言切换等问题,降低开发和迁移成本。
方案优势
多模存储:星环科技湖仓一体平台具备多元异构数据统一存储、统一管控能力,支持关系型数据存储、宽表存储、图关系存储、日志存储、时空轨迹存储、实时数据计算和存储、时序数据存储、键值数据存储、文档型数据存储、事件存储10种数据模型。
技术创新:星环科技湖仓一体平台打破传统Hadoop+MPP混合架构,真正实现湖仓技术架构统一,大大提升数据处理效率。
批流协同:星环科技湖仓一体平台支持批流一体,实现了跨模态数据融合分析。
统一SQL:跨模态数据融合分析、批流协同开发等均通过统一接口访问,全面支持SQL语法,通用、易用、好用。
弹性伸缩:基于云原生技术架构,支持存算解耦,可以实现资源弹性伸缩,提高资源利用率。
信创自主:信创自主可控,同时与信创上下游生态全面兼容,支持10种操作系统,其中包括银河麒麟、统信、欧拉等7种国产操作系统,满足各类信创软硬件环境需求;支持6种硬件品牌,其中有海光、鲲鹏等4种国产CPU架构,支持统一集群混合架构部署,充分利用硬件资源。
