联 系 我 们
售前咨询
售后咨询
微信关注:星环科技服务号
更多联系方式 >

行业资讯

首页>行业资讯>湖仓一体 数据仓>

湖仓一体 数据仓

发布时间 2025-02-10

湖仓一体
星环科技湖仓一体平台依托多模型数据管理平台,打破传统Hadoop+MPP混合架构,提供统一资源管理、统一存储管理、统一计算引擎和统一数据操作四层统一架构,真正实现湖仓技术架构统一。贯穿这四层架构,星环科技湖仓一体平台还提供全生命周期的数据管控能力,可以实现多模态数据以及元数据的统一管控,同时支持统一的多租户管理,可确保在湖仓一体平台上的租户从资源层、数据层、应用层等都能实现完整隔离。

数据仓是一个面向主题的、集成的、相对稳定的、反映历史变化的数据集合,用于支持管理决策。它主要是对从多个数据源中获取到的数据进行清洗、转换、整合等操作后存储起来,目的是为企业提供复杂的分析和决策支持。

 

数据仓库的架构特点

分层架构

通常包括源数据层、数据抽取层、数据存储层(ODS 层,操作数据存储)、数据仓库层(DW 层,如明细数据层、汇总数据层)和数据应用层。这种分层设计有助于数据的清洗、转换和加载(ETL)过程的管理,使数据从原始的、杂乱的状态逐步转换为有组织的、可供分析的数据。

数据模型

常用的数据模型有星型模型和雪花模型。星型模型以一个事实表为中心,周围连接多个维度表。例如,在销售数据仓库中,销售事实表记录销售金额、销售数量等事实数据,周围的维度表可能包括时间维度(日期、月份、季度等)、产品维度(产品名称、类别、品牌等)、店铺维度(店铺名称、地区等)。这种模型简单直观,查询性能较好。

雪花模型是星型模型的扩展,它将维度表进一步细化,使维度表之间也存在关联关系。这样可以减少数据冗余,但查询复杂度可能会增加。

 

数据仓库湖仓一体的关系

湖仓一体架构中,数据仓库是重要的组成部分。湖仓一体数据湖的灵活性和数据仓库的结构化分析优势相结合。数据仓库湖仓一体架构中承担着对经过清洗、整理后的结构化数据进行高效存储和分析的角色。


 

关键词:
湖仓一体

热门产品

  • TDC星环数据云平台(TDC),基于云原生技术融合数据 PaaS、分析PaaS、应用 PaaS,实现数据端到端全生命周期管理。

  • TDS数据开发 | 数据治理 | 共享交换 支撑企业级数据治理和数据资产平台建设

  • SophonSophon-星环智能分析工具,分布式计算、多模态处理、图形化建模、隐私密保护、云边化一体。

  • KunDB星环分布式交易型数据库 SQL兼容、强一致、高性能、高可用

  • ArgoDBTranswarp ArgoDB 是星环科技自主研发的分布式分析型闪存数据库,可以替代Hadoop+MPP混合架构。支持标准SQL语法,提供多模分析、实时数据处理、存算解耦、混合负载、数据联邦、异构服务器混合部署等领先技术能力。