联 系 我 们
售前咨询
售后咨询
微信关注:星环科技服务号
更多联系方式 >
2.10 高性能数据仓库
更新时间:9/4/2020, 6:07:43 AM

产品简介

产品描述

高性能数据仓库是数据中心库,全面整合各类数据,按照主题组织信息,是打造商业智能的核心。

产品功能

基于星环分布式闪存数据库软件ArgoDB高性能数据集市版,由星环Gateway网关,提供几百并发的数据访问接入和负载均衡能力。

  • 完善的SQL支持

    完整支持SQL标准2003,兼容包括Oracle、DB2、Teradata多种方言,以及存储过程和事务语义。同时其内部引擎提供语句深度优化能力,确保业务极速运行。

  • 异构数据互通

    轻松实现异构数据互通,无需等待迁移,就可以整合并处理来源于不同系统的数据,是实现企业级数据仓库和数据湖的坚实基础。

  • 混合负载支持

    实现灵活的SLA Scheduler,按照用户或负载提供SLA,采用更细粒度的调度算法,动态适配队列拓扑。从而根据当前环境的资源情况,智能的进行调度,有效应对多租户下的资源管理场景。

  • 分布式事务保障

    提供可序列化快照隔离,保障事务在分布式系统下正常运转,高吞吐的事务机制,确保数据强一致,高可用的事务保证。

  • 非结构化数据处理

    提供对非结构化或者半结构化数据的存储、检索、分析能力,具有影像分析、文本数据挖掘分析等功能,利用广泛的数据资源实现信息的发现与挖掘。

产品优势
  • 轻松打造云上大数据

    TDH-DW底层使用大数据定制云操作系统Transwarp Operating System,实现集群资源管理、容器化部署,同IaaS层完美整合。同时TDH-DW通过容器技术,构建出资源组织与调度完善的多租户体系,从而更好的为企业提供云上的大数据服务。

  • 卓越的数据处理能力

    TDH-DW采用分布式集群架构,提供超强的并行计算和线性可扩展能力。具有PB级数据处理能力,提供强大的批处理支持,无需预先建模即可进行秒级交互分析。因而拥有卓越的主题加工能力,支持企业更多的业务创新。

  • 开发效率全面提升

    内置全套的数仓开发工具Transwarp Studio,支持数据整合、工作流调度、数据治理以及报表工具等数据业务,提供可视化工具进行数据特征分析,探索数据间关系。大大提高数据仓库的开发效率,提高项目的成功率。

  • 多种数据类型的支持

    支持多种类型的数据,提供大规模数据下高效灵活的存储和分析能力。满足对于海量非结构化数据的分析和存储需求,以及各类数据分析需求的衍生与拓展。

  • 便捷的迁移

    对于大量存量SQL与存储过程无需过多改动就可以迁移至新的数据仓库,同时轻松实现报表等多种工具同新平台的对接,从各个方面简化并加速数据仓库的平滑迁移。

  • 可靠的数据与服务

    提供双机热备。保障数据可靠,服务可用。能够实现即时灾难恢复,通过故障转移保障系统随时稳定可用,维护业务的连续性。

  • 稳健的安全保护

    到安全组件Guardian的全面保护,为租户提供可靠地认证机制,防范安全漏洞和攻击,实现资源管理和行级列级的权限控制,在云环境下保护用户隐私和信息安全。

产品架构

datawarehouse1

组件描述

Argo-CompactService

分析型数据库的计算服务

HDFS

用于查询HDFS的基本信息,提供所有HDFS datanode的基本信息,以及当前服务的运行统计数据。此外,对于具有权限的用户,它还支持浏览HDFS的所有文件。该入口可以帮助清楚了解HDFS的状态,有助于实现有效的HDFS运维

默认三个节点起

Shiva

分布式数据管理系统

ArgoDB-Inceptor

分析型数据库

ArgoDB-Metastore

数据库服务管理运维工具

Metastore

分布式元信息管理服务

DBAService

数据库服务管理运维工具

默认不开启HA,可以手工配置

Inceptor

执行任务的监控页面,通过对信息的抽取与整理,提供可视化以及统计化的信息,帮助您了解Inceptor中任务的运行情况,从而对运行资源以及数据分布进行更有效的控制

默认三个节点起

Zookeeper

Kafka依赖,用于Kafka元数据的管理

Terminal

集成的组件命令行交互界面。支持Linux命令,还可以通过命令行的方式对Inceptor、Hyperbase、HDFS、Zookeeper等云产品内的组件进行维护管理

默认不开启HA,可以手工配置

TxSQL

关系数据库

产品实例部署操作

参考数据湖章节