Transwarp Data Hub介绍

Transwarp Data Hub(TDH) 是星环科技自主研发的企业级一站式多模型数据管理平台。凭借星环科技创新的技术架构和深厚的产品研发能力，TDH 帮助企业加速数字化转型，更全面、更便捷、更智能、更安全地运用数据，大幅降低综合成本。

产品架构

重要组件

TDH 主要提供以下 12 款核心组件：

组件名称	组件介绍
Slipstream 实时流计算引擎	Transwarp Slipstream 是星环科技自主研发的企业级、高性能实时流计算引擎，支撑百万级高吞吐、毫秒级低延时业务需求。Slipstream 支持事件驱动和微批处理两种模式，支持 exactly-once 语义、复杂事件处理 (CEP)、规则引擎等功能，支持SQL 编程与开发。Slipstream 帮助用户快速开发实时数据仓库、实时报表分析、实时智能推荐、实时欺诈检测与风险控制等应用。
Inceptor 关系型分析引擎	Transwarp Inceptor 是星环科技自主研发的关系型分析引擎，提供 PB 级海量数据的高性能分析服务。跟开源方案相比，Inceptor 是全球首个通过分析决策系统国际基准测试 TPC-DS 及官方审计的产品；同时支持完整的 SQL 标准语法，兼容Oracle、IBM DB2、Teradata 方言，兼容 Oracle 和 DB2 的存储过程，可以平滑迁移应用；支持分布式事务处理，保障数据强一致性。Inceptor 帮助用户快速开发数据湖、数据仓库等应用。
Hyperbase 宽表数据库	Transwarp Hyperbase 是星环科技自主研发的 NoSQL 宽表数据库，支撑百万级高并发、毫秒级低延时业务需求。Hyperbase 支持结构化数据，及文本、图像、视频、对象等非结构化数据的存储；支持全文索引、二级索引等索引技术；提供多租户管理；支持 SQL 标准语法，并兼容开源 HBase。Hyperbase 帮助用户快速开发历史数据查询、业务在线检索等应用。
Scope 全文搜索引擎	Transwarp Scope 是星环科技自主研发的分布式搜索引擎，提供 PB 级海量数据的交互式多维检索分析服务，能够实现高可靠、高扩展性的全文搜索与灵活查询。毫秒级快速响应用户的检索需求；分钟级快速恢复单点故障。Scope 支持结构化、半结构化，及图片、音影、互联网数据等非结构化数据存储，并保障数据的强一致性。Scope 帮助用户快速开发文本信息分析检索、企业级搜索引擎、知识图谱查询等应用。
StellarDB 分布式图数据库	Transwarp StellarDB 是星环科技自主研发的企业级分布式图数据库，提供高性能的图存储、计算、分析、查询和展示服务。StellarDB 支持原生图存储，千亿点、万亿边、PB 级大规模图数据存储；具备 10+ 层的深度链路分析能力，提供丰富的图分析算法和深度图算法；支持标准图查询语言并兼容 OpenCypher，并具备海量数据 3D 图展示能力。StellarDB 帮助用户快速开发欺诈检测、推荐引擎、社交网络分析、知识图谱等应用。
Spacture 时空数据库	Transwarp Spacture 是一款星环科技自主研发的分布式时空数据库，提供空间地理、时空轨迹、遥感影像等海量数据的存储、查询、分析和挖掘服务。 Spacture 具备高性能数据读写和分析能力。支持 OGC 标准图形类型和空间关系，兼容常见的开源和商业 GIS 软件；内置了时空索引、空间拓扑几何、遥感影像处理等高效算法。Spacture 帮助用户快速开发时空查询分析、时空模式挖掘、时空轨迹聚类等应用，广泛应用于位置服务、城市管理、交通物流、疫情防控等场景。
Hippo 向量数据库	Transwarp Hippo 是一款企业级云原生分布式向量数据库，支持海量的向量式数据集的存储、索引和管理，能够高效的解决向量相似度检索以及高密度向量聚类等问题。Hippo 具备高可用，高性能，易拓展等特点，支持多种向量搜索索引、数据分区分片、数据持久化、增量数据摄取、向量标量字段过滤混合查询等功能，能够很好的满足企业针对海量数据的低延时与高并发的检索与分析业务需求。
TimeLyre 时序数据库	Transwarp TimeLyre 是一款时序数据库，提供海量时间序列数据的高效压缩存储和高性能分析服务。 TimeLyre 支持数据高速读写，每秒处理数十万条记录和数百次查询。TimeLyre 帮助用户快速开发各类业务与设备的实时监控、实时预警、实时故障诊断等应用。
DocStore 文档数据库	Transwarp DocStore 是星环科技自主研发的分布式文档数据库，支持海量的结构化、半结构化、非结构化数据存储，如 XML 数据、JSON 数据、图片视频小对象等。DocStore 内建多种索引加速文档数据检索，例如：树型索引、位图索引、粗索引、列索引。最高支持百万级高并发、毫秒级延迟的文档检索能力。
KeyByte 键值数据库	Transwarp KeyByte 是一款高性能键值数据库，提供数据实时插入与高并发检索服务。KeyByte 采用主从高可用架构，支持容灾、主备自动切换和故障迁移；兼容 Redis 核心数据结构与 API；支持数据的持久化；支持弹性扩展。KeyByte 帮助用户快速开发热点数据缓存、高并发数据存储、实时或限时业务支持等应用。
Event Store 事件存储库	Transwarp Event Store 是一款高吞吐分布式 NoSQL 数据库，提供消息和事件的存储与处理服务。Event Store 支持数据持久化；支持数据从指定时间点重放，保证数据顺序性；具备弹性扩展和容错能力。Event Store 帮助用户快速开发日志收集、应用监控、流式数据处理、在线分析等应用。
Sophon Discover 数据科学平台	Transwarp Sophon Discover 是星环科技自主研发的数据挖掘分析探索工具包，其包含丰富的分布式算法库，并内置了诸如金融反欺诈、舆情文本挖掘等多个行业应用模块。Sophon Discover 可实现 R、Python、Spark 等多种编程语言进行数据分析处理，并支持 Tensorflow、Torch 等深度学习算法框架、异构硬件资源的统一运筹与管理。

组件名称

组件介绍

Slipstream

实时流计算引擎

Transwarp Slipstream 是星环科技自主研发的企业级、高性能实时流计算引擎，支撑百万级高吞吐、毫秒级低延时业务需求。Slipstream 支持事件驱动和微批处理两种模式，支持 exactly-once 语义、复杂事件处理 (CEP)、规则引擎等功能，支持SQL 编程与开发。Slipstream 帮助用户快速开发实时数据仓库、实时报表分析、实时智能推荐、实时欺诈检测与风险控制等应用。

Inceptor

关系型分析引擎

Transwarp Inceptor 是星环科技自主研发的关系型分析引擎，提供 PB 级海量数据的高性能分析服务。跟开源方案相比，Inceptor 是全球首个通过分析决策系统国际基准测试 TPC-DS 及官方审计的产品；同时支持完整的 SQL 标准语法，兼容Oracle、IBM DB2、Teradata 方言，兼容 Oracle 和 DB2 的存储过程，可以平滑迁移应用；支持分布式事务处理，保障数据强一致性。Inceptor 帮助用户快速开发数据湖、数据仓库等应用。

Hyperbase

宽表数据库

Transwarp Hyperbase 是星环科技自主研发的 NoSQL 宽表数据库，支撑百万级高并发、毫秒级低延时业务需求。Hyperbase 支持结构化数据，及文本、图像、视频、对象等非结构化数据的存储；支持全文索引、二级索引等索引技术；提供多租户管理；支持 SQL 标准语法，并兼容开源 HBase。Hyperbase 帮助用户快速开发历史数据查询、业务在线检索等应用。

Scope

全文搜索引擎

Transwarp Scope 是星环科技自主研发的分布式搜索引擎，提供 PB 级海量数据的交互式多维检索分析服务，能够实现高可靠、高扩展性的全文搜索与灵活查询。毫秒级快速响应用户的检索需求；分钟级快速恢复单点故障。Scope 支持结构化、半结构化，及图片、音影、互联网数据等非结构化数据存储，并保障数据的强一致性。Scope 帮助用户快速开发文本信息分析检索、企业级搜索引擎、知识图谱查询等应用。

StellarDB

分布式图数据库

Transwarp StellarDB 是星环科技自主研发的企业级分布式图数据库，提供高性能的图存储、计算、分析、查询和展示服务。StellarDB 支持原生图存储，千亿点、万亿边、PB 级大规模图数据存储；具备 10+ 层的深度链路分析能力，提供丰富的图分析算法和深度图算法；支持标准图查询语言并兼容 OpenCypher，并具备海量数据 3D 图展示能力。StellarDB 帮助用户快速开发欺诈检测、推荐引擎、社交网络分析、知识图谱等应用。

Spacture

时空数据库

Transwarp Spacture 是一款星环科技自主研发的分布式时空数据库，提供空间地理、时空轨迹、遥感影像等海量数据的存储、查询、分析和挖掘服务。 Spacture 具备高性能数据读写和分析能力。支持 OGC 标准图形类型和空间关系，兼容常见的开源和商业 GIS 软件；内置了时空索引、空间拓扑几何、遥感影像处理等高效算法。Spacture 帮助用户快速开发时空查询分析、时空模式挖掘、时空轨迹聚类等应用，广泛应用于位置服务、城市管理、交通物流、疫情防控等场景。

Hippo

向量数据库

Transwarp Hippo 是一款企业级云原生分布式向量数据库，支持海量的向量式数据集的存储、索引和管理，能够高效的解决向量相似度检索以及高密度向量聚类等问题。Hippo 具备高可用，高性能，易拓展等特点，支持多种向量搜索索引、数据分区分片、数据持久化、增量数据摄取、向量标量字段过滤混合查询等功能，能够很好的满足企业针对海量数据的低延时与高并发的检索与分析业务需求。

TimeLyre

时序数据库

Transwarp TimeLyre 是一款时序数据库，提供海量时间序列数据的高效压缩存储和高性能分析服务。 TimeLyre 支持数据高速读写，每秒处理数十万条记录和数百次查询。TimeLyre 帮助用户快速开发各类业务与设备的实时监控、实时预警、实时故障诊断等应用。

DocStore

文档数据库

Transwarp DocStore 是星环科技自主研发的分布式文档数据库，支持海量的结构化、半结构化、非结构化数据存储，如 XML 数据、JSON 数据、图片视频小对象等。DocStore 内建多种索引加速文档数据检索，例如：树型索引、位图索引、粗索引、列索引。最高支持百万级高并发、毫秒级延迟的文档检索能力。

KeyByte

键值数据库

Transwarp KeyByte 是一款高性能键值数据库，提供数据实时插入与高并发检索服务。KeyByte 采用主从高可用架构，支持容灾、主备自动切换和故障迁移；兼容 Redis 核心数据结构与 API；支持数据的持久化；支持弹性扩展。KeyByte 帮助用户快速开发热点数据缓存、高并发数据存储、实时或限时业务支持等应用。

Event Store

事件存储库

Transwarp Event Store 是一款高吞吐分布式 NoSQL 数据库，提供消息和事件的存储与处理服务。Event Store 支持数据持久化；支持数据从指定时间点重放，保证数据顺序性；具备弹性扩展和容错能力。Event Store 帮助用户快速开发日志收集、应用监控、流式数据处理、在线分析等应用。

Sophon Discover

数据科学平台

Transwarp Sophon Discover 是星环科技自主研发的数据挖掘分析探索工具包，其包含丰富的分布式算法库，并内置了诸如金融反欺诈、舆情文本挖掘等多个行业应用模块。Sophon Discover 可实现 R、Python、Spark 等多种编程语言进行数据分析处理，并支持 Tensorflow、Torch 等深度学习算法框架、异构硬件资源的统一运筹与管理。

以上产品组件的使用手册，请参考星环科技文档中心。

核心优势

创新多模型技术架构，轻松胜任高阶数据分析

TDH 采用领先的多模型技术架构，用于构建服务于整个企业的统一数据资源库，彻底打破不同部门间的数据隔阂，支持数据跨部门灵活调用，创造更大的数据价值。
统一数据管理，保障数据一致，告别数据冗余

使用 TDH 可以轻松实现 GB~PB 级多源异构数据的高效存储和统一管理，TDH 拥有自主研发的分布式数据管理系统 TDDMS，统一管理多个数据模型，避免数据跨库导入导出，减少数据冗余，保障多个模型使用数据的高度一致。
支持 10 种存储引擎、 11 种存储模型，自动化应对多部门业务需求

TDH 通过 10 种独立的存储引擎，支持业界主流的 11 种存储模型。这 10 种存储引擎是：关系型分析引擎、宽表存储引擎、向量存储引擎、搜索引擎、地理空间存储引擎、图存储引擎、文档存储引擎、键值存储引擎、事件存储引擎、时序存储引擎。
存算解耦，支持弹性的横向、纵向扩展，资源配置更灵活

TDH 的存储和计算完全解耦，用户可以根据业务的变动，按需创建新模型，按需申请计算和存储资源。任务的生命周期结束时，可以释放占用的计算和存储资源，回收到集群资源池中。
统一SQL语句，实现各类跨模型复合查询

TDH 让用户更快速、更灵活地调用不同数据库中的数据，帮助企业构建强大的数据底座。用户只需简单改变 SQL 语句，即实现各类复杂跨模型查询，不仅大幅提升效率，更能轻松完成高阶数据分析需求。
保障高性能的同时降低系统总拥有成本

TDH 简洁高效的架构，极大的简化了运维难度，在保证高性能的同时降低了总拥有成本。
成套的工具组件，使运维更加便捷

TDH 的工具组件让系统的安装部署、扩容升级、安全防卫、风险告警、权限管理等工作变得更便捷。不仅能够减小运维人员的操作难度，也能让企业管理人员更轻松的调整数据访问权限，避免各类数据安全问题。
坚持自主创新研发，保障系统安全可控

TDH 经过多年演进，自主研发的核心代码占 80% 以上，帮助各行业用户提升大数据系统的国产化水平，保障系统的自主可控与安全。

Manager 介绍

Transwarp Manager 是负责配置、管理和运维 TDH 集群的图形化工具。用户只需通过几个手动步骤，就可以在 x86、ARM、MIPS 等各架构服务器或基于 Docker 的云端平台上完成集群部署，并且提供告警、健康检测、监控和度量等运维服务。用户可以实时的浏览各服务的状态，并且在告警出现时采取恰当的措施以处理应对。此外，Manager 还提供了一些便捷的运维功能，例如磁盘管理、软件升级和服务迁移等。