联 系 我 们
售前咨询
售后咨询
微信关注:星环科技服务号
更多联系方式 >
1 产品简介
更新时间:7/24/2024, 8:34:39 AM

产品定位

伴随着企业对海量非结构化数据管理的需求的不断加深,以及深度学习在工业界的广泛落地,向量数据在实际应用场景下的数据量级开始直线增加。想要高效处理这些海量的向量数据,就需要更细分、更专业的数据基础设施,为向量构建专门的数据库处理系统。

Transwarp Hippo(以下简称 Hippo)是星环科技自主可控的一款企业级云原生分布式向量数据库,支持存储,索引以及管理海量的向量式数据集,能够高效的解决向量相似度检索以及高密度向量聚类等问题。Hippo具备高可用,高性能,易拓展等特点,支持多种向量搜索索引,支持数据分区分片,数据持久化,增量数据摄取,向量标量字段过滤混合查询等功能,能够很好的满足企业针对海量向量数据的高实时性查询、检索、召回等场景。

软件架构

架构图

image003
图 1. Hippo 总体架构图

核心组件

Hippo 的产品功能模块清单及功能介绍如下:

表 1. Hippo 核心组件清单
模块名称 模块功能 模块介绍

TDDMS

分布式数据管理系统

TDDMS (Transwarp Distributed Data Management System) 星环自主研发的分布式数据管理系统,管理数据多副本间的强一致或最终一致;管理数据在存储介质上的合理分片分布,扩缩存储容量时,自动管理数据重分布,充分利用存储资源;保障数据高可用,在存储硬件故障时,保持数据存储服务不中断。

Vector Engine

向量搜索引擎

星环自主研发的向量搜索引擎,支持海量向量数据的检索,同时在计算框架上进行了大幅度优化,具备高准确性与高性能的相似检索能力。

Sophon Model Cube

模型仓库

统一了模型生命周期中的模型上架、模型评估和模型部署。可以纳管多模态、多类型的模型,可提高模型的可维护性和可操作性。管理多源异构模型,支持镜像模型、文件模型和组合模型三种类型,并提供模型评估和模型体验功能,最大化模型价值

产品优势

表 2. Hippo 产品优势
优势概括 细节描述

云原生系统

Hippo 采用全面容器化部署,支持服务的弹性扩缩容;同时具备多租户和强大的资源管控能力。

分布式部署

Hippo 具备分布式部署能力,有丰富的大规模集群部署经验;Hippo 通过 Raft 算法确保数据的强一致性;同时提供故障迁移,数据修复等数据保障能力。

数据多模

Hippo 可与 TDH 结构化存储、非结构化存储数据打通,实现数据联合检索。

高性能检索

Hippo 支持多进程架构与 GPU 加速,可以充分发挥并行检索能力;同时支持多类索引,满足不同业务场景;支持检索速度和内存使用的特定优化,支持寄存器级算法优化。

接口多样化

提供标准的 Python、Restful、Java API。

管理组件

表 3. 管理组件
模块名称 模块功能 模块介绍

Transwarp Aquila

智能运维分析平台软件

Transwarp Aquila 作为一站式综合运维平台, 提供监控仪表盘、告警通知、日志生命周期管理、日志检索、审计日志等功能。 同时,Aquila 还预置了基础监控、大数据监控、PaaS层监控等多维度的监控资源,能做到整个 Hippo 产品各个维度的开箱即用的一键运维。

Transwarp Manager

大数据管理软件

Transwarp Manager 是负责配置、管理和运维 Hippo 集群的图形化工具。用户只需通过几个手动步骤,就可以在 X86、ARM、MIPS 等各架构服务器或基于 Docker 的云端平台上完成集群部署,并且提供告警、健康检测、监控和度量等运维服务。用户可以实时的浏览各服务的状态,并且在告警出现时采取恰当的措施以处理应对。此外,Manager 还提供了一些便捷的运维功能,例如磁盘管理、软件升级和服务迁移等。

Transwarp Cloud Operating System

云原生操作系统

TCOS 是星环自主研发的云原生操作系统,提供统一的资源调度框架,通过容器化编排,能够统一调度计算、存储、网络等各基础资源,TCOS 支持主流国产操作系统、国产服务器,并且支持混合部署,满足国产化部署需求。