稳定的分析型数据库

行业资讯
分析数据库
分析数据库是面向分析应用数据库,与传统数据库不同,分析数据库可以对数据进行在线统计、数据在线分析、随即查询等发掘信息数据价值工作,是数据库产品一个重要分支。分析数据库主要目标是提供快速、高效数据分析和查询处理,以便做出准确业务决策。与事务数据库相比,分析数据库更注重对数据仓库支持,以及对复杂查询和数据挖掘需求。分析数据库专注于支持复杂查询和分析工作负载,以及提供高效数据存储和查询性能,是支持数据分析和决策制定重要工具。星环分布式数据库-TranswarpArgoDBArgoDB是星环科技自主研发高性能分布式数据库,在PB级数据量上提供极致数据分析能力。多模型数据库ArgoDB支持标准SQL语法、分布式事务和存算解耦,提供高并发高速数据写入、复杂查询、多模分析数据联邦等能力。通过一个ArgoDB数据库,就可以打造离线数据仓库、实时数据仓库、数据集市兼容Oracle、IBMDB2、Teradata数据库对SQL语言扩展,目前已在各行各业成功完成Oracle、DB2、Teradata等国外产品国产化替代。2019年8月,ArgoDB成为全球第四个通过TPC-DS基准测试并经过TPC官方审计数据库产品。

稳定的分析型数据库 更多内容

行业资讯
分析数据库
分析数据库是面向分析应用数据库,与传统数据库不同,分析数据库可以对数据进行在线统计、数据在线分析、随即查询等发掘信息数据价值工作,是数据库产品一个重要分支。分析数据库主要目标是提供快速、高效数据分析和查询处理,以便做出准确业务决策。与事务数据库相比,分析数据库更注重对数据仓库支持,以及对复杂查询和数据挖掘需求。分析数据库专注于支持复杂查询和分析工作负载,以及提供高效数据存储和查询性能,是支持数据分析和决策制定重要工具。星环分布式数据库-TranswarpArgoDBArgoDB是星环科技自主研发高性能分布式数据库,在PB级数据量上提供极致数据分析能力。多模型数据库ArgoDB支持标准SQL语法、分布式事务和存算解耦,提供高并发高速数据写入、复杂查询、多模分析数据联邦等能力。通过一个ArgoDB数据库,就可以打造离线数据仓库、实时数据仓库、数据集市兼容Oracle、IBMDB2、Teradata数据库对SQL语言扩展,目前已在各行各业成功完成Oracle、DB2、Teradata等国外产品国产化替代。2019年8月,ArgoDB成为全球第四个通过TPC-DS基准测试并经过TPC官方审计数据库产品。
行业资讯
分析数据库
分析数据库是面向分析应用数据库,与传统数据库不同,分析数据库可以对数据进行在线统计、数据在线分析、随即查询等发掘信息数据价值工作,是数据库产品一个重要分支。分析数据库主要目标是提供快速、高效数据分析和查询处理,以便做出准确业务决策。与事务数据库相比,分析数据库更注重对数据仓库支持,以及对复杂查询和数据挖掘需求。分析数据库专注于支持复杂查询和分析工作负载,以及提供高效数据存储和查询性能,是支持数据分析和决策制定重要工具。星环分布式数据库-TranswarpArgoDBArgoDB是星环科技自主研发高性能分布式数据库,在PB级数据量上提供极致数据分析能力。多模型数据库ArgoDB支持标准SQL语法、分布式事务和存算解耦,提供高并发高速数据写入、复杂查询、多模分析数据联邦等能力。通过一个ArgoDB数据库,就可以打造离线数据仓库、实时数据仓库、数据集市兼容Oracle、IBMDB2、Teradata数据库对SQL语言扩展,目前已在各行各业成功完成Oracle、DB2、Teradata等国外产品国产化替代。2019年8月,ArgoDB成为全球第四个通过TPC-DS基准测试并经过TPC官方审计数据库产品。
行业资讯
分析数据库
分析数据库是面向分析应用数据库,与传统数据库不同,分析数据库可以对数据进行在线统计、数据在线分析、随即查询等发掘信息数据价值工作,是数据库产品一个重要分支。分析数据库主要目标是提供快速、高效数据分析和查询处理,以便做出准确业务决策。与事务数据库相比,分析数据库更注重对数据仓库支持,以及对复杂查询和数据挖掘需求。分析数据库专注于支持复杂查询和分析工作负载,以及提供高效数据存储和查询性能,是支持数据分析和决策制定重要工具。星环分布式数据库-TranswarpArgoDBArgoDB是星环科技自主研发高性能分布式数据库,在PB级数据量上提供极致数据分析能力。多模型数据库ArgoDB支持标准SQL语法、分布式事务和存算解耦,提供高并发高速数据写入、复杂查询、多模分析数据联邦等能力。通过一个ArgoDB数据库,就可以打造离线数据仓库、实时数据仓库、数据集市兼容Oracle、IBMDB2、Teradata数据库对SQL语言扩展,目前已在各行各业成功完成Oracle、DB2、Teradata等国外产品国产化替代。2019年8月,ArgoDB成为全球第四个通过TPC-DS基准测试并经过TPC官方审计数据库产品。
行业资讯
分析数据库
分析数据库是面向分析应用数据库,与传统数据库不同,分析数据库可以对数据进行在线统计、数据在线分析、随即查询等发掘信息数据价值工作,是数据库产品一个重要分支。分析数据库主要目标是提供快速、高效数据分析和查询处理,以便做出准确业务决策。与事务数据库相比,分析数据库更注重对数据仓库支持,以及对复杂查询和数据挖掘需求。分析数据库专注于支持复杂查询和分析工作负载,以及提供高效数据存储和查询性能,是支持数据分析和决策制定重要工具。星环分布式数据库-TranswarpArgoDBArgoDB是星环科技自主研发高性能分布式数据库,在PB级数据量上提供极致数据分析能力。多模型数据库ArgoDB支持标准SQL语法、分布式事务和存算解耦,提供高并发高速数据写入、复杂查询、多模分析数据联邦等能力。通过一个ArgoDB数据库,就可以打造离线数据仓库、实时数据仓库、数据集市兼容Oracle、IBMDB2、Teradata数据库对SQL语言扩展,目前已在各行各业成功完成Oracle、DB2、Teradata等国外产品国产化替代。2019年8月,ArgoDB成为全球第四个通过TPC-DS基准测试并经过TPC官方审计数据库产品。
行业资讯
分析数据库
分析数据库是面向分析应用数据库,与传统数据库不同,分析数据库可以对数据进行在线统计、数据在线分析、随即查询等发掘信息数据价值工作,是数据库产品一个重要分支。分析数据库主要目标是提供快速、高效数据分析和查询处理,以便做出准确业务决策。与事务数据库相比,分析数据库更注重对数据仓库支持,以及对复杂查询和数据挖掘需求。分析数据库专注于支持复杂查询和分析工作负载,以及提供高效数据存储和查询性能,是支持数据分析和决策制定重要工具。星环分布式数据库-TranswarpArgoDBArgoDB是星环科技自主研发高性能分布式数据库,在PB级数据量上提供极致数据分析能力。多模型数据库ArgoDB支持标准SQL语法、分布式事务和存算解耦,提供高并发高速数据写入、复杂查询、多模分析数据联邦等能力。通过一个ArgoDB数据库,就可以打造离线数据仓库、实时数据仓库、数据集市兼容Oracle、IBMDB2、Teradata数据库对SQL语言扩展,目前已在各行各业成功完成Oracle、DB2、Teradata等国外产品国产化替代。2019年8月,ArgoDB成为全球第四个通过TPC-DS基准测试并经过TPC官方审计数据库产品。
分析数据库和关系数据库是两种不同用途数据库系统,它们在设计、功能和优化方面有所不同。以下是它们主要区别:用途:分析数据库:主要用于数据仓库和大数据分析,支持复杂分析查询,如数据挖掘、预测分析和趋势分析。关系数据库:主要用于事务处理系统,如客户关系管理(CRM)、企业资源规划(ERP)等,支持日常事务处理和操作。查询类型:分析数据库:优化了对大数据读操作,特别是聚合查询和扫描大量记录。关系数据库:优化了对小到中等数据读写操作,特别是点查询和事务处理。数据模型:分析数据库:通常使用多维数据模型(如星模型或雪花模型),这些模型适合于分析查询。关系数据库:使用关系模型,数据以表格形式存储,通过行和列组织数据。性能优化:分析数据库:针对分析查询进行了优化,如使用列式存储、数据立方体和预计算。关系数据库:针对事务处理进行了优化,如使用行式存储、索引和事务日志。数据更新频率:分析数据库数据通常以批量方式加载,更新频率较低。关系数据库数据更新频繁,支持高并发读写操作。数据规模:分析数据库:设计用于处理大规模数据集,通常存储在数据仓库中。关系
分析数据库和关系数据库是两种不同用途数据库系统,它们在设计、功能和优化方面有所不同。以下是它们主要区别:用途:分析数据库:主要用于数据仓库和大数据分析,支持复杂分析查询,如数据挖掘、预测分析和趋势分析。关系数据库:主要用于事务处理系统,如客户关系管理(CRM)、企业资源规划(ERP)等,支持日常事务处理和操作。查询类型:分析数据库:优化了对大数据读操作,特别是聚合查询和扫描大量记录。关系数据库:优化了对小到中等数据读写操作,特别是点查询和事务处理。数据模型:分析数据库:通常使用多维数据模型(如星模型或雪花模型),这些模型适合于分析查询。关系数据库:使用关系模型,数据以表格形式存储,通过行和列组织数据。性能优化:分析数据库:针对分析查询进行了优化,如使用列式存储、数据立方体和预计算。关系数据库:针对事务处理进行了优化,如使用行式存储、索引和事务日志。数据更新频率:分析数据库数据通常以批量方式加载,更新频率较低。关系数据库数据更新频繁,支持高并发读写操作。数据规模:分析数据库:设计用于处理大规模数据集,通常存储在数据仓库中。关系
分析数据库和关系数据库是两种不同用途数据库系统,它们在设计、功能和优化方面有所不同。以下是它们主要区别:用途:分析数据库:主要用于数据仓库和大数据分析,支持复杂分析查询,如数据挖掘、预测分析和趋势分析。关系数据库:主要用于事务处理系统,如客户关系管理(CRM)、企业资源规划(ERP)等,支持日常事务处理和操作。查询类型:分析数据库:优化了对大数据读操作,特别是聚合查询和扫描大量记录。关系数据库:优化了对小到中等数据读写操作,特别是点查询和事务处理。数据模型:分析数据库:通常使用多维数据模型(如星模型或雪花模型),这些模型适合于分析查询。关系数据库:使用关系模型,数据以表格形式存储,通过行和列组织数据。性能优化:分析数据库:针对分析查询进行了优化,如使用列式存储、数据立方体和预计算。关系数据库:针对事务处理进行了优化,如使用行式存储、索引和事务日志。数据更新频率:分析数据库数据通常以批量方式加载,更新频率较低。关系数据库数据更新频繁,支持高并发读写操作。数据规模:分析数据库:设计用于处理大规模数据集,通常存储在数据仓库中。关系
分析数据库和关系数据库是两种不同用途数据库系统,它们在设计、功能和优化方面有所不同。以下是它们主要区别:用途:分析数据库:主要用于数据仓库和大数据分析,支持复杂分析查询,如数据挖掘、预测分析和趋势分析。关系数据库:主要用于事务处理系统,如客户关系管理(CRM)、企业资源规划(ERP)等,支持日常事务处理和操作。查询类型:分析数据库:优化了对大数据读操作,特别是聚合查询和扫描大量记录。关系数据库:优化了对小到中等数据读写操作,特别是点查询和事务处理。数据模型:分析数据库:通常使用多维数据模型(如星模型或雪花模型),这些模型适合于分析查询。关系数据库:使用关系模型,数据以表格形式存储,通过行和列组织数据。性能优化:分析数据库:针对分析查询进行了优化,如使用列式存储、数据立方体和预计算。关系数据库:针对事务处理进行了优化,如使用行式存储、索引和事务日志。数据更新频率:分析数据库数据通常以批量方式加载,更新频率较低。关系数据库数据更新频繁,支持高并发读写操作。数据规模:分析数据库:设计用于处理大规模数据集,通常存储在数据仓库中。关系
产品文档
5.4 WINDOW 窗口
Slipstream里的窗口(STREAMWINDOW)跟SQL标准的窗口不同,在Slipstream中STREAMWINDOW主要作为时间分割的单位。用户的流应用一般会对一定的时间区间做多表关联、聚合或者统计。Slipstream中窗口切分的方式分为两种:系统时间(SystemTime)切分:以流处理引擎处理的时间为基准切分窗口。事件时间(EventTime)切分:将数据中的某指定个字段作为时间字段切分窗口,详情请参考事件时间。SLIDEWINDOW滑动窗口滑动窗口需要由两个量来定义:窗口长度(LENGTH)和滑动间隔(SLIDE)。滑动窗口是指按照一定的SLIDE向未来滑动的长度为LENGTH的窗口。相邻两个窗口之间可能会有重叠的部分。例如:如果窗口长度为2s,滑动间隔为1s,那么第一个窗口为[0s, 2s),第二个窗口为[1s,3s),第三个窗口为[2s,4s),以此类推。例33.系统时间切分滑动窗口CREATESTREAMs1(idINT,nameSTRING,tsTIMESTAMP)TBLPROPERTIES("kafka.broker.list"="tw-node127:9...
产品文档
3 集群规划
节点系统盘配置目录大小磁盘要求RAID说明使用节点/200G+(具体参考部署方案规划)14400转+(或者SSD)建议做RAID1安装操作系统所有节点master/slave/var/lib/docker200G+10000转+(SAS盘)无主要用于docker存储所有节点master/slave/registry-data500G+10000转+(SAS盘)无主要用于存放镜像TCOSmaster01和master02节点即可/opt/kubernetes/data100G+14400转+(SSD)无主要存放etcd数据,集群元数据,对io要求较高。生产环境必须单独挂盘所有TCOSmaster节点/var/log500G+(建议与根分区独立,如果共享,则适当增大根分区大小)10000转+(SAS盘)无主要存放日志,单独一个分区,可以防止日志过大,影响操作系统运行。生产环境必须单独挂载,否则会导致磁盘资源耗尽。所有节点master/slave存储容量规划存储池类型介绍底层磁盘做硬RAID1RAID1通过磁盘数据镜像实现数据冗余,在成对的独立磁盘上产生互为备份的数据。当原始数据繁忙时,可直...
产品文档
1 产品介绍
产品定位TranswarpSpacture是星环科技自主研发的分布式时空数据库,提供空间地理、时空轨迹、遥感影像等海量数据的存储、查询、分析和挖掘服务。Spacture具备高性能数据读写和分析能力。支持OGC标准图形类型和空间关系,兼容常见的开源和商业GIS软件;内置了时空索引、空间拓扑几何、遥感影像处理等高效算法。Spacture帮助用户快速开发时空查询分析、时空模式挖掘、时空轨迹聚类等应用,广泛应用于位置服务、城市管理、交通物流、疫情防控等场景。
产品文档
2 SQL
DDL约束数据类型是一种限制能够存储在表中数据类别的方法。但是对于很多应用来说,它们提供的约束太粗糙。例如,一个包含产品价格的列应该只接受正值。但是没有任何一种标准数据类型只接受正值。另一个问题是我们可能需要根据其他列或行来约束一个列中的数据。例如,在一个包含产品信息的表中,对于每个产品编号应该只有一行。到目前为止,SQL允许我们在列和表上定义约束。约束让我们能够根据我们的愿望来控制表中的数据。如果一个用户试图在一个列中保存违反一个约束的数据,一个错误会被抛出。即便是这个值来自于默认值定义,这个规则也同样适用。检查约束一个检查约束是最普通的约束类型。它允许我们指定一个特定列中的值必须要满足一个布尔表达式。例如,为了要求正值的产品价格,我们可以使用:CREATETABLEproducts(product_nointeger,nametext,pricenumericCHECK(price>0));如你所见,约束定义就和默认值定义一样跟在数据类型之后。默认值和约束之间的顺序没有影响。一个检查约束有关键字CHECK以及其后的包围在圆括号中的表达式组成。检查约束表达式应该涉及到被约束的列...
产品文档
9 卸载
卸载TCOS和TDC依次登录到每个节点下,运行如下脚本来卸载TCOS。注意:每个节点下都要运行一遍。说明:卸载TCOS会连同TDC等服务一并卸载,无特殊需求的话只需要关注TCOS卸载即可。uninstall_tos.sh如下:#!/bin/bashset-xecho"systemctlstopkubelet..."systemctlstopkubeletecho"systemctlstophaproxy"systemctlstophaproxyyumremove-yhaproxyecho"stopdockercontainers..."if[[`dockerps-q|wc-l`>0]];thendockerstop$(dockerps-q);fiecho"removedockercontainers..."if[[`dockerps-aq|wc-l`>0]];thendockerrm$(dockerps-aq);fiecho"systemctlstopdocker"systemctlstopdocker#卸载dockerrpm-qa|grepdocker|xargsyumr...
产品文档
3 Slipstream 基础
Slipstream支持从不同的源中获取实时的流数据,计算处理之后输出到不同的文件系统.图1.Slipstream概览Slipstream有三个核心的概念:Stream、StreamJob和Application。概括地说,Stream是数据流,StreamJob是对一个或多个Stream进行计算并将结果写进一张表的任务,Application是一个或多个StreamJob的集合。三者的关系如下图所示:图2.Slipstream核心概念概览上图中,InputStream和DerivedStream都是数据流,这些Stream是静态的概念,仅仅描述了执行计划;图的右侧是运行时概念,触发StreamJob才真正开始接收并处理数据.StreamStream分为两种:InputStream和DerivedStream。直接用于接收数据源传来的数据称为InputStream;对已有Stream进行变形得到的新的Stream称为DerivedStream.InputStream直接用于接收数据源传来的Stream称为InputStream.InputStream定义了如何从数据源读取数据.Deri...
产品文档
5.5 Join
MapjoinMapJoin适用与小表和流Join的情况,这里的小表既可以是流任务中的表,也可以是外部数据源中的表。大致可以分为以下两个步骤:步骤一获取小表数据阶段MapJoin适用于小表和流进行join,其中小表中数据既可以是流任务中的数据也可以是外部数据源中的数据。当获取到小表数据之后,Slipstream会将小表构建为HashTable,以本章第一节中的数据为例,该HashTable可以抽象为:keyvalue126234步骤二Executor进行Join当小表数据都发送到HDFS上之后,执行该MapJoin任务的每一个Executor都会去HDFS上对应的节点获取该HashTable的数据,将其下载到本地内存,并封装到joinbuff数组中,然后等待流任务中的数据进来。每当流中进来一条数据,Executor会根据Join条件中的key的值去内存中的HashTable获取此key对应的数据,封装到joinbuff数组中。最后将joinbuff数组的中满足条件数据合并得到join之后的数据,至此就完成了MapJoin的过程。GlobalLookupJoinSlipstream从5....
产品文档
4 Citus
快速入门Citus简介Citus是基于横向扩展而构建的Spacture扩展,可在多台机器的集群中分发数据和查询。作为扩展(而非分支),Citus支持新版本Spacture的特性,允许用户从新功能中受益,并保持与现有Spacture工具的兼容性。Citus使用sharding和replication在多台机器上水平扩展Spacture。它的查询引擎将跨服务器导入SQL进行并行化查询,以便在大型数据集上实现毫秒级响应。基于Citus的sharding扩展,Spacture具备了分布式数据自动管理,根据指定的分布字段,实现数据分片和均匀分布存储。Citus适用场景Multi-TenantDatabase多租户数据库大多数B2B应用程序已经在其数据模型中内置了租户的概念。在这个模型中,数据库为多个租户提供服务,每个租户之间的数据相互隔离。Citus提供完整的SQL支持,并支持将关系数据库扩展到10万多个租户。Citus还为多租户添加了新功能。例如,Citus支持租户隔离,为大租户提供性能保障,并提供引用表的概念以减少租户间的数据重复存储。这些功能允许跨多台机器扩展租户的数据,并轻松添加更多CP...
产品文档
1 兼容版本
请注意您所安装的TDC版本TDC3.0.0TDC3.0.0x86+CentOS产品兼容版本产品TCOSGuardianTDHArgoDBStellarDBScopeSophonKunDBAquilaStudio依赖兼容重点测试3.1.03.2.38.0.13.2.23.0.131.3.42.7.12.1.12.0.12.3.07.0.12.0.03.0.12.3.02.1.0TDC3.0.1TDC3.0.1x86+CentOS产品兼容版本产品TCOSGuardianTDHArgoDBStellarDBScopeSophonKunDBAquilaStudio依赖兼容重点测试3.1.03.2.38.0.13.2.13.0.131.3.4TDC3.0.1对应Sophon多个组件:将单独列表2.1.12.0.12.3.18.1.02.1.27.0.13.2.22.1.02.3.02.4.06.2.24.0.1TDC3.0.1Sophon组件兼容版本如下表:组件*兼容版本SophonBase1.0.02.7.13.0.1SophonFL1.2.1SophonKG2.7.13.1.0SophonE...
Spacture时空数据库是基于PostgreSQL及PostGIS的用以存储时空地理数据的数据库。Spacture当前版本提供三个PostgreSQL拓展用以对时空地理数据进行存储分析:transwarp_modtranswarp_gridtranswarp_raster三个插件的功能如下:transwarp_mod为移动对象拓展,提供了对移动对象轨迹进行存储分析的能力,主要提供了trajectory对象用以表示移动轨迹;transwarp_grid为网格拓展,插件提供了常用的时空剖分网格功能,如GeoHash、GeoSOT等;transwarp_raster为栅格拓展,提供了栅格数据相关功能,当前版本只包含热力图功能。快速入门这里重点介绍transwarp_mod扩展。transwarp_mod扩展依赖于PostGIS扩展用以提供对基本空间地理对象的支持。在此之上,该拓展主要提供了trajectory轨迹类型用以表征移动对象在地理空间中的移动轨迹对象。同时该拓展提供了一系列围绕该类型的索引及UDF,用户可以方便快速的对移动轨迹进行各种管理及时空分析。Trajectory对象结构如下...