灾备，即灾难备援。在信息化系统中，灾备是指在灾难未发生时，利用 IT 技术对信息系统的数据和应用程序进行保护，包括本地及异地的数据备份、应用和场所的接管等，以确保系统遭受灾难时，数据的安全能得以保障，业务可以快速恢复，为企业的正常运行提供服务。

我们知道系统灾难事故原因是多样的，且几乎是无法完全避免。比如网络故障、硬件故障、人为误操作和灾害类事件等，如果没有相应的灾备方案，那么发生信息系统灾难后，对客户业务的影响是严重的，甚至是毁灭性的。

随着星环人工智能平台、大数据平台、数据云平台、数据库技术不断完善进化，星环技术产品承载了越来越多的客户核心数据或业务，为了保证客户数据安全和业务连续性，避免生产系统发生灾难时造成数据丢失的问题，我们正式推出灾备系统产品和解决方案。

整体方案上我们采用当前数据平台普遍使用的建设同城/异地灾备集群，数据远程同步备份，在灾难发生后确保系统可以将数据恢复至既定时间点（RPO），以及在既定的时间内恢复（RTO）。此外，我们横向支持了所有星环产品组件，纵向让每个产品组件的数据同步备份代价做到了优。我们支持了数据热备、数据温备、数据冷备三种灾备模式。

TDH是企业级一站式大数据综合平台，提供了丰富的产品以支持多种业务场景。由于实际业务与具体环境的复杂多样性，TDH之上的数据存储也会展现出多种形态。例如历史数据以文件形式存储在HDFS分布式文件系统中，需要进行分析的数据以ORC事务表的形式存储在Inceptor中以保证数据对事务的支持，涉及到大规模并发查询场景的数据存储在Hyperbase中等。数据平台的复杂性由此而来。

目前，TDH的灾备采用的是脚本执行的方式。但是面对如此复杂的场景，脚本执行方式有其自身的弊端。在该种方式下，对于不同客户环境需要配置不同的脚本，脚本的开发运维成本较高。并且在脚本执行过程中，缺少监控与告警功能，无法直观地获取备份过程中的运行步骤以及错误信息。因此，采用脚本执行的方式进行备份具有投入大、成本高、易用性差等缺点，为了提高TDH集群间数据灾备的自动化能力，增强可用性，我们对TDH灾备解决方案产品化。下文将重点介绍星环灾备系统

济南轨道交通集团基于大数据技术的数据治理与典型场景应用

济南轨道交通集团基于大数据技术的数据治理与典型场景应用

内容简介

内容简介