交通行业 数据流通解决方案

星环科技基于“自主原创，领先一代”的技术发展策略，充分发挥国产大数据平台等核心产品优势，围绕交通行业运营管理、设备管理、决策管理等场景打造智慧交通解决方案，助力交通行业数字化转型升级，为交通管理赋能、决策分析提供有力支撑。

星环数据流通解决方案为了帮助企业发挥数据资产的价值，星环提供了覆盖云基础设施、数据平台、数据资源、数据应用的数据流通解决方案。该解决方案覆盖数据生命周期的各个阶段，包括数据的收集、存储、使用、加工协作的安全。典型应用场景场景一：数据流通平台聚焦数据资源化、资产化改革，建立数据要素市场，搭建安全合规的数据交易流程。在整个数据要素流通过程中，使用流程可审计、可溯源，保障供需双方数据隐私安全。场景以及流通。这种矩阵式的数据安全能力体系，可全方位保障客户的数据安全，支撑业务合法合规的开展。方案优势：生态协作快速落地：星环是上海数据交易所首批“数商”，目前已有数百家合作伙伴、数千个落地案例。支持实体部署、云上部署等多种方式，能够快速部署应用。权威认证保障数据隐私安全：星环参与多项行业标准及白皮书的编写，进行发布并署名。产品拥有多项信通院认证证书，2021年更获得信通院隐私计算优秀案例奖。全链路数据隐私保护：星环为客户提供全链路数据隐私保护方案，提供从数据采集、存储、加密、计算、建模的全数据链隐私保护。实现以数据为中心，做到事前可管可见、事中可知可防、事后可控可责。国产化适配企业级应用平台

星环数据流通解决方案为了帮助企业发挥数据资产的价值，星环提供了覆盖云基础设施、数据平台、数据资源、数据应用的数据流通解决方案。该解决方案覆盖数据生命周期的各个阶段，包括数据的收集、存储、使用、加工协作的安全。典型应用场景场景一：数据流通平台聚焦数据资源化、资产化改革，建立数据要素市场，搭建安全合规的数据交易流程。在整个数据要素流通过程中，使用流程可审计、可溯源，保障供需双方数据隐私安全。场景以及流通。这种矩阵式的数据安全能力体系，可全方位保障客户的数据安全，支撑业务合法合规的开展。方案优势：生态协作快速落地：星环是上海数据交易所首批“数商”，目前已有数百家合作伙伴、数千个落地案例。支持实体部署、云上部署等多种方式，能够快速部署应用。权威认证保障数据隐私安全：星环参与多项行业标准及白皮书的编写，进行发布并署名。产品拥有多项信通院认证证书，2021年更获得信通院隐私计算优秀案例奖。全链路数据隐私保护：星环为客户提供全链路数据隐私保护方案，提供从数据采集、存储、加密、计算、建模的全数据链隐私保护。实现以数据为中心，做到事前可管可见、事中可知可防、事后可控可责。国产化适配企业级应用平台

星环数据流通解决方案为了帮助企业发挥数据资产的价值，星环提供了覆盖云基础设施、数据平台、数据资源、数据应用的数据流通解决方案。该解决方案覆盖数据生命周期的各个阶段，包括数据的收集、存储、使用、加工协作的安全。典型应用场景场景一：数据流通平台聚焦数据资源化、资产化改革，建立数据要素市场，搭建安全合规的数据交易流程。在整个数据要素流通过程中，使用流程可审计、可溯源，保障供需双方数据隐私安全。场景以及流通。这种矩阵式的数据安全能力体系，可全方位保障客户的数据安全，支撑业务合法合规的开展。方案优势：生态协作快速落地：星环是上海数据交易所首批“数商”，目前已有数百家合作伙伴、数千个落地案例。支持实体部署、云上部署等多种方式，能够快速部署应用。权威认证保障数据隐私安全：星环参与多项行业标准及白皮书的编写，进行发布并署名。产品拥有多项信通院认证证书，2021年更获得信通院隐私计算优秀案例奖。全链路数据隐私保护：星环为客户提供全链路数据隐私保护方案，提供从数据采集、存储、加密、计算、建模的全数据链隐私保护。实现以数据为中心，做到事前可管可见、事中可知可防、事后可控可责。国产化适配企业级应用平台

数据分析和可视化工具，以帮助交通企业做出更明智的决策和提高工作效率。此外，交通行业数据中台也可以集成不同的应用程序，以辅助交通管理、交通调度、客户服务等方面。星环数据中台解决方案作为一家企业级大数据基础交通行业数据中台是一个集成和管理交通行业数据的平台。该平台可以帮助交通行业企业将分散的数据进行整合，并通过数据分析、数据挖掘和人工智能技术实现更好的数据价值化。它可以通过整合不同来源的数据来提高交通行业的效率和安全性，例如车辆数据、路况数据、交通流量数据、乘客信息数据等。交通行业数据中台的主要功能包括数据存储、数据清洗、数据分析和数据可视化。它可以帮助交通行业企业实时监测交通状况，并提供有用的软件开发商，星环科技很早就在数据中台领域布局，结合星环科技全系产品的相关组件实现数据中台能力建设。星环科技把数据中台建设归纳为三中心、六能力、两个体系，这当中都会有星环科技产品作为支撑，从而保证企业能够快速实现，并搭建起数据中台，满足企业未来发展变化。三中心分别是存储中心、分析探索中心、业务赋能中心；六能力包括数据汇聚能力、数据整合能力、智能分析能力、实时计算能力、统一访问能力、统一服务能力；两个

数据流通解决方案：释放数据价值的关键在数字经济时代，数据已成为与土地、劳动力、资本、技术并列的第五大生产要素。但数据要素的价值实现面临着一个关键难题：数据流通不畅。数据流通解决方案正是破解这一难题的实践证明了数据流通的巨大价值。数据流通正在重塑数字经济发展格局。它打破了数据孤岛，释放了数据价值，推动了数字经济的创新发展。随着技术的进步和制度的完善，数据流通将为数字经济发展注入新的动力。数据流通解决方案不仅需要技术支撑，更需要制度保障。数据确权是数据流通的前提，它明确了数据的权属关系，为数据交易奠定了基础。数据定价机制则解决了数据价值的评估问题，使数据交易有据可依。数据交易规则规范了数据交完整的数据流通技术体系。隐私计算解决了数据使用中的隐私保护问题，联邦学习实现了分布式数据协同，区块链则确保了数据流通的可信性。三者相互配合，为数据流通提供了坚实的技术基础。二、数据流通的制度保障数据流通是释放数据价值的关键。它通过技术创新和制度创新，构建了一个完整的数据流通体系。在这个体系中，技术与制度相互支撑，理论与实践相互促进，共同推动着数据要素的价值释放。展望未来，随着数据流通体系的不断完善，数据要素的价值将得到更大程度的释放，为数字经济发展注入新的动力。

数据流通解决方案：释放数据价值的关键在数字经济时代，数据已成为与土地、劳动力、资本、技术并列的第五大生产要素。但数据要素的价值实现面临着一个关键难题：数据流通不畅。数据流通解决方案正是破解这一难题的实践证明了数据流通的巨大价值。数据流通正在重塑数字经济发展格局。它打破了数据孤岛，释放了数据价值，推动了数字经济的创新发展。随着技术的进步和制度的完善，数据流通将为数字经济发展注入新的动力。数据流通解决方案不仅需要技术支撑，更需要制度保障。数据确权是数据流通的前提，它明确了数据的权属关系，为数据交易奠定了基础。数据定价机制则解决了数据价值的评估问题，使数据交易有据可依。数据交易规则规范了数据交完整的数据流通技术体系。隐私计算解决了数据使用中的隐私保护问题，联邦学习实现了分布式数据协同，区块链则确保了数据流通的可信性。三者相互配合，为数据流通提供了坚实的技术基础。二、数据流通的制度保障数据流通是释放数据价值的关键。它通过技术创新和制度创新，构建了一个完整的数据流通体系。在这个体系中，技术与制度相互支撑，理论与实践相互促进，共同推动着数据要素的价值释放。展望未来，随着数据流通体系的不断完善，数据要素的价值将得到更大程度的释放，为数字经济发展注入新的动力。

数据分析和可视化工具，以帮助交通企业做出更明智的决策和提高工作效率。此外，交通行业数据中台也可以集成不同的应用程序，以辅助交通管理、交通调度、客户服务等方面。星环数据中台解决方案作为一家企业级大数据基础交通行业数据中台是一个集成和管理交通行业数据的平台。该平台可以帮助交通行业企业将分散的数据进行整合，并通过数据分析、数据挖掘和人工智能技术实现更好的数据价值化。它可以通过整合不同来源的数据来提高交通行业的效率和安全性，例如车辆数据、路况数据、交通流量数据、乘客信息数据等。交通行业数据中台的主要功能包括数据存储、数据清洗、数据分析和数据可视化。它可以帮助交通行业企业实时监测交通状况，并提供有用的软件开发商，星环科技很早就在数据中台领域布局，结合星环科技全系产品的相关组件实现数据中台能力建设。星环科技把数据中台建设归纳为三中心、六能力、两个体系，这当中都会有星环科技产品作为支撑，从而保证企业能够快速实现，并搭建起数据中台，满足企业未来发展变化。三中心分别是存储中心、分析探索中心、业务赋能中心；六能力包括数据汇聚能力、数据整合能力、智能分析能力、实时计算能力、统一访问能力、统一服务能力；两个

10月21日，星环科技亮相由中国城市轨道交通协会主办的2020北京国际城市轨道交通展览会，发布新轨道交通解决方案，展现了大数据及人工智能技术保障城市轨道高质量发展，提升智慧交通运营水平的新成果。在可视化以及评估检验功能，气象大数据为“黄金水道”航运安全保驾护航；助力山西交警警务价值提升，大大地提升了交警指挥调度行政执法质量和效率。星环科技轨道交通解决方案展台提升运营水平，保障城市“生命线”可靠性，降低漏检率，保障城市“生命线”可靠性。推动数据智能融合，云平台让一切皆有可能星环科技轨道交通解决方案通过容器云技术对轨交云的智能应用提供有力支撑，改善了传统信息化建设中周期长、运维成本高、资源利用率国家发展改革委、科学技术部批准，国内规模大专业的轨道交通展览会上，星环科技成功协办“城轨云与大数据平台论坛”，论坛吸引了众多轨道交通运营建设单位、业内专家学者参加。星环科技大交通行业架构负责人徐流明分享、高效、安全的轨道交通发展新模式下，星环科技提供完整的技术链路，帮助企业客户构建数字化转型平台，解决方案中提供的多模态异构数据平台(TDH)、一站式AI平台(Sophon)，数据云平台(TDC)在车

过滤条件表达式Hippo当前支持如下表达式，可用于标量或向量查询。表46.过滤条件表达式表达式描述and当前版本支持and，不支持or/not==等值<小于⇐小于等于>大于>=大于等于inin[1,2,3]notinnot_in[1,2,3]like'_'表示匹配任一字符，'%'表示匹配任意字符，'\'为转义符向量相似性检索本节描述如何进行向量相似度搜索。Hippo中的向量相似性搜索计算查询向量与表中向量的距离，返回最相似的结果集。通过指定标量过滤条件，用户可以进行向量与标量的混合搜索。curl-ushiva:shiva-XGET'localhost:8902/hippo/v1/{table}/_search?pretty'-H'Content-Type:application/json'-d'{"output_fields":["book_id"],"search_params":{"anns_field":"book_intro","topk":2,"params":{"nprobe":10},"embedding_index":"ivf_flat_index"}...

查看Master节点通过以下命令，查看集群Master节点信息：curl-ushiva:shiva-XGET'localhost:8902/hippo/v1/_cat/master?v'返回结果：epochtimestampactive.master.hostactive.master.portmaster.group169079683909:47:19172.29.203.18926841172.29.203.189:26841,172.29.203.189:26851,172.29.203.189:26861查看数据节点curl-ushiva:shiva-XGET'localhost:8902/hippo/v1/_cat/nodes?v'//查看所有节点curl-ushiva:shiva-XGET'localhost:8902/hippo/v1/_cat/nodes/{node}?v'//{node}表示待匹配的节点地址，支持以*通配，支持指定多个pattern，多个pattern以逗号分割返回结果：

本节介绍Hippo表写入相关操作。Hippo会返回写入成功数据的下标以及总共写入成功的数据条数，如果出现行级错误（比如主键冲突），Hippo会返回具体的行级错误。插入本节介绍如何向Hippo中插入数据。curl-ushiva:shiva-XPUT'localhost:8902/hippo/v1/{table}/_bulk?database_name={database_name}&pretty'-H'Content-Type:application/json'-d'{"fields_data":[{"field_name":"book_id","field":[1,2,3,4,5,6,7,8,9,10,11,12,13,14,15,16,17,18,19,20,21,22,23,24,25,26,27,28,29,30,31,32,33,34,35,36,37,38,39,40,41,42,43,44,45,46,47,48,49,50,51,52,53,54,55,56,57,58,59,60,61,62,63,64,65,66,67,68,69,70,71,72,73,74...

本节测试主要描述了Hippo1.0在关键测试上的一些性能表现，该份测试同样也是Hippo的基准测试，后续版本发布也会在不同版本上进行该测试进行对比分析。术语表142.Hippo性能测试术语TermDescriptionnq一次搜索请求中搜索的向量个数topk一次请求中对于要检索的每个向量(依赖nq)，所能检索到最近距离的向量个数RT一次请求从发起到接受响应的时间]QPS请求在每秒内成功执行的次数dataset测试所用数据集，不同数据集表示不同的业务场景测试集群配置硬件配置表143.性能测试硬件配置硬件规范Nodes3CPUIntel®Xeon®Gold5218RCPU@2.10GHzMemory16*\16GBRDIMM,3200MT/sDISKNVMeSSD2T*4GPUNONE软件配置表144.性能测试软件配置软件版本Hippov1.2TranswarpManagerTDH9.3.0测试集表145.性能测试数据集数据集名称数据集介绍向量维度向量总数查询数量数据总量距离类型Sift-128-euclidean该数据集是基于Texmex的数据集整理，使用SIFT算法得到的图片特征向量。...

Hippo在1.2版本提供了全文索引能力，兼容ElasticSearch6.7.2语法，在底层架构上复用了公司产品TranswarpScope的一部分特性，支持以Java/HTTPRestful的形式通过Hippo的HTTPServer接口进行全文索引的创建、查询、使用等各类需求，通过该能力的支持，可以更好的实现向量与全文的混合检索。通过将向量检索加全文检索的联合召回，可以降低漏检和误检的概率，能够实现比单独使用向量或全文更高的精度。同时，一套数据库系统可避免部署多套系统带来的架构复杂、开发运维成本高等问题。具体的使用方法除了访问端口需要将端口从8902调整为9200外，均可参考《TranswarpScope手册》4.TranswarpScopeAPI介绍。

OverviewUnstructureddatamanagementismoreimportantthaneverduetotheriseofbigdata.Managingandgleaningbusinessvaluefromunstructureddataisofutmostimportancetoenterprisestoday.Advancementsinmachinelearning,aswellasdeeplearning,technologiesnowenableorganizationstoefficientlyaddressunstructureddataandimprovequalityassuranceefforts.Inthefieldofartificialintelligenceormachinelearning,embeddingsandvectordatabaseshavebecomeincreasinglyimportantfortacklingawiderangeofproblems.Thesetechniquesareusedtorepresen...

运维管理界面WebserverWebserver是Hippo提供运维监控的界面。默认访问地址为:4567"class="bare">http://<webserver_ip>:4567。或者在Manager管理界面我们可以通过下图所示的查看链接这里进行跳转。图15.登录HippoWebserverWebserver主要由下面几个部分构成。概况图16.概况该页面展示了Hippo集群的基本信息，包括：Masterstatus：当前的ActiveMaster，MasterGroup，MasterAddress，Master的健康状态TabletServerStatus：TabletServerAddress，健康状态，逻辑机架和数据中心信息，容量使用以及Tablet个数TabletNum：当前集群表的个数Version：Hippo版本信息库表图17.库表页面以库和表的概念集群存储的各类数据信息。库信息：库名库创建时间库内各类表的信息：点击某个库，可以看到库下所有表的信息，主要包括：••表的ID••表的名字••表的状态••表的Tablet数量••表的Engine类型••表的副本数•...

ThistutorialwillguideyouthroughthefollowingtaskswithinHippoCloud:EstablishingatablePerusingthetableIncorporatingdataExecutingsearchoperationsEliminatingrowsDissolvingthetableBeforeyoustartInthisguide,wewillbeutilizingthePythonAPI.Priortocommencement,ensurethatyouhave:RegisteredforaHippoCloudaccount.SubscribedtothecomplimentaryplanandestablishedatrialclusterwithinHippoCloud,orsubscribedtothestandard/enterpriseplansandconstructedadedicatedcluster.IfyouanticipateemployingPythonfordevelopment,ascert...

OverviewAclusterisaHippoCloudinstanceassociatedwithspecificcomputingresources.Youcancreaterelatedtables,insertcorrespondingdata,andcompleteproductexperiencewithinacluster.Beforeyouusethedemoenvironment,youneedtocreateacluster.CreateClusterYouneedtogotothespecificproject.Iftherearenoclustersunderthecurrentproject,youcanclickthe'Createcluster'buttonbelowtheclustercreationguidancepagetoentertheclustercreation.Ifthereareclustersunderthecurrentproject,youcanclickthe'+Cluster'buttonabovetheclusterlist...

在Hippo中，比较耗时的操作如激活、加载向量索引实际上是一个分布式任务，用户可以通过任务相关接口查看、删除任务。查看任务curl-ushiva:shiva-XGET"localhost:8902/hippo/v1/_jobs?pretty"-H'Content-Type:application/json'-d'{"job_ids":["fc6feff4f303455a9347f9aab323dfc8"],"action_patterns":["hippo*"]}';返回结果：{"jobs":[{"job_id":"810935a1d91a46b7af2ec35013454fed","job_status":"SHIVA_JOB_SUCCESS","embedding_number":100,"task_results":[{"id":"54ab52493dfb4bab9fb7742d850c64c4","status":"TASK_SUCCESS","server":"172.29.40.26:27841","embedding_number":100,"execute_time":...