您当前的位置:首页 > 解决方案 > 空间大数据平台解决方案

【方案概述】

空间大数据平台解决方案融合了空间信息技术、信息安全技术、数据管理技术、数据库技术、集群及分布式存储技术、商务智能技术等,对海量的矢量数据、卫星影像数据、高程数据、模型数据、各式文档数据进行管理。在基于海量遥感数据的处理或其高性能计算的情况下,与集群存储节点并列的环境下部署基于Hadoop的高性能计算环境。该计算集群主要利用Hadoop中的HDFS来存储计算数据,利用MapReduce来解决计算问题。

【空间大数据平台方案的应用】

1.空间大数据存储

空间大数据存储包括MongoDB集群和HDFS集群。其中MongoDB集群用于存储NoSQL类型的数据,适应于海量栅格数据、海量矢量数据等;HDFS存储大数据文件,例如海量影像、高程、模型、文档等文件,并在此基础上和Hadoop的MapReduce结合,提供基于这些文件或MongoDB中数据的分布式计算,实现数据和计算结合的方式,提供数据中心的数据处理性能。

2.空间大数据服务

空间大数据服务是面向Web应用,依照OGC的相关规范发布完整的空间数据服务,内容涵盖采用WCS发布的栅格数据、采用WFS和WMS发布的矢量数据。

3.空间大数据管理

空间大数据管理是为管理员对整个数据中心管理的数据的配置和管理提供管理界面,从下至上,MongoDB集群的管理、Hadoop集群的管理;空间数据库的管理,包括建库、维护、数据的导入导出等;海量数据文件管理;空间服务管理;负载均衡的管理。另外还包括穿插在各层中的安全管理,包括权限、日志、审计等管理功能。

4.负载均衡

负载均衡提供对整个数据中心集群的负载均衡,采用LVS+Keepalived的架构进行,是把很多客户集中访问的请求负载压力尽可能平均的分摊到计算机集群中处理。