大数据中心平台

发布时间:2018-03-27 10:34:00 浏览次数：次

>> 产品描述

       基于大数据GIS，通过数据交换、数据ETL、数据加工处理等工具实现海量空间数据、业务数据、文件数据的快速获取、统一处理、统一质检、关联融合和一体化管理，形成权威、有效的大数据中心；对外提供统一的数据资源服务，支撑专题分析、形势分析、业务监测、辅助决策等数据应用。

>> 数据资源体系构建

       针对来源多样、类型复杂的源数据，通过汇交入库、信息爬取、异构读取和服务接入等多种方式，完成数据汇集与整理工作，形成原始数据库；然后，通过数据标注、文件标引的部分加工与治理环节形成基础信息库资源，作为大数据中心的数据基础；面向决策应用场景时，需要进行数据的抽取、转换、挖掘、统计等再次加工形成各类主题数据、知识数据、指标数据等，最终形成分层分级的数据资源体系，满足数据一体化管理与多层次应用的需求。

>> 系统构成

>> 产品特点

       1. 逻辑统一的数据管理和分析应用

       用户部门在不同时期由不同厂商基于不同的平台构建了多个异构的系统，逐渐形成了“烟囱系统”和“孤岛数据”，已经无法满足数据关联挖掘分析和综合决策分析的需要。针对这种情况，金拓维大数据中心在不改变用户已有数据组织现状的前提下，通过异构数据读取和异构服务接入的方式，即可实现数据逻辑统一和挖掘分析的需要。

       2. 三级数据资源体系建设

>> 平台功能

       1. 数据ETL系统

       基于规则引擎技术，数据ETL系统可实现基于规则和方案驱动的自动化、快速构建数据加工处理工具，实现海量空间数据、业务数据、文件数据的快速汇聚和加工处理。

       2. 数据服务系统

       基于统一的数据服务总线，实现数据资源的服务化管理和应用，数据服务系统为授权用户（应用）提供结构化数据服务、文件数据服务和空间数据服务等服务，并实现控制数据访问与数据内容的安全性。 

       3. 数据管理系统

       基于分布式文件存储与关系型数据库存储混合架构的大数据存储模式，系统提供高效的浏览、查询、分析能力，实现海量多源异构的业务数据、空间数据、文件型数据的高效管理。