82页大数据分析平台总体架构方案

通过数据平台和BI应用建设，金融集团将搭建统一的大数据共享和分析平台，对各类业务进行前瞻性预测及分析，为集团各层次用户提供统一的决策分析支持，提升数据共享与流转能力

通过数据平台实现数据集中，确保金融集团各级部门均可在保证数据隐私和安全的前提下使用数据，充分发挥数据作为企业重要资产的业务价值

l内部业务系统产生的结构化数据 v商城日常零售业务处理过程中产生的结构化数据，存储在关系型数据库中，如：供应商信息、采购信息、商品信息、销售流水…… v金融集团日常业务处理过程中产生的结构化数据，存储在关系型数据库中，如：客户信息、账户信息、金融产品信息、交易流水…… l企业内部非结构化数据 v日常业务处理过程中产生的非结构化数据，存储形式多样，主要包括用户访问日志、用户投诉、用户点评…… l企业外部数据 v企业外部数据以非结构化为主，主要包括国家政策法规、论坛等互联网信息、地理位置等移动信息、微博等社交媒体信息……

l在本次项目实施中将采用以增量为主、全量为辅结合的方式获取源数据 l商城和金融集团业务系统的数据 v增量数据识别、获取由云数据推送平台负责，云数据推送平台采用分析、对比源系统日志方式实现 v对于无法通过上述方式获取增量的源系统数据，则采用某一个时间范围内的全部数据作为增量 v初始数据加载均采用全量模式

<