XX能源云数据平台建设项目_投标书_技术部分_V1.0.doc

通过大数据技术平台产品和技术服务，开展大数据平台建设。逐步实现由SAP BW单一数据分析环境，向以分布式数据库为支撑的大数据平台数据架构演进。主要方案内容包括： （一）大数据分析平台： 数据采集：  支持从SAP相关系统CCS、OIL、CRM等系统采用增量、数据变更触发、自动调度等方式采集数据。  支持从EAS、预算合并等定制系统的关系数据库中采集数据。  支持从文档工作流等非结构化或半结构化数据库中采集数据。  支持数据采集写入到HDFS、HBase、Hive等大数据库中。  支持准实时数据的采集和处理。 数据存储处理：  支持原来BW数据仓库的数据逐层转换处理。  支持Hadoop大数据库中进行分布式海量数据的并行处理。  支持流式数据处理。 数据分析工具：  大数据平台提供面向数据分析师的若干工具，包括数据加工台，数据产品开发工具、数据可视化工具以及数据服务 REST API等。 （二）大数据展示平台： ..... （三）大数据管理平台： ..... 目录结构： 1 项目背景 3 2 需求理解 4 3 项目目标 5 3.1 建立健全的数据管理体系 5 3.2 为未来的大数据平台建设提供基础保障 6 3.3 提升对现有业务系统及数据平台的管理水平 7 3.4 帮助XXX能源建立自己的数据管理能力 7 3.5 建立云端大数据平台支撑业务创新和管理变革 7 4 项目范围 8 4.1 云数据平台架构规划设计 8 4.2 数据管理体系咨询与设计 8 4.3 云数据平台建设与实施 8 4.4 数据分析展示应用设计开发 9 5 总体方案概述 10 5.1 总体方案架构 10 5.2 总体方案说明 10 6 技术方案 12 6.1 技术方案 12 6.2 产品配置清单 50 6.3 产品功能清单 51 6.4 平台部署架构 138 7 实施方案 139 7.1 项目要求 139 7.2 项目管理及质量控制 140 7.3 交付成果及形式要求 148 8 售后与技术支持 149 8.1 服务水平协议 149 8.2 服务期限 150 9 技术方案偏离表 153