创新网络构建高效云平台和业务连续性架构.pptx
商业银行大数据分析的实践.pptx
基于软件定义网络（SDN）的下一代金融云研究与实践.pptx
大数据技术助力信息化银行建设.pdf
大数据时代——生态经营论.pptx
快速打造混合云应用平台.pptx
快速构建云端服务 协同金融业务创新.pptx
探索金融API的管理优化安全.pptx
数字化云平台，从DevOps开始.pptx
数据驱动全生命周期客户经营.pptx
海量日志搜索分析技术及金融行业案例.pptx
知识图谱大数据技术在金融行业中的展望.pdf
金电云平台介绍.pptx
银行与金融大数据建设现状.ppt
银行云化之路.pptx
银行云平台建设及架构转型思路.pptx
银行大数据探索应用.pptx
2022-05-13 14:08:37
46.2MB
202x年电商大数据实践-实现和设计方案(详细版)(专业完整版).pdf
2022-05-12 18:09:24
15.33MB
大数据分析平台总体架构——数据存储层
业务系统前日增量数据
缓存数据，支持后续ELT数据处理
数据内容
主要用途
数据模型
保留周期
用户
访问模式
工作负载
平台要求
贴源数据模型
保存最近7天数据
贴源数据区和主题数据区批量作业访问
无最终用户访问
I/O敏感，连续小批量的数据抽取和加载
少量量数据使用Hive的Load命令，大量数据使用MR程序
与主题区/贴源区/集市区构成一个Hadoop集群（Hive）
无单点故障，7×24小时+非工作日有限停机
主题数据区、集市数据区和沙盘演练数据区批量作业访问
无最终用户访问
I/O敏感，日终批量ETL
以ELT形式通过Hive SQL执行
与主题区/贴源区/集市区构成一个Hadoop集群（Hive）
无单点故障，7×24小时+非工作日有限停机
贴源数据模型
不保存历史
业务系统前日快照数据和一段时间的流水数据
数据标准化，为后续主题模型、集市和沙盘演练提供数据
临时数据区
贴源数据区
2022-02-18 20:56:33
5.01MB
1
阿里巴巴大数据系统架构，是为了满足不断变化的业
务需求，同时实现系统的高度扩展性、灵活性以及数据展现的高性能而
设计的。
2022-02-13 12:15:15
85.95MB
1