本次分享主要从三个方面介绍京东流量场下的数据处理方案，同时也会结合京东实际场景案例，介绍京东在流量场下的一些数据应用和实践。
全文会围绕以下三方面内容展开：
京东零售流量数仓架构
京东零售场景的数据处理
数据处理架构未来探索
1. 京东零售——流量简介
① 什么是流量？
简单来说，流量就是用户作用在京东页面上，产生一系列行为数据的集合。
② 流量数据的来源
数据来源主要是移动端和PC端，以及线下店、外部采买、合作商的数据等。
这些数据是如何流转到数仓的呢？
2. 京东零售——流量数据处理架构
由架构图可以看出，对不同的终端采取不同的采集模式；例如，对APP原生页面采取SDK的采集模式，对于PC、H5页面是JS采集，数据采集后按照实时和离线双写，离线直接写到CFS分布式文件系统中，每小时从CFS拉取数据文件，同时对数据文件大小、采集ip进行监控，防止数据丢失；实时是以白名单的方式动态配置，写到kafka中，最后将数据入仓。
2022-08-23 18:09:01
1.15MB
1
Informatica 9.6 实战课程，将从数据仓库体系架构介绍，服务器搭建配置，实例组件操作，丰富的案例，及项目实战开发过程 来讲述ETL工具Informatica的实际应用，真正完成数据仓库全流程开发应用，ODS层，EDW层，DM层，学完该课程具备ETL软件开发工程师能力水平，能独立完成项目开发工作，从入门到高级项目开发应用，每个实例都载图，课件，教程，数据等，能达到中高级ETL开发能力，本课程的学习要求，一定跟着实例动手实战，操作才能掌握实例的开发步骤，及开发注意事项。
2021-08-10 00:35:47
67.67MB
1
开源大数据实时数据处理体系，实时数仓Lambda架构，如何选型数仓架构，新一代技术理念HSAP:分析、服务一体化，云原生实时数仓最佳实践，MC-Hologres简化大数据数仓架构，从开源Hadoop到新一代实时数仓，数仓敏捷化实践等
2021-04-02 09:00:12
1.23MB