大多数大数据企业在构建数仓时采用Lambda架构,一条离线数仓链路,一条实时数仓链路。一些实时业务多的公司构建数仓时采用Kappa架构,但是也避免不了离线处理一些数据,所以一些公司也采用Kappa架构+Lambda架构方式构建数仓。以上不同的架构都有各自的优点及缺点,这里不再赘述。批数据处理与流式数据处理的不同效率决定了针对两类数据采用不同的架构进行分析处理,未来数据仓库的发展也终将走向批数据和流数据使用同一套架构处理,同时也要求批数据及流数据存储上也需要统一,这就所说的批流一体,那么使用什么技术可以既能满足批数据海量存储分析又能满足实时数据存储的效率高、支持数据更新删除?数据湖技术应运而生。Hudi 就是典型的数据湖技术,支持批数据和流式数据的存储,同时还支持高效的OLAP分析查询。 这份资料将会带领大家学习为什么要用数据湖技术、Hudi Timeline、Hudi文件格式及索引、Hudi表类型、Hudi与Spark、Flink框架整合等知识,如果你在学习、工作中针对批流一体数据处理场景正不知选择何种技术,在工作中使用到数据湖技术,那么下载这份资料绝对没错,可以快速学习真正使用数据湖
2022-06-04 09:07:16 60.19MB 数据湖 大数据技术
湖大数据库实验。
2022-04-13 09:05:17 1.15MB 数据库 database
1
湖南大学(Hunan University),简称“湖大”,坐落于长沙市,是教育部直属全国重点大学,教育部、工业和信息化部、湖南省人民政府、国家国防科技工业局共建高校,位列国家“世界一流大学建设高校”、“985工程”、“211工程”,入选国家“2011计划”、“111计划”、卓越法律人才教育培养计划、卓越工程师教育培养计划、国家建设高水平大学公派研究生项目、新工科研究与实践项目、全国深化创新创业教育改革示范高校、全国创新创业典型经验高校、全国高校实践育人创新创业基地、中国政府奖学金来华留学生接收院校、国家大学生创新性实验计划,高校国家知识产权信息服务中心。 [1-2] 湖南大学办学起源于公元976年创建的岳麓书院,历经宋、元、明、清等朝代的变迁,1897年创办新式高等学校时务学堂,1903年岳麓书院等合并改制为湖南高等学堂。1912年成立湖南高等师范学校。1926年成立省立湖南大学。1949年9月,国立湖南大学更名为湖南大学。2000年,湖南大学与湖南财经学院合并组建成新的湖南大学。 [3-4] 截至2020年1月,学校占地面积239.776万平方米,校舍建筑面积144.635万平方米;设有研究生院和25个学院;本科招生专业60个;拥有一级学科博士点27个、专业学位博士点1个、一级学科硕士点36个、专业学位硕士点20个;建有国家重点学科一级学科2个、国家重点学科二级学科14个、博士后科研流动站25个;有教职工近4000人,有全日制在校学生36000余人。
2022-02-28 20:07:29 3.01MB 湖南大学 湖大考研 湖大专业课
1
湖南大学 ACM 试题集(1) 花了一天时间做好的
2021-11-03 18:08:57 9.99MB 湖大 试题 ACM
1
开源对象存储方案 Minio入门宝典
2021-10-26 15:07:23 1.61MB 对象存储 数据湖 大数据 Minio
1
基于数据湖的企业数据中台解决方案
2021-09-27 09:08:10 3.89MB 数据湖 大数据
1
这是湖南大学的论文格式,对湖大学生很有帮助
2021-05-09 10:51:51 249KB 湖大 论文 格式
1
12.佛山中信山语湖大北区概念规划设计成果——EKLSTCLS.zip
2021-03-22 20:07:13 148.47MB 数据集 shp 矢量
考研 模拟电路,每一章重点的,收集了可能备考到的复习思考题及详细解答,针对康华光教材(主要是用这个交材的大学,比如湖大,福大。。。),学童诗白额同学也很有用。()考研 模拟电路,每一章重点的,收集了可能备考到的复习思考题及详细解答,针对康华光教材(主要是用这个交材的大学,比如湖大,福大。。。),学童诗白额同学也很有用。()考研 模拟电路,每一章重点的,收集了可能备考到的复习思考题及详细解答,针对康华光教材(主要是用这个交材的大学,比如湖大,福大。。。),学童诗白额同学也很有用。()
2021-03-18 15:22:58 181KB kaoyan
1