本书详细介绍如何利用Spark Graph组件进行图计算，并依托项目背景，对Spark图计算进行深入研究，适合Spark爱好者进行阅读
2022-08-21 09:55:20
72.38MB
1
介绍：今天给大家分享一套大数据开发课程，课程是2022最新升级版的，一共有27周，大数据涉及到的内容基本都包含了，比如spark，Hadoop，hive，flink，数据仓库等等，可以说是学习大数据一部到位，有需要学习大数据的小伙伴抓紧时间下载了，视频+代码+课件+软件，资料齐全
2022-07-29 14:05:25
225B
1
1、实验环境：
设备名称 LAPTOP-9KJS8HO6
处理器 Intel(R) Core(TM) i5-10300H CPU @ 2.50GHz 2.50 GHz
机带 RAM 16.0 GB (15.8 GB 可用)
主机操作系统 Windows 10 家庭中文版
虚拟机操作系统 ubuntukylin-16.04
Hadoop 版本 3.1.3
JDK 版本 1.8
Java IDE：Eclipse
系统类型 64 位操作系统, 基于 x64 的处理器
笔和触控 没有可用于此显示器的笔或触控输入
2、实验内容与完成情况：
1. 安装hadoop和spark。
将下载好的安装包解压至固定路径并安装
使用命令./bin/spark-shell启动spark
图2启动spark
2. Spark读取文件系统的数据
（1） 在spark-shell中读取Linux系统本地文件“/home/hadoop/test.txt”，然后统计出文件的行数；
图3 spark统计行数
（2） 在spark-shell中读取HDFS系统文件“/user/hadoop/test.txt”（
2022-07-15 19:05:43
1.9MB
1
本实验报告为厦门大学计算机科学系 林子雨 博士/助理教授《大数据处理技术Spark》课程在学期结束后的“大作业”。Spark课程实验案例：淘宝双11数据分析与预测课程案例，由厦门大学数据库实验室团队开发，旨在满足全国高校大数据教学对实验案例的迫切需求。本案例涉及数据预处理、存储、查询和可视化分析等数据处理全流程所涉及的各种典型操作，涵盖Linux、MySQL、Hadoop、Hive、Sqoop、Eclipse、ECharts、Spark等系统和软件的安装和使用方法。本报告含实验环境、实验内容、实验内容截图、遇到的问题及解决方案、心得体会。
2022-06-17 09:10:49
4.82MB
通过此案例可以学习大数据整体开发流程，课程是围绕一个大数据整理流程而做的教学课程，让大家明白大数据不同技术的相互协调，从收集数据，过滤数据，数据分析，数据展示，调度的使用而开发的课程，而且怎么从hadoop，hive应用快速的过度到spark上面而做的整套流程。学完此课程可以企业流程做一个整体的认识。配套资料-答疑专属答疑群购买课程后加入qq群 951117762 （备注订单号后四位）
2022-05-23 20:12:37
183.14MB
1
spark项目：数组也是一种复杂数据类型，表示一组有序的值的列表，可以通过数值索引来访问其中的值。数组的值也可以是任意类型——简单值、对象或数组
JSON数组也没有变量和分号，把数组和对象结合起来，可以构成更复杂的数据集合
[注意]数组或对象最后一个成员的后面，不能加逗号
2022-05-06 11:44:44
154.83MB
1