一、实验目的 1. 通过实验掌握基本的Flink编程方法。 2. 掌握用IntelliJ IDEA工具编写Flink程序的方法。 二、实验内容和要求 1. Ubuntu18.04(或Ubuntu16.04)。 2. IntelliJ IDEA。 3. Flink1.9.1。 三、实验步骤(每个步骤下均需有运行截图) 1.使用IntelliJ IDEA工具开发WordCount程序 在Linux系统中安装IntelliJ IDEA,然后使用IntelliJ IDEA工具开发WordCount程序,并打包成JAR文件,提交到Flink中运行。 在本次实验中,主要是学习掌握基本的Flink编程方法编写Flink程序的方法以及对大数据的基础编程技能进行巩固。并且还学习了Flink的基本原理和运行机制,还通过具体的代码实现,了解到Flink程序的编写步骤和注意事项。此外,还学会了如何使用IntelliJ IDEA工具进行Flink程序的编写和调试,加深了对开发工具的了解。
2024-06-01 16:36:55 4.26MB flink 编程语言
1
1、实验环境: 设备名称 LAPTOP-9KJS8HO6 处理器 Intel(R) Core(TM) i5-10300H CPU @ 2.50GHz 2.50 GHz 机带 RAM 16.0 GB (15.8 GB 可用) 主机操作系统 Windows 10 家庭中文版 虚拟机操作系统 ubuntukylin-16.04 Hadoop 版本 3.1.3 JDK 版本 1.8 Java IDE:Eclipse 系统类型 64 位操作系统, 基于 x64 的处理器 笔和触控 没有可用于此显示器的笔或触控输入 2、实验内容与完成情况: 1. 安装hadoop和spark。 将下载好的安装包解压至固定路径并安装 使用命令./bin/spark-shell启动spark 图2启动spark 2. Spark读取文件系统的数据 (1) 在spark-shell中读取Linux系统本地文件“/home/hadoop/test.txt”,然后统计出文件的行数; 图3 spark统计行数 (2) 在spark-shell中读取HDFS系统文件“/user/hadoop/test.txt”(
2022-07-15 19:05:43 1.9MB 大数据 spark hadoop
1
实验内容与完成情况: 1. 使用IntelliJ IDEA工具开发WordCount程序 在Linux操作系统中安装IntelliJ IDEA,然后使用IntelliJ IDEA工具开发WordCount程序,并打包成JAR包,提交到Flink中运行。 安装Flink并启动: 安装maven: 使用IntelliJ IDEA写java: 使用maven打包JAR包 运行JAR包结果: 2. 数据流词频统计 使用Linux操作系统自带的NC程序模拟生成数据流,不断产生单词并发送出去。编写Fink程序对NC程序发来的单词进行实时处理,计算词频,并输出词频统计结果。要求首先在IntelliJ IDEA中开发和调试程序,然后打包成JAR包部署到Flink中运行。 使用IntelliJ IDEA写java: 运行NC并输入数据: 运行JAR包:
2022-06-29 09:11:35 2.46MB 大数据实验报告 hadoop Flink 大数据
林子雨大数据原理与技术第三版实验5实验报告 大数据技术与原理实验报告 MapReduce 初级编程实践 姓名: 实验环境:  操作系统:Linux(建议Ubuntu16.04);  Hadoop版本:3.2.2; 实验内容与完成情况: (一)编程实现文件合并和去重操作 对于两个输入文件,即文件 A 和文件 B,请编写 MapReduce 程序,对两个文件进行合并, 并剔除其中重复的内容,得到一个新的输出文件 C。下面是输入文件和输出文件的一个样例 供参考。 输入文件 A 的样例如下:
2022-06-20 18:07:49 1.28MB 大数据 mapreduce Hadoop
适合: 小白 初学者 刚入社会想了解ROBOT 发那科机器人 初级编程 想了解发那科ROBOT的人士 全都是干货,要想成为工程师就必须吧基础打牢 资料领进门修行靠个人 这份发那科机器人初级编程您值得拥有
坐标系系统,零点标定,运动编程,逻辑编程,夹爪编程,子程序编程等等
2022-01-20 14:21:54 17.27MB kuka机器人
1
实验一Java初级编程 (1)使用if...else语句构造多分支,判断某一年是否为闰年。闰年的条件是符合下面二者之一:能被4整除,但不能被100整除;能被400整除。 (2)后从键盘输入数字1/2/3后,可显示抽奖得到的奖品;如果输入其它数字或字符显示”没有奖品给你!"。 (3)输出九九乘法表。 (4)创建—个4行5列的二维整型数组,并将其元素打印输出。
这个KUKA机器人的入门级的操作、编程手册,非常适合机器人初学者!内容既有操作机器人的方法,又有编程的介绍,一册在手掌握机器人不再难!
2019-12-21 20:07:51 3.98MB KUKA 初级 编程
1