spark开箱即用,将压缩包上传到Linux即可使用命令行指令操作spark。若要部署Spark的集群模式请访问小弟的主页。
2021-09-26 19:06:55 242.48MB spark cdh 2.6.0 2.2.0
1
geomesa目前支持spark版本2.2.x、2.3.x或2.4.x。geomesa spark允许使用存储在geomesa中的数据、其他geotools数据存储或geomesa转换器库可读的文件在apache spark上执行作业。该库允许创建spark RDD和数据帧,将spark RDD和数据帧写入geomesa accumulo和其他地理工具数据存储,并使用kryo对简单功能进行序列化。
2021-09-26 13:52:22 41KB GeoMesa Geomesa Spark Spark
1
Bright Spark 1.20 模拟电路仿真资源大小: 5.02MB 资源类型:exe文件 发布人
2021-09-26 10:02:28 5.02MB bright spark 1.2
1
在Storm出现之前,进行实时处理是非常痛苦的事情,我们主要的时间都花在关注往哪里发消息,从哪里接收消息,消息如何序列化,真正的业务逻辑只占了源代码的一小部分。一个应用程序的逻辑运行在很多worker上,但这些worker需要各自单独部署,还需要部署消息队列。最大问题是系统很脆弱,而且不是容错的:需要自己保证消息队列和worker进程工作正常。 Storm完整地解决了这些问题。它是为分布式场景而生的,抽象了消息传递,会自动地在集群机器上并发地处理流式计算,让你专注于实时处理的业务逻辑
2021-09-25 20:54:28 14.09MB spark
1
基于GPU的Spark大数据技术在实验室的开发应用.pdf
2021-09-25 19:03:44 4.02MB GPU 处理器 数据处理 参考文献
Spark大数据企业级实战版_带目录.pdf Spark大数据企业级实战版_带目录.pdf Spark大数据企业级实战版_带目录.pdf
2021-09-24 18:13:04 139.37MB Spark 大数据企业级
1
避免流式传输 前言:使用scala和java混编完成,其中也涉及到python脚本来自动生成日志,linux crontab调度工具来定时执行脚本生成实时日志。生成的数据主要是模拟某学习网站学习视频课程的访问量(其中*以“ / class”开头的表示实战课程,然后通过流水线Flume + Kafka + SparkStreaming进行实时日志的收集,HBase来存储数据)* 注意事项(使用的软件工具及环境配置) hadoop-2.6.0-cdh5.7.0 hbase-1.2.0-cdh5.7.0 zookeeper-3.4.5-cdh5.7.0 spark-2.2.0-bin-2.6
2021-09-24 14:31:54 921KB java scala spark ScalaJava
1
这本书绝不仅仅是在讲流式处理,它的真名是"总结过去10年大数据处理发展的历史,Google的经验; 提出新的理论,升维我们的思维模式,降维打击我们的复杂问题;展现目前的行业趋势,预测未来的行业走势….",这本书几乎影响了我对所有分布式系统的理解。
2021-09-24 10:01:19 31.56MB streaming sy flink spark
1
比较冷门的UltraEdit编辑器中的关于Scala的高亮文件类型wordfile,使用方法,下载好的scala.uew文件放入UltraEdit编辑器所在目录下的worldfiles文件夹下面,然后进入UltraEdit编辑器设置中 高级--》设置--》编辑器显示--》语法高亮--》添加语言
2021-09-24 09:44:44 64KB scala spark UltraEdit scala.uew
1
spark3_docker 使用Java 1.8,Python 3.8.5和Scala 2.13的Spark 3的Docker映像 步骤1:安装Docker 步骤2:为Docker桌面提供适当的资源。 如果您使用的是Windows 10或Mac OS,请确保至少提供系统内存和处理器总数的一半。 我有八个核心处理器和32 GB的Ram。 因此,我为docker hub提供了六个内核和16 GB的ram空间。 步骤3:使用提取Docker映像 docker pull sandipanghosh / spark3_hadoop3:latest 步骤4:使用 docker容器运行-it -v / host_path / docker_data /:/ root / docker_data --name spark3 -p 8080:8080 -p4040:4040 spark3_hado
2021-09-23 16:24:02 2KB
1