kettle版本需9.4.0.0-343 1、解压后放入data-integration\plugins目录下 2、重启spoon 3、在转换下批量加载中可以看到此插件 4、插件配置:其中Fenodes应配置“ip:端口”端口为http_port默认8030 5、数据库信息按情况填写,其他内容保持默认即可。注意表字段的大小写要和流字段的保持一致 Kettle-Spoon是Pentaho公司的一款开源ETL工具,用于进行数据转换和抽取。doris是一个高性能的分析型数据库,适用于海量数据的实时分析。doris官方提供的doris-stream-loader是Kettle-Spoon的一个插件,用于将数据高效地从Kettle抽取到doris数据库中。 使用该插件需要首先检查Kettle的版本是否满足要求,即为9.4.0.0-343版本。一旦确认版本无误,便可以将doris-stream-loader插件解压并放入data-integration\plugins目录下。操作完成后,需要重启spoon,即Kettle的图形化界面,以确保插件能够被正确加载和识别。 重启后,在spoon界面的“转换”下选择“批量加载”,便可以看到新增的doris-stream-loader插件。这时,便可以对插件进行配置。配置主要包括两部分,首先是Fenodes配置。Fenodes指的是doris集群中的节点,需要按照“ip:端口”的格式进行配置,而端口通常情况下是http_port,其默认值为8030。还需要填写数据库信息。在配置数据库信息时,需要注意表字段的大小写要与流字段保持一致,以避免数据不匹配的问题。 doris-stream-loader插件的使用大大提高了数据从Kettle抽取到doris数据库的效率,这对于需要进行大数据量处理的用户来说是一个福音。但需要注意的是,使用该插件时,对Kettle和doris的版本和配置都有一定的要求,只有在严格遵循操作步骤和配置要求的前提下,才能确保数据抽取的顺利和高效。
2025-07-21 11:36:33 502KB doris kettle spoon
1
DORIS 作品 DORIS 作品 DORIS 作品 DORIS 作品 DORIS 作品 DORIS 作品 DORIS 作品 DORIS 作品
2025-07-13 08:15:19 2.95MB
1
7.1 输入指令 S_IN_NULL filename 单视复数空文件的文件名。这可能是个空的名字因为它没有被使用。 S_IN_VOL filename 单视复数容量文件的文件名。 S_IN_LEA filename 单视复数头文件的文件名。 S_IN_DAT filename 单视复数数据文件的文件名。
2025-03-29 13:24:13 2.86MB DORIS
1
课程分享——实战Flink+Doris实时数仓课程,大家下载学习。
2024-04-02 10:41:13 190B flink 课程资源
1
DataX doriswriter 插件,用于通过 DataX 同步其他数据源的数据到 Doris 中。(https://doris.apache.org/zh-CN/docs/ecosystem/datax?_highlight=datax#%E5%85%B3%E4%BA%8E-datax) DataX Web是在DataX之上开发的分布式数据同步工具,提供简单易用的 操作界面。 GitHub上的Datax Web项目不支持doriswriter 插件。 本项目是集成了doris,适配doriswriter 插件。
2022-11-18 18:05:06 437.08MB doriswriter插件 datax_web doris
1
解决Dolphinscheduler中从Mysql同步分表数据至Doris或者PG库的问题
2022-10-15 19:04:16 6KB 大数据 doris mysql
1
Apache Doris 技术调研,建议配合我的同名博客来一同研究学习。
2022-09-27 09:06:14 334KB Doris OLAP ClickHouse
1
基于Flink+Doris构建高性能高扩展的全端实时数据仓库教程,2021年5月新课,课程基于Flink 1.11.3,DorisDB 0.13.9版本。 本课程基于真实热门的互联网电商业务场景为案例讲解,结合分层理论和实战对数仓设计进行详尽的讲解,基于Flink+DorisDB实现真正的实时数仓,数据来及分析,实时报表应用。 课程具体数仓报表应用指标包括:实时大屏分析、流量分析、订单分析、商品分析、商家分析等,数据涵盖全端(PC、移动、小程序)应用,与互联网企业大数据技术同步,让大家能够学到大数据企业级实时数据仓库的实战经验。
2022-07-15 17:05:14 619B Flink doris 数据仓库
1
基于DORIS软件利用D-InSAR技术对矿区开采沉陷的监测研究,薛继群,邓喀中,本文以沛城矿区开采过程中获得的SAR影像数据为对象,基于DORIS软件平台通过D-InSAR方法获取了新、老开采区域的多幅干涉图,计算出地表
2022-07-14 08:40:21 305KB 首发论文
1
给大家分享一套课程——基于Flink+Doris构建高性能高扩展的全端实时数据仓库教程,课程基于Flink 1.11.3,DorisDB 0.13.9版本。 本课程基于真实热门的互联网电商业务场景为案例讲解,结合分层理论和实战对数仓设计进行详尽的讲解,基于Flink+DorisDB实现真正的实时数仓,数据来及分析,实时报表应用。
2022-05-16 19:08:45 642B flink Doris 大数据 数据仓库
1