使用kettle生成经纬度信息并落地到文件.rar

文中内容自己整理撰写,图片大部分都是自己亲测亲自抓图并编写脚注

kettle创建sqlserver 数据库连接提示could not be found, make sure the ‘MS SQL Server Native ’ driver (jar file) ，放入lib后重启spoon；或官网下载www.microsoft.com/zh-CN/download/details.aspx?id=11774，按提示解压到lib

XXXKETTLE全量多表数据同步 1 一. 建立资料库 3 1.1 添加资源库 3 二. 前期准备工作 7 2.1 异结构数据传输 7 2.2 数据校验 9 三. 建立转换 10 3.1 创建‘转换’（GET—ORACLE-TABLES） 10 3.1.1 创建数据源 10 3.1.2 添加核心对象 12 3.2 创建‘转换’（INSERT—MYSQL-TABLES） 15 3.2.1 创建数据源 15 3.2.2 添加核心对象 15 3.2.3 转换设置 17 四. 建立作业 18 4.1 创建‘ORACLE TO MYSQL’作业 18 4.2 添加核心对象 18 4.3 设置GET-TABLES 19 4.4 设置INSERT-MYSQL 23 五. 实验验证 28 5.1 ORACLE插入数据 28 5.2 执行JOB 29 5.3 MYSQL数据验证 30

总结了下常用的Kettle控件功能说明。输入、输出、转换、流程、脚本等等

kettle 版本 9.1 亲测有效

Kettle8.2做的，Kettle循环获取转换中的结果集传递到下一个转换中，并最终输出到txt文档

kettle数据库资源库表的详细解释，包括各个表名，字段名等

kettle自定义拼接json格式输出，arcgis的json格式为例子，速度的话我跑了20万数据，16个字段，14000条/秒，机器是自己笔记本i5处理器，kettle给了4g内存

Kettle数据迁移测试用到的kjb作业及ktr转换脚本文件~