关于simpledatax
背景
simpledatax基于阿里开源数据采集工具datax做了一些减法,适合特定的场景。关于阿里的datax请移步
重点说明
恢复数据时实例之间的冲突。
将插件包和调度包集成到同一个包内,方便修改。
插件间不再使用不同的类加载器。插件预加载机制。同时不改变参数的json配置处理机制。
新增参数对象作为入参,封装接口,提取关键参数的配置。
修改内部调度机制,可删除睡眠收集任务执行状态的机制,修改为各个任务执行完成时汇报情况,使用未来获取返回结果,可以稍微提高下效率。
新增返回调度结果实例。用于界面展现。
可移除TaskGroupContainer,只能单机使用,如果需要扩展建议结合分布式服务框架使用。
调整了信息汇报部分代码,目前来看更加直观,也更容易修改。
文档说明
请参考阿里各个插件的文档。如果有更新需要替换插件并调整下代码。
调用示例
public st
2021-12-27 19:17:41
356KB
Java
1