datax 遇见bug

发布时间 2023-10-23 21:11:04作者: 数据改变人生

1、第一个坑:经DataX智能分析,该任务最可能的错误原因是:

com.alibaba.datax.common.exception.DataXException: Code:[Common-00], Describe:[您提供的配置文件存在错误信息,请检查您的作业配置 .] - 配置信息错误,您提供的配置文件[/root/tools/test/datax/plugin/reader/._drdsreader/plugin.json]不存在. 请检查您的配置文件.

 在这上面看到._drdsreader/plugin.json这种类似的(./*),可以去到对应的./plugin/reader以及对应的/plugin/writer目录下用 rm -rf ./._*,删掉这些临时文件

 出现这个代表这个坑跨过去了

2、出现这个ConfigParser - 插件[cassandrareader,clickhousewriter]加载失败,1s后重试... Exception:Code:[Framework-12], Description:[DataX插件初始化错误, 该问题通常是由于DataX安装错误引起,请联系您的运维解决 .].  - 插件加载失败,未完成指定插件加载:[clickhousewriter, cassandrareader],可以直接重新下载datax,这个是对应的pluin没有