DataX二次开发——(1)新增HANA数据源

1、Gitee下载

origin https://gitee.com/mirrors/DataX.git

2、配置阿里云maven镜像仓库

	
        alimaven
        aliyun maven
        http://maven.aliyun.com/nexus/content/groups/public/
        central
    
    
    
        repo1
        central
        Human Readable Name for this Mirror.
        http://repo1.maven.org/maven2/
    
    
    
        repo2
        central
        Human Readable Name for this Mirror.
        http://repo2.maven.org/maven2/
    

3、解决tsdbwriter编译异常

Could not resolve dependencies for project com.alibaba.datax:tsdbwriter:jar:0.0.1-SNAPSHOT: Could not find artifact com.aliyun:hitsdb-client:jar:0.4.0-SNAPSHOT in alimaven (http://maven.aliyun.com/nexus/content/groups/public)

注释代码

DataX二次开发——(1)新增HANA数据源_第1张图片

修改maven

DataX二次开发——(1)新增HANA数据源_第2张图片

4、Datax eigenbase:eigenbase-properties:pom:1.1.4 was not found in http://maven.aliyun.com/nexus/content/groups/public/ during a previous attempt.

链接: https://pan.baidu.com/s/1EmwnU7JbEql54r-1XZHVuQ 提取码: 7s06 

把下载好的放到对应的maven的仓库,MAVEN_HOME/repository/eigenbase/eigenbase-properties/1.1.4/下,把别的文件都删了

5、编译打包

$ mvn -U clean package assembly:assembly -Dmaven.test.skip=true

6、手动下载jar包

https://repo1.maven.org/maven2/com/sap/cloud/db/jdbc/ngdbc/2.9.12/https://repo1.maven.org/maven2/com/sap/cloud/db/jdbc/ngdbc/2.9.12/

7、将jar包添加到rdbmreader和rdbmwriter的libs目录下

DataX二次开发——(1)新增HANA数据源_第3张图片

 8、添加maven依赖

		
		
			com.sap.cloud.db.jdbc
			ngdbc
			2.9.12
			system
			${basedir}/src/main/libs/ngdbc-2.9.12.jar
		

9、修改plugin.json文件,添加驱动

DataX二次开发——(1)新增HANA数据源_第4张图片

10、重新打包

$ mvn -U clean package assembly:assembly -Dmaven.test.skip=true

11、可能会遇到的问题

1、写入模式(writeMode)配置有误

DataX二次开发——(1)新增HANA数据源_第5张图片

 解决:查看源码,可知rdbms的writeMode仅支持insert,所以不用填,填了反而会报错

DataX二次开发——(1)新增HANA数据源_第6张图片

 2、没找到对应驱动jar包

到编译打包好的datax目录下/plugin/reader/rdbmsreader/libs 和 /plugin/reader/rdbmswriter/libs 下面看一下是否拥有我们添加的jar包

DataX二次开发——(1)新增HANA数据源_第7张图片

 解决:clean之后重新打包

你可能感兴趣的:(大数据,datax)