DataX 之导入MySQL数据时间戳字段不完整

问题描述

场景:hdfs上的csv文件的日期格式:2022-10-11T21:29:57.000+08:00,导入到mysql 里面变成了 2022-10-11 00:00:00,期望格式:2022-10-11 21:29:57。

  1. csv字段格式
    在这里插入图片描述
  2. dataX reader -json:
"reader": {
"name": "hdfsreader",
"parameter": {
"path": "/mysqldata/type_list/*",
"defaultFS": "hdfs://192.168.xx:8020",
	"column": [
	{
	"index": 0,
	"type": "Long"
	},
	{
	"index": 1,
	"type": "String"
	},
	{
	"index": 2,
	"type": "String"
	}
	],
"fileType": "csv",
"encoding": "UTF-8",
"fieldDelimiter": ",",
"skipHeader": "true"
}
}

原因分析:

dataX 的reader 不支持timestamp类型,需要自己处理数据


解决方案:

create_time 处理成 2022/10/11 21:29:57 这样。然后使用String即可准确导入MySQL

你可能感兴趣的:(DataX,mysql,数据库)