DataX icon indicating copy to clipboard operation
DataX copied to clipboard

DataX读取hdfs中包含双引号的字段数据,导致错乱报错问题

Open qzhang1906 opened this issue 5 years ago • 2 comments

hdfs中的数据字段中包含双引号,DataX读取时会将双引号之间的数据当成一个字段进行处理,配置的列分隔符不起作用,导致数据错乱报错,无法将数据从原有大数据集群迁移至MaxCompute中

qzhang1906 avatar Jul 29 '19 09:07 qzhang1906

有解决这个问题嘛,我也遇到了

JivenYi avatar May 27 '20 13:05 JivenYi

前面有人提到了,文件类型选择 csv ,然后指定 "csvReaderConfig":{ "useTextQualifier": false }

wj-100 avatar Jan 09 '23 07:01 wj-100