DataX
DataX copied to clipboard
DataX读取hdfs中包含双引号的字段数据,导致错乱报错问题
hdfs中的数据字段中包含双引号,DataX读取时会将双引号之间的数据当成一个字段进行处理,配置的列分隔符不起作用,导致数据错乱报错,无法将数据从原有大数据集群迁移至MaxCompute中
有解决这个问题嘛,我也遇到了
前面有人提到了,文件类型选择 csv ,然后指定 "csvReaderConfig":{ "useTextQualifier": false }