dingxiaobo

icon indicating a website link http://dxbtech.cn icon indicating an email [email protected]

icon location hangzhou.CN

Results 26 comments of dingxiaobo

Hive reader 读多分区是否支持， partition="*" 这样的配置去读多分区呢，DataWorks上的文档描述是支持的：https://help.aliyun.com/document_detail/143413.htm?spm=a2c4g.11186623.0.0.7c5a1775wFCBtb#concept-2338479

开源版本暂未加入这个功能

Hive reader 读多分区是否支持， partition="*" 这样的配置去读多分区呢，DataWorks上的文档描述是支持的：https://help.aliyun.com/document_detail/143413.htm?spm=a2c4g.11186623.0.0.7c5a1775wFCBtb#concept-2338479

> @dingxiaobo 有计划去支持这一块吗 最近无计划

datax同步mysql到doris，数据量多了一千多万

用的是主干版本自行编译的DataX吗？

使用mysqlreader读取ADS数据库的数据，发生字段获取不正确导致类型转换报错的问题。

看起来是ADS数据库和mysql driver不兼容导致的，ADS是哪家的？

datax kuduwrite 不能同步boolean类型数据

发一下异常信息？

datax kuduwrite 不能同步boolean类型数据

感谢反馈

otsstreamreader找不到相应的类

使用的是自己编译的DataX吗？

TxtFileReader 配置参数csvReaderConfig不起作用

csvReaderConfig 里 再加一条 "useCustomRecordDelimiter":true 试下 可行话帮忙反馈一下，我更新一下README

对于hive分区表同步到mysql，为啥hive中的分区字段同步过去的都是null呢？

把需要的分区分区值，配置成常量即可 例如： ```json { "name": "hdfsreader", "parameter": { "path": "/user/hive/warehouse/mytable01/pt=20230215", "defaultFS": "hdfs://xxx:port", "column": [ { "index": 0, "type": "long" }, { "index": 1, "type": "boolean" }, { "type": "string", "value":...

modify dorisWrite obtain LoadHost(streamLoad) bug

@hf200012 帮忙看下这个优化要不要merge