DataX icon indicating copy to clipboard operation
DataX copied to clipboard
verified publisher icon alibaba

datax如何集群化部署？

Open TracyMcgrady256 opened this issue 3 years ago • 2 comments

目前官网只有quickstart，里面都是单机部署的例子，是否有集群化部署的示例？

TracyMcgrady256 avatar Nov 23 '22 03:11 TracyMcgrady256

官方是单机的，集群我所知

  1. datax-web，基于xxljob，我理解是前面放个代理，管理多个worker，按负载分发到worker，我没有深入了解，不知道怎么做failover和大数据量分片的，知道的可以补充一下；
  2. 这个是我们公司的方案，源于elastic-job打造的分布式调度 https://www.toutiao.com/article/7166086687578243598/

leehom avatar Nov 28 '22 01:11 leehom

2. https://www.toutiao.com/article/7166086687578243598/

谢谢，我先学习下~

TracyMcgrady256 avatar Dec 02 '22 02:12 TracyMcgrady256