canal_mysql_nosql_sync
canal_mysql_nosql_sync copied to clipboard
liukelin
基于canal 的 mysql 与 redis/memcached/mongodb 的 nosql 数据实时同步方案 案例 demo canal client
然后提2点建议，看脚本是不是可以优化下。 1、历时数据同步。。。（标题说的那样） 2、如果mongo没有库dbs、表collections的情况下，是否可以自动创建呢？
######写入redis ###### #持久化自行设置 RDB/AOF redis.host = 127.0.0.1 redis.port = 5672 redis.user = redis.pass = redis.queuename = canal_binlog_data
> 3.为了避免多进程对MQ消费速度的时序先后不可控，建议binlog数据只作为触发条件（使用id从mysql获取最新数据）作为数据使用，而不作为具体数据使用。 ### # 不太清楚是什么意思。
估计项目应该用在有米和酷狗了，是否发生过缓存故障的问题，根据以往经验，redis还是会偶尔出现超时，获取不到数据等问题，而且这样子是否也存在存储浪费的问题
我看到这里写到，3.MQ对解析后binlog增量数据的推送，请问如果mysql所在的服务器断电重启了（假设redis这边也断电重启了），重启后会一次性把所有的binlog数据重新推送吗？
