Bifrost
Bifrost copied to clipboard
Bifrost ---- 面向生产环境的 MySQL,MariaDB,kafka 同步到Redis,MongoDB,ClickHouse,StarRocks,Doris,Kafka等服务的异构中间件
**不支持视图同步是么?**
**Version:** - Bifrost Version: [e.g. v1.6.0-beta.03] - Os Version: [e.g. CentOS Linux release 7.7.1908] - Browse: [e.g. Chrome] **Describe the bug** A clear and concise description of what the bug...
**Version:** - Bifrost Version: 1.8.3 - MySQL:5.7.25 和 8.0.25 - ClickHouse:22.6.2.12 和 22.6.3.35 **全量和增量出现的问题:** 1)MySQL字段timestamp(x)或者datetime(x), x>=3,ClickHouse字段类型为DateTime64(x),ClickHouse值比MySQL快8小时;时区都是东八区,Bf同步工具部署在了ClickHouse服务器上 2)MySQL字段timestamp或者datetime,也就是x=0,ClickHouse字段类型为DateTime,数据一致;时区都是东八区,Bf同步工具部署在了ClickHouse服务器上 3)当MySQL字段类型为timestamp(x)或者datetime(x) x>=3,ClickHouse字段类型为String,数据一致;时区都是东八区,Bf同步工具部署在了ClickHouse服务器上 4)当把ClickHouse时区调整为格林尼治,MySQL保持东八区,数据一致,Bf同步工具部署在了ClickHouse服务器上
可能因为网络抖动或者网络拥塞导致,mysql端发送数据包至bifrost时中断,但是bifrost端没感知。 mysql端报错为: 2022-05-26T01:11:21.005275+08:00 872213 [Note] Stop asynchronous binlog_dump to slave (server_id: 279) 2022-05-26T01:11:21.005483+08:00 872213 [Note] Aborted connection 872213 to db: 'xxx' user: 'root' host: '10.6.53.209' (failed on flush_net()) bifrost端报错为: This.mysqlConn...
在线体验无法登录账号
备份文件版本问题
v1.7.6版本的备份文件使用到v1.8.3的版本 提示Get Plugin:clickhouse ToServerKey:xxx err,return nil
**Version:** - Bifrost Version: [ Bifrost v1.8.3-release amd64] **Describe the bug** MySQL 同步到clickhouse 当修改json类型字段数据时触发以下报错,从而导致binlog无法继续解析,数据同步从而中断 错误信息如下 ```text lastField schemaName:teamones_saas tableName:project_template columnName:module_field_config Unknown FieldType 245 err:Json type 90 is not handled 2022/05/23...
版本:v1.8.3-release RabbitMQ消息:{"Timestamp":1652253197,"EventType":"commit","Rows":null,"Query":"COMMIT","SchemaName":"product","TableName":"tttt_craft","BinlogFileNum":34,"BinlogPosition":152525746,"Gtid":"00000000-0000-0000-0000-000000000000:1-0","Pri":null,"EventID":4729,"ColumnMapping":null}
Version: - Bifrost Version: [v1.8.1-release] - Os Version: [CentOS Linux release 7.7.1908] - Browse: [Chrome] 描述: 一个基础库base, 里面有很多元数据, 一个业务库biz, biz库里有部分表关联了base库的表 关联关系1:1,现在想如果base库的某个表A的字段发生了变化 能够同步到业务库的关联表AA冗余的那些字段, 能做到吗?还是需要插件支持? 就是监听base库某个表A的a,b,c字段 标明a为主键,一旦发生了修改,同步到biz库关联A的AA表的a,b,c. A.a 和 AA.a的字段名可能不同,但是冗余字段的名称和类型都相同。相当于执行了 update AA...
**Version:** - Bifrost Version: 1.7.4 - Os Version: CentOS 8 部署了一套mysql 到clickhouse的同步, 有一个更新很较为频繁的表, 大概一秒钟5次左右的update或者insert 从文档上来看, 应该是每5s会同步一次, 但是这个表每次要3分钟左右才会同步(batchSize设置是1000, 估计是要满足1000条才会更新) 现在只能是设置batchSize为50勉强使用... 请问有解决办法吗?