4 款 MySQL Binlog 日志处理工具对比
Java后端编程
共 1696字,需浏览 4分钟
·
2022-05-13 03:18
Canal
原理:
canal模拟mysql slave的交互协议,伪装自己为mysql slave,向mysql master发送dump协议 mysql master收到dump请求,开始推送binary log给slave(也就是canal) canal解析binary log对象(原始为byte流)
Connection获取上一次解析成功的位置(如果第一次启动,则获取初始制定的位置或者是当前数据库的binlog位点) Connection建立连接,发生BINLOG_DUMP命令 Mysql开始推送Binary Log 接收到的Binary Log通过Binlog parser进行协议解析,补充一些特定信息 传递给EventSink模块进行数据存储,是一个阻塞操作,直到存储成功 存储成功后,定时记录Binary Log位置
数据过滤:支持通配符的过滤模式,表名,字段内容等 数据路由/分发:解决1:n (1个parser对应多个store的模式) 数据归并:解决n:1 (多个parser对应1个store) 数据加工:在进入store之前进行额外的处理,比如join
Maxwell
Databus
源与消费者之间的隔离 保证按顺序和至少一次交付具有高可用性 从更改流中的任意时间点开始消耗,包括整个数据的完全引导功能。 分区消费 源一致性保存
阿里云的数据传输服务DTS
优势
原文:https://blog.csdn.net/weixin_38071106/article/details/88547660
资料分享
其实B站已经要非常多资料,但是还是有些小伙伴找不到,资料多了也眼花缭乱,小编找了一批某机构4个月付费培训教程:视频、代码、课件、软件,统统都有,很适合新手学习 。
如何获取?
1. 识别并关注下方公众号,建议复制关键字;
2. 在下面公众号后台回复关键字「666」。👆长按上方二维码 2 秒 回复「666」即可获取资料
❤️给个「在看」,是对我最大的支持❤️
评论