MySQL-Binlog V1.2.0 发布了。
什么是MySQL-Binlog
MySQL-Binlog 连接到 MySQL 数据库,基于 Netty 框架,实时解析MySQL的二进制日志binlog而非定时查询数据库, 提取出用户级感兴趣的事件:INSERT,UPDATE,DELETE,供后续分析如事件抛到大数据系统进行分析。 目前支持的事件包括: ROTATE, FORMAT_DESCRIPTION, QUERY,TABLE_MAP, [WRITE_ROWS,EXT_WRITE_ROWS] [UPDATE_ROWS,EXT_UPDATE_ROWS] [DELETE_ROWS,EXT_DELETE_ROWS] XID
已经基于 ZooKeeper实现集群功能 + Web管理界面!
----------------------------------------------------------------------------------------------
内有详细的使用文档:
----------------------------------------------------------------------------------------------
本次更新:
1)拉取binlog对应的meta元数据在启动时做全量复制,后续按需进行增量复制。
2)增加日志对消费队列大小进行监控&消费数量监控
3)调整Netty的若干childOption.
4)修复主键为空时对应表的解析bug.