基于MySQLBinlog实现可配置的异构数据同步

背景

随着业务的不断演进，分库分表解决了数据的存储问题，但需要做合并查询却是个很麻烦的事，尤其在微服务架构中，往往需要横跨多个服务进行数据查询。开发难度大，接口性能极速下降，由此，架构演进成为必然要求。

解决方案

数据存储由关系型数据库负责，有强事务隔离机制，保障数据不丢失、不串乱、不覆盖，实时可靠。

数据查询由 Elasticsearch 负责，分库分表的数据合并同步到 ES 索引；跨领域库表数据合并到同步 ES 索引，这样就可以高效查询。

我们可以通过订阅MySQL binlog的方式来进行数据同步。