SF
马蜂窝技术
马蜂窝技术
注册登录
关注博客
注册登录
主页
关于
RSS
基于 MySQL Binlog 的 Elasticsearch 数据同步实践
马蜂窝技术
2019-07-15
阅读 5 分钟
3.6k
对于数据同步,我们目前的解决方案是建立数据中间表。把需要检索的业务数据,统一放到一张MySQL 表中,这张中间表对应了业务需要的 Elasticsearch 索引,每一列对应索引中的一个Mapping 字段。通过脚本以 Crontab 的方式,读取 MySQL 中间表中 UTime 大于上一次读取时间的所有数据,即该段时间内的增量,写入Elasticsear...