数据同步大家都有什么方法？

[humbass]

1 台主服务器 有用户数据，可能有用户信息的增删改 N 台从服务器 同步主服务器用户最新的数据

数据库不一定是 mysql ，也可能是 mongodb, 如果有第三方的机制更好，请教各位有没有简单易操作的方法？

[lmshl]

mysql 有 binlog
postgres 有 WAL
mongodb 直接提供了官方 connector https://www.mongodb.com/docs/kafka-connector/current/sink-connector/fundamentals/change-data-capture/
cassandra 也是 https://cassandra.apache.org/doc/latest/cassandra/operating/cdc.html

路已经指明了

[jabari]

cdc(change data capture)

[daoqiongsi1101]

不同的数据源可以把数据变更同步到 kafka 的 topic ，其他服务器订阅 topic

[humbass]

@jabari 这个比较容易理解，正在看阿里云的 rocketMQ

[humbass]

@daoqiongsi1101 正在看阿里云的 队列服务，感谢！

[Jemini]

冷门的 kafka connect

[brader]

可以看下这个中间件适合不适合你用 https://github.com/brokercap/Bifrost

[humbass]

@brader 页面介绍做的相当酷！

[tyrantlucifer]

Apache SeaTunnel 或者 DataX

[frank1256]

dataX

[HappyXiaoxin]

kettle

[gabriel_zhen]

简单的 国内有个 restcloud 社区版 是类似 kettle 的工具 ，图形化界面 ，好像有同步组件 同步是 sql 级别的 不是日志级的 数据量小的可以用用