
1 台主服务器 有用户数据,可能有用户信息的增删改 N 台从服务器 同步主服务器用户最新的数据
数据库不一定是 mysql ,也可能是 mongodb, 如果有第三方的机制更好,请教各位有没有简单易操作的方法?
1 lmshl 2022-10-19 14:57:50 +08:00 mysql 有 binlog postgres 有 WAL mongodb 直接提供了官方 connector https://www.mongodb.com/docs/kafka-connector/current/sink-connector/fundamentals/change-data-capture/ cassandra 也是 https://cassandra.apache.org/doc/latest/cassandra/operating/cdc.html 路已经指明了 |
2 jabari 2022-10-19 15:00:13 +08:00 cdc(change data capture) |
3 daoqiongsi1101 2022-10-19 15:04:48 +08:00 不同的数据源可以把数据变更同步到 kafka 的 topic ,其他服务器订阅 topic |
5 humbass OP @daoqiongsi1101 正在看阿里云的 队列服务,感谢! |
6 Jemini 2022-10-19 16:19:28 +08:00 via iPhone 冷门的 kafka connect |
7 brader 2022-10-19 17:19:20 +08:00 可以看下这个中间件适合不适合你用 https://github.com/brokercap/Bifrost |
9 tyrantlucifer 2022-10-20 00:02:34 +08:00 Apache SeaTunnel 或者 DataX |
10 frank1256 2022-10-20 09:15:19 +08:00 dataX |
11 HappyXiaoxin 2022-10-20 10:38:42 +08:00 kettle |
12 gabriel_zhen 2022-10-20 14:00:40 +08:00 简单的 国内有个 restcloud 社区版 是类似 kettle 的工具 ,图形化界面 ,好像有同步组件 同步是 sql 级别的 不是日志级的 数据量小的可以用用 |
13 qbmiller 2024-09-14 15:44:27 +08:00 @gabriel_zhen 这么多年,还没开源.... |