有人使用 debezium 增量同步过 mongodb 吗?

2021-08-13 18:11:47 +08:00
 jabari

按照这个连接: https://debezium.io/documentation/reference/connectors/mongodb.html#mongodb-performing-a-snapshot 的说明,创建一个新名字的 connector,应该会执行 snapshot,实际上并没有同步任何数据,部分日志提示

After applying the include/exclude list filters, no changes will be captured. Please check your configuration

connector 配置:

{
  "name": "mongo-material", 
  "config": {
    "connector.class": "io.debezium.connector.mongodb.MongoDbConnector", 
    "mongodb.user": "",
    "mongodb.password": "",
    "mongodb.hosts": "overseatestmongo1/10.130.84.32:10020,overseatestmongo1/10.130.84.24:10017",
    "mongodb.name": "test",   
    "MongoDB.authsource": "admin",
    "database.include.list": "db_sky",
    "collection.include.list": "db_sky.material",
    "snapshot.include.collection.list": "db_sky.material",
    "database.history.kafka.bootstrap.servers" : "kafka:9092",
    "snapshot.mode": "initial",
    "snapshot.max.threads": 2
  }
}

完整日志 https://gist.github.com/zhiyue/0230830edb9b07b520152fc30d0f42d8

796 次点击
所在节点    问与答
0 条回复

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/795650

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX