V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
dropdatabase
V2EX  ›  数据库

Elasticsearch 数据如何实时同步/迁移到 MySQL 或 MongoDB

  •  
  •   dropdatabase · 2024-07-30 17:39:20 +08:00 · 2223 次点击
    这是一个创建于 400 天前的主题,其中的信息可能已经有所发展或是发生改变。

    请教大佬们。es 数据如何迁移至 mysql/mongodb 中?最好是实时的。 你们用的什么方案?

    13 条回复    2024-08-05 10:41:30 +08:00
    traviszhou
        1
    traviszhou  
       2024-07-30 20:56:46 +08:00 via Android
    怎么往回迁🤔
    bootvue
        2
    bootvue  
       2024-07-30 21:09:28 +08:00
    https://www.clougence.com/?src=cc-doc

    datax

    各种云的数据同步
    julyclyde
        3
    julyclyde  
       2024-07-30 21:10:14 +08:00
    mysql 的话,你没有 primary key 吧?
    感觉迁移到 mongodb 似乎正合适?反正 es 和 mongodb 都是 json
    bootvue
        4
    bootvue  
       2024-07-30 21:12:04 +08:00
    @bootvue #2 不大行 自己写代码同步吧
    lindt99cocoa
        5
    lindt99cocoa  
       2024-07-30 22:11:18 +08:00
    我们一般是反过来,TP 向 AP 同步数据,就是 MySQL/MongoDB 同步到 ES
    dobelee
        6
    dobelee  
       2024-07-30 22:51:43 +08:00
    把不可靠的数据往可靠的地方迁?
    Jackeriss
        7
    Jackeriss  
       2024-07-31 07:19:49 +08:00 via iPhone
    没有这种场景,肯定先写入数据库再同步 es
    chinaguaiu
        8
    chinaguaiu  
       2024-07-31 12:00:35 +08:00
    es->mysql 是有这种需求场景的,加入中间件来完成。但是不知道你说的实时需求是怎样,能展开说说实际的应用场景吗?
    dropdatabase
        9
    dropdatabase  
    OP
       2024-07-31 12:14:11 +08:00
    @chinaguaiu metabase 想接入 es ,发现不支持。所以,想着转换一下。
    purensong
        10
    purensong  
       2024-07-31 13:50:38 +08:00
    还不如研究让 metabase 接入 es ,不是开源的吗
    encro
        11
    encro  
       2024-08-01 16:25:24 +08:00
    一般是从关系型数据库到搜索引擎。
    lingalonely
        12
    lingalonely  
       2024-08-03 15:07:41 +08:00
    你原始数据在 es ,为啥会有从 es 到 mysql 的需求,metabase 直接接 原始数据不就行了
    dropdatabase
        13
    dropdatabase  
    OP
       2024-08-05 10:41:30 +08:00
    @lingalonely 不支持 es....
    关于   ·   帮助文档   ·   自助推广系统   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   5991 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 28ms · UTC 02:23 · PVG 10:23 · LAX 19:23 · JFK 22:23
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.