Home Sign Up Sign In
• 请不要在回答技术问题时复制粘贴 AI 生成的内容
no996
V2EX  ›  程序员

求 mysql 数据同步 mongo 的工具或者方案

  •   
  •   no996 · Nov 23, 2022 · 3110 views
    This topic created in 1305 days ago, the information mentioned may be changed or developed.
    目前手上有个边缘的旧业务系统，mysql 和 mongo 的数据偶发不同步，经常需要手动同步一下

    想问一下，目前有什么推荐一次性脚本、工具或者轻量级方案（少写代码，少部署），可满足于上述需求的，将 mysql 的某个表或者某个字段的数据根据某个条件同步到 mongodb 的集合中去的

    如果是实时、全量同步的方案我倒是了解了好几个，但是这些都是有点重量级，因为没用 mongdo 很久了，求推荐一下，谢谢
    Supplement 1  ·  Nov 23, 2022
    看了一下，不少人推荐的方案其实都远超出我需求，我看了一下貌似 datax 是最符合的
  • MySQL
  • 同步
  • mongo
  • 方案
    15 replies  •  2022-11-24 16:53:54 +08:00
    suguo210
        1
    suguo210  
       Nov 23, 2022
    https://airbyte.com/
    fridaycatye
        2
    fridaycatye  
       Nov 23, 2022
    datax
    wzhaoyang
        3
    wzhaoyang  
       Nov 23, 2022
    阿里的 canal
    bootvue
        4
    bootvue  
       Nov 23, 2022
    datax +1
    crysislinux
        5
    crysislinux  
       Nov 23, 2022 via Android
    还没用过这类同步方案，很好奇如果中间出问题断联了一段时间还能捡起来吗
    yigedala
        6
    yigedala  
       Nov 23, 2022
    canal+1
    no996
        7
    no996  
    OP
       Nov 23, 2022
    @wzhaoyang 以前了解过 canal ，对于我这个需求来说，还是太重量级了
    no996
        8
    no996  
    OP
       Nov 23, 2022
    @fridaycatye 我看下
    QuinceyWu
        9
    QuinceyWu  
       Nov 23, 2022
    datax
    cluulzz
        10
    cluulzz  
       Nov 23, 2022
    不同步,用 trino
    F281M6Dh8DXpD1g2
        11
    F281M6Dh8DXpD1g2  
       Nov 23, 2022
    cdc 写进去呗
    wangjhsir
        12
    wangjhsir  
       Nov 23, 2022
    https://github.com/moiot/gravity
    tyrantlucifer
        13
    tyrantlucifer  
       Nov 23, 2022
    Apache SeaTunne 或者 DataX 都可以满足你的需求
    awsl2333
        14
    awsl2333  
       Nov 23, 2022
    Debezium
    winglight2016
        15
    winglight2016  
       Nov 24, 2022
    datax 不知道是 bug 还是什么情况，我们这里三个同步任务，总有两个任务的两三个表的数据会同步不过去，而且只是某一两条记录过不去，也不报错，非常的坑
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   1096 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 57ms · UTC 18:04 · PVG 02:04 · LAX 11:04 · JFK 14:04
    ♥ Do have faith in what you're doing.