GroupF
V2EX  ›  Java

两个数据库 AB,A 每天都会有新数据,更新数据不同, B 要同步数据库 A

  •  
  •   GroupF · Jun 13, 2020 · 4468 views
    This topic created in 2349 days ago, the information mentioned may be changed or developed.
    遇到个问题没太好的思路,我总不能拿唯一标识来一个一个查找吧,应该不太好
    14 replies  •  2020-06-15 08:48:56 +08:00
    GroupF
    GroupF
    OP
    Jun 13, 2020
    1
    更新数据条数不同,我天我编辑呢
    wangyanrui
    wangyanrui
    Jun 13, 2020 via Android
    2
    😂一脸懵逼,没看到到底想干啥
    GroupF
    GroupF
    OP
    Jun 13, 2020
    3
    好,我接下来来编辑了, 就是我有两个数据库 A,B ( A,B 是数据库名字),现在 A 数据库表 table 每天会更新数据,也有可能不更新,更新的条数和时间都是随机的,
    然后 B 数据库的表 table 是和 A 数据库那个更新数据的 table 表是一样的,但是数据是先更新到 A 里面,问我应该怎样让 B 数据库表和 A 数据库表数据一致

    已知:现在能获取到 A 数据库 table 表的所有数据
    jorneyr
    jorneyr
    Jun 13, 2020
    4
    可以试试主从,A 为主,B 为从,A 变化后自动同步到 B
    hangszhang
    hangszhang
    Jun 13, 2020
    5
    MasterSlave 模式, 或者写 A 的时候发一条消息, 下游消费的时候写入 B 库
    singerll
    singerll
    Jun 13, 2020 via Android
    6
    数据库一样不一样,在不在一个网络,管理员权限在不在你手里?
    wowo243
    wowo243
    Jun 13, 2020 via Android
    7
    主从同步需要整库吧,如果只有单个表可以 etl,kettle 或者 datax 。
    jorneyr
    jorneyr
    Jun 13, 2020
    8
    如果只是一个表,可以试试 Canal
    BQsummer
    BQsummer
    Jun 14, 2020 via Android
    9
    不是代码能解决的,主从同步或者自己处理 binlog
    Jooooooooo
    Jooooooooo
    Jun 14, 2020
    10
    你要的是 databus

    同步 A 的 binlog 到 B 里
    594duck
    594duck
    Jun 14, 2020 via iPhone
    11
    ab 是什么数据库。比如 mysql 可以订阅 binglog 回放。阿里有个开源现成的。另外是增量数据可以走 etl
    btnokami
    btnokami
    Jun 14, 2020 via iPhone
    12
    整个 cdc 。。。把 A 的更新写进一个 stream 里,然后 B 从 stream 里读然后 apply 这些更新。。。如果 db 本身支持 cdc 功能就更简单了
    Takamine
    Takamine
    Jun 14, 2020
    13
    如果是 pg,直接配置主从同步流复制就好了。
    GroupF
    GroupF
    OP
    Jun 15, 2020
    14
    谢谢大家,自己提问方式还是不全啊,自己对这个问题还是不完全透彻,一个是 A oracale,B mysql,嘿嘿 接下来就交给我自己吧,你们说的我没那么熟悉,自己还是需要多多学习,谢谢
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   2051 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 35ms · UTC 15:14 · PVG 23:14 · LAX 07:14 · JFK 10:14
    ♥ Do have faith in what you're doing.