V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
iblessyou
V2EX  ›  数据库

怎么对比 postgres 数据库数据变化

  •  
  •   iblessyou · 2022-08-12 09:56:48 +08:00 · 2195 次点击
    这是一个创建于 819 天前的主题,其中的信息可能已经有所发展或是发生改变。
    是这样的,想记录一下,操作了某些功能后,postgres 数据库都新增了哪些数据。
    数据量也就几十条吧,分布在几个表中,想把这些改变的数据导出。
    不知道大佬们有什么方法能实现。
    11 条回复    2022-08-15 13:51:01 +08:00
    Itoktsnhc
        1
    Itoktsnhc  
       2022-08-12 10:03:12 +08:00   ❤️ 1
    audit.audit_table
    iblessyou
        2
    iblessyou  
    OP
       2022-08-12 10:41:09 +08:00
    @Itoktsnhc 没有了解过,搜索下,是通过数据的日志功能记录的吗
    lmshl
        3
    lmshl  
       2022-08-12 11:01:47 +08:00
    write-ahead log ,按事务给你分割好了都变更了什么
    Itoktsnhc
        4
    Itoktsnhc  
       2022-08-12 11:44:32 +08:00
    @iblessyou
    我觉得是需要的是 CDC(change data capture), 可以使用类似 WAL 或者 audit_table 这类;还是类似版本管理的那种
    iblessyou
        5
    iblessyou  
    OP
       2022-08-12 11:47:14 +08:00
    @lmshl 我去了解下,因为数据量本身不大,目前用了个笨办法基本解决了:
    1 ,用工具导出所有数据 sql
    2 ,执行业务操作
    3 ,导出变动后的所有数据 sql
    4 ,使用 beyond compare 文本比较工具直接比较俩文本,里面的 sql 直接可以复制出来用🤣

    也去了解下你说的
    iblessyou
        6
    iblessyou  
    OP
       2022-08-12 11:47:57 +08:00
    @Itoktsnhc 啊哈哈 我现在用的上面那个
    dbskcnc
        7
    dbskcnc  
       2022-08-12 12:41:31 +08:00 via Android
    逻辑复制, 相当成熟的了
    dayeye2006199
        8
    dayeye2006199  
       2022-08-12 13:41:05 +08:00
    RuralHunter
        9
    RuralHunter  
       2022-08-12 16:34:58 +08:00
    触发器中记录一下
    ericFork
        10
    ericFork  
       2022-08-12 19:11:39 +08:00
    postgres ? CDC 可以用 debezium ,相当成熟
    iblessyou
        11
    iblessyou  
    OP
       2022-08-15 13:51:01 +08:00   ❤️ 1
    @ericFork 谢谢,了解了下,感觉太重了。
    我这有二十多个表,每个表数据也就最多过百。导出的数据大概只有个几十条,分布在几个表里。
    只是对这个系统不了解,不知道操作后会在哪些表里产生数据,否则都可以直接找表导出了。

    应用环境经常是新装的有这需求。
    所以目前来看,用那个笨办法算是最快了。
    其实写个小程序,遍历检查一下表可能会更简单些。
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2574 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 25ms · UTC 15:31 · PVG 23:31 · LAX 07:31 · JFK 10:31
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.