1
qixiangyangrm 2019-11-22 17:33:03 +08:00
可以试试 sqlalchemy
反射表结构,然后把数据转成 dict 插入。 |
2
wuwukai007 OP 想了下还是用多线程读条件 sql,用 pandas 读,然后序列化成 pkl 文件,然后压缩,在让另一个服务器下载,在多线程写,现在脚本写的差不多了,就是想要不要上 nginx,可以不用写文件下载的逻辑,毕竟有的表几千万压缩后还是不小的,自己写还要写流式下载,不如直接交给 nginx
|
3
wuwukai007 OP ```python
import os def test(): os.listdir() ``` |
4
EurekaSeven 2019-11-30 18:12:18 +08:00 via Android
这让我想起了做外包的时候接的单子,老板接的 SQL Server 迁移,拿过来发现,两边的表数量不一致,这就算了,后来我还发现表结构都不一致……
|