V2EX › toureg 的所有回复 › 第 1 页 / 共 1 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

2017-08-12 23:39:35 +08:00

2. ossimport 从数据源拉取数据，直接上传到 oss，数据不落盘。
3. ossimport 迁移速度，主要跟迁移机器的网络情况有关。如果单机的网络不能有效的满足需求，ossimport 支持分布式部署，通过线性增加迁移机器，速度可以线型扩展，能满足海量数据迁移的需求。

2017-08-12 23:37:38 +08:00

1. ossimport 的 master 会根据指定条件，比如前缀，最后修改时间，去数据源 list 一下，进行一次全量扫描，获取需要迁移的文件列表。