大文件排序问题

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

• 请不要在回答技术问题时复制粘贴 AI 生成的内容

这是一个创建于 2561 天前的主题，其中的信息可能已经有所发展或是发生改变。

现在有一个文本，包括 5000W 行，每行由拼音+ID 组成，现在要求按照拼音字母的顺序把这个文件进行重新排序。
V 友们有什么想法呢？支个招~

5 条回复 • 2017-12-19 10:30:50 +08:00

owenliang

2017-12-18 20:44:36 +08:00 via Android

外排序呗还能咋地

BBCCBB

2017-12-18 20:58:20 +08:00

读出来，放 redis 里，用 redis 排序，

kaiser1992

2017-12-19 09:38:23 +08:00

@owenliang 字符串排序，略显慢啊

gouchaoer

2017-12-19 10:22:03 +08:00

插入数据库，加上索引，然后通过 a~z 的顺序 select 出来

gouchaoer

2017-12-19 10:30:50 +08:00

导入 hive，然后 select 出来