V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  cdwyd  ›  全部回复第 87 页 / 共 97 页
回复总数  1926
1 ... 83  84  85  86  87  88  89  90  91  92 ... 97  
2016-04-19 08:10:11 +08:00
回复了 cdwyd 创建的主题 Python 分享大量数据去重的方法,顺便问下 python 内存占用问题
@Gn
感谢解释了内存占用问题。是我的描述不清楚,这是个 csv 文件, md5 字段是已经存在的,用它来去重,并没有把整行的 str 放到 set ,只放了完整的 md5.
2016-04-19 08:06:39 +08:00
回复了 cdwyd 创建的主题 Python 分享大量数据去重的方法,顺便问下 python 内存占用问题
@glasslion
可能是我描述不清楚导致了误会, md5 是其中的一个字段,作为去重依据。分组的问题是我之前不清楚 x in set 是 O(1) 的,想着分组能快一些。
2016-04-19 08:05:05 +08:00
回复了 cdwyd 创建的主题 Python 分享大量数据去重的方法,顺便问下 python 内存占用问题
@binux
缓存 lines 是为了减少文件打开关闭次数,一定数量后统一写入。
不知道 in set 是 O(1) 的,感谢指出,我去试试不分组的速度。
2016-04-15 15:08:36 +08:00
回复了 cloa 创建的主题 问与答 请问台式机不关机是个坏习惯吗?
一般都是休眠
2016-04-14 11:01:08 +08:00
回复了 goodluck 创建的主题 问与答 求新浪微博爬虫怎么不被封号。。。
哪一个正常用户的 IP 会一直变来边去的,这也太明显了。
2016-04-08 15:42:01 +08:00
回复了 keboge 创建的主题 小米 红米 note3 全网通使用一个月的感受
真的不需要 root ,自带的管理功能应该就够用了
@tadtung
这么值钱,黑市怎么走
2016-04-07 12:24:56 +08:00
回复了 dongyado 创建的主题 问与答 用作服务器告警,求推荐靠谱的短信服务商
@Infernalzero
好的,去看看
2016-04-07 11:53:56 +08:00
回复了 dongyado 创建的主题 问与答 用作服务器告警,求推荐靠谱的短信服务商
@Infernalzero
有具体实现吗
2016-04-06 10:24:10 +08:00
回复了 MetaD 创建的主题 成都 最近发现成都真是个好地方,“移民”到成都怎么样?
去过几次,真心喜欢不起来。
2016-04-03 23:50:41 +08:00
回复了 garyzhang 创建的主题 职场话题 好学校和一般学校的计算机专业,找工作时有什么区别?
差别是,有些学校的简历可以直接参加笔试,有些学校的根本就没有机会。当然,个人足够厉害的话另说。
2016-04-03 20:57:04 +08:00
回复了 xiaoz 创建的主题 硬件 有树莓派 3 安装 centos7 的朋友吗,分区问题求教。
sd 卡不经用, sd 卡只保留了 boot 分区, root 分区放在了 U 盘上
1 ... 83  84  85  86  87  88  89  90  91  92 ... 97  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1424 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 35ms · UTC 16:48 · PVG 00:48 · LAX 09:48 · JFK 12:48
Developed with CodeLauncher
♥ Do have faith in what you're doing.