V2EX › knightlhs 的所有回复 › 第 6 页 / 共 16 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

1 ... 2 3 4 5 6 7 8 9 10 11 ... 16

❮

❯

2015-07-28 17:58:41 +08:00

回复了 angelface 创建的主题 › iOS › 做个小调查，关于 AutoLayout 的

当然是通过Masonry 来进行约束了
代码简洁高效

2015-07-24 12:03:47 +08:00

回复了 X-Force 创建的主题 › 问与答 › 你能知道这字符串是什么加密算法么？？？

Flash 也可以反编译的啊自己解开看看吧

2015-07-23 10:45:28 +08:00

回复了 Air_Mu 创建的主题 › 问与答 › 现在还有折腾 DIY 硬件的吗？现在买 4790K+中高端 Z97 还是等下个月的 SKYLAKE？

为啥4970K 选XEON不好么？

2015-07-22 14:29:33 +08:00

回复了 fuermosi777 创建的主题 › 问与答 › Mac 有什么软件或者快捷键能快速打开 Finder？

设定触发角啊快捷键不是万能的

2015-07-21 15:32:44 +08:00

回复了 sandideas 创建的主题 › Python › 来当个伸手党，用 python 写的爬虫，在 win 下内存占用就 70M 多，为什么放到 512m 的 vps 下没多久就被 kill 掉

@sandideas 正则的效率确实不高你需要使用一些基于DOM的解析引擎

2015-07-21 11:24:48 +08:00

回复了 sandideas 创建的主题 › Python › 来当个伸手党，用 python 写的爬虫，在 win 下内存占用就 70M 多，为什么放到 512m 的 vps 下没多久就被 kill 掉

@sandideas
速度慢的问题一般都不在采集跟解析回头你自己写一个分析下
写入这块你分离出来用一个单例实现看看采集完成的时间（不记写入时间）
我觉得你速度慢的原因可能在写入磁盘效率不高导致队列阻塞了
如果是这也原因的话换保存方式比如 mysql

2015-07-21 11:09:17 +08:00

回复了 sandideas 创建的主题 › Python › 来当个伸手党，用 python 写的爬虫，在 win 下内存占用就 70M 多，为什么放到 512m 的 vps 下没多久就被 kill 掉

@sandideas
我对python不熟悉我说一下我在go上写爬虫的思路
首先你的解析器不需要每个线程上都new一个
采集线程上只要抓取到页面的信息就OK了降低负载
采集回来的信息放进队列里面等待解析器统一处理（单例）因为这个玩意大多是单线程的
解析结果出来以后分析是否是列表还是正文
如果是列表那么返回采集队列继续抓取
如果是正文就可以保存了

一般系统开销都不在采集这块我一般可以开到 30-50个并发
解析器可以多实现几个分布式处理通过队列随机分配
这样就可以有效的降低负载
供你参考

2015-07-21 10:39:05 +08:00

回复了 greatdk 创建的主题 › 分享创造 › 使用树莓派打造一台提醒机

互联网合成我觉得不靠谱
我需要一个离线TTS引擎
如果有离线识别引擎就更好了

2015-07-20 14:13:25 +08:00

回复了 sandideas 创建的主题 › Python › 来当个伸手党，用 python 写的爬虫，在 win 下内存占用就 70M 多，为什么放到 512m 的 vps 下没多久就被 kill 掉

@sandideas
这个要看主机商的设定我这里无法粗浅的下结论
一般的中小型VPS提供商长时间占用CPU不但会kill 还会封帐号
但是也是有区分的有些专供计算类的云产品是可以长时间高负荷的只是价格比较喜人
具体你要问问你的服务商具体的要求是什么了

2015-07-20 13:49:02 +08:00

回复了 wudaown 创建的主题 › 硬件 › 网吧环境交换机

@wudaown 没搞过二手的不懂行情

2015-07-20 13:45:15 +08:00

回复了 sandideas 创建的主题 › Python › 来当个伸手党，用 python 写的爬虫，在 win 下内存占用就 70M 多，为什么放到 512m 的 vps 下没多久就被 kill 掉

@sandideas 不贴代码很难确认

从代码的角度思考
问题可能有：
1、是否有内存泄露
2、CPU突发峰值是否超标
3、内存突发峰值是否超标

从服务器的角度考虑
问题可能有：
1、服务器参数是否虚标是否超售特别是 OVZ的类型内存严重不足
2、CPU是否被严格限制在一定的指标

其他暂时还没想到

2015-07-20 13:39:55 +08:00

回复了 wudaown 创建的主题 › 硬件 › 网吧环境交换机

@wudaown
你找找 SFP+ 万兆模块 + 10G光纤端口x2 的设备
搞过Cisco了但是价格喜人
便宜货搞过 mikrotik 但是配置环境跟你列的有所不同
供你参考

2015-07-15 11:25:48 +08:00

回复了 colorsand 创建的主题 › 微信 › 公众号怎么实现类似“分享返利”的效果？

@uglyer 你这是“抄袭”啊…… ^_^

2015-07-15 11:06:58 +08:00

回复了 colorsand 创建的主题 › 微信 › 公众号怎么实现类似“分享返利”的效果？

生成Ticket二维码
有永久跟动态2种
扫描后会出发公众号的ticket事件让你取回绑定的信息
具体常见微信开发指南
如果看到这里都不明白
欢迎付费

2015-07-13 16:37:54 +08:00

回复了 solaro 创建的主题 › 生活 › 《程序员，请停一下脚步》

太少了写10万字可以出书了《Loser的自白》