首页 注册 登录
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  soulmine  ›  全部回复第 28 页 / 共 33 页
回复总数  645
1 ... 20  21  22  23  24  25  26  27  28  29 ... 33  
❮ ❯
2017-10-14 00:55:23 +08:00
回复了 soulmine 创建的主题 › 问与答 › 用 go 写爬虫碰到了 shift_jis 的编码 用了 iconv 包后 发现丢了一大半的东西 怎么解决
@bazingaterry 顺带问一句
<tr bgcolor="#FFFFFF">
<td align="center" rowspan="2"><span class="ranking">1</span></td>
<td align="center" rowspan="2"><span class="ranking">-</span></td>
<td align="center" rowspan="2"><span class="ranking"><span class="ranking_akama">●</span></span></td>
<td><span class="ranking"><a href="../../search/linkcd_chk.asp?linkcd=40802801&amp;term=w&amp;sch=ttl&amp;chart_kbn=111">TEST</a></span></td>
<td align="right" rowspan="2"><span class="ranking">118,612</span></td>
<td align="right" rowspan="2"><span class="ranking">118,612</span></td>
<td align="center" colspan="2"><span class="ranking">17/10/4</span></td>
<td align="center" rowspan="2"><span class="ranking">PC</span></td>
</tr>
这种格式的用 BS4 怎么取出每个数据
2017-10-14 00:52:02 +08:00
回复了 soulmine 创建的主题 › 问与答 › 用 go 写爬虫碰到了 shift_jis 的编码 用了 iconv 包后 发现丢了一大半的东西 怎么解决
@bazingaterry 那页面没有 JS.... 源代码结构和页面结构完全一致
2017-10-13 09:53:12 +08:00
回复了 handsome1 创建的主题 › 职场话题 › hr 让我们签了份和第三方公司的协议
@Hozzz 福利有些外包和原厂是一样的 而且还可能在一个办公室里面工作
2017-10-13 09:52:39 +08:00
回复了 handsome1 创建的主题 › 职场话题 › hr 让我们签了份和第三方公司的协议
其实只要你升职就行
2017-10-09 17:25:57 +08:00
回复了 187j3x1 创建的主题 › 分享创造 › 方便在手机 QQ 音乐听 Billboard 榜单的小工具
@187j3x1 懂了
2017-10-09 17:18:27 +08:00
回复了 187j3x1 创建的主题 › 分享创造 › 方便在手机 QQ 音乐听 Billboard 榜单的小工具
说起来 这些榜单这些 app 上面都有歌单吧 ww
2017-08-09 23:17:08 +08:00
回复了 soulmine 创建的主题 › 求职 › 求职-爬虫工程师
@mune 谢了
2017-08-09 23:16:34 +08:00
回复了 soulmine 创建的主题 › 求职 › 求职-爬虫工程师
@zxy322911 可以考虑啊 怎么联系您
2017-08-09 10:02:43 +08:00
回复了 soulmine 创建的主题 › 求职 › 求职-爬虫工程师
@cloverfisher blog 我其实原来准备当 gitbook 最后一章的，后来想想这种纯心得还是不要塞进去了 然后就丢 blog 里面去了 ww
2017-08-08 19:00:10 +08:00
回复了 soulmine 创建的主题 › 求职 › 求职-爬虫工程师
@mune 没那能力啊 www 你是 ofo 的么
2017-08-08 18:58:27 +08:00
回复了 soulmine 创建的主题 › 求职 › 求职-爬虫工程师
@jugelizi 我用的 golang 比较多 python 倒是用的不多
2017-07-31 17:32:48 +08:00
回复了 xoxo419 创建的主题 › 程序员 › 当你准备重构一个项目的时候你会做什么准备?
准备几瓶安眠药
2017-07-21 11:19:42 +08:00
回复了 2ME 创建的主题 › 程序员 › 关于应对网站反爬虫和验证码识别的问题
@2ME 那估计是看个数而不是时间的 上代理好了 www
2017-07-21 11:18:13 +08:00
回复了 dynastysea 创建的主题 › 程序员 › 想开发一个 chrome 插件实现打开论坛指定板块的帖子列表，抓取其中指定的内容，单开新的窗口展现
@dynastysea js 抓取论坛帖子链接这种情况 直接用 for each 原生并发不比 python 还要写多进程 强么
2017-07-21 11:10:01 +08:00
回复了 2ME 创建的主题 › 程序员 › 关于应对网站反爬虫和验证码识别的问题
@2ME 这个好办啊 你限个速不就行了 肯定是有阈值的 你别去摧残她网站 自然不会给你验证码了 www 追求速度就跑多进程好了 只不过你得搞代理 ip 了
2017-07-21 11:07:23 +08:00
回复了 2ME 创建的主题 › 程序员 › 关于应对网站反爬虫和验证码识别的问题
@wangxiaoer 而且这样还有个问题 你怎么区分正常情况和爬虫情况 靠 header 头么 www
2017-07-21 10:57:35 +08:00
回复了 2ME 创建的主题 › 程序员 › 关于应对网站反爬虫和验证码识别的问题
@hxndg 这基本没用吧 我用 jq 选择器不就行了 为什么我非要去爬这个链接呢 www
2017-07-21 10:55:16 +08:00
回复了 2ME 创建的主题 › 程序员 › 关于应对网站反爬虫和验证码识别的问题
@2ME 验证码还是推荐人工 各种算法都有上限值 而且程序复杂度会翻几个数量级 还有那准确率就看天了 www 如果是登陆时候需要验证码的话 可以试试带带 cookies
1 ... 20  21  22  23  24  25  26  27  28  29 ... 33  
❮ ❯
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   3432 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 22ms · UTC 10:51 · PVG 18:51 · LAX 02:51 · JFK 05:51
Developed with CodeLauncher
♥ Do have faith in what you're doing.