写爬虫这种事情真是一件体力活啊

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

这是一个创建于 2560 天前的主题，其中的信息可能已经有所发展或是发生改变。

各种奇葩的情况需要考虑。很多看起来很平常的页面，要抓下来也不容易。比如，今天就遇到某些网站，居然把 HTML 放在<script>标签中。然后又加了几个 if else 才把内容给提出来。

3 条回复 • 2017-12-08 09:26:52 +08:00

marknote

2017-11-22 15:19:03 +08:00

编程就是个体力活 :)

gamexg

2017-11-22 16:26:20 +08:00

碰到灰度测试更烦人。

lddsb

2017-12-08 09:26:52 +08:00

有爬虫就有反爬虫啊。。