用 python 爬取 什么值得买网站 返回 403，爬其他网站的时候返回 200，这个是怎么回事？
yangguang31466 · 2015-04-20 17:28:52 +08:00 · 4145 次点击这是一个创建于 3506 天前的主题，其中的信息可能已经有所发展或是发生改变。
代码请求头里面加了user-agent,请求其他网站没有问题！
 |
1
yangguang31466 OP 被服务器拒绝了，怎么才能解决这个问题？
|
 |
2
NewYear 2015-04-20 18:04:49 +08:00
这个站长好像也是V2的人……
|
 |
3
Tink 2015-04-20 18:08:05 +08:00 via iPhone
从rss试试
|
 |
4
learnshare 2015-04-20 18:10:34 +08:00
防爬虫做的不错
|
 |
5
wibile 2015-04-20 19:07:30 +08:00
可以啊，试了试没问题的，加上cookie就行了。另外好像都是奇数的帖子，如667459，667409，667387
|
 |
6
jas0ndyq 2015-04-20 19:27:37 +08:00 via iPhone
没伪装成浏览器？
|
 |
7
binux 2015-04-20 19:33:37 +08:00
现在张大妈的反爬虫做得不错，用了一个和 IP 相关的，需要执行 JS 生成的 cookie 来验证。
|
 |
8
kchum 2015-04-20 20:16:59 +08:00 via iPhone
Selenium.
|
|
9
yangguang31466 OP 加上cookie后就可以了！
|
Select Language