[爬虫] 服务器一般验证什么？ Referer 会验吗？

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

V2EX 提问指南

这是一个创建于 2703 天前的主题，其中的信息可能已经有所发展或是发生改变。

新手请教一下前辈们，服务器一般都会验证 Request Header 的哪几项参数？ Cookies 很多都是会要的，Referer 会验证吗？

2 条回复 • 2017-07-01 20:23:09 +08:00

msg7086

2017-07-01 02:24:09 +08:00

一般都不验证。

mwVYYA6

2017-07-01 20:23:09 +08:00

以前爬多玩的时候，有 Referer 验证。不过一般你直接粘贴浏览器发起的请求，再注意下爬的频率就好了