V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
alwayshere
V2EX  ›  程序员

服务器访问任何套了 cloudflare 的站点都显示 403 Forbidden,怎么办?

  •  
  •   alwayshere · 2018-10-18 12:06:51 +08:00 · 7796 次点击
    这是一个创建于 2227 天前的主题,其中的信息可能已经有所发展或是发生改变。

    这两天服务器端尝试写了个爬虫练练手,结果今上午突然抓取任何套了 CF 的站点都给我返回 403 Forbidden, 加了各种各样的 header 都 403 错误,没套 CF 的站点就抓取正常,这是怎么回事?

    第 1 条附言  ·  2018-10-18 14:45:05 +08:00
    我在服务器上抓取我架设在这台机器上的网站都 403 了。。。(╯‵□′)╯︵┻━┻
    13 条回复    2018-10-18 22:38:13 +08:00
    PHPer233
        1
    PHPer233  
       2018-10-18 12:16:25 +08:00 via iPhone
    cloudflare 有防御策略,你的 IP 地址已经被封了。
    stabc
        2
    stabc  
       2018-10-18 12:21:22 +08:00
    登录 Cloudflare,Firewall -> rate limiting,然后你根据免费版的策略做应对就好了,大部分人用的还是免费版。
    mytsing520
        3
    mytsing520  
       2018-10-18 12:21:32 +08:00
    Your IP address was blocked by CloudFlare.
    alwayshere
        4
    alwayshere  
    OP
       2018-10-18 12:23:32 +08:00
    @PHPer233
    @mytsing520 即使我的服务器 ip 被 A 网站列为黑名单,cloudflare 也不至于禁止我访问其他 BCDEFG 网站吧???
    mytsing520
        5
    mytsing520  
       2018-10-18 12:25:38 +08:00
    @alwayshere 对于爬虫或扫描器,CF 有权全局屏蔽
    alwayshere
        6
    alwayshere  
    OP
       2018-10-18 12:28:15 +08:00
    @mytsing520 以前我写爬虫,上百个进程爬几百万个页面,也没触发 CF 的防御机制。。。
    mytsing520
        7
    mytsing520  
       2018-10-18 12:32:47 +08:00
    @alwayshere 这不是一成不变的措施
    alwayshere
        8
    alwayshere  
    OP
       2018-10-18 12:36:45 +08:00 via iPhone
    @mytsing520 那有解封时间么?
    qyxx
        9
    qyxx  
       2018-10-18 13:01:42 +08:00 via Android
    被封了,说明选择 cf 作为 cdn 的确不错 2333
    mytsing520
        10
    mytsing520  
       2018-10-18 13:45:00 +08:00
    @alwayshere 你只能发信询问 CF 了,有些 IP 是永久封
    zhkrb
        11
    zhkrb  
       2018-10-18 14:58:07 +08:00
    正好顺便问一句,有没有人碰到过绕过 cf 那个检测页面后,cookies 仍然只有__cfduid,没有 cf_clearance 的情况
    realpg
        12
    realpg  
       2018-10-18 16:24:09 +08:00
    大快人心系列
    SukkaW
        13
    SukkaW  
       2018-10-18 22:38:13 +08:00   ❤️ 1
    恭喜你的 IP 进入 Cloudflare 信誉低 IP 列表,换个新的 IP 吧。
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   3439 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 26ms · UTC 04:37 · PVG 12:37 · LAX 20:37 · JFK 23:37
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.