V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX 提问指南
preoge
V2EX  ›  问与答

对两千个网址进行抓包,有什么高效的方法吗?求指点

  •  
  •   preoge · 2023-07-26 13:59:29 +08:00 · 1130 次点击
    这是一个创建于 515 天前的主题,其中的信息可能已经有所发展或是发生改变。
    7 条回复    2023-07-26 17:59:33 +08:00
    fu4k
        1
    fu4k  
       2023-07-26 14:01:32 +08:00
    高并发抓啊
    preoge
        2
    preoge  
    OP
       2023-07-26 14:02:16 +08:00
    不太熟悉这个,大二,大创的任务
    x77
        3
    x77  
       2023-07-26 14:23:44 +08:00
    Wireshark 抓网卡,不管两千个还是两万个都一样,反正都要走网卡,不过需要具备专业的网络方面的知识才能用起来
    X21541
        4
    X21541  
       2023-07-26 14:56:21 +08:00
    对两千个网址抓包,这是普通人需要干的事情吗?
    jazzg62
        5
    jazzg62  
       2023-07-26 15:15:02 +08:00
    两千个不算多吧,直接硬抓就可以
    jazzg62
        6
    jazzg62  
       2023-07-26 15:17:42 +08:00
    爬虫一般会用多线程配合 ip 代理池来抓。
    多线程可以提高效率,代理池防反爬
    kpingdd
        7
    kpingdd  
       2023-07-26 17:59:33 +08:00
    200 外包出去[doge]
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   3669 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 22ms · UTC 04:33 · PVG 12:33 · LAX 20:33 · JFK 23:33
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.