V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
爱意满满的作品展示区。
superupon
V2EX  ›  分享创造

做了一个简单的网站,抓取了各个拍卖网的信息

  •  
  •   superupon · 2016-01-12 21:02:40 +08:00 · 3033 次点击
    这是一个创建于 3267 天前的主题,其中的信息可能已经有所发展或是发生改变。
    www.aipaifang.com 1000 多个拍卖网站信息。欢迎大家指点
    11 条回复    2016-01-13 17:07:38 +08:00
    GhostEX
        1
    GhostEX  
       2016-01-12 21:26:23 +08:00
    花了多久做的啊 爬虫效率高么?
    superupon
        2
    superupon  
    OP
       2016-01-12 22:11:22 +08:00
    @GhostEX 爬虫配置网站费时间
    Xrong
        3
    Xrong  
       2016-01-12 22:22:11 +08:00
    1000 多个拍卖网站?楼主是每个网站单独分析规则?
    cphilo
        4
    cphilo  
       2016-01-12 22:34:12 +08:00
    这个是自动生成代码的吗?需要配置什么东西呢?
    foxhunt
        5
    foxhunt  
       2016-01-12 22:45:03 +08:00
    只抓标题挺省事的
    每个站只抓最新更新的内容列表,规则只做这个一就比较省事了
    但也是个力气活
    levon
        6
    levon  
       2016-01-12 23:02:09 +08:00
    li 练练手可以,但没什么价值
    hqs123
        7
    hqs123  
       2016-01-13 08:50:07 +08:00
    这个爬虫量很大把...
    superupon
        8
    superupon  
    OP
       2016-01-13 09:01:25 +08:00
    @Xrong 是的,相当于练手吧
    superupon
        9
    superupon  
    OP
       2016-01-13 09:02:17 +08:00
    @levon 恩,练手,最早用 php 写的抓取,后来改 python 了。
    yyy
        10
    yyy  
       2016-01-13 12:07:35 +08:00
    右边城市分类点了没反应
    liangxuzhai
        11
    liangxuzhai  
       2016-01-13 17:07:38 +08:00
    加个搜索功能。
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   5333 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 28ms · UTC 09:22 · PVG 17:22 · LAX 01:22 · JFK 04:22
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.