V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
meso5533
V2EX  ›  搜索引擎优化

百度蜘蛛诊断工具只抓取静态内容?

  •  
  •   meso5533 · 2019-01-03 00:14:37 +08:00 · 3541 次点击
    这是一个创建于 2151 天前的主题,其中的信息可能已经有所发展或是发生改变。
    各位大大,百度蜘蛛应该是能抓取页面动态加载的内容吧?

    可是我用官方的百度蜘蛛诊断工具测试了一下只抓到静态内容。

    是我的问题还是这个诊断工具本身比较鸡肋?
    3 条回复    2019-05-24 08:43:39 +08:00
    loading
        1
    loading  
       2019-01-03 06:53:44 +08:00 via Android
    百度就这个水平,不是不抓,是没那个本事。
    Ginson
        2
    Ginson  
       2019-01-03 08:05:46 +08:00 via Android
    一般蜘蛛抓取的时候不会执行 JS。
    只有某些特殊用处的蜘蛛才会执行,比如百度用来检查移动落地页体验规范的蜘蛛,这类蜘蛛 ua 里面会带有 render 字样
    opengps
        3
    opengps  
       2019-05-24 08:43:39 +08:00
    ajax 二次加载的抓不到
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1237 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 44ms · UTC 18:02 · PVG 02:02 · LAX 10:02 · JFK 13:02
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.