V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
Msxx
V2EX  ›  程序员

有什么能爬视频网站作者信息的工具么?

  •  
  •   Msxx · 2023-05-25 10:19:34 +08:00 · 1662 次点击
    这是一个创建于 548 天前的主题,其中的信息可能已经有所发展或是发生改变。
    需求大概是这样的:根据关键词爬取发过相关信息的创作者,再爬取这些创作者近 x 条视频的播放量。

    生成的记录格式是:创作者名称|主页地址|关键词|近 10 条视频总播放量|近 1 播放量|地址|近 2 播放量|地址|……

    支持 B 站和抖音。这玩意儿实现难度大么,如果世面没成熟的,写一套也可以,麻烦留意下联系方式。
    3 条回复    2023-05-25 14:29:52 +08:00
    LuoJunJunJun
        1
    LuoJunJunJun  
       2023-05-25 10:32:40 +08:00
    现在抖音除本人外查不到播放量,其他的数据没什么问题。难度上,以抖音为例,大概涉及的内容有:1 、过抖音滑块生成能批量注册 s_v_web_id ,2 、抖音的接口加密算法 X-Bogus ,3 、需要 IP 代理。有需求联系张小龙:bWVpcWlhbmxlLQ==
    fengci
        2
    fengci  
       2023-05-25 11:29:13 +08:00
    抖音可以试试这个,把它关键代码拿出来写自己业务
    https://github.com/Evil0ctal/Douyin_TikTok_Download_API
    polarbearn
        3
    polarbearn  
       2023-05-25 14:29:52 +08:00   ❤️ 1
    一个可视化爬虫软件
    https://github.com/NaiboWang/EasySpider
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   959 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 26ms · UTC 21:01 · PVG 05:01 · LAX 13:01 · JFK 16:01
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.