有没有办法第一时间获得国内各大新闻网站发布的文章？（5 秒内）

[sdjl]

如题，需要监控各大新闻网站，如腾讯新闻、网易新闻等等，可能上百个。

有没有办法在这些网站发布文章的几秒内就能获得文章推送？（对方发布的所有文章）

主要是有个客户向我提出这个需求~~我也不知道可不可以，问问大家。

[Baymaxbowen]

舆情系统？

[kzfile]

不就是 rss 吗,当然,某些网站没有也可以自己配置
https://docs.rsshub.app/zh/guide/

[sdjl]

@kzfile 这个是主动推送吗？ 需要 3 秒内及时推送。

[kzfile]

@sdjl 是用户主动拉数据.如果你自建服务,缓存过期时间可以自己调,缓存已过就从对应服务获取最新的

[sdjl]

@kzfile 如果我一秒钟拉取一次，不会被对方封 IP 么？

[sdjl]

也可以购买第三方的服务哈，如果有的话。

[renmu]

@sdjl 肯定会啊

[falcon05]

这不就是爬虫吗？怕封就搞 ip 池

[sdjl]

@falcon05 爬的成本太高，就是看看有没有其他方案

[shuxhan]

@kzfile #2 rss 有延迟，秒级响应不可能做到的

[shadowyue]

你把新闻 APP 的推送通知打开，大新闻会给你推

[gechang]

秒级获取需要投入 ip 池，否则肯定被封，人家也不可能让你白嫖

[sdjl]

@shuxhan
@gechang

是的，我也是这样认为的。但是客户让我问问有没有解决方案，我来找大家帮帮忙。

[googlefans]

不怕报警吗？打击这种未经同意恶意爬取的

[wzbrbj]

TG 的新闻频道还不够你用么？

[geekyouth]

今日热榜官网，满足你的需求
https://tophub.today/

[crysislinux]

这种肯定只能一直爬。别人有更新又不会告诉你

[a1b2c3T]

@wzbrbj #15 一开始我订阅了好多新闻频道，还有 rss 也弄了好多，后来发现没啥屌用，少看点新闻 哪怕几个月半年不看对自己的生活没有一点影响==，后来就想起来去翻一翻

[luodeyitian]

正常的新闻发布没那么高的频率，哪怕财联社的电报平均也得 20 秒一个。而且你去爬别人的新闻肯定要加 ip 池的。

[YJi]

上百个平台全量数据么？ （全量肯定做不到）
还是针对特定频道，特定用户的定向监测？比如某些官媒，某些大 V 这种。

[apple]

这种级别的爬虫，属于违法范围了

[people0000future]

可以参考一下隐订阅 https://yinrss.com/?media=&keyword=

[sdjl]

@apple 法律有规定怎么爬算违法？ 怎么爬不算违法？

[apple]

这种级别的爬虫，属于违法范围了
@sdjl 你检索一下类似关键词：破坏计算机信息系统罪