WarlockMan

这类问题已经有结论了。腾讯不会管，但是腾讯会明确告知你这样是禁止的。但不会管你。

他们要的效果是把所有人先划分到违法的范围内，然后他想不想执行，看他的心情。

他们要的是由此诞生的权力

他们要的效果是让人生来就有罪，然后随时可以拿捏审判你，

https://www.v2ex.com/t/1115105

@wyntalgeer

是这个理，官方现在公布的检测项有 鼠标轨迹，页面停留时间，
还有很多检测项没有公布，
得去不停地猜测，尝试，验证。
https 指纹，官方没提，但你去试，就会发现果然有。
你把每一个检查项考虑进去，做针对性处理，
你也能设计出一套能过它防御的系统。
但是
斗着斗着，几年就这样过去了，不值得。
一个月几百块咱跟它玩什么命呀
有这精力功夫，拿来做点正事比这好

@wyntalgeer

MCP 这种本质还是无头浏览器路线，不说无头浏览器了，就是真实浏览器里用油猴脚本，
他们引入了 AI 对用户行为进行分析，发现有一点 不是正常人 的特征，直接这个 ip 就封了


主要是啥，主要是，说实话，以前爬虫好做，是因为业界没有人设计出一套真正像样的反爬方案，
没有那种极端主义，就是把反爬系统往魔怔的程度做的这种公司，
因为人们怕设计出那样的，没有公司敢用，因为怕影响正常用户。
小公司没底气做。

所有你能爬的，都是人家没发力没去真正防御的。
真要认真起来，你受不了的。

现在的情况是啥，现在的情况是，真有这样的疯子一样的买家，
你敢设计出来，人家就敢用，而且压根不在乎什么用户体验，
普通用户用起来不舒服，那就憋着，就这样的态度。
就是要把反爬往死里做，往魔怔里做，
就是这样的态度喂出来 datadom 这样的反爬明星公司。

爱马仕欧洲官网，中国这边爬虫太猛，人家直接把 ip 限制在只能欧洲 ip 访问，
美国 ip ，亚太 ip ，统统不要了。人家直接不要了。
他们本身也在故意限制和垄断商品出货渠道，人为制造利出一孔的局面，不想让我们老板这样的代购来粉蛋糕。

普通公司敢这么玩么，人家爱马仕就是敢这样，很魔怔。

好，那你去租欧洲 ip ，ip 这一层过了，
还有 N 多层防御等着你，行为检测，频率检测，浏览器特征检测，https 指纹，
一切你能想到的维度，每一层，人家都往魔怔化的程度做，往令人发指的程度去做，
像个杠杆一样，人家稍微一发力，你这边就得跟进十倍的资源，研究半天。
人家有钱，有人，有资本，有客户，有买家，一边跟你斗，一边还拿高额工资，
所有你能想到的突破点，等你去试，你发现对面拿出了十倍百倍的资源等着你跟你斗

现在就是这么个情况。爬虫永远有生存空间，因为不是所有公司都愿意这样搞，
但世界会朝着这个方向进步，就像你今天用电脑不用担心像上个世纪动不动就中病毒木马一样。

爬虫没有黑科技，反而是反爬这边因为有钱有资本借助人工智能不断升级，datadom 反爬公司现在客户越来越多

@coolair

这么拉跨么，小众品牌竟然还店大欺客，那我继续用百度网盘好了

都对抗到浏览器指纹级别了，实际上不用再继续了。
爬虫这边优势不对等，
我自己采集那些奢侈品官网，爱马仕用的 datadome 公司的反爬系统，
他们把人工智能引进来，
越来越难采集，现在 datadome 都融资几个亿了，华尔街日报都是它的客户。
他们官网代码都懒得加密和混淆，直接在更底层的 ip ，行为 上做防御，
根本采不动。
以后这样的公司会越来越多，爬虫活动的范围越来越小，注定要没落。

写文章批判他

谢谢大佬们告知，大概就是只能做，不能问，问就是不行。
我翻找着类似的问题，从一些楼层里大概找到了原因：
https://www.v2ex.com/t/653462
https://www.v2ex.com/t/769622

我们搞技术的一般心思比较单纯，
我还寻思着认真读文件条例呢，
被社会狠狠上了一课，这可真是，我也不知道该咋说了

备份是一种策略，根据场景的不同，制定的策略也不同。
而且备份是综合多种方法的立体化策略甚至是一个系统，
包括自动化的抽样检查，成本最低化校验检查，
利用科学的方式，尽早发现异常，
对数据异常的监控，发现和捕捉，是备份工程师的任务之一，
用有限的方法，去察觉无穷的风险可能，
不是弄个无脑自动拷贝的设备就完了