1
JerryKwan 2017-08-24 09:11:25 +08:00
@adapalene amazon 的反扒机制是挺有意思的,如果有大量信息要爬取的话,不仅仅需要采用代理,还需要注意代理的使用策略
|
2
free9fw 2017-08-24 09:18:43 +08:00
要注意请求频率和速度,amazon 上有很多 ajax 的数据,可以直接拉取
|
3
huangfs 2017-08-24 09:22:15 +08:00
难道是昨天那个抓取外包的活?
|
4
cqcn1991 2017-08-24 10:18:31 +08:00 via iPhone
我是数据量很小,大概 1w 条,所以基本不需要做反爬,控制时间就好了…
|
5
nicktogo 2017-08-24 10:33:15 +08:00
我好像前年这个时候也用 ASIN 爬过美亚数据(怀念当时做的课程项目 233 ),当时是用美亚的 API,楼主可以查查看
|
9
qq12345454 2017-08-24 21:42:37 +08:00
我也想爬点数据,不过爬了不晓得怎么换钱
|