问答 / 0 / 11 / 创建于 3年前
今天爬取一个网站动不动就安全验证,只能停止并发,有做过爬虫的老铁吗?代理并发怎么做?代理池从哪来啊?
这么大的广告看不到? :see_no_evil:
人家都防止CC了,你还在爬!有用吗!哈哈
我也有在爬某度,爬收录页面数量,需要带 Cookies,有限制频率,所以我每三天爬一次。代理 IP 有点贵。国内的还只能代理国内的 IP。
代理的很多ip 都有识别,不停拨号那种人家一个 ip 段都封了,我现在用云函数还行
用国外ip的话,我之前用过tor,可以参考下
我要举报该,理由是:
推荐文章: