dgivan's recent timeline updates dgivan's recent timeline updates |
dgivanV2EX member #191011, joined on 2016-09-09 10:52:36 +08:00 |
dgivan's recent replies
Apr 9, 2017 Replied to a topic by SummerSun › Python › 爬虫代理 IP 推荐 |
你可以用一些收费的代理
比如阿布云代理 站二爷代理 云代理，等等
比如阿布云代理 站二爷代理 云代理，等等
Sep 18, 2016 Replied to a topic by pc10201 › Python › 如何采集大众点评网的千万数据？它有严格的反爬虫措施 |
每一，别一天干掉一个站，慢点爬，设置下载延迟
第二，修改请求头，浏览器
第三，用高质量代理。企业建议用：阿布云代理等等
第四，禁止 Cookie
第五，分布式爬取
可以用下这个代理： http://www.abuyun.com
第二，修改请求头，浏览器
第三，用高质量代理。企业建议用：阿布云代理等等
第四，禁止 Cookie
第五，分布式爬取
可以用下这个代理： http://www.abuyun.com
Sep 18, 2016 Replied to a topic by ccbikai › 程序员 › 大家都是怎么处理爬虫代理问题的？ |
Select Language