84669인 학습
152542인 학습
20005인 학습
5487인 학습
7821인 학습
359900인 학습
3350인 학습
180660인 학습
48569인 학습
18603인 학습
40936인 학습
1549인 학습
1183인 학습
32909인 학습
如题，使用requests访问，昨天写代码的时候两个多小时一直在访问豆瓣主页，没有什么问题，今天用相同的程序就变成了403forbidden，chrome、edge访问网址也变成了403forbidden..不知是什么原因..
拥有18年软件开发和IT教学经验。曾任多家上市公司技术总监、架构师、项目经理、高级软件工程师等职务。 网络人气名人讲师，...
学习爬虫抓豆瓣还是不错的，如果要应用，请用人家的开放平台吧http://developers.douban.com/
抓的太狠，被豆瓣封了啊~
人家费多大劲搞点 UGC 岂容你随便抓取？可以用高匿代理 IP 抓，我们之前抓过淘宝的数据，也是抓几次以后就禁止了，后来用代理完美解决，对方完全禁止不了。
豆瓣是通过cookies限制抓取频率的, 分析下cookies, 是可以伪造的. 上个月两小时抓了107万个页面.
![[웹 프런트엔드] Node.js 빠른 시작](https://img.php.cn/upload/course/000/000/067/662b5d34ba7c0227.png)
学习爬虫抓豆瓣还是不错的，如果要应用，请用人家的开放平台吧http://developers.douban.com/
抓的太狠，被豆瓣封了啊~
人家费多大劲搞点 UGC 岂容你随便抓取？
可以用高匿代理 IP 抓，我们之前抓过淘宝的数据，也是抓几次以后就禁止了，后来用代理完美解决，对方完全禁止不了。
豆瓣是通过cookies限制抓取频率的, 分析下cookies, 是可以伪造的. 上个月两小时抓了107万个页面.