84669 orang belajar
152542 orang belajar
20005 orang belajar
5487 orang belajar
7821 orang belajar
359900 orang belajar
3350 orang belajar
180660 orang belajar
48569 orang belajar
18603 orang belajar
40936 orang belajar
1549 orang belajar
1183 orang belajar
32909 orang belajar
在抓取360问答的时候,前面抓取得好好的,但是每次抓到大约40条的时候,就打不开了,所有的问题都打不开了,直接全部跳转到首页!我抓包了看了下,是被302了,请问下,除了换ip,还有什么比较好的方法来突破这种限制?
我设置了时间间隔,现在也不行了
ringa_lee
sleep(10)暂停一下，别爬太快~
1楼说得对，设置抓取延时
简单方案是上代理。
设置时间间距一般也不是很有用，在大规模爬取的情况下，一个IP访问数百次一般就会被跳转验证码了。
![[Web front-end] Permulaan pantas Node.js](https://img.php.cn/upload/course/000/000/067/662b5d34ba7c0227.png)
sleep(10)
暂停一下，别爬太快~
1楼说得对，设置抓取延时
简单方案是上代理。
设置时间间距一般也不是很有用，在大规模爬取的情况下，一个IP访问数百次一般就会被跳转验证码了。