curl爬取页面出现invalid host是什么原因?

原创
2016-06-06 20:24:28 1242浏览

我们学校教务处的网站jw.dhu.edu.cn/dhu/login_wz.jsp这个地址通过curl爬取时,返回INVALID HOST,目前测试的其他网站都可以正常爬取,是什么原因?我怀疑是学校网站禁止了访问请求?
另,在阿里云上出现同样错误,应该不是新浪云的问题。

回复内容:

我们学校教务处的网站jw.dhu.edu.cn/dhu/login_wz.jsp这个地址通过curl爬取时,返回INVALID HOST,目前测试的其他网站都可以正常爬取,是什么原因?我怀疑是学校网站禁止了访问请求?
另,在阿里云上出现同样错误,应该不是新浪云的问题。

无效主机名,域名解析有问题。

这个地址可能是配在dns上面的,只能你们校园网内部访问,在外网和sinaapp上面访问不了。

测试了很多次,学校网站也可以正常访问,是不是被反爬虫了?

用户名或密码不能为空!

声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn核实处理。