IP代理软件,http代理,API提取-黑洞HTTP

黑洞HTTP

您的位置: 首页 > 新闻资讯 > HTTP代理 > 正文

代理IP遇到403 Forbidden,怎么办?

发布时间:2019年04月30日 来源:互联网

  代理IP遇到403 Forbidden,怎么办?大数据时代来临,数据采集推动着数据分析,数据分析推动发展,由此网络爬虫风靡一时。但在网络爬虫运行的过程中会遇到很多问题,如爬取速度、IP被封、爬取受限等等,举个简单的荔枝,当爬取数据爬的正起劲时,突然蹦出403 Forbidden,可谓十分闹心。

代理IP遇到403 Forbidden,怎么办?

  出现问题不可避免,但我们也不要心慌不要急,关键是要找出原因,然后解决问题,比如403 Forbidden,这个错误的原因就有好几种。


  一、直接原因


  1、你的IP被列入黑名单。


  2、你在一定时间内过多地访问此网站(一般是用采集程序),被防火墙拒绝访问了。


  3、网站域名解析到了空间,但空间未绑定此域名。


  4、你的网页脚本文件在当前目录下没有执行权限。


  5、在不允许写/创建文件的目录中执行了创建/写文件操作。


  6、以http方式访问需要ssl连接的网址。


  7、浏览器不支持SSL 128时访问SSL 128的连接。


  8、在身份验证的过程中输入了错误的密码。


  9、DNS解析错误,手动更改DNS服务器地址。


  10、连接的用户过多,可以过后再试。


  11、服务器繁忙,同一IP地址发送请求过多,遭到服务器智能屏蔽。


  二、逻辑原因


  403 Forbidden是HTTP协议中的一个状态码(Status Code)。可以简单的理解为没有权限访问此站。该状态表示服务器理解了本次请求但是拒绝执行该任务,该请求不该重发给服务器。在HTTP请求的方法不是“HEAD”,并且服务器想让客户端知道为什么没有权限的情况下,服务器应该在返回的信息中描述拒绝的理由。在服务器不想提供任何反馈信息的情况下,服务器可以用404 Not Found代替403 Forbidden。


  找出了403 forbidden是由什么原因造成的,那么解决403 forbidden错误的方法就可以对症下药了。


  1、重建dns缓存


  对于一些常规的403 forbidden错误,马海祥建议大家首先要尝试的就是重建dns缓存,在运行中输入cmd,然后输入ipconfig /flushdns即可。如果不行的话,就需要在hosts文件里把主页解析一下了。


  同时,查看是否在网站虚拟目录中添加默认文档,一般默认文档为:index.html;index.asp;index.php;index.jsp;default.htm;default.asp等,如下图所示:


  403 Forbidden错误的原因和解决方法-马海祥博客


  2、修改文件夹安全属性


  用以下命令修改文件夹安全属性


  chcon -R -t httpd_user_content_t public_html/


  所用命令解析:


  ls -Z -d public_html/


  #显示文件/目录的安全语境-Z, –context


  Display security context so it fits on most displays. Displays only mode, user, group, security context and file name.-d, –directory


  list directory entries instead of contents, and do not dereference symbolic links


  chcon -R -t httpd_user_content_t public_html/


  #修改文件/目录的安全语境-R, –recursive


  change files and directories recursively-t, –type


  set type TYPE in the target security context


  3、关于apache导致的403 forbidden错误的解决办法


  打开apache的配置文件httpd.conf,找到这段代码:


  Options FollowSymLinks


  AllowOverride None


  Order deny,allow


  Deny from all


  有时候由于配置了php后,这里的“Deny from all”已经拒绝了一切连接。把该行改成“allow from all”,修改后的代码如下,问题解决。


  Options FollowSymLinks


  AllowOverride None


  Order deny,allow


  Allow from all


  之所以会出现错误,是因为大多数的国外主机在配置Apache的时候启用了mod_security,也就是开启了安全检查,如果提交的信息中包含select , % , bin等关键字,Apache就会禁止,并给出403,404,500等错误。


  4、使用优质的代理IP也是能够有效的避免遭遇403 Forbidden的重要手段,黑洞代理IP平台可以提供海量的IP资源,高效稳定,有效率高,性价比高,值得拥有。


相关文章内容简介

1 代理IP遇到403 Forbidden,怎么办?

  代理IP遇到403 Forbidden,怎么办?大数据时代来临,数据采集推动着数据分析,数据分析推动发展,由此网络爬虫风靡一时。但在网络爬虫运行的过程中会遇到很多问题,如爬取速度、IP被封、爬取受限等等,举个简单的荔枝,当爬取数据爬的正起劲时,突然蹦出403 Forbidden,可谓十分闹心。  出现问题不可避免,但我们也不要心慌不要急,关键是要找出原因,然后解决问题,比如403 Forbidden,这个错误的原因就有好几种。  一、直接原因  1、你的IP被列入黑名单。  2、你在一定时间内过多地访问此网站(一般是用采集程序),被防火墙拒绝访问了。  3、网站域名解析到了空间,但空间未绑定此域名。  4、你的网页脚本文件在当前目录下没有执行权限。  5、在不允许写/创建文件的目录中执行了创建/写文件操作。  6、以http方式访问需要ssl连接的网址。  7、浏览器不支持SSL 12 [阅读全文]

热门标签

最新标签

推荐阅读

  1. 17

    2019-05

    在网络上搜索国内IP代理软件

    在目前的网络上,更换IP是经常会出现的事情,对于更换IP来说,需要合适的软件才能更换IP。很多网民问哪有卖国内IP代理软件,其实这个问题可以在网络上去搜索。在网络上搜索国内IP代理软

  2. 01

    2019-09

    http代理服务器哪家好和http代理爬虫

    每一个经营网站的人员应该都有这样的体会,这几年的白帽SEO越来越难做了,伴随搜索引擎技术的发展,要想通过本分的操作使得网站排名靠前的话,这要花费巨大的精力财力,而且随时还有排

  3. 24

    2019-05

    代理ip都能用在哪些方面

    说到代理ip,可能对普通人来说会有一些陌生,但对一些专业搞软件或者是网络兼职的资深发烧友,代理ip对他们来说肯定就不陌生了。

  4. 26

    2019-03

    爬虫选择代理IP需要考虑什么?

    现在网络上有很多的爬虫软件和爬虫教程,但是想要选择一个好的采集工具没有那么容易。

  5. 16

    2019-07

    哪里有高匿可用的代理ip?

    在现在的网络上,购买代理IP还是很容易的,这几年随着网路的发展,网络营销的发展,IP业也迅速壮大,有各种各样的代理IP能够满足人们的各种不同需求,无论是工作使用还是生活使用,可以

  6. 15

    2019-07

    网络营销为什么要用代理IP?

    说起网络营销大家可能不太清楚,但是我们熟悉的京东淘宝天猫就是运用网络营销,再有我们常见的投票、注册、以及其他的网络项目,这些网络活动都有一个共同点就是需要在比较短的时间内