黑洞HTTP

黑洞HTTP

您的位置: 首页 > 新闻资讯 > 国内代理 > 正文

IP代理的原理

发布时间:2019年04月17日 来源:互联网

  IP代理的原理!代理类型主要取决于代理服务器端的配置。不同配置会形成不同的代理类型。

IP代理的原理

  在配置中,这三个变量 REMOTE_ADDR,HTTP_VIA,HTTP_X_FORWARDED_FOR 是决定性因素。


  1) REMOTE_ADDRREMOTE_ADDR 表示客户端的 IP,但是它的值不是由客户端提供的,而是服务器根据客户端的 IP 指定的。


  如果使用浏览器直接访问某个网站,那么网站的 web 服务器(Nginx、Apache等)就会把 REMOTE_ADDR 设为客户端的 IP 地址。如果我们给浏览器设置代理,我们访问目标网站的请求会先经过代理服务器,然后由代理服务器将请求转化到目标网站。那么网站的 web 服务器就会把 REMOTE_ADDR 设为代理服务器的 IP。


  2)X-Forwarded-For(XFF)X-Forwarded-For 是一个 HTTP 扩展头部,用来表示 HTTP 请求端真实 IP。


  当客户端使用了代理时,web 服务器就不知道客户端的真实 IP 地址。为了避免这个情况,代理服务器通常会增加一个 X-Forwarded-For 的头信息,把客户端的 IP 添加到头信息里面。


  X-Forwarded-For 请求头格式如下:X-Forwarded-For: client, proxy1, proxy2client 表示客户端的 IP 地址;proxy1 是离服务端最远的设备 IP; proxy2 是次级代理设备的 IP;


  从格式中,可以看出从 client 到 server 是可以有多层代理的。


  如果一个 HTTP 请求到达服务器之前,经过了三个代理 Proxy1、Proxy2、Proxy3,IP 分别为 IP1、IP2、IP3,用户真实 IP 为 IP0,那么按照 XFF 标准,服务端最终会收到以下信息:X-Forwarded-For: IP0, IP1, IP2Proxy3 直连服务器,它会给 XFF 追加 IP2,表示它是在帮 Proxy2 转发请求。


  列表中并没有 IP3,IP3 可以在服务端通过 Remote Address 字段获得。我们知道 HTTP 连接基于 TCP 连接,HTTP 协议中没有 IP 的概念,Remote Address 来自 TCP 连接,表示与服务端建立 TCP 连接的设备 IP,在这个例子里就是 IP3。


  3)HTTP_VIAvia 是 HTTP 协议里面的一个header,记录了一次 HTTP 请求所经过的代理和网关,经过1个代理服务器,就添加一个代理服务器的信息,经过2个就添加2个。


相关文章内容简介

1 IP代理的原理

  IP代理的原理!代理类型主要取决于代理服务器端的配置。不同配置会形成不同的代理类型。  在配置中,这三个变量 REMOTE_ADDR,HTTP_VIA,HTTP_X_FORWARDED_FOR 是决定性因素。  1) REMOTE_ADDRREMOTE_ADDR 表示客户端的 IP,但是它的值不是由客户端提供的,而是服务器根据客户端的 IP 指定的。  如果使用浏览器直接访问某个网站,那么网站的 web 服务器(Nginx、Apache等)就会把 REMOTE_ADDR 设为客户端的 IP 地址。如果我们给浏览器设置代理,我们访问目标网站的请求会先经过代理服务器,然后由代理服务器将请求转化到目标网站。那么网站的 web 服务器就会把 REMOTE_ADDR 设为代理服务器的 IP。  2)X-Forwarded-For(XFF)X-Forwarded-For 是一个 HTTP 扩展头部 [阅读全文]

热门标签

最新标签

推荐阅读

  1. 17

    2019-04

    防止反爬虫策略不能只靠ip代理

    大数据时代,为了避免网站数据被爬取,许多网站都会设置反爬虫,特别是一些大网站或是比较稳定的网站,它们的反爬虫策略都很好,针对这些网站的反爬虫仅仅单独用ip代理来破解,可以说

  2. 04

    2019-03

    如何获取免费代理服务器&进行代理验证

    登录http://http.hunbovps.com/就能获取爬虫代理的免费试用机会, 下面我们来讲一下获取后怎么进行代理验证

  3. 02

    2019-01

    使用代理IP造成速度缓慢的原因是什么?

    相信许多朋友都使用过代理IP,无论是因为销售业务需求量还是个人需求,在使用代理IP的操作过程中常会遇到某些令人烦闷至极的难题,例如代理IP连接不了,又如经厉了千难万险好不容易连上

  4. 04

    2018-12

    爬虫如何获取IP池?你选择花钱还是花时间?

    为了获取大量的数据,许多爬虫都需要突破反爬虫机制以获取数据,其中最基础的是IP限制。爬虫一般都绕不过IP这个问题,为什么呢,这是因为在网络爬虫抓取信息的过程中,抓取频率高...

  5. 04

    2019-03

    入门Python爬虫,轻松爬取大规模数据

    如果你仔细观察,就不难发现,懂爬虫、学习爬虫的人越来越多,一方面,互联网可以获取的数据越来越多,另一方面,像 Python这样的编程语言提供越来越多的优秀工具,让爬虫变得简单、容

  6. 25

    2018-12

    怎么把电脑IP改成其他城市ip,IP代理软件哪个好用?

    什么是代理ip,IP代理软件又是然后修改IP的呢,我们看看IP代理的原理与应用及了解它的一些功能和用途。我们如何把电脑IP改成其他城市ip,IP代理软件哪个好用?