IP代理软件,http代理,API提取-黑洞HTTP

黑洞HTTP

您的位置: 首页 > 新闻资讯 > HTTP代理 > 正文

HTTP代理原理解析

发布时间:2019年03月15日 来源:互联网

在整个互联网的Web结构中,HTTP代理服务器是一个出现频率极高的组件(其他还有浏览器、缓存服务器、Web服务器、DNS解析服务器等),理解HTTP代理服务器的原理有助于我们更好地认识Web架构。


代理服务器的位置

HTTP代理原理解析

上图所示就是一个最原始代理服务器的角色:假设你现在在公司的办公室里访问http://www.qq.com,那通常来讲你是通过你们公司的代理服务器在畅游互联网。你本地浏览器的HTTP请求先到达代理服务器,代理服务器收到你的请求之后解析你的请求报文,然后向目标服务器发起HTTP请求,收到目标服务器的响应之后,再把响应报文回复给你。这就是代理服务器的工作流程。


为什么需要代理服务器

有些公司需要限制某些网站不能被员工访问,那么就可以在代理服务器上添加策略:当检测到有员工访问该网站时直接提示;


公司出于安全的考虑,避免员工访问的网站带入病毒,因为所有请求和响应都会经过代理,所以就可以在代理上做病毒检测;


假设员工A和员工B都想访问http://www.qq.com/test.html,那代理服务器可以缓存test.html,这样员工A和B的两个请求可以缩减为一个,降低了网络带宽的开销;


总而言之,代理服务器是一个口子,有了这个口子,我们就可以在这个口子上做任何事情。


代理服务器与缓存服务器

在现实的架构中,代理服务器与缓存服务器的角色越来越模糊,或者说通常把两者合二为一——一个位于客户端和服务端中间位置的服务器既有代理的功能又有缓存的功能,比如我们熟悉的CDN。


反向代理服务器

在代理服务器的基础上,又逐渐衍生出代理反向代理服务器:


HTTP代理原理解析

最原始的代理服务器的代理是指充当客户端的“代理”,那如上图所示的代理则是Web服务器的代理,因此我们给其取名为反向代理服务器。(反向的含义是以前代理客户端,现在代理服务端)


反向代理服务器对外屏蔽了真实的服务器,并且作为服务端的出入口,我们可以在反向代理服务器上添加策略:比如Web攻击防护策略、CC攻击防护策略等。


相关文章内容简介

1 HTTP代理原理解析

在整个互联网的Web结构中,HTTP代理服务器是一个出现频率极高的组件(其他还有浏览器、缓存服务器、Web服务器、DNS解析服务器等),理解HTTP代理服务器的原理有助于我们更好地认识Web架构。代理服务器的位置上图所示就是一个最原始代理服务器的角色:假设你现在在公司的办公室里访问http://www.qq.com,那通常来讲你是通过你们公司的代理服务器在畅游互联网。你本地浏览器的HTTP请求先到达代理服务器,代理服务器收到你的请求之后解析你的请求报文,然后向目标服务器发起HTTP请求,收到目标服务器的响应之后,再把响应报文回复给你。这就是代理服务器的工作流程。为什么需要代理服务器有些公司需要限制某些网站不能被员工访问,那么就可以在代理服务器上添加策略:当检测到有员工访问该网站时直接提示;公司出于安全的考虑,避免员工访问的网站带入病毒,因为所有请求和响应都会经过代理,所以就可以在代理上做病 [阅读全文]

热门标签

最新标签

推荐阅读

  1. 29

    2019-05

    代理IP可以防止IP被限制吗?

    当我们爬取某网站时,爬着爬着,突然IP被封了,爬不了了,可谓相当的郁闷,如何解决这样的问题呢?

  2. 17

    2019-06

    使用国内代理IP谨防上当受骗

    查看这篇文章的很多小伙伴都有这样的体验,当我们在搜索引擎中输入"代理IP"关键字时,能搜出很多很多关于代理IP的服务器或软件。有客户端安装也有在线web,有直接提供API端口对接也有需要

  3. 24

    2019-06

    代理ip哪家比较好用?

    如果需要大量的中国的代理ip,哪家是不错的呢?价格如何?质量如何?数量如何呢?多人都需要使用国内代理ip的,如果能找个不错的商家,这样用起来也是不错的。

  4. 29

    2019-06

    代理ip如何帮助爬虫抓取知乎信息?

    知乎是时下风靡互联网的一个真实网络问答社区,连接各行各业的精英,他们分享着彼此的专业知识、经验和见解,为广大访问者提供源源不断地高质量信息。近几年,知乎的注册用户水涨船高

  5. 17

    2019-05

    怎么利用代理IP软件做营销

    有专家研究表明,伴随着互联网的发展,我们的社会正在逐渐地进入一个营销社会。其实,美国的现在就是未来的我们,拿美国总统大选来说就各方顶级公关营销公司的实力对决。

  6. 20

    2019-06

    免费代理ip和付费代理之间的差异体现在什么地方?

    现在有很多人或多或少都有使用过代理ip,那只要大家有使用过代理ip就会知道ip的代理它既有免费的,也有付费使用的,所谓的免费使用的代理ip,那么就代表着大家,根本就不需要花一分一毫