代理的基本原理和作用
1.基本原理
代理实际上指的是代理服务器(proxy server)。它的功能是代理网络用户去取得网络信息。形象地说，它是网络信息的中转站。在我们正常请求一个网站时，是发送了请求给web服务器，web服务器把响应传回给我们。如果设置了代理服务器，实际上就是在本机和服务器之间搭建了一个桥，此时，本机不是直接向web服务器发送请求，而是想代理服务器发出请求，请求会发给代理服务器，然后由代理服务器再发给web服务器，接着由代理服务器再把web服务器返回的响应转发给本机。这样我们能同样可以正常访问网页，但这个过程中web服务器识别出的真实IP就不在是我们本机的IP了，这就实现了IP伪装，这就是代理的基本原理。
2.代理的作用
- 突破自身IP访问限制，访问一些平时不能访问的站点。
- 访问一些团体或内部资源：比如使用教育网内地址段免费代理服务器，就可以用于对教育网开放的各类FTP下载上传，以及各类资料查询共享等服务。
- 提高访问速度：通常代理服务器都设置了一个较大的硬盘缓冲区，当有外界信息通过时，同时也将其保存到缓冲区中，当其他用户再访问相同的信息时，则直接由缓冲区中取出信息，传给用户，以提高速度。
- 隐藏真实IP：上网者可以通过这种方式隐藏自己的IP，免受攻击。对于爬虫来说，使用代理就是为了隐藏自身IP，防止自身的额IP被封锁。