RestTemplate使用Proxy代理作為跳板發(fā)送請求
前言
本文是精講RestTemplate第10篇,前篇的blog訪問地址如下:
RestTemplate在Spring或非Spring環(huán)境下使用精講
RestTemplate實現(xiàn)多種底層HTTP客戶端類庫的切換用法
RestTemplate發(fā)送HTTP GET請求使用方法詳解
RestTemplate發(fā)送HTTP POST請求使用方法詳解
RestTemplate的DELETE及PUT等請求方法使用精講
RestTemplate如何通過HTTP Basic Auth認(rèn)證示例說明
本節(jié)我們要為大家介紹一下,如何在使用RestTemplate發(fā)送請求的時候使用代理Proxy。至于為什么要使用代理,給大家舉一個簡單的例子:一些做過爬蟲的同學(xué)可能都知道,當(dāng)爬蟲高頻的多次訪問一個網(wǎng)站數(shù)據(jù),可能導(dǎo)致請求客戶端Ip被封鎖的可能。很多情況下,做爬蟲的企業(yè)就維護一個代理IP池,每發(fā)送一次請求,就更換一次IP。 代理Proxy作為跳板成為服務(wù)的直接訪問者,代理使用者(真正的客戶端)是間接訪問服務(wù)。這樣在服務(wù)端看來,每次請求是代理發(fā)出的,從代理IP池中一直更換代理發(fā)送請求,這樣能夠降低IP封鎖的可能。
我們本節(jié)就來為大家介紹,作為一個代理使用者,該如何使用RestTemplate發(fā)送請求的時候使用代理Proxy。
一、搭建一個代理服務(wù)器
筆者只從知識的層面去講解使用方法,所以不做蠅營狗茍的勾當(dāng)。代理服務(wù)器還是由我自己來搭建用來測試,在我的一個CentOS服務(wù)器上安裝tinyproxy,tinyproxy可以提供代理服務(wù)。
# 安裝tinyproxy 命令 sudo yum install tinyproxy -y
編輯tinyproxy的配置文件vim /etc/tinyproxy/tinyproxy.conf
。為該代理配置允許訪問的使用者客戶端ip,也就是我家的ip,所以這個代理服務(wù)只能我用,其他人用不了。
# 代理服務(wù)端口 Port 1080 # 允許哪個客戶端使用該代理程序? Allow xxx.xxx.xxx.xxx
啟動tinyproxy提供代理服務(wù),最好檢查一下防火墻是否開放了1080端口。
# 代理服務(wù)端口 Port 1080 # 允許哪個客戶端使用該代理程序? Allow xxx.xxx.xxx.xxx
二、用于測試的服務(wù)端
我們這次要訪問的服務(wù)端是:http://www.httpbin.org
, 這個網(wǎng)站是提供在線的HTTP訪問服務(wù)的網(wǎng)站。我們可以用它進行測試。
http://www.httpbin.org/ip
是我們本次要訪問的服務(wù),響應(yīng)結(jié)果是訪問者的IP。
我在家里使用電腦訪問這個服務(wù)的時候結(jié)果如下:
上圖沒有使用代理,所以返回的是我家的ip。如果我使用代理訪問,返回結(jié)果應(yīng)該是proxy代理服務(wù)器的ip地址。
三、代理使用者RestTemplate
我的第一小節(jié)中的代理服務(wù)器的ip是88.99.10.251,tinyproxy代理服務(wù)端口1080。下文代碼通過SimpleClientHttpRequestFactory設(shè)置訪問代理
@SpringBootTest class ProxyTests { @Resource private RestTemplate restTemplate; @Test void testProxyIp() { String url = "http://www.httpbin.org/ip"; SimpleClientHttpRequestFactory requestFactory = new SimpleClientHttpRequestFactory(); requestFactory.setProxy( new Proxy( Proxy.Type.HTTP, new InetSocketAddress("88.99.10.251", 1080) //設(shè)置代理服務(wù) ) ); restTemplate.setRequestFactory(requestFactory); //發(fā)送請求 String result = restTemplate.getForObject(url, String.class); System.out.println(result); //打印響應(yīng)結(jié)果 } }
代理類型可以是HTTP也可以是SOCKS。下圖是 "http://www.httpbin.org/ip" 的請求響應(yīng)結(jié)果,返回的是代理服務(wù)器的ip,而不是我家里的ip。說明我們?yōu)镽estTemplate 設(shè)置的代理生效了。
以上就是RestTemplate使用Proxy代理作為跳板發(fā)送請求的詳細(xì)內(nèi)容,更多關(guān)于RestTemplate使用Proxy代理發(fā)送請求的資料請關(guān)注腳本之家其它相關(guān)文章!
以上就是RestTemplate使用Proxy代理作為跳板發(fā)送請求的詳細(xì)內(nèi)容,更多關(guān)于RestTemplate使用Proxy代理發(fā)送請求的資料請關(guān)注腳本之家其它相關(guān)文章!
相關(guān)文章
Java結(jié)合Vue項目打包并進行服務(wù)器部署
本文主要介紹了Java結(jié)合Vue項目打包并進行服務(wù)器部署,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2022-07-07Springboot+MyBatist實現(xiàn)前后臺交互登陸功能方式
這篇文章主要介紹了Springboot+MyBatist實現(xiàn)前后臺交互登陸功能方式,具有很好的參考價值,希望對大家有所幫助,如有錯誤或未考慮完全的地方,望不吝賜教2024-01-01Spring中@PostConstruct的實現(xiàn)方法
大多數(shù)java程序員都使用過@PostConstruct注解,它的作用就是在Bean初始化完成后執(zhí)行,相當(dāng)于我們常說的init()方法,但是我們看@PostConstruct只有單單的一個注解,它到底是如何實現(xiàn)在Bean初始化完成后就被調(diào)用的呢,本文將詳細(xì)給大家介紹一下2023-06-06

Java封裝數(shù)組之改進為泛型數(shù)組操作詳解

Spring BeanPostProcessor接口使用詳解