在瀏覽一些網(wǎng)站的時(shí)候由于各種原因，無(wú)法進(jìn)行訪問(wèn)。?

頻繁訪問(wèn)也可能導(dǎo)致ip被封鎖而導(dǎo)致無(wú)法訪問(wèn)網(wǎng)站，這在我們爬取數(shù)據(jù)過(guò)程中經(jīng)常遇到。

這時(shí)我們需要通過(guò)IE，FireFox進(jìn)行Http的代理設(shè)置，?
當(dāng)然httpClient也為我們提供這樣的設(shè)置 。

代理ip用很多種形式，可以找到一個(gè)可用Ip或者使用goagent,或者購(gòu)買代理ip池。

那在httpclicent中要怎么樣運(yùn)用呢。我們以goagent為例。

goagent打開后，只要通過(guò)127.0.0.1 端口8087來(lái)訪問(wèn) 就可以了

httpclient的具體用法有兩種 ?post和get，具體使用方法可參考:

HTTPClient模塊的HttpGet和HttpPost

要調(diào)用代理，只需要增加以下代碼:

HttpHost proxy = new HttpHost("127.0.0.1",8087, null); httpclient.getParams().setParameter(ConnRouteParams.DEFAULT_PROXY, proxy);

如果代理需要用戶，密碼進(jìn)行驗(yàn)證?

httpClient.getCredentialsProvider().setCredentials(new AuthScope(proxyHost, proxyPort),new UsernamePasswordCredentials(userName, password));

完整例子：

public static void main(String args[]) {StringBuffer sb = new StringBuffer();//創(chuàng)建HttpClient實(shí)例HttpClient client = getHttpClient();//創(chuàng)建httpGetHttpGet httpGet = new HttpGet("http://www.csdn.net");//執(zhí)行try {HttpResponse response = client.execute(httpGet);HttpEntity entry = response.getEntity();if(entry != null){InputStreamReader is = new InputStreamReader(entry.getContent());BufferedReader br = new BufferedReader(is);String str = null;while((str = br.readLine()) != null){sb.append(str.trim());}br.close();}} catch (ClientProtocolException e) {// TODO Auto-generated catch blocke.printStackTrace();} catch (IOException e) {// TODO Auto-generated catch blocke.printStackTrace();}System.out.println(sb.toString()); }//設(shè)置代理public static HttpClient getHttpClient() {DefaultHttpClient httpClient = new DefaultHttpClient();String proxyHost = "proxycn2.huawei.com";int proxyPort = 8080;String userName = "china\\******";String password = "*******“httpClient.getCredentialsProvider().setCredentials(new AuthScope(proxyHost, proxyPort),new UsernamePasswordCredentials(userName, password));HttpHost proxy = new HttpHost(proxyHost,proxyPort);httpClient.getParams().setParameter(ConnRouteParams.DEFAULT_PROXY, proxy);return httpClient; }導(dǎo)入：commons-logging-1.1.jar，httpclient-4.0-beta2.jar ，httpcore-4.1-alpha1.jar 和 commons-codec-1.4.jar架包

總結(jié)

以上是生活随笔為你收集整理的httpclient使用代理ip的全部?jī)?nèi)容，希望文章能夠幫你解決所遇到的問(wèn)題。

如果覺(jué)得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。