电子说
如何在java代码中使用HTTP代理IP。
以下代码主要围绕第一次接触HTTP代理IP的java新手来写。
直接把下面示例代码中的代理API,替换成你后台生成的代理API链接,就可以跑起来了。(步骤注释清晰)
以下只是一个示例代码,是一个基础的演示,具体的代码还是要根据你业务的实际情况去写的。
示例代码中的HTTP代理IP,我使用的是华益云的HTTP代理,注册就白嫖1万个高匿爬虫IP,有效期是一年,对于调试代码来说这个时间是非常的友好。
打开代理API,获取里面的IP,使用IP访问目标网站,其实代码中就是执行这个过程而已,然后加了几个错误判断有助于代码的稳定运行。(步骤注释清晰)
华益云-企业级HTTP爬虫代理IP供应商-点我免费领取示例代码demo中同款10000个高匿IP
import java.io.BufferedReader; import java.io.BufferedWriter; import java.io.DataOutputStream; import java.io.FileWriter; import java.io.IOException; import java.io.InputStreamReader; import java.net.HttpURLConnection; import java.net.InetSocketAddress; import java.net.URL; import java.util.ArrayList; import java.net.Proxy; class ProxyInfo{ private String host; private int port; public ProxyInfo(String host, int port){ this.host = host; this.port = port; } public String getHost(){ return host; } public int getPort(){ return port; } } class ProxyUtil{ public static void main(String[] args) { // 发送给服务器的标识 String userAgent = "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/532.36 (KHTML, like Gecko) Chrome/97.0.4692.99 Safari/537.36"; // 代理api(这里我推荐使用www.9vps.com华益云的HTTP代理API,注册就白嫖1万IP) String proxyUrl = "http://http.9vps.com/getip.asp?username=166xxxx6597&pwd=xxxxbaa59ce237dff65134984b9cxxxx&geshi=1&fenge=1&fengefu=&Contenttype=1&getnum=20&setcity=&operate=all&"; // 请求代理url,获取代理ip ArrayList outPutProxy = getProxy(proxyUrl, userAgent); if (outPutProxy.size() == 0){ // 没有获取到代理 return; } // 目标请求网站 String url = "https://www.qq.com/"; for (int i=0; i<3; i++){ // 最多尝试三次 try{ ProxyInfo px =outPutProxy.remove(0); Proxy proxy = new Proxy(Proxy.Type.HTTP, new InetSocketAddress(px.getHost(), px.getPort())); String out = doReqWithProxyWrapper(url, userAgent, proxy); System.out.println(out); break; }catch(Exception e){ e.printStackTrace(); if (outPutProxy.size() == 0){ // 如果发现没有代理了,就去获取下。 outPutProxy = getProxy(proxyUrl, userAgent); } } } //System.out.println(out); } public static String doReqWithProxyWrapper(String url,String userAgent,Proxy proxy) throws IOException{ return requestGet(url, userAgent, proxy); } public static ArrayList getProxy(String proxyUrl, String userAgent){ //String proxyUrl = "http://http.9vps.com/getip.asp?username=166xxxx6597&pwd=xxxxbaa59ce237dff65134984b9cxxxx&geshi=1&fenge=1&fengefu=&Contenttype=1&getnum=20&setcity=&operate=all&"; String proxyIps; ArrayList outPutProxy = new ArrayList(); try { proxyIps = requestGet(proxyUrl, userAgent, null); System.out.println(proxyIps); // {"code":3002,"data":[],"msg":"error!用户名或密码错误","success":false} if (proxyIps.indexOf("{") > -1){ throw new RuntimeException("[错误]"+proxyIps); } String[] splitedString = proxyIps.split("\n"); for (int i=0; i;>
审核编辑:汤梓红
全部0条评论
快来发表一下你的评论吧 !