如何在java代码中使用HTTP代理IP

电子说

1.2w人已加入

描述

如何在java代码中使用HTTP代理IP。

以下代码主要围绕第一次接触HTTP代理IP的java新手来写。

直接把下面示例代码中的代理API,替换成你后台生成的代理API链接,就可以跑起来了。(步骤注释清晰)

以下只是一个示例代码,是一个基础的演示,具体的代码还是要根据你业务的实际情况去写的。

示例代码中的HTTP代理IP,我使用的是华益云的HTTP代理,注册就白嫖1万个高匿爬虫IP,有效期是一年,对于调试代码来说这个时间是非常的友好。

打开代理API,获取里面的IP,使用IP访问目标网站,其实代码中就是执行这个过程而已,然后加了几个错误判断有助于代码的稳定运行。(步骤注释清晰)

华益云-企业级HTTP爬虫代理IP供应商-点我免费领取示例代码demo中同款10000个高匿IP

import java.io.BufferedReader;
import java.io.BufferedWriter;
import java.io.DataOutputStream;
import java.io.FileWriter;
import java.io.IOException;
import java.io.InputStreamReader;
import java.net.HttpURLConnection;
import java.net.InetSocketAddress;
import java.net.URL;
import java.util.ArrayList;
import java.net.Proxy;
class ProxyInfo{
    private String host;
    private int port;
    public ProxyInfo(String host, int port){
        this.host = host;
        this.port = port;
    }
    public String getHost(){
        return host;
    }
    public int getPort(){
        return port;
    }
}
class ProxyUtil{
    public static void main(String[] args)  {
        // 发送给服务器的标识
        String userAgent = "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/532.36 (KHTML, like Gecko) Chrome/97.0.4692.99 Safari/537.36";
        // 代理api(这里我推荐使用www.9vps.com华益云的HTTP代理API,注册就白嫖1万IP)
        String proxyUrl = "http://http.9vps.com/getip.asp?username=166xxxx6597&pwd=xxxxbaa59ce237dff65134984b9cxxxx&geshi=1&fenge=1&fengefu=&Contenttype=1&getnum=20&setcity=&operate=all&";
        // 请求代理url,获取代理ip 
        ArrayList outPutProxy = getProxy(proxyUrl, userAgent);
        if (outPutProxy.size() == 0){
            // 没有获取到代理
            return;
        }
        // 目标请求网站
        String url = "https://www.qq.com/";
 
        for (int i=0; i<3; i++){
            // 最多尝试三次
            try{
                ProxyInfo px =outPutProxy.remove(0);
                Proxy proxy = new Proxy(Proxy.Type.HTTP, new InetSocketAddress(px.getHost(), px.getPort()));
                String out = doReqWithProxyWrapper(url, userAgent, proxy);
                System.out.println(out);
                break;
            }catch(Exception e){
                e.printStackTrace();
                if (outPutProxy.size() == 0){
                    // 如果发现没有代理了,就去获取下。
                    outPutProxy = getProxy(proxyUrl, userAgent);
                }
            }   
        }
        //System.out.println(out);
    }

    public static String doReqWithProxyWrapper(String url,String userAgent,Proxy proxy) throws IOException{
        return requestGet(url, userAgent, proxy);
    }
    public static ArrayList getProxy(String proxyUrl, String userAgent){
        //String proxyUrl = "http://http.9vps.com/getip.asp?username=166xxxx6597&pwd=xxxxbaa59ce237dff65134984b9cxxxx&geshi=1&fenge=1&fengefu=&Contenttype=1&getnum=20&setcity=&operate=all&";
        String proxyIps;
        ArrayList outPutProxy = new ArrayList();
        try {
            proxyIps = requestGet(proxyUrl, userAgent,  null);
            System.out.println(proxyIps);
            // {"code":3002,"data":[],"msg":"error!用户名或密码错误","success":false}
            if (proxyIps.indexOf("{") > -1){
                throw new RuntimeException("[错误]"+proxyIps);
            }
            String[] splitedString = proxyIps.split("\n");
            for (int i=0; i;>


  审核编辑:汤梓红
 
打开APP阅读更多精彩内容
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉

全部0条评论

快来发表一下你的评论吧 !

×
20
完善资料,
赚取积分