关于URL的URLConnection和HttpClient的网络请求问题

HttpURLConnection 对象

1. HttpURLConnection对象需要通过URL类中的openConnection()方法来获得，它无法直接构造。

HttpsURLConnection urlconn = null;
URL url = new URL(address);
urlconn = (HttpsURLConnection)url.openConnection();
2. HttpURLConnection的connect()函数，实际上只是建立了一个与服务器的TCP连接，并没有实际发送HTTP请求。HTTP请求实际上直到我们获取服务器响应数据（如调用getInputStream()、getResponseCode()等方法）时才正式发送出去。并且HttpURLConnection对象的配置都需要在connect()方法执行之前完成。

urlconn = (HttpsURLConnection)url.openConnection();
urlconn.setRequestMethod("GET");
urlconn.setConnectTimeout(5000);
urlconn.setReadTimeout(5000);
urlconn.setUseCaches(false);
urlconn.connect();
3. HttpURLConnection是基于HTTP协议的，其底层通过socket通信实现。如果不设置超时（timeout），在网络异常的情况下，可能会导致程序僵死而不继续往下执行。

public HttpURLConnection(URL url, String s, int i){
        this(url, new Proxy(java.net.Proxy.Type.HTTP, 
        InetSocketAddress.createUnresolved(s, i)));
}
4. HTTP正文的内容是通过OutputStream流写入的， 向流中写入的数据不会立即发送到网络，而是存在于内存缓冲区中，待流关闭时，根据写入的内容生成HTTP正文。

5. 调用getInputStream()方法时，返回一个输入流，用于从中读取服务器对于HTTP请求的返回信息。

InputStream inputStream = urlconn.getInputStream();
InputStreamReader inputStreamReader = new InputStreamReader(inputStream, "UTF-8");
BufferedReader buff = new BufferedReader(inputStreamReader);
String line = buff.readLine();
while(line != null){
    System.out.println(line);
    line = buff.readLine();
}
inputStream.close();
inputStreamReader.close();
buff.close();
6. 我们可以使用HttpURLConnection.connect()方法手动的发送一个HTTP请求，但是如果要获取HTTP响应的时候，请求就会自动的发起，比如我们使用HttpURLConnection.getInputStream()方法的时候，所以完全没有必要调用connect()方法。

HttpClient 对象

HttpClient相比较来说简化了HttpURLConnection对象对Session、Cookie的处理。

可以说HttpClient就是一个增强版的HttpURLConnection，HttpClient可以做HttpURLConnection对象所有能做的事。

HttpClient是Apache开源组织提供的它是一个简单的HTTP客户端，不是浏览器，用于发送HTTP请求，接收HTTP响应。但不会缓存服务器的响应。它只是关注于如何发送请求、接收响应，以及管理HTTP连接。

HttpClient的使用

使用HttpClient发送请求、接收响应很简单，只要如下几步即可。

1. 创建HttpClient对象，CloseableHttpClient httpclient = HttpClients.createDefault();

2. 如果需要发送GET请求，创建HttpGet对象；如果需要发送POST请求，创建HttpPost对象。

3. 如果需要发送请求参数，可调用HttpGet、HttpPost共同的setHeader()方法或者addHeader()方法来添加请求参数；对于HttpPost对象而言，也可调用setEntity(方法来设置请求参数。

UrlEncodedFormEntity entity = new UrlEncodedFormEntity(params);
httpPost.setEntity(entity);
4. 调用HttpClient对象的execute(HttpUriRequest request)发送请求，执行该方法返回一个HttpResponse。

5. 调用HttpResponse的getAllHeaders()、getHeaders(String name)等方法可获取服务器的响应头；调用HttpResponse的getEntity()方法可获取HttpEntity对象，该对象包装了服务器的响应内容。程序可通过该对象获取服务器的响应内容。

HttpGet代码实例

    public static void main(String[] args) throws Exception {
        // 格式化请求url
        // String cmd=String.format("http://%s:%s@%s",username,password,split[1]);
        
        // 请求地址
        String url = "https://blog.csdn.net/amosjob/article/details/82775290";
        // 创建默认的客户端实例  
        CloseableHttpClient httpclient = HttpClients.createDefault();
        // 创建get请求实例 
        HttpGet httpGet = new HttpGet(url);
        // 设置头部信息
        httpGet.setHeader("User-Agent", "Mozilla/5.0 (Windows NT 6.1; rv:6.0.2) Gecko/20100101 Firefox/6.0.2");
//      httpGet.addHeader("x-api-key", "XXX");
//      httpGet.addHeader("x-lang", "en-US");
        // 执行GET请求 返回响应实体 
        HttpResponse response = httpclient.execute(httpGet);
        // 获取响应码
        int statusCode = response.getStatusLine().getStatusCode();
        // 获取全部的请求头
        Header[] allHeaders = response.getAllHeaders();
        System.out.println("响应状态码：" + statusCode);
        for (int i = 0; i < allHeaders.length; i++) {
             System.out.println("全部的请求头：" + allHeaders[i]);
        }
        // 获取响应消息实体  
        HttpEntity entity = response.getEntity();
        //打印输出网页的内容(可删除)
        if (entity != null) {
            // 推荐该办法打印内容
            System.out.println("响应的内容："+EntityUtils.toString(entity));
            
            // 也可以使用这个方法
            InputStream inputStream = entity.getContent();
            InputStreamReader streamReader = new InputStreamReader(inputStream);
            int line;
            line = streamReader.read() ;
            while (line!= -1) {
                System.out.print((char)line);
                line = streamReader.read() ;
            }
        }
        
    }
HttpPost代码实例

    public static void main(String[] args) throws Exception {
        // 请求地址
        String url = "https://passport.csdn.net/account/login";
        // 创建默认的客户端实例
        CloseableHttpClient httpclient = HttpClients.createDefault();
        // 创建POST对象
        HttpPost httpPost = new HttpPost(url);
        // 传参数
        List params = new ArrayList();
        params.add(new BasicNameValuePair("username", "admin"));
        params.add(new BasicNameValuePair("password", "12345"));
        try {
            UrlEncodedFormEntity entity = new UrlEncodedFormEntity(params);
            httpPost.setEntity(entity);
        } catch (Exception e) {
            e.printStackTrace();
        }
        // 执行GET请求 返回响应实体
        HttpResponse response = httpclient.execute(httpPost);
        // 获取响应码
        int statusCode = response.getStatusLine().getStatusCode();
        // 获取全部的请求头
        Header[] allHeaders = response.getAllHeaders();
        System.out.println("响应状态码：" + statusCode);
        for (int i = 0; i < allHeaders.length; i++) {
            System.out.println("全部的请求头：" + allHeaders[i]);
        }
        // 获取响应消息实体
        HttpEntity entity = response.getEntity();
        // 打印输出网页的内容(可删除)
        if (entity != null) {
            System.out.println("响应的内容："+EntityUtils.toString(entity));
        }

}

 

在实际项目中尽量使用httpclient 

使用URLConnection可能会造成502错误 在读取请求时偶尔会出现超时现象 

在我切换httpclient后 502错误消失