热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

HttpClient入门(1)发送请求,处理响应及响应重复读取

HttpClient是Apache旗下的项目,是一个负责创建和维护HTTP和相关协议的工具集。以下分析使用版本为:httpclient-4.5.3.ja

HttpClient是Apache旗下的项目,是一个负责创建和维护HTTP和相关协议的工具集。

以下分析使用版本为: httpclient-4.5.3.jar, httpcore-4.4.6.jar, jdk1.8.0_131 所有示例代码均经过运行测试

发送请求

httpclient最重要的功能就是发送http请求,下面介绍如何执行一个get请求:

CloseableHttpClient httpclient = HttpClients.createDefault();
HttpGet get = new HttpGet("http://www.jianshu.com/u/8a3115bb299c");
try(CloseableHttpResponse response = httpclient.execute(get)) { HttpEntity entity = response.getEntity();System.out.println(EntityUtils.toString(entity, "UTF-8"));
} catch (Exception e) {e.printStackTrace();
}

httpclient支持Http/1.1规范中定义的所有方法:GET,HEAD,POST,PUT,DELETE,TRACE,OPTIONS,对应的类是:HttpGet,HttpHead,HttpPost,HttpPut,HttpDelete,HttpTrace,HttpOptions。

请求URI

URI(统一资源标识符),用于标识应用请求的资源,通常由协议版本,主机名,端口(可选),资源路径,参数名(可选),参数值(可选)组成。 请求时,可以通过拼接字符串的形式访问:

HttpGet get = new HttpGet("http://www.jianshu.com/p/7021031d6e49?utm_medium=index-banner&utm_source=desktop");

httpclient也提供了URIBuilder这个类简化请求URI的创建和修改。

URI uri = new URIBuilder().setScheme("http").setHost("www.jianshu.com").setPath("/p/7021031d6e49").setParameter("utm_medium", "index-banner").setParameter("utm_source", "desktop").build();
HttpGet httpget = new HttpGet(uri);
System.out.println(httpget.getURI());

输出

http://www.jianshu.com/p/7021031d6e49?utm_medium=index-banner&utm_source=desktop

http请求是客户端发给服务端的一个消息,消息的第一行包括了请求方法,URI以及使用的协议版本。

HttpGet get = new HttpGet("http://www.jianshu.com/u/8a3115bb299c");
RequestLine requestLine = get.getRequestLine();
System.out.println(requestLine.getMethod());
System.out.println(requestLine.getUri());
System.out.println(requestLine.getProtocolVersion());
System.out.println(requestLine);

输出

GET
http://www.jianshu.com/u/8a3115bb299c
HTTP/1.1
GET http://www.jianshu.com/u/8a3115bb299c HTTP/1.1

处理响应

服务端接收并处理请求后,会返回消息给到客户端,该消息的第一行包括协议版本,状态码以及描述文字。

CloseableHttpClient httpclient = HttpClients.createDefault();
HttpGet get = new HttpGet("http://www.jianshu.com/u/8a3115bb299c");
try(CloseableHttpResponse response = httpclient.execute(get)) { System.out.println(response.getStatusLine());System.out.println(response.getProtocolVersion());System.out.println(response.getStatusLine().getStatusCode());System.out.println(response.getStatusLine().getReasonPhrase());System.out.println(response.getStatusLine().toString());
} catch (Exception e) {e.printStackTrace();
}

输出

HTTP/1.1 200 OK
HTTP/1.1
200
OK
HTTP/1.1 200 OK

服务端返回的响应被封装在HttpEntity,通过HttpEntity可以获取请求响应的一些元信息,比如Content-Type,Content-Length以及Content-Encoding,元信息需由服务端提供,否则将是空值。

CloseableHttpClient httpclient = HttpClients.createDefault();
HttpGet get = new HttpGet("http://www.jianshu.com/u/8a3115bb299c");
try(CloseableHttpResponse response = httpclient.execute(get)) { HttpEntity entity = response.getEntity();System.out.println(entity.getContentType());System.out.println(entity.getContentLength());System.out.println(entity.getContentEncoding());
} catch (Exception e) {e.printStackTrace();
}

输出

Content-Type: text/html; charset=utf-8
-1
null

HttpEntity提供了多种方法来读取正文,官方文档推荐使用以下方法进行读取:HttpEntity.getContent()HttpEntity.writeTo(outputStream)

HttpEntity.getContent()方式

CloseableHttpClient httpclient = null;
CloseableHttpResponse response = null;
BufferedReader reader = null;
try {httpclient = HttpClients.createDefault();HttpGet get = new HttpGet("http://www.jianshu.com/u/8a3115bb299c");response = httpclient.execute(get);HttpEntity entity = response.getEntity();reader = new BufferedReader(new InputStreamReader(entity.getContent(), "UTF-8"));String str = "";StringBuilder sb = new StringBuilder(); while ((str = reader.readLine()) != null) { sb.append(str).append("\n"); }System.out.println(sb);
} catch (Exception e) {e.printStackTrace();
} finally {CommonUtils.closeReader(reader);CommonUtils.closeResponse(response);CommonUtils.closeHttpClient(httpclient);
}

CommonUtils

public void closeReader(BufferedReader reader) {try {if (reader != null) {reader.close();}} catch (Exception e) {e.printStackTrace();}
}public void closeResponse(CloseableHttpResponse response) {try {if (response != null) {response.close();}} catch (Exception e) {e.printStackTrace();}
}public void closeHttpClient(CloseableHttpClient httpclient) {try {if (httpclient != null) {httpclient.close();}} catch (Exception e) {e.printStackTrace();}
}

HttpEntity.writeTo方式

CloseableHttpClient httpclient = null;
CloseableHttpResponse response = null;
ByteArrayOutputStream outstream = new ByteArrayOutputStream();
try {httpclient = HttpClients.createDefault();HttpGet get = new HttpGet("http://www.jianshu.com/u/8a3115bb299c");response = httpclient.execute(get);HttpEntity entity = response.getEntity();entity.writeTo(outstream);System.out.println(outstream.toString("UTF-8"));
} catch (Exception e) {e.printStackTrace();
} finally {CommonUtils.closeOutputStream(outstream);CommonUtils.closeResponse(response);CommonUtils.closeHttpClient(httpclient);
}

CommonUtils

public void closeOutputStream(ByteArrayOutputStream outstream) {try {if (outstream != null) {outstream.close();}} catch (Exception e) {e.printStackTrace();}
}

为了确保资源的正确释放,采用上述两种方式读取正文时,都需对流进行关闭。除此之外,HttpClient还提供了EntityUtils工具类,方便对正文的读取操作,不过官方文档中建议,只有当响应实体来自受信任的HTTP服务器,并且已知其长度有限,才可以采用这种方法。

EntityUtils.toString方式

CloseableHttpClient httpclient = HttpClients.createDefault();
HttpGet get = new HttpGet("http://www.jianshu.com/u/8a3115bb299c");
try(CloseableHttpResponse response = httpclient.execute(get)) { HttpEntity entity = response.getEntity();System.out.println(EntityUtils.toString(entity, "UTF-8"));
} catch (Exception e) {e.printStackTrace();
} finally {CommonUtils.closeHttpClient(httpclient);
}

EntityUtils.toString内部会对HttpEntity中的输入流进行关闭。 以上三种读取方式,当CloseableHttpClient的实例不再使用时,都需调用close方法进行关闭。

通过BufferedHttpEntity实现响应多次读取

对于流类型的HttpEntity而言,是不可重复读取的,若想多次读取,则需要在某个地方将HttpEntity缓存起来,最简单的方式,可以使用HttpClient提供的BufferedHttpEntity类来实现。

HttpEntity.getContent()+BufferedHttpEntity实现多次读取

CloseableHttpClient httpclient = HttpClients.createDefault();
HttpGet get = new HttpGet("http://www.jianshu.com/u/8a3115bb299c");
try(CloseableHttpResponse response = httpclient.execute(get)) {HttpEntity entity = response.getEntity();BufferedHttpEntity bufferedEntity = new BufferedHttpEntity(entity);System.out.println(getEntityContent(bufferedEntity));System.out.println(getEntityContent(bufferedEntity));
} catch (Exception e) {e.printStackTrace();
} finally {CommonUtils.closeHttpClient(httpclient);
}

public String getEntityContent(HttpEntity entity) {try(BufferedReader reader = new BufferedReader(new InputStreamReader(entity.getContent(), "UTF-8"))) {String str = "";StringBuilder sb = new StringBuilder(); while ((str = reader.readLine()) != null) { sb.append(str).append("\n"); }return sb.toString();} catch (Exception e) {e.printStackTrace();return "";}
}

HttpEntity.writeTo+BufferedHttpEntity实现多次读取

CloseableHttpClient httpclient = HttpClients.createDefault();
HttpGet get = new HttpGet("http://www.jianshu.com/u/8a3115bb299c");
try(CloseableHttpResponse response = httpclient.execute(get)) {HttpEntity entity = response.getEntity();BufferedHttpEntity bufferedEntity = new BufferedHttpEntity(entity);System.out.println(getContentByWriteTo(bufferedEntity));System.out.println(getContentByWriteTo(bufferedEntity));
} catch (Exception e) {e.printStackTrace();
} finally {CommonUtils.closeHttpClient(httpclient);
}

public String getContentByWriteTo(HttpEntity entity) {try(ByteArrayOutputStream outstream = new ByteArrayOutputStream()) {entity.writeTo(outstream);return outstream.toString("UTF-8");} catch (Exception e) {e.printStackTrace();return "";}
}

EntityUtils.toString+BufferedHttpEntity实现多次读取

CloseableHttpClient httpclient = HttpClients.createDefault();
HttpGet get = new HttpGet("http://www.jianshu.com/u/8a3115bb299c");
try(CloseableHttpResponse response = httpclient.execute(get)) { HttpEntity entity = response.getEntity();BufferedHttpEntity bufferedEntity = new BufferedHttpEntity(entity);System.out.println(EntityUtils.toString(bufferedEntity, "UTF-8"));System.out.println(EntityUtils.toString(bufferedEntity, "UTF-8"));
} catch (Exception e) {e.printStackTrace();
} finally {CommonUtils.closeHttpClient(httpclient);
}

至此,通过HttpClient,简单实现了http get请求的发送和响应处理。




推荐阅读
  • 如何实现织梦DedeCms全站伪静态
    本文介绍了如何通过修改织梦DedeCms源代码来实现全站伪静态,以提高管理和SEO效果。全站伪静态可以避免重复URL的问题,同时通过使用mod_rewrite伪静态模块和.htaccess正则表达式,可以更好地适应搜索引擎的需求。文章还提到了一些相关的技术和工具,如Ubuntu、qt编程、tomcat端口、爬虫、php request根目录等。 ... [详细]
  • Spring源码解密之默认标签的解析方式分析
    本文分析了Spring源码解密中默认标签的解析方式。通过对命名空间的判断,区分默认命名空间和自定义命名空间,并采用不同的解析方式。其中,bean标签的解析最为复杂和重要。 ... [详细]
  • SpringBoot uri统一权限管理的实现方法及步骤详解
    本文详细介绍了SpringBoot中实现uri统一权限管理的方法,包括表结构定义、自动统计URI并自动删除脏数据、程序启动加载等步骤。通过该方法可以提高系统的安全性,实现对系统任意接口的权限拦截验证。 ... [详细]
  • 阿,里,云,物,联网,net,core,客户端,czgl,aliiotclient, ... [详细]
  • 本文详细介绍了PHP中与URL处理相关的三个函数:http_build_query、parse_str和查询字符串的解析。通过示例和语法说明,讲解了这些函数的使用方法和作用,帮助读者更好地理解和应用。 ... [详细]
  • 在重复造轮子的情况下用ProxyServlet反向代理来减少工作量
    像不少公司内部不同团队都会自己研发自己工具产品,当各个产品逐渐成熟,到达了一定的发展瓶颈,同时每个产品都有着自己的入口,用户 ... [详细]
  • 自动轮播,反转播放的ViewPagerAdapter的使用方法和效果展示
    本文介绍了如何使用自动轮播、反转播放的ViewPagerAdapter,并展示了其效果。该ViewPagerAdapter支持无限循环、触摸暂停、切换缩放等功能。同时提供了使用GIF.gif的示例和github地址。通过LoopFragmentPagerAdapter类的getActualCount、getActualItem和getActualPagerTitle方法可以实现自定义的循环效果和标题展示。 ... [详细]
  • Java学习笔记之面向对象编程(OOP)
    本文介绍了Java学习笔记中的面向对象编程(OOP)内容,包括OOP的三大特性(封装、继承、多态)和五大原则(单一职责原则、开放封闭原则、里式替换原则、依赖倒置原则)。通过学习OOP,可以提高代码复用性、拓展性和安全性。 ... [详细]
  • ShiftLeft:将静态防护与运行时防护结合的持续性安全防护解决方案
    ShiftLeft公司是一家致力于将应用的静态防护和运行时防护与应用开发自动化工作流相结合以提升软件开发生命周期中的安全性的公司。传统的安全防护方式存在误报率高、人工成本高、耗时长等问题,而ShiftLeft提供的持续性安全防护解决方案能够解决这些问题。通过将下一代静态代码分析与应用开发自动化工作流中涉及的安全工具相结合,ShiftLeft帮助企业实现DevSecOps的安全部分,提供高效、准确的安全能力。 ... [详细]
  • Java如何导入和导出Excel文件的方法和步骤详解
    本文详细介绍了在SpringBoot中使用Java导入和导出Excel文件的方法和步骤,包括添加操作Excel的依赖、自定义注解等。文章还提供了示例代码,并将代码上传至GitHub供访问。 ... [详细]
  • 用户视图(查看运行状态或其他参数)系统视图(配置设备的系统参数)system-viewEntersystemview,returnuservi ... [详细]
  • Request对象和Response对象request:(请求)当一个页面被请求时,Django就会创建一个包含本次请求原信息的HttpRequest对象。Djang ... [详细]
  • Go Cobra命令行工具入门教程
    本文介绍了Go语言实现的命令行工具Cobra的基本概念、安装方法和入门实践。Cobra被广泛应用于各种项目中,如Kubernetes、Hugo和Github CLI等。通过使用Cobra,我们可以快速创建命令行工具,适用于写测试脚本和各种服务的Admin CLI。文章还通过一个简单的demo演示了Cobra的使用方法。 ... [详细]
  • 本文介绍了如何使用C#制作Java+Mysql+Tomcat环境安装程序,实现一键式安装。通过将JDK、Mysql、Tomcat三者制作成一个安装包,解决了客户在安装软件时的复杂配置和繁琐问题,便于管理软件版本和系统集成。具体步骤包括配置JDK环境变量和安装Mysql服务,其中使用了MySQL Server 5.5社区版和my.ini文件。安装方法为通过命令行将目录转到mysql的bin目录下,执行mysqld --install MySQL5命令。 ... [详细]
  • 本文介绍了iOS数据库Sqlite的SQL语句分类和常见约束关键字。SQL语句分为DDL、DML和DQL三种类型,其中DDL语句用于定义、删除和修改数据表,关键字包括create、drop和alter。常见约束关键字包括if not exists、if exists、primary key、autoincrement、not null和default。此外,还介绍了常见的数据库数据类型,包括integer、text和real。 ... [详细]
author-avatar
天雨
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有