jsoup做http接口测试

news/2024/7/19 11:12:32 标签: 测试, 爬虫, json

本文转载张飞的博客http://www.cnblogs.com/zhangfei/p/4359408.html在此感谢博主的分享!

最早用Jsoup是有一个小的爬虫应用要写,发现Jsoup较HttpClient轻便多了,API也方便易懂,上手很快,对于response的Document解析的选择器用的是cssSelector(Jquery)选择器,觉得还不错,后来因为其它原因,没有深入的研究,最近看到一位大神用这个,我也就再学习了一下,顺便把这个用Jsoup做接口测试的相关知识点发出来给大家参考下!

一. 接口测试的相关知识点准备:

  1.firefox, firebug安装

  2.如何查看请求方式及链接,如下图

  

  我们可以看出,请求的方式是GET, 链接是www.baidu.com

二. Jsoup示例

  1.所使用到的jar包:jsoup-*.jar

  2.示例:(不要使用百度首页来做试验!!!使用百度首页做试验出不来结果的人,不要来问我为什么!!!)  

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
import  java.io.IOException;
import  org.jsoup.Jsoup;
import  org.jsoup.nodes.Document;
 
public  class  Test {      
     public  void  testJsop(){
         try  {
             Document doc = Jsoup.connect( "http://www.cnblogs.com/zhangfei/p/4283930.html" ).get();
             System.out.println(doc);
         catch  (IOException e) {          
             e.printStackTrace();
         }
     }      
     public  static  void  main(String[] args) {
         Test t =  new  Test();
         t.testJsop();
     }     
}

   输出结果就是当前页面的Document对象,然后再解析这个页面对象就可以了。

三. 参数的处理

  1.Get请求中的参数

  

  对于这种参数,一般有两种写法:

  第一种:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
public  class  Test {      
     public  void  testJsop(){
         try  {
             Document doc = Jsoup.connect( "http://www.cnblogs.com/zhangfei/p/?page=3" ).get();
             System.out.println(doc);
         catch  (IOException e) {          
             e.printStackTrace();
         }
     }      
     public  static  void  main(String[] args) {
         Test t =  new  Test();
         t.testJsop();
     }      
}

   第二种:  

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
public  class  Test {      
     public  void  testJsop(){
         try  {
             Connection conn = Jsoup.connect( "http://www.cnblogs.com/zhangfei/p/" );
             conn.data( "page" , "3" );
             Document doc = conn.get();         
             System.out.println(doc);
         catch  (IOException e) {          
             e.printStackTrace();
         }
     }      
     public  static  void  main(String[] args) {
         Test t =  new  Test();
         t.testJsop();
     }      
}

   2.post请求中的参数

   post请求的参数,一般以表单提交居多,我们来看看如何确定参数:

  

  上图中,左边红框框是key, 右边红框框是value,一般情况下,在测试系统中,输入用户名与密码就行了,比如:  

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
public  class  Test {      
     public  void  testJsop(){
         try  {
             Connection conn = Jsoup.connect( "https://passport.jd.com/new/login.aspx" );
             conn.data( "loginname" , "test1" );
             conn.data( "loginpwd" , "test1" );

                       conn.header("Accept", "application/json");
                       conn.header("Content-Type", "application/json");

             Document doc = conn.post();        
             System.out.println(doc);
         catch  (IOException e) {          
             e.printStackTrace();
         }
     }      
     public  static  void  main(String[] args) {
         Test t =  new  Test();
         t.testJsop();
     }      
}

 在这里就是data就是url末尾?key=value           data=parameter=body

四.响应超时请求处理  

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
public  class  Test {      
     public  void  testJsop(){
         try  {
             Connection conn = Jsoup.connect( "https://passport.jd.com/new/login.aspx" );
             conn.data( "loginname" , "test1" );
             conn.data( "loginpwd" , "test1" );
             conn.timeout( 30000 );
             Document doc = conn.post();        
             System.out.println(doc);
         catch  (IOException e) {          
             e.printStackTrace();
         }
     }      
     public  static  void  main(String[] args) {
         Test t =  new  Test();
         t.testJsop();
     }      
}

 五.cookies的管理

  在我们登录后,保存此次登录的cookies,这样,后续的操作才可以继续进行,Jsoup提供了很简便的方式来保存cookies  

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
public  class  Test {      
     public  void  testJsop(){
         try  {
             Connection conn = Jsoup.connect( "https://passport.jd.com/new/login.aspx" );
             conn.data( "loginname" , "test1" );
             conn.data( "loginpwd" , "test1" );
             conn.timeout( 30000 );           
             conn.method(Method.POST);
             Response response = conn.execute();
             Map<String, String> cookies = response.cookies();
             Document doc = Jsoup.connect( "http://order.jd.com/center/list.action" )
                 .cookies(cookies)
                 .timeout( 30000 )
                 .get();
         catch  (IOException e) {          
             e.printStackTrace();
         }
     }      
     public  static  void  main(String[] args) {
         Test t =  new  Test();
         t.testJsop();
     }      
}

 上面的示例中,可以看出,要取得cookies,必须要有个Response的对象,所以,要用execute方法,如果直接用post方面,返回的则是Document对象,但在用execute方法时,要事先调用一下method方法设定好请求方式即可。


http://www.niftyadmin.cn/n/843937.html

相关文章

信管师培训之第五节课作业(项目进度管理+项目成本管理)

项目进度管理和项目成本管理重点要点梳理文档转载于:https://blog.51cto.com/11149618/1758171

jQuery 追加元素的方法如append、prepend、before

http://www.jb51.net/article/45810.htm转载于:https://www.cnblogs.com/xtdxs/p/6653144.html

简单意义上的桶排序

简单意义上的桶排序: 桶排序的原理是先安排N1个桶作为容器,若数据范围为N的话。然后将测试数据(所需排序的数据)进行循环&#xff0c;放入对应的桶内。数据一定是在范围N内的。最后,循环桶里的元素,并且输出,进行从大到小或从小到大的排序。例如: 我们的取值范围是10,那么就要定…

建立IP6隧道

某站点又开始全站Free了&#xff0c;是否还在为在家上不了IPv6站点而苦恼呢&#xff1f;本教程适用于路由后的windows设备&#xff0c;即ip地址为内网地址通过本教程设置&#xff0c;可实现windows设备获得ipv6地址&#xff0c;以访问IPv6站点&#xff0c;不管你是通过LAN口还是…

Apache Beam 的Spark Streaming 示例

为什么80%的码农都做不了架构师&#xff1f;>>> 应网友要求&#xff0c;需要使用Beam&#xff0c;底层使用Spark 接受 Kafka 流数据。 我看了下源码的实现&#xff0c;这里只是给出Demo&#xff0c;没有做测试&#xff0c;具体执行&#xff0c;自行做测试使用&…

OpenDoc - 项目代码整理指南

作者介绍&#xff1a;刘露茜&#xff0c;同济大学研究生&#xff0c;美团点评点餐团队成员。OpenDoc我们将团队内部的部分文档经过编辑分享出来&#xff0c;主要出于以下考虑&#xff1a;我们希望有志于加入团队的朋友能得到同等的信息&#xff0c;做好相应的准备团队的工作经验…

忘记Linux root 密码

2019独角兽企业重金招聘Python工程师标准>>> 操作步骤 一、重启系统&#xff0c;在开机过程中&#xff0c;快速按下键盘上的方向键↑和↓。目的是告知引导程序&#xff0c;我们需要在引导页面选择不同的操作&#xff0c;以便让引导程序暂停。 以下是暂停后的界面&a…