百晓生说测试

百晓生说测试

关注
发信
关注(28)粉丝(399)

Postman 做接口自动化测试 - 入门篇

  • 可能是目前最好用的web接口调试工具
  • 无需注册（注册后可多终端同步用例）
  • 免费（每年付费$60可用云服务，30天免费试用）
  • 保存历史记录
  • 支持录制请求
  • 基于Chrome的V8引擎，支持JS脚本（基本支持ES6，浏览器相关对象和API和require() import等除外）
  • 同样的代码和用例可用于自动化接口测试，见它的命令行版本Newman介绍
  • 能生成各种语言的HTTP请求代码模板
  • 能生成比较好看的在线API文档（支持MarkDown）
  • 提供简易版持续集成（Monitor功能，只支持公网IP的请求…不如Jenkins实用）

选它的做自动化测试的理由：

  • 满足互联网公司的多数场景
  • 超轻，比另一个热门选择——JMeter门槛低、开发效率高、界面顺眼
  • 开发几乎人手一个，容易沟通，容易推动开发自测
  • 容易拉功能测试入坑，发生人员变动时容易交接

不选它的理由：

  • 功能受限：Postman运行在沙盒里，Newman虽然基于Node.js，但一套脚本2边共用决定了它的功能不能比Postman多，无法用在以下场景：
    • 需要读写文件
    • 需要读写数据库
    • 需要引入外部库，如不常见/自定义的加密方式
    • 非HTTP协议
  • 毕竟是调试小工具出身，和成熟的自动化测试框架在管理用例、代码复用、稳定性、报告，甚至易用性上都有明显差距，用的人要有足够能力从坑里爬出来
  • 如果项目经常用JMeter做接口测试，有人足够熟悉JMeter，可以考虑把脚本拆分到单个接口的粒度，花点功夫把功能和性能自动化都做了，不用维护2套
  • 如果全英文和缺乏中文资料也算的话

安装

www.getpostman.com/apps

建议选择Mac/Windows app，比起Chrome app，下载不需要翻墙，功能更强大

基本使用

教程

示例

Postman Echo

Cooper's Meal Plan

Spotify Playlist Generator

CurencyCloud的Postman集合和使用说明

录制接口

接口调用方希望测试业务逻辑时，用不着Fiddler/Charles抓包再往里面一个个填这么麻烦
开启Postman的代理（默认5555端口），浏览器/手机设好对应的IP和端口就行

支持正则表达式过滤URL，建议排除掉静态资源、流量统计站和别的后台进程时不时请求的网站
baidu|google|microsoft|github|qq\.com|.*\.(html?|css|js|png|jpe?g|webp|ico)$

可以设置保存的位置：
如果所有操作步骤都要做接口测试，建议直接保存到目标集合
如果一大堆操作里只取其中一个到几个接口，建议保存到历史记录，挑出想要的另存到目标集合，不用浪费时间删

Collection Runner

  • 适合一次运行/调试多个用例
  • 适合开发自测接口性能（例如循环个10000次），至少响应时间和稳定性都过关了才交给别人调用
  • 跟Newman一样的运行环境，跟Newman一样默认不保存环境变量，跟Newman一样可以载入数据文件，适合用界面调通了用例再放到命令行做持续集成

【特别注意】

各个集合之间、同一集合各个文件夹之间、同一集合放文件夹和不放文件夹的用例之间，不能有任何依赖关系

Postman/Newman是用JS写的，批量执行的最小粒度是文件夹
单线程异步的性质决定了文件夹的执行顺序跟看上去的排列顺序没有任何关系

只有同一文件夹内的用例，或直接放集合下的用例，执行的顺序跟看上去的顺序一样

每个集合测1个方面，集合内每个文件夹测1个完全独立的子场景

此外

  • 目前集合下只支持1级文件夹，不推荐场景搞太复杂，用例管理起来有难度
  • 目前集合和文件夹只能按字母顺序排序，用例可以拖动排序
  • 目前搜索不能搜到URL地址，建议用例名写成 /path/to/api 接口描述，方便看和搜索
  • 如果打算做自动化和持续集成，集合、文件夹的名字建议英文无空格，方便命令行调用

流程控制

只有在collection runner或Newman里才生效（在普通界面你选哪个发送就是哪个）

/* 假设2个用例的顺序为：
用例A
用例B

如果希望执行顺序为： 用例A -> 用例B -> 用例A，又不想复制一份用例A，那么
*/

// 用例A的Tests里写
if (xxx) postman.setNextRequest('null');  // 终止执行

// 用例B的Tests里写
postman.setNextRequest('用例A');

// 【注意】如果不设终止条件，用例A执行完到用例B，用例B执行完又指向用例A，会构成死循环

// PS：postman是Postman提供的全局对象

断言

在主界面可以靠肉眼看返回结果，但在collection runner/Newman里如果不加断言，跑完没法知道是成功还是失败
断言写在Tests标签页里，上手可以参考文档和界面右边的代码模板：

tests['Status code is 200'] = responseCode.code === 200;  // 推荐用全等 ===，确保类型和值都一致
tests['Response time is less than 200ms'] = responseTime < 200;
tests['Body matches string'] = responseBody.has('xxx');  // 只要有指定关键字就行，在哪、有几个等都不管
tests['Content-Type is present'] = postman.getResponseHeader('Content-Type') || false;

// Postman的断言实际上就是往全局对象 tests 添加键值对
// 它的key会显示在报告界面上，value是可以解析为boolean的表达式
// 如果得出的值是true，在报告里显示为成功，false失败

// 【变通】用总是为真的断言来显示信息
tests[`[INFO] Request params: ${JSON.stringify(request.data)}`] = true;  // 显示所有请求参数（在自动化测试里很有用）
tests[`跑第${iteration + 1}次`] = true;  // 用在runner里循环很多次时
// 迭代次数 iteration 是Postman提供的全局变量，从0开始

// PS：request是Postman提供的全局对象
// responseCode（对象）、responseTime（数字）、responseBody（字符串）目前是Postman收到服务器返回内容才声明的变量

// 【注意】如果你在做自动化测试，目前在接口超时没返回时：
// responseCode、responseTime、responseBody都没定义，使用时会导致脚本出错，判断是否超时没返回的只能靠header
// request.data里的变量在超时时不解析，很容易让人误会请求参数传错了，建议此时不显示这行

关于'use strict';

因为Postman提供了不少全局变量，写了'use strict';会在用到这些变量的地方出警告提示
如果平时有养成好习惯，不用容易出错的写法，不写它也没关系

提取接口返回值

返回JSON时

let json = JSON.parse(responseBody);  // responseBody是包含整个返回内容的字符串
// 提取某字段的值：
let foobar = json.foo.bar[0].foobar;  // 假设结构为 {"foo": {"bar": [{"foobar": 1}, {"baz": 2}]}}

// 想用在自动化测试可以多写点：
let json;
try {
  json = JSON.parse(responseBody);
} catch (err) {
  tests['Expect response body to be valid JSON'] = false;
  tests[`Response body: ${responseBody}`] = true;
  console.error(err);
}

返回HTML时

// A. 用正则表达式匹配
let foo = responseBody.match(/foo/g);  // g 全局 i 不分大小写 m 多行
tests['blahblahblah'] = foo[0] === 'bar';
// 正则里包含变量时：
let foo = 'xxx';
let bar = responseBody.match(new RegExp(`^${foo}.*
, 'g');

// B. 用CheerioJS库：
let html = cheerio(responseBody);
let titleText = html.find('title').text();  // 取 标签里的文字
</code></pre>

<blockquote>
<p><a href="http://blog.getpostman.com/2016/08/30/jquery-replaced-by-cheeriojs-in-postman-sandbox/">jQuery replaced by CheerioJS in Postman Sandbox</a>, 2016-08-30</p>
</blockquote>

<hr>
<h3>设置环境变量</h3>
<blockquote>
<p><a href="https://www.getpostman.com/docs/environments">Setting up an environment with variables</a>  </p>
</blockquote>

<p>Postman的环境变量分为 environment 和 global 2种</p>

<p>实际上就是<code>environment</code>、<code>globals</code>这2个全局的对象（字典）里的内容<br>
它们的key作为变量名，value作为变量的值 </p>
<h4>environment</h4>
<p>满足99%的需要，平时只用它就够了，global留到后文讲</p>

<ul>
<li>作用域为整个集合</li>
<li>能创建多个environment文件，方便切换不同测试环境</li>
</ul>

<p>在地址栏、header、请求参数、外部数据文件里，用 <code>{{变量名}}</code> 获取环境变量的值<br>
如：<code>{{URL}}/path/to/api</code></p>

<p>（更常见的<code>${}</code>在JS的ES6语法里被占用了，Postman只能选这么个奇怪写法）</p>

<p>在<code>Pre-request Script</code>和<code>Tests</code>的代码里略有不同：</p>
<pre><code>/* 官方提供的方法 */
// 设置
postman.setEnvironmentVariable('variableKey', value);
// 注意：通过菜单或以上方法设置的环境变量，值会转成字符串，取的时候要转换

// 获取
let foo = postman.getEnvironmentVariable('variableKey');
// 字符串数字转数字：Number(foo)
// 字符串'true' 'false'转布尔值：Boolean(foo) 或 !!foo

// 更新
// 就是再设置一次同名的环境变量，换别的值

// 清除环境变量
postman.clearEnvironmentVariable('variableKey');
</code></pre>
<pre><code>/* 懒人版 */
// 既然知道实际上是操作 environment 对象，如果你有JS基础，可以直接：
// 添加key
environment.variableKey = 12345;  // 少打字，取出时也不用转换类型
// 获取
let foo = environment.variableKey;
// 清除
delete environment.variableKey;
// obj.foo = undefined; 的写法无效，Postman把undefined转成了字符串……

// 如果你非要跟自己过不去，用了变量名不允许的字符做key（比如有空格），只能写成 environment['variableKey']

// 只要没跟自己过不去，可以用ES6的对象解构语法一次取多个：
let {key1, key2, key3} = environment;
</code></pre>

<p>【注意】  </p>

<p>在Postman主界面运行过后，通过代码设置的环境变量会存到IndexedDB，跟在菜单里设置一样，用例跑完不消失  </p>

<p>但在collection runner或Newman跑则是默认不保存，跑完就消失，做自动化测试时要注意</p>

<hr>
<h3>动态请求参数</h3>
<p>在runner里循环发n次请求/做自动化测试时，有些接口不适合写死参数  </p>

<ol>
<li>Postman有以下内建变量，适合一次性使用：</li>
</ol>
<pre><code>{{$guid}}  // 生成GUID
{{$timestamp}}  // 当前时间戳
{{$randomInt}}  // 0-1000的随机整数
</code></pre>

<ol>
<li>参数依赖上一个请求的返回：</li>
</ol>

<p>上个请求的<code>Tests</code>里提取参数存环境变量，这个请求里用<code>{{变量名}}</code>取值</p>

<ol>
<li>参数每次都不同，但之后的断言或别的请求里可能还要用：</li>
</ol>

<p>在<code>Pre-request Script</code>里写代码处理，存为环境变量，参数里用<code>{{变量名}}</code>取值</p>

<p>例如</p>
<pre><code>const randomInt = (min, max) => Math.floor(Math.random() * (max - min + 1)) + min;  // 随机整数
const getRandomValue = list => list[randomInt(0, list.length - 1)];  // 随机选项

// 随机手机
environment.randomMobile = `18${randomInt(100000000, 999999999)}`;
// 随机设备名
environment.randomDevice = getRandomValue(['ios', 'android']);
</code></pre>

<p>Postman目前没有很方便的重用代码的手段，编辑框也不是IDE，没智能提示，尽量别整那么复杂</p>

<hr>
<h3>调试</h3>
<p><code>cmd + alt + c</code>（Windows <code>ctrl + alt + c</code>）打开Postman控制台，可以看请求和响应内容</p>

<p>用<code>console.log()</code>打印，到控制台看<br>
或<code>tests['这里拼出你想看的字符串'] = true</code>在界面/报告看断言</p>

<hr>
<h3>mock</h3>
<blockquote>
<p><a href="http://blog.getpostman.com/2016/01/26/using-a-mocking-service-to-create-postman-collections/">Using a mocking service to create Postman Collections</a>，2016-01-26</p>
</blockquote>

<hr>
<h3>global</h3>
<p><strong>不做自动化测试可以跳过这段</strong></p>

<p>跟environment几乎完全一样，在地址栏、header、请求参数、外部数据文件里也是<code>{{}}</code>调用，除了：</p>

<ul>
<li>只有1个global文件</li>
<li>菜单藏得较深，在生成的API文档里也不解析，决定了它不适合做参数化</li>
<li>environment和global同名时，优先用environment</li>
</ul>

<p>global只建议用在1种场景：<strong>定义公共函数</strong></p>

<p>先正常地写好函数，再用<a href="http://tool.lu/js/">在线压缩工具</a>压成一行<br>
在菜单里选 Bulk Edit，以每行一对 key:value 的形式编辑，变量名做key，函数做value</p>
<pre><code>assertNotTimeout:var hasResponse=postman.getResponseHeader('Content-Type')?true:false; if(!hasResponse) tests['服务端在超时前没返回任何数据，请检查相关服务、网络或反向代理设置（以下跳过其他断言）']=false;
logParams:if(hasResponse) tests[`[INFO] 请求参数（超时没返回时不解析）：${JSON.stringify(request.data)}`]=true;
getResponseJson:try{if(hasResponse) var json=JSON.parse(responseBody);}catch(err){ tests['服务端没返回合法的JSON格式，请检查相关服务、网络或反向代理设置（以下跳过其他断言）']=false; tests[`[INFO] 返回：${responseBody}`]=true; console.error(err);}
assertType:var assertType=(name,value,type)=>{let isType=(type==='array')? Array.isArray(value):typeof value===type; tests[`${name}为${type}（实际值：${value}）`]=isType;};
assertEqual:var assertEqual=(name,actual,expected)=>{tests[`${name}等于${expected}（实际值：${actual}）`]=actual===expected;};
assertNotEqual:var assertNotEqual=(name,actual,expected)=>{tests[`${name}不等于${expected}（实际值：${actual}）`]=actual!==expected;};

// 注意在这里定义变量只有 var 的作用域够大，用 let 或 const 的话eval后就销毁了
</code></pre>

<p>假设返回 <code>{"name":"张三","userType":1,"settings":[]}</code>，在<code>Tests</code>里一上来就写：</p>
<pre><code>eval(globals.assertNotTimeout);  // 判断是否超时（通过有没有Content-Type请求头），超时则断言失败
eval(globals.logParams);  // 如果不超时，显示发出的请求参数
eval(globals.getResponseJson);  // 如果不超时，解析返回的JSON对象，赋给json变量，返回值不合法则断言失败

// 下面定义了3个公共函数，免得每次断言都要写一大串：
eval(globals.assertType);
eval(globals.assertEqual);
eval(globals.assertNotEqual);

// 上面3个基本满足日常使用需要
if (json) {
  assertType('用户名', json.name, 'string');  // 在报告中显示为： '用户名为string，（实际值：张三）'
  assertType('设置', json.settings, 'array');  // JS里其实没有array类型（数组是object），这里做了处理，让报告更好懂

  assertEqual('用户类型', json.userType, 1);  // 显示为： '用户类型等于1，（实际值：1）'
  assertNotEqual('用户类型', json.userType, 2);  // 显示为： '用户类型不等于2，（实际值：1）'
}
</code></pre>

<p>在官方给出更方便的重用代码的方法前，这是除了复制粘贴外唯一的重用方法<br>
如果不做自动化测试，且断言写得很简单，不建议这么搞  </p>

<p>如果不幸跳了自动化的坑，通常一个项目会有100~200个接口要做自动化测试，要仔细比较哪种方法成本更高<br>
定义函数前要仔细考虑好，万一中途要改参数和返回值，已经写好的n份也得改……</p>

<p>建议定义的公共函数不超过个位数，并保留好没压缩的版本，不然别人没法接手</p>

<blockquote>
<p><a href="http://blog.getpostman.com/2015/09/29/writing-a-behaviour-driven-api-testing-environment-within-postman/">Writing a behaviour driven API testing environment within Postman</a></p>
</blockquote>
<pre><code>// 如果确实要在代码里设global
// 官方的：
postman.setGlobalVariable('variableKey', value);  // 同样存成字符串
let bar = postman.getGlobalVariable('variableKey');
postman.clearGlobalVariable('variableKey');
// 或者自己操作 globals 对象
</code></pre>

<hr>
<h3>数据文件</h3>
<p><strong>不做自动化测试可以跳过这段</strong></p>

<blockquote>
<p><a href="https://www.getpostman.com/docs/multiple_instances">Using data variables to run a collection multiple times</a><br>
<a href="http://blog.getpostman.com/2014/10/28/using-csv-and-json-files-in-the-postman-collection-runner/">Using CSV and JSON data files in the Postman Collection Runner</a>, 2014-10-28
<a href="http://blog.getpostman.com/2014/02/20/using-variables-inside-postman-and-collection-runner/">Using variables inside Postman and Collection Runner</a>, 2014-02-20</p>
</blockquote>

<p>在collection runner或命令行的Newman里可以加载数据文件  </p>
<pre><code>/* JSON格式 */
// 文件里有且只有1个数组，每个对象算1条用例（在Postman里的全局变量叫做data）
// key作为变量名，value作为变量的值

// 文件里依然可以用 {{}} 拿到环境变量，注意不要把自己绕进去：
// 如果是Pre-request Script里生成的环境变量，直接写进请求参数，不用经这里
[
  {"mobile": "17000000001", "pwd": "123456"},
  {"mobile": "17000000002", "pwd": "654321"},
  {"mobile": "17000000003", "pwd": ""},
  {"mobile": "{{ADMIN_MOBILE}}", "pwd": "{{ADMIN_PWD}}"}
]

// 显然，这是json文件，并不能在里面写代码（除非你蛋疼在value里写字符串然后在用例里eval）

// 用例的请求参数里依然用 {{key}} 拿到数据文件里的值，代码里则是 data.key
// 如果key跟environment/globals里的key重名，这里的 > environment > globals

/* CSV格式 */
// 第1行变量名，下面是值，每行1条用例，没有空格
// 没JSON格式的数据文件灵活
mobile,pwd
17000000001,123456
17000000002,654321
17000000003,
</code></pre>

<p>【注意】</p>

<p><strong>谨慎使用</strong>。这东西增加了调试和定位问题的复杂性，也就大大增加了维护成本<br>
而它带来的收益并不明显：</p>

<ol>
<li>针对单个接口的简单压力测试</li>
</ol>

<p>Postman不是正经的压测工具，既然选择了它就是图简单方便<br>
像JMeter那样用CSV文件做数据源的意义不大，还得另外写程序/脚本生成这样的文件，时间上不划算<br>
直接用代码生成数据就好，不差那一两毫秒</p>

<ol>
<li>数据驱动测试：一条用例测多种参数组合，包括合法和非法值，避免复制粘贴n条略有不同的</li>
</ol>

<p>很诱人，但是</p>

<ul>
<li>产品设计时有考虑异常情况吗？</li>
<li>需求来源是否统一？</li>
<li>需求是否足够稳定？</li>
<li>整个项目有统一的异常处理规范还是看开发个人习惯？</li>
</ul>

<p>如果不确定有些输入要不要/怎么处理，意味着改动可能会非常大<br>
今天非法，明天变合法，后天又变非法  </p>

<p>如果冒烟用例用在持续集成，有测试不通过会阻止发布，会严重干扰正常发版，也影响大家对自动化测试的信心</p>

<p>此外</p>

<ul>
<li>内部的基础组件为了不同项目通用，可能会允许看起来相当没道理的值</li>
<li>不对外暴露的接口为了性能，可能会有意去掉所有校验</li>
</ul>

<p>不要因为所谓“测试思维”，就在不了解的情况下为了测试而测试<br>
这种力气留到探索性测试和安全测试，自动化测试还是要讲求稳定和省事</p>

<p>此外</p>

<ul>
<li>为了能匹配正常和异常情况（和具体哪一种异常情况），断言必须写得比平时复杂</li>
<li>然后你会希望把断言条件也写进数据文件里，一种格式，eval后到处通用</li>
<li>然后数据文件的格式会变得远比上面的示例复杂</li>
<li>然后你会准备一键生成模板的脚本，批量修改的脚本，封装Newman的脚本，一个框架的雏形……别问我怎么知道的</li>
</ul>

<p>然后你回过头发现，一开始不用数据文件不就省事多了？！  </p>

<hr>
<h3>收费功能</h3>
<p>目前管理员不能解散自己创建的团队，不能删别人创建的环境变量模板，几乎残废<br>
不是太推荐交钱</p>
<h4>团队协作</h4>
<blockquote>
<p><a href="http://blog.getpostman.com/2016/10/27/new-more-useful-activity-feed-in-postman-collections/">New, More Useful Activity Feed in Postman Collections</a>, 2016-10-27<br>
<a href="http://blog.getpostman.com/2016/03/10/environment-sharing/">Announcing: Environment Sharing!</a>, 2016-03-10</p>
</blockquote>
<h4>让用户自己跑测试</h4>
<p>例如你要发布SDK，页面里可以带上跑Postman测试的按钮</p>

<blockquote>
<p><a href="http://blog.getpostman.com/2016/01/28/the-run-in-postman-button-for-improved-documentation/">Call for Partners: The Run in Postman Button for API documentation</a></p>
</blockquote>
        </article>

最后感谢每一个认真阅读我文章的人，礼尚往来总是要有的，这些资料，对于【软件测试】的朋友来说应该是最全面最完整的备战仓库，虽然不是什么很值钱的东西，如果你用得到的话可以直接拿走：

Postman 做接口自动化测试 - 入门篇-LMLPHP

这些资料，对于【软件测试】的朋友来说应该是最全面最完整的备战仓库，这个仓库也陪伴上万个测试工程师们走过最艰难的路程，希望也能帮助到你！ 

Postman 做接口自动化测试 - 入门篇-LMLPHP

03-01 09:50
Powered by LMLPHP ©2024 百晓生说测试 0.007322