SDK测试标准
| 测试分类 | 具体测试项 | 测试内容 | 测试方法 |
| 文档测试 | 接口清单 | 接口清单是否完整,正确,包含提供给开发者的协议所有字段的定义和解释 | 人工检查 |
| 更新说明 | 要说明新增,删除的接口定义 | ||
| Demo示例 | 显示如何调用接口实现具体的功能 | ||
| 开发文档 | 有明确定义本SDK的大小,性能指标 | ||
| SDK大小 | 符合设计规格标准(有要求SDK大小时确认) | ||
| 功能测试 | 界面测试 |
提供界面的正确性是否达到设计文档意图并易于理解(带UI界面的SDK) |
人工检查 |
| 接口测试 |
1、校验输入参数的各种输入情况能正确处理,返回结果(参数,返回值)和协议一致 2、测试场景完整。 请求成功或失败都能按预期处理;失败场景错误码提示和返回正确 3、对必传字段有校验是否为空的情况 4、响应请求发送次数正确,不存在多发或者少发。是否有回调,符合设计预期 5、删除,新增接口后,对老接口功能没有影响 6、输入异常(空值、非设定值、超出限定值、长时间占用、轮询等) 7、服务端返回异常 |
自动化(Demo、客户端脚本) |
|
| 数据测试 |
1、各个场景下的数据是否正确缓存和存储 2、数据打点上报测试 |
人工检查 | |
| 权限测试 | 针对SDK的权限进行授权、取消 | 人工检查 | |
| 混淆包测试 | 如果SDK需要提供混淆包,需要进行混淆包的基本功能测试(S+A用例) | 人工检查 | |
| 自动化测试 | 单元测试、脚本测试 | 自动化工具 | |
| 多语言测试 | 新增词条、修改词条的多语言测试(不涉及海外业务可选) | 人工/自动化 | |
| 性能测试 | 性能监控 |
1、SDK初始化耗时、流畅度、I/O监控、SQLite监控、卡顿 2、内存泄漏 3、重要场景内存测试 4、SDK流量消耗 5、SDK并发性能:接口并发性能,并发压力测试 |
人工/自动化 |
| 电流测试 |
1、大版本必做;迭代版本组内评估。 2、SDK工作电流与历史版本的比对 |
人工(电流仪) | |
| 稳定性 |
1、考察业务场景在一定压力下,持续运行一段时间(10小时),接口功能和设备资源占用无异常(针对有UI界面的SDK) 2、需要有防止自身服务被频繁调起的防呆机制 3、调用方测试SDK写入日志事件足够多时,日志文件大小是否可控 |
自动化(Demo) |
|
| 兼容测试 | 设备平台兼容 |
1、Android 系统版本兼容、ColorOS版本兼容 2、分辨率、屏幕大小、横竖屏、字体兼容 3、网络环境兼容(无网、弱网、WIFI、网络切换) 4、新旧数据兼容( 用户数据:旧版本未登陆,旧版本登陆无操作,旧版本有数据) 5、APP兼容(强依赖APP需兼容APP所有版本,无强依赖的验证APP基本功能是否正常) |
人工/自动化 |
| 监控平台 | 线上异常率监控 |
监控平台 |
人工/自动化 |
| 发布测试 | 发布检查测试 | SDK检查默认环境Release、日志是否可关闭、是否有依赖snapshots包 | 人工检查 |
SDK测试标准的更多相关文章
- 【Android类型SDK测试(二)】环境基础
(一)语言 Android使用的Java语言,所以要测试Android类型的SDK,Java的基础知识还是需要的. 另外,Android中有NDK类型的编程,需要知道C相关的知识. (二)环境准备 A ...
- 【Android类型SDK测试(一)】认识Android类型的 SDK
(一)SDK是个什么东东 接触软件相关行业的同学都应该知道,SDK(即 Software Development Kit),软件开发包.其作用就是为开发某些软件提供一些便利的东西,包括工具 集合,文档 ...
- 客户端SDK测试思路
本文来自网易云社区 作者:万春艳 是什么 客户端SDK是为第三方开发者提供的软件开发工具包,包括SDK接口.开发文档和Demo示例等.SDK和应用之间是什么关系呢?以云信即时消息服务为例,如下图所示, ...
- 打造游戏金融小程序行业测试标准腾讯WeTest携各专家共探品质未来
在获客成本不断上升的时代里,产品品质愈发是互联网应用的决胜标准.随着用户需求更加多样,开发者不仅要深挖应用功能,更需要面向业务所在领域,建立全面.专业的测试架构,掌控开发进度.提高开发效率,才能在互联 ...
- PETS渗透测试标准总结
国外的标准框架,感觉大部分渗透公司的测试指南都是从这俩借鉴的,正好复习下. 国外渗透测试标准:http://www.pentest-standard.org 渗透测试分为:前期交互,情报搜集,威胁建模 ...
- SDK测试操作文档
准备所需材料 先把下列所需压缩包和文件传到虚拟机中. crypto-config压缩包存放order和peer节点所需要的证书文件(需要的是申请联盟链中的order和peer的证书文件) m2压缩包是 ...
- CODING DevOps 线下沙龙回顾二:SDK 测试最佳实践
讲师:潘志刚 声网质量效能部门负责人,超过 14 年服务器.移动终端.音视频编解码以及汽车电子等跨行业从业经历,负责建立测试基础架构和自动化测试方案,主持搭建持续集成测试生态体系.现任声网质量效能部门 ...
- SDK测试实践
最近开始接SDK的测试项目,因为之前没有接触过,还是很新奇的,记录一下测试方法. 大家都知道SDK其实就是一个基础工具包,我的理解,对于安卓和IOS来说,SDK就是一个应用程序的基础包,在SDK的基础 ...
- python测试标准库doctest
引言: doctest是python的一个测试用标准库. 顾名思义,这个模块会寻找程序里面看起来像交互式Python会话的文本片段,然后运行这个会话,来判断实际运行结果和你希望的结果是否一致. 这个模 ...
- 测试&标准说明文章
这是一篇测试用文章,主要想想怎么把纸质本上的习惯沿袭到博客上来 #coding=utf-8 import sys def main(): print "this is some code f ...
随机推荐
- linux 部署python 系统服务管理命令 yum源设置 linux定时任务 python在linux的虚拟环境安装以及使用
安装python3 三种方式 ==linux下很多脚本默认都用python2, 所以不要把python3的执行文件改为python,因为linux里默认python就是运行python2版本 == y ...
- 为什么JAVA中(byte)128结果为-128;(byte)-129结果为127
为什么JAVA中(byte)128结果为-128;(byte)-129结果为127 在JAVA中默认的整型为int型,int型占4个字节,为32位.byte占一个字节为8位. JAVA中的二进制都是采 ...
- Python3之并发(五)---线程条件(Condition)和事件(Event)
一.线程条件Condition(条件变量) 依赖锁对象(Lock,RLock),锁对象可以通过参数传入获得,或者使用自动创建的默认锁对象当多个条件变量需要共享同一个锁时,建议传入锁对象 除了带有获取到 ...
- Unity3D——关于质量的设置
在Unity3D中,你开发一款游戏,可能需要同时发布到不同平台中.比如,对于PC平台,你可能需要引擎打包高质量的材质纹理,光照图信息.而对于Mobile平台,由于CPU上载数据到GPU需要一定宽带,想 ...
- HCIA-ICT实战基础09-远程接入安全管理
HCIA-ICT实战基础-远程接入安全管理 目录 AAA概述 AAA配置实现 telnet原理与配置 Stelnet(华为ssh的另一种称呼)配置 1 AAA概述 1.1 基本概念 AAA是Authe ...
- 快速搭建一个spring cloud 子模板--好记性不如烂笔头
建 application.yml 文件 server: # 服务端口号 port: 7609spring: application: # 服务名称 - 服务之间使用名称进行通讯 name: serv ...
- redis分布式锁实现,setnx,nodejs版本
const redis = require('ioredis'); const clienId = Math.random() * 100; //模拟客户端Id const lockKey = 'te ...
- 简述ECMAScript6的新特性
1.增加块级作用域 2.增加let const 3.解构赋值 4.函数参数拓展(函数参数可以使用默认值,不定参数及拓展参数) 5.增加class类支持 6.增加箭头函数 7.增加模块和模块加载(ES6 ...
- 20211306 实验一《Python程序设计》实验报告
202111306 丁文博 第一次实验报告 课程:<Python程序设计> 班级: 2113 姓名: 丁文博 学号:20211306 实验教师:王志强 实验日期:2022年3月24日 必修 ...
- python机器学习——SVM支持向量机
背景与原理: 支持向量机是一种用来解决分类问题的算法,其原理大致可理解为:对于所有$n$维的数据点,我们希望能够找到一个$n$维的直线(平面,超平面),使得在这个超平面一侧的点属于同一类,另一侧的点属 ...