OTA
升级测试
- 软件方面测试【different version】
- 硬件方面测试【HVT-DVT-PVT】
升级类型
OTA |
SYSTEM |
force update | |||
normal update |
silent update |
71 mins | |||
24 h | |||||
sideload update | |||||
APP |
manual update | ||||
NOTE |
1.APP update not support sideload update. |
2.system update will reboot the device, app update just update in page. |
升级条件
升级条件 |
电量 |
over 30% |
Y |
below 30% |
N | ||
内存 |
cache memory full |
Y | |
device memory full |
N | ||
cache + device memory full |
N |
测试要点
软件角度
正常升级
- UI
- Time taken
- Power
- 流量使用
- Base function
- Data
- Settings
- 中断
异常升级
(1) 网络
(2) 电量
(3) 内存
(4) reboot
- 升级文件错误
(1) 升级文件错误
(2) 升级文件多了
硬件角度
升级测试需要对各种机型进行覆盖测试。
PART |
TEST ITEM |
DETAILS | |
UI |
SYSTEM |
正在验证 | |
正在下载 | |||
正在启动 | |||
正在更新 | |||
更新成功 | |||
no text page | |||
正在启动 | |||
APP |
正在下载 | ||
正在安装 | |||
更新成功 | |||
Function |
what's new |
| |
crash |
| ||
time taken |
| ||
base function as before |
| ||
DATA |
register state[kindle+migu] |
| |
phone | |||
| |||
ODAC | |||
settings |
reader settings | ||
device settings | |||
SSB | |||
content |
home page | ||
library | |||
interrupt |
wifi[downloaded or not] |
hidden network | |
slow network | |||
switch wifi | |||
airplane mode | |||
out of wifi | |||
power[downloaded or not] |
30+ | ||
30- | |||
memory full[[downloaded or not]] |
cache full | ||
device full | |||
cache + devcie full | |||
reboot |
downloading | ||
installing | |||
bin file |
push form KOTA |
wrong bin file | |
more than 2 file | |||
sideload |
wrong bin file | ||
more than 2 file |
学习文案
从已有的项目经验来看,APP的升级测试需要考虑以下几个方面:
正常的下载升级过程
- 考虑iOS和安卓的下载渠道不同
iOS的下载来自于AppStore
Android的升级来自于官网下载或者是各个渠道
- 考虑网络的影响
2G/3G/4G wifi下是否都能正常升级或者能够基于流量的影响进行智能下载
- 考虑中断下载和升级过程后是否和继续或者重新下载和升级
手动中断后可以继续进行相关操作
- 考虑断电和内存不足的问题
能够继续进行相关升级,对于内存有友好的提示
- 考虑应用权限问题
如果新版本对于应用权限有了扩展,需要进行权限确认
- 考虑不同机型
升级测试需要对各种机型进行覆盖测试
选择升级情况下旧版本的兼容性
如果不是强制升级,那新旧版本的app同时运行时必不可少的,此时需要考虑新旧版本并行时后台接口的兼容性。在进行旧版本功能兼容性验证时,可以进行主要流程的测试和变更的接口影响到的功能详细验证,这样可以缩小测试范围,减少测试时间同时又能保证相应的变更都进行了测试。
覆盖升级后新版本的使用情况
- 除了新版本自身的新功能验证之外,要进行主要业务流程的验证。
- 在覆盖升级前,需要模拟使用旧版本的用户进行缓存数据的创建,然后进行升级,确认缓存数据升级后可以正常显示,相关功能工作正常。