AliOS-monkey测试汇总

发布时间 2023-11-01 13:26:15作者: 勾影变形计

一、什么是monkey测试

 

 

 

Monkey测试是一种软件测试类型,测试人员在没有预定义测试用例的情况下,应用随机测试用例测试程序,并检查系统行为。Monkey测试的目的是使用探索性技术来发现错误1。

Monkey测试是一种黑盒测试。当测试人员为了编写和执行函数而出现时间不足时,就可以进行此测试。

其特点如下2:

  • 这种测试是随机的,测试人员可能无法重现错误/缺陷。
  • 场景可能无法定义,也可能不是正确的业务案例。
  • 易于发现新的错误类型,易于执行,成本更低。

基于Monkey测试,Android、IOS、AliOS均有相应测试工具。可以运行在实体设备/模拟器中,模拟用户触摸屏幕、单指滑动、多指滑动、按键等操作来对设备上的程序进行压力测试,从而检测系统的稳定性。3

以下是AliOS系统,Monkey测试的命令(均已进入AliOS系统shell),基本与Android系统保持一致。

二、基本语法

1
monkey [options]

 

如果不指定options,Monkey将以无反馈模式启动,并把事件任意发送到安装在目标环境中的全部应用程序

1
monkey -p package -v 500

指定对package这个应用程序进行monkey测试,并向其发送500个伪随机事件。其中 -p 表示对象包,–v 表示反馈信息级别

三、命令参数

可以使用命令 monkey -help查看命令参数

1
2
3
4
5
6
7
8
9
>>> monkey -help
usage: monkey [-p ALLOWED_PACKAGE [-p ALLOWED_PACKAGE] ...]
              [--specialtest]
              [--ignore-crashes] [--ignore-timeouts]
              [--ignore-system-exception]
              [--monitor-native-crashes] [--ignore-native-crashes]
              [--kill-process-after-error]
              [--disable-effective|--enable-effective [--enable-uiautomator]]
              [--pct-effectpoint PERCENT] [--pct-kdradius RADIUS]
1、参数: --list-apps 获取当前应用列表
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
>>> monkey --list-apps
maybe it needs to take no more than 1 minutes to init...
***************************
getMainPageList
handleGetMainPageList uri length: 58
host: PeripheralsManage.yunos.com
host: page://PeripheralsManage.yunos.com/PeripheralsManage
host: SmartHouse.yunos.com
host: page://SmartHouse.yunos.com/SmartHouse
host: abook.alios.cn
host: page://abook.alios.cn/abook
···
host: yuntool.yunos.com
host: page://yuntool.yunos.com/YunTu
waitforApp ok
***************************
get app list success!, monkey exit!

 

2、参数: -p

用于约束限制,用此参数指定一个或多个应用。指定应用之后,monkey将只允许系统启动指定的app;如果不指定应用,将允许系统启动设备中的所有应用

  • 指定一个应用:monkey -p systemsetting.ivi.com 100
  • 指定多个应用:monkey -p systemsetting.ivi.com –p video.alios.cn 100
  • 不指定应用:monkey 100
3、参数:-v

用于指定反馈信息级别(信息级别就是日志的详细程度),总共分3个级别:

  • 默认级别 Level 0:-v

    • monkey -p systemsetting.ivi.com –v 100:说明仅提供启动提示、测试完成和最终结果等少量信息
  • 日志级别 Level 1:-v -v

    • monkey -p systemsetting.ivi.com –v -v 100:说明提供较为详细的日志,包括每个发送到Event的事件信息
  • 日志级别 Level 2:-v -v -v

    • monkey -p systemsetting.ivi.com –v -v –v 100:说明最详细的日志,包括了测试中选中/未选中的Event信息
4、参数: -s

用于指定伪随机数生成器的seed值,通过相同的seed可以产生相同的monkey事件

  • Monkey 测试1:monkey -p systemsetting.ivi.com -s 10 100
  • Monkey 测试2:monkey -p systemsetting.ivi.com –s 10 100

两次测试的事件序列都是一致的,seed值均为10。

5、参数: --throttle {XX}

 

 

随机事件发送间隔,毫秒为单位

1
2
>>> monkey -p systemsetting.ivi.com --throttle 300 100
# 间隔300ms发送一次事件
6、参数: --ignore-crashes

用于指定当应用程序崩溃时(Force Close错误),Monkey是否停止运行。如果使用此参数,即使应用程序崩溃,Monkey依然会发送事件,直到事件计数完成。

1
2
>>> monkey -p systemsetting.ivi.com --ignore-crashes 1000
# 测试过程中即使程序崩溃,Monkey依然会继续发送事件直到事件数目达到1000为止
1
2
monkey -p systemsetting.ivi.com 1000
# 测试过程中,如果系统设置程序崩溃,Monkey将会停止运行
8、参数: --ignore-timeouts

用于指定当应用程序发生ANR(Application No Responding)错误时,Monkey是否停止运行。如果使用此参数,即使应用程序发生ANR错误,Monkey依然会发送事件,直到事件计数完成。

1
monkey -p systemsetting.ivi.com --ignore-timeouts 1000
9、参数: --ignore-security-exceptions

用于指定当应用程序发生许可错误时(如证书许可,网络许可等),Monkey是否停止运行。如果使用此参数,即使应用程序发生许可错误,Monkey依然会发送事件,直到事件计数完成。

1
monkey -p systemsetting.ivi.com --ignore-security-exception 1000
10、参数: --kill-process-after-error

用于指定当应用程序发生错误时,是否停止Monkey(注意:应用程序仅是静止在发生错误时的状态,系统并不会结束该应用程序的进程)

1
monkey -p systemsetting.ivi.com --kill-process-after-error 1000
11、参数: --monitor-native-crashes

用于指定是否监视并报告应用程序发生崩溃的本地代码。

1
monkey -p systemsetting.ivi.com --monitor-native-crashes 1000
12、参数: --pct-{+事件类别}{+事件类别百分比}

用于指定每种类别事件的数目百分比(在Monkey事件序列中,该类事件数目占总事件数目的百分比)

  • –pct-touch{+百分比}:屏幕点击事件百分比(触摸事件是一个down-up事件,它发生在屏幕上的某单一位置)

    1
    monkey --pct-touch 10 1000
  • –pct-motion {+百分比}:屏幕滑动事件百分比(动作事件由屏幕上某处的一个down事件、一系列的伪随件机事和一个up事件组成)

    1
    monkey --pct-motion 20 1000
  • –pct-syskeys {+百分比}:系统按键事件百分比(HOME, BACK, VOLUME_UP, VOLUME_DOWN, YKEY_MUTE 键百分比)

  • –pct-appswitch{+百分比}:切换各apps事件百分比

  • –pct-voice{+百分比}:语音输出的百分比

    • 与此搭配的有 --voice-dir VOICE_FILE 语音文件。语音文件需要调查。
  • –pct-trackball {+百分比}:调整轨迹事件的百分比(轨迹事件由一个或几个随机的移动组成,有时还伴随有点击)

    1
    monkey --pct-trackball 30 1000
  • –pct-nav {+百分比}:调整“基本”导航事件的百分比(导航事件由来自方向输入设备的up/down/left/right组成)

    1
    monkey --pct-nav 40 1000
  • –pct-majornav {+百分比}:调整“主要”导航事件的百分比(这些导航事件通常引发图形界面中的动作,如:MENU, DPAD_CENTER(SELECT) 键)

    1
    monkey --pct-majornav 50 1000
  • –pct-pinchzoom {+百分比}:多指滑动事件百分比

13、参数: --pkg-whitelist-file {PACKAGE_WHITELIST_FILE}

允许进行monkey测试的应用列表。

1
>>> monkey --pkg-whitelist-file /tmp/whitelist.txt -v 300
1
2
3
4
# whitelist.txt
systemsetting.ivi.com
com.yunos.map
music.alios.cn

 

 

14、参数: --pkg-blacklist-file {PACKAGE_BLACKLIST_FILE}

不允许进行用monkey操作的应用列表.

1
>>> monkey --pkg-blacklist-file /tmp/blacklist.txt -v 300
1
2
3
4
5
# blacklist.txt
startup.ivi.com
yuntool.yunos.com
architect.yunos.com
album.yunos.com

四、输出日志的方法:

1
>>> adb -host shell monkey -p systemsetting.ivi.com -v 300 > ~/Desktop/monkey_log.txt

五、常用的monkey指令

  • 全功能测试

    1
    monkey --monitor-native-crashes --ignore-native-crashes --ignore-crashes --ignore-timeouts --ignore-security-exceptions  --kill-process-after-error --pct-trackball 0 --pkg-blacklist-file /tmp/blacklist.txt  --throttle 300 -v -v -v 1200000000
  • 只测单独app

    1
    2
    # 只测试系统设置
    monkey -p systemsetting.ivi.com --monitor-native-crashes --ignore-native-crashes --ignore-crashes --ignore-timeouts --ignore-security-exceptions  --kill-process-after-error --pct-trackball 0 --throttle 300 -v -v -v 1200000000

六、使用amt控制monkey

  • 启动monkey

    1
    amt start monkey [options]
  • 结束monkey

    1
    amt stop monkey
  • monkey日志分析
    amt启动monkey之后,会在/privat/amt/fat_result下生成monkey文件夹。

    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
    .
    ├── 20200428_175210_eventrecord.txt.gz  # 所有的时间
    ├── 20200428_175210_monkeyerr.txt.gz    # monkey的error
    ├── 20200428_180855_systemui.alios.cn.jscrash # jcrash错误记录
    ├── 20200428_185839_48_aplogcat.txt.gz      # logcat
    ├── 20200428_185839_48_kernellog.txt.gz     # kernel log
    ├── build.prop
    ├── endtime     # 结束时间
    ├── kmsg_reboot.txt.gz
    ├── machine-id
    ├── monkey_recrod   # monkey简要日志
    ├── monkeycmd       # monkey的命令
    ├── monkeyerrsize
    ├── put.done
    ├── starttime       # 开始时间
    ├── time            # 持续时间
    └── tombstone_05    # native crash墓碑文件
    • native crash墓碑文件说明:文件像墓碑一样记录了死亡了的进程的基本信息(例如进程的进程号,线程号),死亡的地址(在哪个地址上发生了 Crash)