youqu/docs/AT基础框架设计方案.md

18 KiB
Raw Blame History

AT 基础框架设计方案

# ====================================
# Author  : Mikigo
# Time    : 2022/3/18
# version 1.0
# ====================================

一、目标

做一个简单、好用、功能强大的自动化测试框架。

  • 作为自动化测试的一个基础框架,任何应用都能很方便的接入进来;
  • 提供所有自动化测试所需要的底层功能,并对外提供唯一的接口,方便应用库使用;
  • 整合公共库,减少应用库代码量和方法维护。

二、设计方案

1、统一概念

  • 基础框架

    本项目是一个自动化测试的基础框架(AutoTest Basic Frame全称为“自动化测试基础框架AT 基础框架)”。

    AT 基础框架是做为一个自动化测试的基础框架来设计的,它提供了自动化测试所要用的基础功能,任何应用接入进来都能快速方便的进行方法和用例编写,同时在用例标签化管理、批量跳过、标签化执行、分布式执行、多种报告输出、优美的执行日志、失败自动录屏和截图、自动环境清理等等,它都提供了完善的解决方案,更重要的是这一切使用起来都非常简单。

    基础框架中包含应用库(apps)、核心库(src)、公共方法库(public)。

  • 应用库(apps

    各个应用自己的仓库,里面主要包含的是用例、方法及一些测试资源,比如文件管理器叫 autotest-dde-file-manager

  • 核心库(src

    核心库自动化测试所要用的到所有底层核心功能,这是最重要的一个部分,灵魂。具体功能模块及说明会在下面第四个章节详细描述。

  • 公共方法库(public

    多个应用都要用到的一些操作方法,按照应用划分存放,主要是为了减少代码量,消除应用间的耦合关系。

2、架构图

整体的框架设计在《自动化测试架构设计》文档里面已经有详细描述了,这里贴一下整体的架构图:

为了突显本文的重点,抽取其中重要功能模块,如下图:

3、目录结构

autotest-basic-frame  # 自动化测试基础框架
├── apps  # 应用库
│   ├── autotest-dde-file-manager  # 单独的应用仓库(应用库详细目录结构请看应用库设计方案)
│   │   ├── case  # 用例
│   │   ├── config.ini # 局部配置
│   │   ├── config.py  # 局部配置
│   │   ├── conftest.py  # Pytest 本地插件
│   │   ├── dfm_assert.py  # 断言方法模块
│   │   ├── assert_res  # 断言的图片资源
│   │   ├── tag  # 标签
│   │   └── widget  # 方法
│   │       ├── __init__.py
│   │       ├── base_widget.py
│   │       ├── ui.ini  # UI 定位的坐标配置文件
│   │       ├── case_res  # 测试数据(用例需要用到的资源)
│   │       └── pic_res  # 图像识别元素定位要用的图片
│   │           ├── xxx.png
│   │           ...
│   ├── autotest-deepin-music  # 单独的应用仓库
│   │  ├── case
│   │  ├── ...
│   ...
├── public  # 公共方法库
│   ├── __init__.py
│   ├── dde_dock_public_widget  # dde_dock 的公共方法 package
│   │   ├── __init__.py
│   │   ├── dde_dock_public_widget.py
│   │   ├── ui.ini 
│   │   └── res 
│   ├── dde_desktop_public_widget  # dde_desktop 的公共方法 package
│   │   ├── __init__.py
│   │   ├── dde_desktop_public_widget.py
│   │   ├── ui.ini 
│   │   └── res 
│   ...
├── src  # 核心库
│   ├── __init__.py
│   ├── button_center.py
│   ├── cmdtrl.py
│   ├── dogtails.py
│   ├── find_image.py
│   ├── global_config.py
│   ├── ...
│   ...
├── setting  # 全局配置模块
│   ├── __init__.py
│   ├── config.py
│   └── global_config.ini
├── conftest.py  # Pytest 本地插件模块Hook
├── pytest.ini  # Pytest 默认配置文件
├── docs  # 文档目录
└── manage.py  # 执行器

三、详细方案

1、应用库apps

所有应用库均放置在基础框架下的 apps 目录下见第二章节第3段目录结构内容。应用库的架构设计可以参考《AT 应用库设计方案》文档。

2、核心库src

src 目录下为自动化测试的底层核心组件,通常来讲如果你需要使用到其中某一个功能模块,那么你需要显示的导入这个模块,然后才能使用该模块下的功能,如果你用到了十个功能模块,那你就需要导入十个。但是我们想让事情变得简单,一次导入,使用所有。

将所有的功能模块都进入到 src 的名称空间,在 src/__init__.py 里面我们设计成这样:

# src/__init__.py

from .cmdctl import CmdCtl
from .dogtails import Dogtail
from .find_image import FindImage
from .button_center import ButtonCenter


class Src(CmdCtl, FindImage):

    def __init__(self, **kwargs):
        """dogtail or button center param
        :param kwargs: app_name, desc, number
        """
        if kwargs:
            app_name = kwargs.get("APP_NAME")
            desc = kwargs.get("DESC")
            if app_name is None or desc is None:
                raise ValueError
            number = kwargs.get("number")
            number = number if isinstance(number, int) else -1
            # 对象组合
            self.dog = Dogtail(app_name, desc, number)
            self.ui = ButtonCenter(app_name, number)

需要传递参数的采用对象组合,没有参数的使用继承,继承的类符合 Mixin 设计模式。

应用库里面使用的时候在 widget/base_widget.py 里面只需要唯一继承 Src

# 应用库里面方法基类
# widget/base_widget.py

from src import Src

class BaseWidget(Src):
    """方法基类"""
    
    APP_NAME = "dde-file-manager"
    DESC = "/usr/bin/dde-file-manager"

    def __init__(self, number=-1):
        Src.__init__(self, APP_NAME=self.APP_NAME, DESC=self.DESC, number=number)

要使用核心库的功能,只需要写一个导入 from src import Src 即可。

__init__ 构造函数的原因是通过参数构造应用,并且传递 number 进来,可以实现多窗口的控制。

3、公共方法库public

公共方法库里面每个应用都是一个单独的 py 文件,相互之间是独立的,每个 py 文件里面是该应用的方法类,比如:最常用的方法类 dde_desktop_public_widget.py

# dde_desktop_widget.py

from src import Src

class _DdeDesktopPublicBaseWidget(Src):
    """桌面公共方法基类"""
    
    APP_NAME = "dde-desktop"
    DESC = "/usr/bin/dde-desktop"

    def __init__(self):
        Src.__init__(self, APP_NAME=self.APP_NAME, DESC=self.DESC)
        
    
class DdeDesktopPublicWidget(_DdeDesktopPublicBaseWidget):
    """桌面公共方法类"""
    
    def click_music_dir_by_ui(self):
        """在文件选择框点击音乐目录"""
        self.click(*self.ui.btn_center("侧边栏-音乐"))   
    
    def click_xxx_by_attr(self):
        pass

公共方法库意义:

  • 公共方法库里面所封装的一些操作方法都是至少被2个应用都用到的这样做可以减少整体代码量从而减轻应用库代码的维护工作。

  • 公共方法库里面的编写形式(命名规则、定位的方案写法、注释的写法等等)具有一定的模板作用,这样即使是各个应用库都独立维护,所有的编码风格都是趋于相同的,因为大家都应该参照公共库里面的一些写法来写自己应用库里面的一些方法类,这样使得从公司的角度去看所有应用的自动化测试项目都是统一的。

  • 可以通过公共方法库里面的一些方法,了解到其他应用的功能,对于我们需求理解,了解系统的方方面面也有好处。

当然,如果你的应用本身是属于根本就不需要和其他应用交互的,那么你可能不会用到这里面的功能,没关系,你所有的方法都可以直接写在应用库的业务层。

4、conftest.py

conftest.py 从功能上将是属于核心库(src)的内容,但是由于它的特殊性,即它是对应用库中的用例生效的,而且它的作用域是当前目录及以下,因此我们将它放到项目根目录。我们框架中有不少核心功能都是在这里面进行开发的,后面第四章会讲到细节。

pytest.ini 作用和 conftest.py 类似,是 Pytest 框架的固定配置文件,目前配置了一些通用的命令行执行参数,也放在项目根目录。

根目录下的 conftest.py 文件只会用来写 Hook 函数,apps 目录下的 的 conftest.py 文件只会用来写 fixture

5、setting

全局配置模块,包含了以下配置文件:

1ini 配置文件

主要配置一些全局的配置项,譬如:失败重跑次数、是否失败录屏、单条用例超时时间、会话超时时间、执行时日志级别、生成的报告类型、以及分布式执行的一些策略配置项等等。

2config.py 配置文件

主要提供配置文件读取、动态获取一些常量(如项目根目录绝对路径 (BASE_DIR)、系统架构(SYS_FRAME)、时间字符串(strftime)、本机 USERNAME IP 等等)、公共 URL 等。

四、规范

1、版本及依赖

基础框架会根据自身的功能开发进行版本发布,不与某个应用版本绑定,但是,应用库会依赖于基础框架的版本。因此,我们建议在应用库目录下保存一个文本文件用于记录所依赖的基础框架版本,类似于开发应用的 debian/control 文件的功能,为了保持统一,这个文件就命名为 control,放在应用库根目录下。

2、核心库独立性

核心库不建议针对某一个应用单独做代码上特殊处理通常考虑针对某一种场景进行处理这些场景通常是存在一些共性的。比如说桌面的ID分配存在问题我们可以通过逻辑处理解决ID分配错误的问题但是这部分逻辑我们会在桌面的方法层里面去做。

3、兼容性

为了保持兼容性,公共方法库里面原则上不对老方法进行修改或删除,只进行新增。涉及到老方法修改或删除的,会进行提前预告,并在第二个版本之后(中间会隔一个版本过度)正式实施修改或删除。

4、命名规范

  • 用例 ID

    每个应用自己维护一套 ID在PMS上用例标题上将自动化ID以标签的形式写入比如[101]打开-启动应用后dock右键菜单

    一个用例类里面有多个用例时,在用例名称后面加序号。

    class TestFileManager(BaseCase):
        """文管用例"""
        def test_xxx_015_1(self):
            pass
        def test_xxx_015_2(self):
            pass
    

    注意 015_1不要写015_01。

  • 不建议使用 PMS 上的用例ID

    • PMS 上是6位数不够直观也不好维护在自动化下面去找一个带有 6 位数的文件是一个糟糕的事情。

    • PMS 上的 ID 可能会发生变化,比如导出来导进去的过程中可能存在问题,如果发生变化之后,要想找出来对应修改自动化用例 ID将会是件非常痛苦的事情。

  • 函数命名关键词列表

名称 单词
左键点击 click
右键点击 right_click
双击 double_click
移动 move_to
拖动 drag
新建 new
拖动到 drag_to
从哪里拖动到哪里 drag_something_from_xxx_to_xxx
获取 get
获取某个元素的坐标 get_location
非特殊文件 file
word文件 doc
text文件 text
文件夹 dir

关键词持续增加

  • 常量关键词列表
名称 单词
应用名称 APP_NAME
应用描述 DESC
本应用以外的其他应用,比如帮助 HELP
  • 其他名称列表
名称 单词
方法包名 widget
方法文件名
(文管举例)
dfm_widget.py
title_widget.py
right_view_widget.py
left_view_widget.py
pop_widget.py
base_widget.py
dfm_assert.py

断言语句命名规范

断言语句都是以 assert 开头

断言 语句
判断文件是否存在 assert_file_exists
assert_file_not_exists
判断桌面目录下文件是否存在 assert_file_exists_in_desktop
assert_file_not_exists_in_desktop
判断图片存在 assert_image_exists
assert_image_not_exists
判断影院中是否存在图片 assert_image_exists_in_movie
assert_image_not_exists_in_movie
判断元素是否存在 assert_element_exist
assert_element_not_exist
判断是否相等 assert_equal
assert_not_equal
判断是否为真 assert_true
assert_false

5、fixture 规范

由于 Pytest 框架中支持 fixture 的写法和 Xunit 写法的,所以应用库中可能存在混用的情况,为统一编码风格方便后续用例代码维护,现做以下规范说明:

  • 抛弃 Xunit 的写法,统一采用 Pytest fixture 的写法。
  • 应用内 fixture 谨慎使用 autouse=True ,非必要的情况下非常不建议使用这个参数。
  • 调用 fixture 不能使用 @pytest.mark.usefixture(),使用直接在用例里面传入函数对象。
  • 建议在一个 conftest.py 里面去写,一个应用也尽量维护一个 conftest.py 文件。
  • fixture 也需要写功能说明,函数名称要有具体含义。

6、方法编写规范

  • 方法类型:

    if 没有用到实例对象
    	if 没有用到类对象
        	写静态方法函数前加 @staticmethod
        else
        	写类方法函数前加 @classmethod
    else:
        直接写实例方法
    

    举例:

    class TitleWidget:
        def click_xxx_by_ui(self):
        pass
    
        @staticmethod
        def click_xxx_by_ui():
            pass
    
        @classmethod
        def click_xxx_by_ui(cls):
            pass
    
    
  • 函数名称不出现数字,需要表示数量的用单词表示。

  • 函数功能注释。

    • 没有参数,没有返回
    """点击某个元素"""
    
    • 有参数,没有返回
    """点击某个元素
    arg1:xxx
    arg2:xxx
    """
    
    • 有参数,有返回
    """点击某个元素
    arg1:xxx
    arg1:xxx
    return: xxx
    """
    

Pycharm 的注释模板也可以,只要体现了参数的类型和返回就行了。

  • 暂不要求写类型注解。

7、用例case规范

  • 以类的形式写用例,用例类集成用例基类。

  • 用例类需要写注释。

  • 测试用例函数说明(建议直接复制 PMS 上用例名称)

    """右侧预览-图片类型信息栏基本信息"""
    
  • 不写调试代码

    if __name__ == '__main__':
        pytest.main()
    
  • 所有用例都继承 BaseCase

  • BaseCase 里面放一些测试数据的常量,比如文件名称,应用名称,简单讲就是一些通用的字符串。

    这类是属于测试数据。

    class BaseCase(DfmAssert):
        """用例基类"""
    
        NEW_FILE = "新建文本.txt"
        TEST_FILE = "test.txt"
        NEW_DIR = "新建文件夹"
        NEW_WORD = "新建Word文档.doc"
        APP_HELP = "damn"
    
    class TestFileManager(BaseCase):
    
        def test_xxx_001(self):
            """用例标题复制PMS上用例标题"""
            dfm = DfmWidget()
            dfm.click_xxx_by_attr(self.NEW_FILE)
            dfm.new_file_in_desktop_by_cmd(self.NEW_FILE)
            self.assert_true(dfm.get_process_status(self.APP_NAME))
    

用例里面尽量减少字符串的出现,更要减少相同字符串的出现。

  • 统一文件注释头。

    #!/usr/bin/env python3
    # _*_ coding:utf-8 _*_
    """
    :Author:email@uniontech.com
    :Date  :${DATE} ${TIME}
    """
    

8、其他规范

  • 日志打印要在方法最前面,否则代码报错没有日志输出,不好定位问题。(我们会考虑继续使用拦截器打印日志)
    • 所有的操作都需要有日志,包括 sleep(),我们会重写一个有日志输入的 sleep
    • 业务层日志级别为 INFO
  • hook 函数只能写到根目录下的 conftest.py 里面。
  • apps 目录下的 conftest.py 原则上不会新增 fixture
  • 固定目录或元素控件的操作,将操作方法写死,文件类操作将文件名留参数。
  • 路径拼接规范:
    • 系统中固定目录,路径拼接时使用波浪符号,比如:~/Desktop/,下层使用 os.path.expanduser(),它可以自动识别波浪符号。
    • 项目下路径使用配置文件中的路径,比如:Config.BASE_PATH,因为项目是可以在任意路径运行的,需要动态拼接路径。