前言：

一直以来都不是很想做UI自动化，原因：系统的稳定性差，UI界面经常变化等等。但是遇到接口又不稳定，还经常从接口写入的数据有误的而界面UI相对不是很复杂的情况下，UI自动化也是可以考虑的。比如最近在遇到一系统，研发明确的说不要用接口进行写入数据，要从界面上模拟用户真实的操作，其实也是可以理解的，前后端分离，好多控制什么的后端接口没有做处理，为了给用户快速的展示或是项目快速的完工，都让前端做了限制，这样更直观些。但如果遇到一个测试有多少条多少条数据时才怎么怎么样，出现什么样的结果。这时如果还是手动去执行真是要哭了。不让用接口，只能想到用简单的UI自动化了。所以就只好把放弃了好久的UI自动化知识重新拾起来啦。不啰嗦了，转入正题。

准备环境

现在UI自动化也有很多方法，我选择的是python+selenium+HTMLTestRunner
需要准备的是python环境。个人学习研究使用，所以开发工具使用的是破解pyCharm。安装破解在此就不多说了，网上有很多，待安装破解完成后弄个简单的实例进行测试一下。

需要安装chrome驱动浏览器，可以在“https://chromedriver.storage.googleapis.com/index.html”中找到当前自己电脑对应的版本下载。
如果是使用的是python3时，会遇到pip install HTMLTestRunner.html安装失败，因官网的是支持python2的，语法与python3不兼容，所以需要到官网http://tungwaiyip.info/software/HTMLTestRunner.html下载，下载后修改相应的内容后放入到python安装目录的lib下，即可。HTMLTestRunner.py 修改内容：

第94行，将import StringIO修改成import io
第539行，将self.outputBuffer = StringIO.StringIO()修改成self.outputBuffer = io.StringIO()
第642行，将if not rmap.has_key(cls):修改成if not cls in rmap:
第631行，将print >> sys.stderr, ‘\nTime Elapsed: %s’ % (self.stopTime-self.startTime)修改成print(sys.stderr, ‘\nTime Elapsed: %s’ % (self.stopTime-self.startTime))
第766行，将uo = o.decode(‘latin-1’)修改成uo = e
第772行，将ue = e.decode(‘latin-1’)修改成ue = e

实例：

import unittest
import time

import HTMLTestRunner
from selenium import webdriver

class MyTestCase(unittest.TestCase):
    def setUp(self):
        self.driver = webdriver.Chrome('E:\\0-auto\driver\\chromedriver.exe')  #手动指定chrome驱动程序路径
        self.driver.implicitly_wait(10)                                                      #设置隐式等待时间
        self.base_url = 'http://www.baidu.com'

    def test_search(self):
        u''' test search '''
        driver = self.driver
        driver.get(self.base_url)                                                            #打开网址
        driver.find_element_by_id('kw').send_keys(u'谷爱凌')                                  #定位输入框，输入搜索内容
        driver.find_element_by_id('su').click()                                              #定位按钮，并点击
        time.sleep(2)

    def tearDown(self):
        self.driver.quit()

if __name__ == '__main__':
    with open('report_search.html','wb') as fp:                                              #当前路径下打开一个文件，用于报告写入
        runner = HTMLTestRunner.HTMLTestRunner(                                              #使用HTMLTestRunner生成报告
            stream=fp,
            title='report_search',
            description=u'running case:'
        )
        runner.run(MyTestCase('test_search'))

执行结果

Python UI自动化 编程

第一章 Python UI自动化 编程入门之打开文件夹双击文件

前言

最近学习了Python的UI自动化编程，打算记录一下学习经历，梳理一下知识框架。由于我也是初学者，如有错误欢迎指出！

提示：以下是本篇文章正文内容，下面案例可供参考

一、什么是Python UI自动化 编程

就我个人的理解，UI编程包括但不限于UI界面的开发，UI界面的测试。而本系列文章的主要侧重于UI界面的自动化操作。通过一段代码实现电脑自行点击、打开某文件或者修改某进程的操作。

利用Python编写脚本实现UI界面的自动化操作，解放双手，提高办公效率。

二、环境说明

1、Python环境：Python 3.8

2、IDE： Pycharm

3、使用的库：UIAutomation

三、使用步骤

1.引入库： uiautomation

打开Pycharm 点击左上角File-Settings

点击Project-Python-Interpreder-加号

在搜索栏输入【uiautomation】点击搜索结果-Install Package

2.打开文件夹

代码如下（示例）：

os.startfile(folder_path)

该处使用os库重点的startfile()打开文件夹

3、找到该文件夹

使用软件Inspect查找该文件夹的树形结构

可以看到我的Typora文件夹的目录树形图。我选择的区域是列表中的白色区域，所以Inspect给我返回的树形图就一直到了"项目视图-列表"，这样我们就可以利用UIAutomation通过树状图找到文件夹的项目列表了。

代码如下

list = uiautomation.WindowControl(searchDepth=1, ClassName="CabinetWClass")\
	.ListControl(ClassName="UIItemsView")
return list

searchDepth是搜索深度，根据刚刚的树形图有7级深度。我们当然可以一级一级往下写，这样不但准确，而且搜索速度也快。但是如果树状图深度太大，我们也可以挑选中间节点来写，更改相应的searchDepth参数就可以了。ClassName是每个节点的ClassName，同时也可以指定参数Name。而WindowControl、ListControl这些主要是看Inspect软件找到的UI控制类型，如下图这种情况，该节点则调用ListControl。而所有的这些节点信息都可以从软件Inspect找到。

4、双击Typora.exe

我们已经找到了项目列表了，所以我们也可以找到列表中的元素，根据Inspect定位元素节点后，我们可以通过UIAutomation来找到该节点：

list_item = uiautomation.WindowControl(searchDepth=1, ClassName="CabinetWClass")\
	.ListControl(ClassName="UIItemsView")\
	.ListItemControl(Name="Typora.exe")
return list_item

如果我们想要点击或者双击该文件只需：

list_item.Click() # 单击
list_item.DoubleClick() # 双击

5、代码总览

import os
import uiautomation as auto


def show_folder(folder_path):
  """
  打开文件夹
  :param folder_path:
  :return:
  """
  os.startfile(folder_path)


def findTarget():
  """
  uiautomation
  :param filename: 文件名
  :return:
  """
  target = auto.WindowControl(searchDepth=1, ClassName="CabinetWClass") \
      .ListControl(ClassName="UIItemsView")\
      .ListItemControl(Name="Typora.exe")
  return target


if __name__ == '__main__':
  show_folder("D:\\Typora")
  target = findTarget()
  target.DoubleClick()

总结

以上就是今天要讲的内容，本文仅仅简单介绍了UIAutomation的使用，而UIAutomation提供了大量能使我们快速便捷地操作UI界面。这篇文章仅仅是开始，接下来我也将继续学习继续记录。

在网上找 Python 客户端自动化测试的库，一般有 pywinauto、pywin32、pyautogui、uiautomation。本文仅对 uiautomation 做简单的了解。

MS UI Automation 是 MSAA 技术的一个替代品：即让控件和应用程序具有更好的可达性（accessible）。MS UIA明确定义了两个role：UIA Provider 即软件本身，主要是软件的开发人员依据相应的模式去实现相关的 interface, UIA Client 即自动化脚本和相关的 assistive technology applications，从测试人员的角度出发，主要是调用相应的API去实现自动化测试脚本。

而 uiautomation 的作者根据微软手册，用 Python 和 C++ 对 UI Automation 做了一层封装。

MS UI Automation概述：https://docs.microsoft.com/en-us/dotnet/framework/ui-automation/ui-automation-overview

作者博客：开源自己用python封装的一个Windows GUI(UI Automation)自动化工具，支持MFC,Windows Forms,WPF,Metro,Qt - YinKaisheng - 博客园

Github地址：https://github.com/yinkaisheng/Python-UIAutomation-for-Windows

参考博客：Uiautomation 在Windows WPF和Qt 产品上的应用_yaoliuwei1426的博客-CSDN博客

参考博客：MS UI Automation简介_ffeiffei的专栏-CSDN博客_uiautomation

根据作者提供的示例，我对 Win10 计算器做了简单的计算测试，代码如下：

import subprocess
import uiautomation as uia

# 设置全局搜索超时 15s
uia.uiautomation.SetGlobalSearchTimeout(15)

# 测试Win10计算器
def test_calc():
    # 启动计算器进程
    subprocess.Popen(args='calc.exe')
    # 首先从桌面的第一层子控件中找到程序的窗口，再从这个窗口查找子控件
    window = uia.WindowControl(
        searchDepth=1, ClassName='ApplicationFrameWindow', Name='计算器')
    # 窗口置顶
    window.SetTopmost(True)
    # 根据文档描述，直接从顶层找空间的效率较低，因为每次找都需要去遍历
    # 所以这里可以根据inspect查看到的对象树来逐层找
    # Name/ClassName/AutomationId都是UIAutomation属性，可以通过工具查看到，类似于网页的选择器
    window_main = window.Control(
        searchDepth=1, ClassName='Windows.UI.Core.CoreWindow')
    button_group = window_main.Control(
        searchDepth=1, ClassName='LandmarkTarget')
    number_group = button_group.Control(searchDepth=1, Name='数字键盘')
    calc_group = button_group.Control(searchDepth=1, Name='标准运算符')

    # 模拟按键
    window.SendKeys('1')
    #number_group.ButtonControl(Name='一').Click()
    calc_group.ButtonControl(Name='加').Click()
    number_group.ButtonControl(Name='四').Click()
    calc_group.ButtonControl(Name='等于').Click()
    result = button_group.Control(AutomationId='NormalOutput').Name
    print("测试结果：", result, ' bytes:', bytes(result, encoding='utf8').hex())
    # 获取到的文本前后有不可见字符，这里先替换掉
    result = result.replace(b'\xe2\x80\xad'.decode('utf8'), '').replace(
        b'\xe2\x80\xac'.decode('utf8'), '')
    print("测试结束，预期=5，实际={0}，{1}".format(
        result, "测试通过" if result == "5" else "测试失败"))
    # 通过复制粘贴获取，这样得到的文本没有其他字符
    window.SendKeys('{Ctrl}c', waitTime=1)
    result = uia.GetClipboardText()
    print("测试结果：", result, ' bytes:', bytes(result, encoding='utf8').hex())
    # 截图并保存到指定路径
    window.CaptureToImage('C:/Users/1992/Pictures/1.png')
    # 关闭程序
    #window.ButtonControl(Name='关闭').Click()
    window.GetWindowPattern().Close()

if __name__ == '__main__':
    test_calc()

测试结果：