[python] python单元测试经验总结

python写单元大多数都会用到unittest和mock，测试代码覆盖率都会用到coverage，最后再用nose把所有的东西都串起来，这样每次出版本，都能把整个项目的单元测试都运行一遍。

Unittest

unittest就不详细介绍了，注意几点：

• 测试类继承unittest.TestCase
• 测试类、测试方法名字最好以test开头，很多工具能根据名字来自动运行，很方便
• 测试类里面的setUp/tearDown会在每个case执行之前/之后执行，setUpClass/tearDownClass加上@classmethod在整个测试类开始和结束的时候执行
• 测试文件的main函数里面加上unittest.main()，就可以直接用python命令运行了

Mock

单元测试里面比较精髓的就是mock了，介绍几种常见的场景：

1. Mock一个函数。其实有好几种方法，个人比较推荐下面这种，看上去很清晰：

def multiple(a, b):

    return a*b




class TestProducer(unittest.TestCase):

    def setUp(self):

        self.calculator = Calculator()



    @mock.patch('multiple')

    def test_multiple(self, mock_multiple):

        mock_multiple.return_value = 3

        self.assertEqual(multiple(8, 14), 3)

 

2. Mock一个对象里面的方法

class Calculator(object):

    def add(self, a, b):

        return a+b

 

 

class TestProducer(unittest.TestCase):

    def setUp(self):

        self.calculator = Calculator()

 

    @mock.patch.object(Calculator, 'add')

    def test_add(self, mock_add):

        mock_add.return_value = 3

        self.assertEqual(self.calculator.add(8, 14), 3)

 

3. 让Mock的函数每次被调用返回不同的值，而1,2中的方法每次调用都会返回同样的值

class TestProducer(unittest.TestCase):

    @mock.patch.object(Calculator, 'add')

    def test_effect(self, mock_add):

        mock_add.side_effect = [1, 2, 3]

        self.assertEqual(self.calculator.add(8, 14), 1)

        self.assertEqual(self.calculator.add(8, 14), 2)

        self.assertEqual(self.calculator.add(8, 14), 3)

 

4. 让Mock的函数抛出exception

def is_error(self):

    try:

        os.mkdir("11")

        return False

    except Exception as e:

        return True   



 

class TestProducer(unittest.TestCase):

    @mock.patch('os.mkdir')

    def test_exception(self, mock_mkdir):

        mock_mkdir.side_effect = Exception

        self.assertEqual(self.calculator.is_error(), True)

 

5. Mock多个函数，主要是注意顺序

    @mock.patch.object(Calculator, 'add')

    @mock.patch('test_unit.multiple')

    def test_both(self, mock_multiple, mock_add):

        mock_add.return_value = 1

        mock_multiple.return_value = 2

        self.assertEqual(self.calculator.add(8, 14), 1)

        self.assertEqual(multiple(8, 14), 2)

Coverage

打命令coverage加测试文件，就可以得到覆盖率，可以生成html格式的报告，每次运行一个文件都会生成一个.coverage文件，需要将combine所有结果才能得到一个完整的报告。

具体的命令参数参看：http://nedbatchelder.com/code/coverage/cmd.html

更加有用的是配置文件，参看：http://nedbatchelder.com/code/coverage/config.html

配置文件中最有用的功能就是可以不测某些行的覆盖率，例如：

[report]

exclude_lines =

    # 只要在某一行加上注释“# pragma: no cover”这一行就会被忽略

    pragma: no cover



    # 忽略掉main函数

    if __name__ == .__main__.:

Nose

Nose可以将所有的单元测试文件一次全部执行，并且提供了coverage的插件，能够统计整体的覆盖率。

Nose会扫描目标目录，如果发现目录名以“test”或者“Test”开头，则递归地进去扫描，并自动运行所有发现的以“test”或者“Test”开头的测试文件。

另外Nose增加了报级别的setup和teardown，只需将他们放到__init__.py文件中即可。

Nose命令的执行，最简单的就是nosetest后面加上你的所有测试文件或者测试文件所在的目录，一些运行参数参看：http://nose.readthedocs.org/en/latest/usage.html

Nose的参数里面以"--cover"开头的都是coverage相关的，但是我发现并没有办法是用coverage的配置文件，需要手动安装一下nose-cov，然后用“--cov-config”来指定配置文件，其他参数参看：https://pypi.python.org/pypi/nose-cov

我的项目因为测试文件比分散，并且有些并没有以test开头，所以比较麻烦，只能写了一个脚本，把这些都串起来：

import os

import subprocess



######################################################################

# 需要测试覆盖率的文件或者目录

cover_list = [

    'src/sample/analyzer/unpacker/src/emulator.py',

    'src/sample/analyzer/unpacker/src/emulator_manager.py',

    'src/sample/analyzer/unpacker/src/unpacker_analyzer.py',

    'src/sample/analyzer/bitvalue/src/confparser.py',

    'src/sample/analyzer/bitvalue/src/trunk.py',

]



# 测试用例所在的文件或者目录，如果测试文件没有以test开头，则必须制定文件名

ut_list = [

    'src/sample/analyzer/unpacker/ut',

    'src/sample/analyzer/bitvalue/ut/ut_main.py'

]

######################################################################



PRODUCTION_HOME = os.environ.get("PRODUCTION_HOME", "../..")





def get_command():

    command = [

        'nosetests',

        '--with-cov',

        '--cover-erase',

        '--cov-report', 'html',

        '--cov-config', 'cover.config',

    ]



    for cover in cover_list:

        command.append('--cov')

        command.append(os.path.join(PRODUCTION_HOME, cover))



    for ut in ut_list:

        command.append(os.path.join(PRODUCTION_HOME, ut))



    return command





if __name__ == '__main__':

    command = get_command()

    print command



    os.chdir(PRODUCTION_HOME)

    proc = subprocess.Popen(command, shell=False, stdout=subprocess.PIPE, stderr=subprocess.PIPE)



    output, error = proc.communicate()

    return_code = proc.poll()



    print output

    print error

    print return_code