Python爬虫基础篇:如何进行错误处理、调试与测试?

2026-06-10 19:1212阅读0评论SEO问题
  • 内容介绍
  • 文章标签
  • 相关推荐

本文共计2395个文字,预计阅读时间需要10分钟。

Python爬虫基础篇:如何进行错误处理、调试与测试?

1. 单元测试+如果你听说过测试驱动开发(TDD:Test-Driven Development),单元测试就至关重要。单元测试是针对一个模块、一个函数或一个类进行的正确性检验工作。

1.单元测试

如果你听说过“测试驱动开发”(TDD:Test-Driven Development),单元测试就不陌生。

单元测试是用来对一个模块、一个函数或者一个类来进行正确性检验的测试工作。

比如对函数​​abs()​​,我们可以编写出以下几个测试用例:

  • 输入正数,比如​​1​​、​​1.2​​、​​0.99​​,期待返回值与输入相同;
  • 输入负数,比如​​-1​​、​​-1.2​​、​​-0.99​​,期待返回值与输入相反;
  • 输入​​0​​,期待返回​​0​​;
  • 输入非数值类型,比如​​None​​、​​[]​​、​​{}​​,期待抛出​​TypeError​​。
  • 把上面的测试用例放到一个测试模块里,就是一个完整的单元测试。

    如果单元测试通过,说明我们测试的这个函数能够正常工作。如果单元测试不通过,要么函数有bug,要么测试条件输入不正确,总之,需要修复使单元测试能够通过。

    单元测试通过后有什么意义呢?如果我们对​​abs()​​​函数代码做了修改,只需要再跑一遍单元测试,如果通过,说明我们的修改不会对​​abs()​​函数原有的行为造成影响,如果测试不通过,说明我们的修改与原有行为不一致,要么修改代码,要么修改测试。

    这种以测试为驱动的开发模式最大的好处就是确保一个程序模块的行为符合我们设计的测试用例。在将来修改的时候,可以极大程度地保证该模块行为仍然是正确的。

    阅读全文

    本文共计2395个文字,预计阅读时间需要10分钟。

    Python爬虫基础篇:如何进行错误处理、调试与测试?

    1. 单元测试+如果你听说过测试驱动开发(TDD:Test-Driven Development),单元测试就至关重要。单元测试是针对一个模块、一个函数或一个类进行的正确性检验工作。

    1.单元测试

    如果你听说过“测试驱动开发”(TDD:Test-Driven Development),单元测试就不陌生。

    单元测试是用来对一个模块、一个函数或者一个类来进行正确性检验的测试工作。

    比如对函数​​abs()​​,我们可以编写出以下几个测试用例:

  • 输入正数,比如​​1​​、​​1.2​​、​​0.99​​,期待返回值与输入相同;
  • 输入负数,比如​​-1​​、​​-1.2​​、​​-0.99​​,期待返回值与输入相反;
  • 输入​​0​​,期待返回​​0​​;
  • 输入非数值类型,比如​​None​​、​​[]​​、​​{}​​,期待抛出​​TypeError​​。
  • 把上面的测试用例放到一个测试模块里,就是一个完整的单元测试。

    如果单元测试通过,说明我们测试的这个函数能够正常工作。如果单元测试不通过,要么函数有bug,要么测试条件输入不正确,总之,需要修复使单元测试能够通过。

    单元测试通过后有什么意义呢?如果我们对​​abs()​​​函数代码做了修改,只需要再跑一遍单元测试,如果通过,说明我们的修改不会对​​abs()​​函数原有的行为造成影响,如果测试不通过,说明我们的修改与原有行为不一致,要么修改代码,要么修改测试。

    这种以测试为驱动的开发模式最大的好处就是确保一个程序模块的行为符合我们设计的测试用例。在将来修改的时候,可以极大程度地保证该模块行为仍然是正确的。

    阅读全文