单元测试 – 测试失败时,代码库与测试的“正常”比率是否存在问题?

我目前正在开展一个具有相当重要业务规则的项目,因为我们正在编写解决方案(相当典型的混乱项目管理类型的事情),问题空间被“发现”.我们有体面的测试覆盖依靠他们相当一点,以确保我们的显着变化不会吹动任何东西.这种情况是单元测试狂热分子突出显示的一种事情,作为测试的一个典型例子,如果您不使用单元测试,帮助软件可以轻松修改,更少的缺陷和更快的完成.我很想知道如何在没有测试套件的情况下才能应付.

我的问题是,虽然我确信相信单元测试的价值(这个项目实际上是TDD,但并不是真正的问题),我想知道有关经验单元测试问题的更多编码和维护(即测试本身).再次.在我看来,毫无疑问,这个特定的项目比单元测试更好,没有它,我也关心测试的长期可维护性.

有一些我使用的技术,遵循他人的建议来帮助解决这个问题.一般来说,

>
我们创建了一个“依赖”vs“独立”桶中的测试列表.独立测试不需要任何不在源代码管理中的任何内容.所以对我们的数据访问层的任何调用都是嘲笑或从xml文件获取数据,而不是真正的数据库.作为名称建议的依赖测试取决于运行测试时可能未正确配置/可用的配置文件或数据库或网络的东西.将测试分成这样的组件已经非常有价值,允许我们为早期开发和独立任务关键测试编写依赖的“丢弃”测试,可以依赖和重新测试腐败.它也使CI服务器易于管理,因为它不必在db / db连接等上进行设置和维护.

>
我们针对不同级别的代码.例如,我们测试了“main”,并测试了“main”将调用的所有方法.这使我们有能力瞄准系统的细节和总体目标.如果“主要”测试发生故障,那么“主要”测试很难调试,但它们通常不是唯一的破坏(详细测试也会中断).仔细阅读详细的测试和调试方法比较容易,但如果它们破坏了,但是它们不足以知道重构器是否会杀死系统(这是“主要测试”).

>
感觉舒适的“主要”测试对于重构器并没有代码库来说至关重要.所以’main’测试就像许多测试一样,使用不同的args来映射到用例的方法.它基本上是最高级别的代码的入口点,因此可能不是真正的“单元”测试.然而,我发现我真的需要更高级别的测试,以便感觉到重构器没有炸毁代码库.较低级别的测试(真正是“工作单位”)是不够的.

所有这一切都得到了解.随着项目向前发展,我发现我需要对代码库实施更改(有时相当重要,有时是微不足道的),我发现当更改导致测试失败时,测试失败和实际退化业务逻辑故障与单元之间存在比例测试无效换句话说,有时测试失败是因为实际代码库中的回归错误,有时是因为单元测试断言不再有效,而是需要更改的断言.似乎大致上,当测试失败时,对于这个特定的项目,它已经在大约甚至(50%).

有没有人跟踪他们的项目的这个比例,如果是这样,你有什么知识(如果有的话)这个比例?我不知道它甚至表示任何东西,但是我注意到大约一半的时间,测试失败导致我调整测试断言,而不是真正修复真正的代码库中的回归错误.无论何时发生这种情况,都让我觉得我只是浪费了我的一天x我想知道我的测试方法是否可以更有效率.解决测试断言通常比实际的回归错误需要更长的时间,这些错误既反对又令人沮丧.

编辑

请注意,这个问题是关于探索这个比例意味着什么以及你对这个比例的看法.什么时候“臭”?

I have noticed that about half the time that test failures lead me to adjusting test asserts rather than actually fixing regression bugs in the real codebase.

当测试失败时,有三个选项:

>实施被破坏,应该是固定的,
>测试被破坏,应该固定,或
>测试不再需要了(因为需求变化),应该被删除.

正确识别这三个选项中的哪一个是很重要的.我写我的测试的方式,我以测试的名义记录测试指定/测试的行为,这样当测试失败时,我会很容易地找出为什么测试最初写的.我在这里写了更多的内容:http://blog.orfjackal.net/2010/02/three-styles-of-naming-tests.html

在你的情况下

>如果您需要更改测试,因为需求变化,并且一次只需要进行一些测试,那么一切都是正常的(测试很好的是isolated,所以每个行为仅由一个测试指定) .
>如果您需要更改测试,因为需要更改,许多测试一次需要更改,那么这是一个test smell,您有很多测试测试相同的事情(测试没有很好的隔离).测试可能正在测试more than one interesting behaviour.解决方案是编写更集中的测试和更好的解耦代码.
>如果测试需要在重构时进行更改,那么测试的结果与实现细节太紧密相关.尝试编写以系统行为为中心的测试,而不是实现. The article我先前提到的应该给你一些想法.

(有趣的一点是,如果您发现自己大多是重写类,而不是更改它们,则当需求发生变化时,可能表示该代码遵循SRP,OCP及其他设计原则).

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

相关推荐


什么是设计模式一套被反复使用、多数人知晓的、经过分类编目的、代码 设计经验 的总结;使用设计模式是为了 可重用 代码、让代码 更容易 被他人理解、保证代码 可靠性;设计模式使代码编制  真正工程化;设计模式使软件工程的 基石脉络, 如同大厦的结构一样;并不直接用来完成代码的编写,而是 描述 在各种不同情况下,要怎么解决问题的一种方案;能使不稳定依赖于相对稳定、具体依赖于相对抽象,避免引
单一职责原则定义(Single Responsibility Principle,SRP)一个对象应该只包含 单一的职责,并且该职责被完整地封装在一个类中。Every  Object should have  a single responsibility, and that responsibility should be entirely encapsulated by t
动态代理和CGLib代理分不清吗,看看这篇文章,写的非常好,强烈推荐。原文截图*************************************************************************************************************************原文文本************
适配器模式将一个类的接口转换成客户期望的另一个接口,使得原本接口不兼容的类可以相互合作。
策略模式定义了一系列算法族,并封装在类中,它们之间可以互相替换,此模式让算法的变化独立于使用算法的客户。
设计模式讲的是如何编写可扩展、可维护、可读的高质量代码,它是针对软件开发中经常遇到的一些设计问题,总结出来的一套通用的解决方案。
模板方法模式在一个方法中定义一个算法的骨架,而将一些步骤延迟到子类中,使得子类可以在不改变算法结构的情况下,重新定义算法中的某些步骤。
迭代器模式提供了一种方法,用于遍历集合对象中的元素,而又不暴露其内部的细节。
外观模式又叫门面模式,它提供了一个统一的(高层)接口,用来访问子系统中的一群接口,使得子系统更容易使用。
单例模式(Singleton Design Pattern)保证一个类只能有一个实例,并提供一个全局访问点。
组合模式可以将对象组合成树形结构来表示“整体-部分”的层次结构,使得客户可以用一致的方式处理个别对象和对象组合。
装饰者模式能够更灵活的,动态的给对象添加其它功能,而不需要修改任何现有的底层代码。
观察者模式(Observer Design Pattern)定义了对象之间的一对多依赖,当对象状态改变的时候,所有依赖者都会自动收到通知。
代理模式为对象提供一个代理,来控制对该对象的访问。代理模式在不改变原始类代码的情况下,通过引入代理类来给原始类附加功能。
工厂模式(Factory Design Pattern)可细分为三种,分别是简单工厂,工厂方法和抽象工厂,它们都是为了更好的创建对象。
状态模式允许对象在内部状态改变时,改变它的行为,对象看起来好像改变了它的类。
命令模式将请求封装为对象,能够支持请求的排队执行、记录日志、撤销等功能。
备忘录模式(Memento Pattern)保存一个对象的某个状态,以便在适当的时候恢复对象。备忘录模式属于行为型模式。 基本介绍 **意图:**在不破坏封装性的前提下,捕获一个对象的内部状态,并在该
顾名思义,责任链模式(Chain of Responsibility Pattern)为请求创建了一个接收者对象的链。这种模式给予请求的类型,对请求的发送者和接收者进行解耦。这种类型的设计模式属于行为
享元模式(Flyweight Pattern)(轻量级)(共享元素)主要用于减少创建对象的数量,以减少内存占用和提高性能。这种类型的设计模式属于结构型模式,它提供了减少对象数量从而改善应用所需的对象结