如何使用数据库查询对对象进行单元测试


153

我听说单元测试“非常棒”,“非常酷”和“各式各样的好东西”,但是我有70%或更多的文件涉及数据库访问(有些读和一些写),我不确定为这些文件编写单元测试。

我正在使用PHP和Python,但我认为这是一个问题,适用于大多数/所有使用数据库访问的语言。

Answers:


82

我建议模拟一下您对数据库的调用。从本质上讲,它们是对象,看起来像您尝试在其上调用方法的对象,它们具有与调用者相同的属性,方法等。但是,当调用特定方法时,它没有执行程序编程要执行的任何操作,而是完全跳过了该操作,仅返回结果。该结果通常由您提前定义。

为了设置对象以进行模拟,您可能需要使用某种控制/依赖项注入模式的反转,如以下伪代码所示:

class Bar
{
    private FooDataProvider _dataProvider;

    public instantiate(FooDataProvider dataProvider) {
        _dataProvider = dataProvider;
    }

    public getAllFoos() {
        // instead of calling Foo.GetAll() here, we are introducing an extra layer of abstraction
        return _dataProvider.GetAllFoos();
    }
}

class FooDataProvider
{
    public Foo[] GetAllFoos() {
        return Foo.GetAll();
    }
}

现在,在单元测试中,您将创建一个FooDataProvider的模拟,该模拟使您可以调用GetAllFoos方法,而不必实际访问数据库。

class BarTests
{
    public TestGetAllFoos() {
        // here we set up our mock FooDataProvider
        mockRepository = MockingFramework.new()
        mockFooDataProvider = mockRepository.CreateMockOfType(FooDataProvider);

        // create a new array of Foo objects
        testFooArray = new Foo[] {Foo.new(), Foo.new(), Foo.new()}

        // the next statement will cause testFooArray to be returned every time we call FooDAtaProvider.GetAllFoos,
        // instead of calling to the database and returning whatever is in there
        // ExpectCallTo and Returns are methods provided by our imaginary mocking framework
        ExpectCallTo(mockFooDataProvider.GetAllFoos).Returns(testFooArray)

        // now begins our actual unit test
        testBar = new Bar(mockFooDataProvider)
        baz = testBar.GetAllFoos()

        // baz should now equal the testFooArray object we created earlier
        Assert.AreEqual(3, baz.length)
    }
}

简而言之,是一种常见的模拟场景。当然,您仍然可能还要对实际的数据库调用进行单元测试,为此您需要访问数据库。


我知道这很旧,但是如何为数据库中已经存在的表创建一个重复表。这样您可以确认数据库调用正常工作吗?
bretterer

1
我一直在使用PHP的PDO作为对数据库的最低级别访问,我在该数据库上提取了一个接口。然后,我在此之上构建了一个应用程序感知的数据库层。这是保存所有原始SQL查询和其他信息的层。应用程序的其余部分与此更高级别的数据库进行交互。我发现这对于单元测试非常有效。我测试了应用程序页面如何与应用程序数据库交互。我测试了我的应用程序数据库如何与PDO交互。我认为PDO可以正常运行,没有错误。源代码:manx.codeplex.com
合法化

1
@bretterer-创建重复表对于集成测试很有用。对于单元测试,通常会使用一个模拟对象,该对象将允许您测试代码单元,而与数据库无关。
BornToCode 2015年

2
模拟单元测试中的数据库调用有什么价值?它似乎没有用,因为您可以更改实现以返回不同的结果,但是您的单元测试将(不正确地)通过。
bmay2

2
@ bmay2你没看错。我最初的答案是很久以前(9年!)写的,当时很多人都没有以可测试的方式编写代码,并且严重缺乏测试工具。我不再推荐这种方法。今天,我只是建立一个测试数据库,并用测试所需的数据填充它,和/或设计我的代码,以便我可以在没有数据库的情况下尽可能多地测试逻辑。
Doug R

25

理想情况下,您的对象应该是持久性的。例如,您应该有一个“数据访问层”,您可以向该数据访问层发出请求,并返回对象。这样,您可以将该部分放在单元测试之外,也可以单独进行测试。

如果您的对象与数据层紧密耦合,则很难进行适当的单元测试。单元测试的第一部分是“单元”。所有单元都应该能够进行隔离测试。

在我的c#项目中,我将NHibernate与完全独立的Data层一起使用。我的对象位于核心域模型中,可以从我的应用程序层进行访问。应用程序层与数据层和域模型层都进行对话。

应用程序层有时也称为“业务层”。

如果使用的是PHP,请创建一组特定的类,用于数据访问。确保您的对象不知道它们如何持久保存,并在您的应用程序类中连接二者。

另一种选择是使用模拟/存根。


我一直对此表示同意,但实际上由于期限和“现在可以在今天下午2点之前添加一个功能,这是最困难的事情之一”。但是,如果我的老板决定自己没有想到需要新的业务逻辑和表格的50个新出现的问题,那么这种事情就是重构的主要目标。
达伦·林格

3
如果您的对象与数据层紧密耦合,则很难进行适当的单元测试。单元测试的第一部分是“单元”。所有单元都应该能够进行隔离测试。很好的解释
阿弥陀佛(Amitābha),2015年

11

对具有数据库访问权限的对象进行单元测试的最简单方法是使用事务作用域。

例如:

    [Test]
    [ExpectedException(typeof(NotFoundException))]
    public void DeleteAttendee() {

        using(TransactionScope scope = new TransactionScope()) {
            Attendee anAttendee = Attendee.Get(3);
            anAttendee.Delete();
            anAttendee.Save();

            //Try reloading. Instance should have been deleted.
            Attendee deletedAttendee = Attendee.Get(3);
        }
    }

这将还原数据库的状态,基本上就像事务回滚一样,因此您可以根据需要多次运行测试,而不会产生任何副作用。我们已经在大型项目中成功使用了这种方法。我们的构建确实花费了一些时间(15分钟),但是对于进行1800个单元测试并不可怕。此外,如果需要考虑构建时间,则可以将构建过程更改为具有多个构建,一个用于构建src,另一个用于随后处理单元测试,代码分析,打包等操作。


1
单元测试数据访问层时+1节省了大量时间。请注意,TS经常会需要MSDTC,这可能不是您所需要的(取决于您的应用是否需要MSDTC)
StuartLC 2012年

最初的问题是关于PHP的,此示例似乎是C#。环境是非常不同的。
合法化

2
该问题的作者说,这是一个通用问题,适用于与数据库有关的所有语言。
Vedran

9
和这个亲爱的朋友,称为集成测试
AA。

10

当我们开始着眼于对包含大量“业务逻辑” sql操作的中间层过程进行单元测试时,我也许可以带您体验一下我们的经验。

我们首先创建了一个抽象层,该抽象层允许我们“插入”任何合理的数据库连接(在我们的情况下,我们仅支持单个ODBC类型的连接)。

一旦到位,我们便可以在代码中执行类似的操作(我们使用C ++,但是我确定您能理解这个想法):

GetDatabase()。ExecuteSQL(“ INSERT INTO foo(blah,blah)”)

在正常运行时,GetDatabase()将返回一个对象,该对象通过ODBC直接将所有SQL(包括查询)喂入数据库。

然后,我们开始研究内存数据库-从长远来看,最好的数据库似乎是SQLite。(http://www.sqlite.org/index.html)。它的设置和使用非常简单,它允许我们子类并重写GetDatabase()来将sql转发到为每个执行的测试创建和销毁的内存数据库。

我们仍处于初期阶段,但到目前为止看起来还不错,但是我们必须确保创建所需的任何表并用测试数据填充它们-但是我们通过创建以下方法在这里减轻了工作量一组通用的辅助功能,可以为我们做很多这一切。

总体而言,它对我们的TDD流程有极大帮助,因为由于sql /数据库的本质,进行似乎无害的更改以修复某些bug可能会对系统的其他(难以检测)区域产生非常奇怪的影响。

显然,我们的经验集中于C ++开发环境,但是我相信您也许可以在PHP / Python下获得类似的工作。

希望这可以帮助。


9

如果要对类进行单元测试,则应模拟数据库访问。毕竟,您不想在单元测试中测试数据库。那将是一个集成测试。

将调用抽象化,然后插入一个仅返回预期数据的模拟。如果您的课程除了执行查询之外没有做更多的事情,那么甚至不值得测试它们,但是...


6

xUnit测试模式》这本书描述了一些处理命中数据库的单元测试代码的方法。我同意其他人的说法,因为这很慢,因此您不想这样做,但是IMO,您一定要这样做。模拟数据库连接以测试更高级的内容是个好主意,但请查看本书以获取有关可以与实际数据库进行交互的建议。


4

您有以下选择:

  • 编写一个脚本,该脚本将在开始单元测试之前清除数据库,然后使用预定义的数据集填充db并运行测试。您也可以在每次测试之前执行此操作-速度较慢,但​​出错率较低。
  • 注入数据库。(以伪Java为例,但适用于所有OO语言)

    类数据库{
     公共结果查询(字符串查询){...实际数据库在这里...}
    }

    MockDatabase类扩展了数据库{ 公共结果查询(字符串查询){ 返回“模拟结果”; } }

    类ObjectThatUsesDB { public ObjectThatUsesDB(Database db){ this.database = db; } }

    现在,在生产环境中,您将使用普通数据库,而对于所有测试,只需注入可临时创建的模拟数据库。

  • 不要在大多数代码中都使用DB(无论如何这都是一种不好的做法)。创建一个“数据库”对象,该对象将不返回结果而将返回普通对象(即将返回User而不是一个元组{name: "marcin", password: "blah"}),并使用临时构造的真实对象编写所有测试,并编写一个依赖于数据库的大型测试,以确保此转换工作正常。

当然,这些方法不是互相排斥的,您可以根据需要混合和匹配它们。


3

如果您的项目具有很高的凝聚力和松散的耦合,那么对数据库访问进行单元测试就很容易了。这样,您可以只测试每个特定类所做的事情,而不必一次测试所有内容。

例如,如果您对用户界面类进行单元测试,则编写的测试应仅尝试验证UI内的逻辑是否按预期工作,而不是验证该函数后面的业务逻辑或数据库操作。

如果要对实际的数据库访问进行单元测试,则实际上将进行更多的集成测试,因为您将依赖于网络堆栈和数据库服务器,但是您可以验证SQL代码是否按照您的要求进行操作做。

对我个人而言,单元测试的潜在力量在于,它迫使我以比没有它们时更好的方式设计应用程序。这是因为它确实帮助我摆脱了“此功能应做的一切”的思想。

抱歉,我没有用于PHP / Python的任何特定代码示例,但是如果您想查看一个.NET示例,那么我会发布一篇帖子,描述我用于进行此相同测试的技术。


2

我通常尝试在测试对象(和ORM,如果有)与测试数据库之间分解测试。我通过模拟数据访问调用来测试事物的对象方面,而通过测试与db的对象交互来测试事物的db方面,以我的经验,这通常是相当有限的。

在开始模拟数据访问部分之前,我曾经对编写单元测试感到沮丧,因此不必创建测试数据库或即时生成测试数据。通过模拟数据,您可以在运行时全部生成数据,并确保您的对象可以在已知输入下正常工作。


2

我从未在PHP中完成此操作,也从未使用过Python,但是您想要做的是模拟对数据库的调用。为此,无论是第三方工具还是自己管理,都可以实现一些IoC,然后可以实现数据库调用程序的模拟版本,在该版本中,您可以控制该假调用的结果。

仅通过对接口进行编码即可执行IoC的简单形式。这需要在代码中进行某种面向对象的操作,因此它可能不适用于您所做的事情(我说,既然要做的就是提及PHP和Python)

希望对您有所帮助,如果您目前没有其他要搜索的字词,


2

我同意第一篇文章-应该将数据库访问剥离到实现接口的DAO层中。然后,您可以针对DAO层的存根实现测试您的逻辑。


2

您可以使用模拟框架来抽象出数据库引擎。我不知道PHP / Python是否有一些功能,但是对于类型化语言(C#,Java等),有很多选择

它还取决于您如何设计这些数据库访问代码,因为某些设计比以前的文章中提到的其他设计更易于进行单元测试。


2

为单元测试设置测试数据可能是一个挑战。

对于Java,如果使用Spring API进行单元测试,则可以在单元级别上控制事务。换句话说,您可以执行涉及数据库更新/插入/删除并回滚更改的单元测试。执行结束时,您将所有内容保留在开始执行之前的状态。对我来说,这是可以得到的。

By using our site, you acknowledge that you have read and understand our Cookie Policy and Privacy Policy.
Licensed under cc by-sa 3.0 with attribution required.