5

是否有一些首选方法来设计Specs2测试,其中有很多测试取决于先前测试的结果?

下面,您将找到我当前的测试套件。我不喜欢var测试片段之间的 s。不过,它们是“需要的”,因为某些测试会生成 ID 号,后续测试会重复使用这些 ID 号。

  1. 我应该将 ID 号存储在 Specs2 上下文中,还是创建一个单独的对象来保存所有可变状态?并且只在规范对象中放置测试片段?还是有更好的方法?

  2. 如果测试失败,我想取消相同深度的剩余测试。我可以让测试片段相互依赖吗?(我知道我可以在单个测试片段中取消剩余的匹配器(通过使用可变测试或通过orSkip),但是取消整个片段呢?)

.

object DatabaseSpec extends Specification {
  sequential

  "The Data Access Object" should {

    var someId = "" // These var:s feels error prone, is there a better way?

    "save an object" >> {
      someId = database.save(something)
      someId must_!= ""

      // I'd like to cancel the remaining tests, below, at this "depth",
      // if this test fragmen fails. Can I do that?
      // (That is, cancel "load one object", "list all objects", etc, below.)
    }

    "load one object" >> {
      anObject = database.load(someId)
      anObject.id must_== someId
    }

    "list all objects" >> {
      objs = database.listAll()
      objs.find(_.id == someId) must beSome
    }

    var anotherId = ""
    ...more tests that create another object, and
    ...use both `someId` and `anotherId`...

    var aThirdId = ""
    ...tests that use `someId`, `anotherId` and `aThirdId...
  }


  "The Data Access Object can also" >> {
    ...more tests...
  }

}
4

3 回答 3

4

您的问题有两个部分:使用 vars 存储中间状态,并在失败时停止示例。

1 - 使用变量

在使用可变规范时,有一些使用 vars 的替代方法。

您可以使用lazy vals表示您的流程的步骤:

object DatabaseSpec extends mutable.Specification { 
  sequential

  "The Data Access Object" should {

    lazy val id1    = database.save(Entity(1))
    lazy val loaded = database.load(id1)
    lazy val list   = database.list

    "save an object"   >> { id1 === 1 }
    "load one object"  >> { loaded.id === id1 }
    "list all objects" >> { list === Seq(Entity(id1)) }
  }

  object database {
    def save(e: Entity) = e.id
    def load(id: Int) = Entity(id)
    def list = Seq(Entity(1))
  }
  case class Entity(id: Int)
}

由于这些值是惰性的,它们只会在示例执行时被调用。

如果您准备好更改当前规范的结构,您还可以使用最新的 1.12.3-SNAPSHOT 并将所有这些小期望归为一个示例:

"The Data Access Object provides a save/load/list api to the database" >> {

  lazy val id1    = database.save(Entity(1))
  lazy val loaded = database.load(id1)
  lazy val list   = database.list

  "an object can be saved"  ==> { id1 === 1 }
  "an object can be loaded" ==> { loaded.id === id1 }
  "the list of all objects can be retrieved" ==> {
    list === Seq(Entity(id1))
  }
}

如果这些期望中的任何一个失败,那么其余的将不会执行,您将收到如下失败消息:

x The Data Access Object provides a save/load/list api to the database
  an object can not be saved because '1' is not equal to '2' (DatabaseSpec.scala:16)

另一种可能需要 2 个小的改进,是使用Given/When/ThenGiven编写规范的方式,但在内部和When步骤中使用“抛出”的期望。正如您在用户指南中看到的,这些Given/When/Then步骤从字符串中提取数据并将输入的信息传递给下一个Given/When/Then

import org.specs2._
import specification._
import matcher.ThrownExpectations

class DatabaseSpec extends Specification with ThrownExpectations { def is = 
  "The Data Access Object should"^
    "save an object"             ^ save^
    "load one object"            ^ load^
    "list all objects"           ^ list^
  end

  val save: Given[Int] = groupAs(".*") and { (s: String) =>
    database.save(Entity(1)) === 1
    1
  }

  val load: When[Int, Int] =  groupAs(".*") and { (id: Int) => (s: String) =>
    val e = database.load(id)
    e.id === 1
    e.id
  }

  val list: Then[Int] =  groupAs(".*") then { (id: Int) => (s: String) =>
    val es = database.list
    es must have size(1)
    es.head.id === id
  }
}

我要做的改进是:

  • 捕获失败异常以将它们报告为失败而不是错误
  • groupAs(".*") and当没有从字符串描述中提取的内容时,删除使用的必要性。

在这种情况下,编写以下内容就足够了:

val save: Given[Int] = groupAs(".*") and { (s: String) =>
  database.save(Entity(1)) === 1
  1
}

另一种可能性是允许直接写:

val save: Given[Int] = groupAs(".*") and { (s: String) =>
  database.save(Entity(1)) === 1
}

Given[T]可以从 a 创建对象,因为String => MatchResult[T]MatchResult[T]对象已经包含 type 的值T,这将成为“给定”。

2 - 示例失败后停止执行

使用隐式WhenFail Around上下文当然是做你想做的事的最好方法(除非你使用上面 G/W/T 示例所示的期望描述)。

注意事项step(stepOnFail = true)

如果上一个并发示例块中的一个示例失败,step(stepOnFail = true)则通过中断以下示例来工作。但是,当您使用时,前一个块仅限于一个示例。因此,您所看到的。实际上,我认为这是一个错误,并且无论您是否使用顺序,都不应该执行所有剩余的示例。因此,请继续关注本周末即将推出的修复。sequential

于 2012-11-02T13:19:48.013 回答
1

(关于问题 1:我不知道示例中是否有更好的替代vars 的方法。也许我的示例太长了,也许我应该将我的 Spec:s 拆分为许多较小的规范。)

关于问题 2,我在 etorreborre 的这封电子邮件中发现停止后续测试可以这样完成:

"ex1" >> ok
"ex2" >> ok
"ex3" >> ko
 step(stopOnFail=true)

"ex4" >> ok

(如果 ex1、ex2 或 ex3 失败,将跳过 Ex4。(但是,如果您使用的是顺序规范,这在 Specs2 < 1.12.3 中将无法正常工作。))


这是另一种方式:根据这个 Specs2 Googl groups 由 etorreborre 发送的电子邮件,可以让后续测试在失败时停止,如下所示:(“example2”将被跳过,但“example3”和“4”将运行)

class TestSpec extends SuperSpecification {

    sequential

    "system1" >> {
      implicit val stop = WhenFail()
      "example1" >> ko
      "example2" >> ok
    }
    "system2" >> {
      implicit val stop = WhenFail()
      "example3" >> ok
      "example4" >> ok
    }
}

case class WhenFail() extends Around {
  private var mustStop = false

  def around[R <% Result](r: =>R) = {
    if (mustStop)          Skipped("one example failed")
    else if (!r.isSuccess) { mustStop = true; r }
    else                   r
  }
}

etorreborre 的这封电子邮件中,如果示例失败,如果您包含规范列表,则可以取消后续规范:

sequential ^ stopOnFail ^
"These are the selenium specifications"         ^
  include(childSpec1, childSpec2, childSpec3)

并且您需要在其中编辑测试选项,build.sbt以便在包含子规范后不会再次独立执行。从电子邮件:

 testOptions := Seq(Tests.Filter(s =>
  Seq("Spec", "Selenium").exists(s.endsWith(_)) &&
    ! s.endsWith("ChildSpec")))
于 2012-11-02T03:03:06.953 回答
0

Specs 文档指出,如果发生故障,您可以使用 .orSkip 跳过示例的其余部分

"The second example will be skipped" >> {
    1 === 2
   (1 === 3).orSkip
}

但我没有亲自尝试过

于 2012-11-01T16:40:51.537 回答