历史遗留代码不敢重构? 每次改代码都要回归全部逻辑? 提测被打回?html
在近期的代码重构的过程当中,遇到了各式各样的问题。好比调整代码顺序致使bug,取反操做逻辑丢失,参数校验逻辑被误改等。java
上线前须要花大量时间进行测试和灰度验证。在此过程最大的感觉就是:一切没有单测覆盖的重构都是裸奔。程序员
经历了没有单测痛苦磨难,查阅不少资料和实战以后,因而就有了这篇文章,但愿能给你的单测提供一些参考。正则表达式
单元测试是针对程序模块(软件设计的最小单位)来进行正确性检验的测试工做。程序单元是应用的最小可测试部件。数据库
关于测试的名词还有不少,如集成测试,系统测试,验收测试。是在不一样阶段,不一样角色来共同保证系统质量的一种手段。编程
笔者在工做中常常遇到一些无效单测,一般是启动Spring容器,链接数据库,调用方法而后控制台输出结果。这些并不能算是单测。示例代码以下:segmentfault
@RunWith(SpringRunner.class)
@SpringBootTest(classes = ApplicationLoader.class)
public class UserServiceTest {
@Autowired
private UserService userService;
@Test
public void testAddUser() {
AddUserRequest addUserRequest = new AddUserRequest("zhangsan", "zhangsan@163.com");
ResultDTO<Long> addResult = userService.addUser(addUserRequest);
System.out.println(addResult);
}
}
复制代码
在工做中不少代码是没有单测的,这些项目也能正常得运行。那么为何要编写单测呢?markdown
好的单测在可以提供咱们代码交付质量的同时,减小bug发现和修复的成本,进而提升工做效率。至于单测可以让QA开心,则只是锦上添花。架构
提高工做效率,在工做中程序员的大多数时间都耗费在了测试阶段,编码每每可能只占一小部分。框架
尤为是在修改已有代码时候,不得不考虑增量代码是否会对原有逻辑带来冲击,以及修复bug以后是否引入的新的bug。
笔者就曾陷入如此困境,一下午时间都在重复着打包,部署,测试...,在改bug和写bug之间无限循环,有时也会由于一个低级bug抓心挠肝刚到后半夜。
因此长远来看,单测是可以有效提升工做效率的!
提高代码质量,可测试一般与软件的设计良好程序相关,难以测试的代码通常设计上都有问题。因此有效的单测会驱动开发者写出更高质量代码。
固然,单测带来最直接的收益就是可以减小bug率,虽然单测不能捕获全部bug,可是的确可以暴露出大多数bug。
节省成本,单测可以确保程序的底层逻辑单元的正确性,让问题可以在RD自测阶段暴露出来。bug越早发现,修复成本每每更低,带来的影响也会更小,因此bug应该尽早暴露。
以下图红色曲线所示,在不一样阶段修复bug的成本差异是巨大的。
代码的做者最了解代码的目的、特色和实现的局限性。写单测没有比做者更适合的人选了,因此每每代码做者每每是第一责任人。
编写单测的时机,通常是 The sooner, the better(越早越好)。尽可能不要将单测拖延到代码编写完以后,这样带来的收益可能不尽如人意。
TDD(Test-Driven Development)测试驱动开发,是一种软件开发过程中的应用方法,以其倡导先写测试程序,而后编码实现其功能得名。
测试驱动着整个开发过程:首先,驱动代码的设计和功能的实现;其后,驱动代码的再设计和重构。
固然TDD是一种理想的状态,因为种种缘由,想要彻底遵照TDD原则,是有必定难度的,毕竟PM的需求每每是可变的。
边开发边写单测,先写少许功能代码,紧接着写单测,重复这两个过程,直到完成功能代码开发。
其实这种方案跟第一种已经很接近,当功能代码开发完时,单测也差很少完成了。这种方案也是最多见和推荐的方式。
开发后再补单测,效果每每是最差的。首先,要考虑的是代码的可测性,已经完成的代码可能并不具有可测试性,毕竟写代码的时候能够任意发挥。
其次,补单测时容易顺着当前实现去写测试代码,而忽略实际需求的逻辑是什么,致使咱们的单测是无效的。
究竟哪些方法须要进行单测?这个困扰笔者好久的一个问题!如上文所说,单测覆盖率固然是越高越好,不过咱们在考虑ROI时不免会作出一些妥协。
接受不完美,对于历史代码,全覆盖每每是不现实的。咱们能够根据方法优先级(如照成资损,影响业务主流程)针对性补全单测,保证现有逻辑能正常运行。
对于增量代码,笔者认为没有必要所有覆盖,通常根据被测方法是否有处理(业务)逻辑来决定。
好比常见的JavaWeb项目代码中,Controller层,DAO层以及其余仅涉及接口转发相关的方法,每每不须要单测覆盖。而业务逻辑层的各类Service则须要重点测试。
对于自定义的工具类,正则表达式等固定逻辑,也是必需要测试的。由于这部分逻辑通常都是公共且通用的,一旦逻辑错误会产生比较严重的影响。
好的单测必定是可以自动执行并查执行结果的,也不该当对外部有依赖,单测的执行应当是彻底自动化,而且无需部署,本地IDE就能运行。
在写单侧前,不妨参考如下前人总结好的First原则。
F—Fast:快速
在开发过程当中一般须要随时执行测试用例;在发布流水线中执行也必须执行,常见的就是push代码后,或者打包时先执行测试用例;何况一个项目中每每有成百上千个测试用例。
因此为了保证开发和发布效率,快速执行是单测的重要原则。这就要求咱们不要像集成测试同样依赖多个组件,确保单测在秒级甚至毫秒级执行完毕。
I—Isolated:隔离
隔离性也能够理解为独立性,好的单测是每一个测试用例只关注一个逻辑单元或者代码分支,保证单一职责,这样能更清晰的暴露问题和定位问题。
每一个单测之间不该该产生依赖,为了保证单测稳定可靠且便于维护,单测用例之间决不能互相调用,也不能依赖执行的前后次序。
数据资源隔离,测试时不要依赖和修改外部数据或文件等其余共享资源,作到测试先后共享资源数据一致。
Fake,Stub和Mock
咱们的被测试代码存在的外部依赖的行为每每是不可预测的,咱们须要将这些"变化"变得可控,根据职责不一样,能够分为Fake,Stubs,Mock三种。
假数据(Fake), 一些针对当前场景构建的简化版的对象,这些对象做为数据源供咱们使用,职责就像内存数据库同样。
好比在常见的三层架构中,业务逻辑层须要依赖数据访问层,当业务逻辑层开发完成后即便数据访问层没有开发完成,也能经过构建Fake数据的方式完成业务逻辑层的测试。
UserDO fakeUser = new UserDO("zhangsan", "zhangsan@163.com");
public UserVO getUser(Long userId) {
// do something
User user = fakeUser; // 测试阶段替换:User user = userDao.getById(userId);
// do something
}
复制代码
Fake数据虽然能够测试逻辑,可是当数据访问层开发完毕后可能须要修改代码,将Fake数据替换为实际的方法调用来完成代码集成,显然这不是一种优雅的实现,因而便有了Stub。
桩代码(Stub)是用来代替真实代码的临时代码,是在测试环境对依赖接口的一种专门实现。
好比,UserService中调用了UseDao,为了对UserService中的函数进行测试,这时候须要构建一个UserDao接口的实现类UserDaoStub(返回Fake数据),这个临时代码就是所谓的桩代码。
public class UserDaoStub implements UserDao {
UserDO fakeUser = new UserDO();
{
fakeUser.setUserName("zhangsan");
fakeUser.setEmail("zhangsan@163.com");
LocalDateTime dateTime = LocalDateTime.of(2021, 7, 1, 12, 30, 0);
fakeUser.setCreateTime(dateTime);
fakeUser.setUpdateTime(dateTime);
}
@Override
public UserDO getById(Long id) {
if (Objects.isNull(id) || id <= 0) {
return new UserDO();
}
return fakeUser;
}
}
复制代码
这种面向接口编程,使得在不一样场景下经过不一样的实现类替换接口的编程设计原则就是咱们常说的里氏替换原则。
Mock 代码和桩代码很是相似,都是用来代替真实代码的临时代码。不一样的是在被调用时,会记录被调用信息,执行完毕后验证执行动做或结果是否符合预期。
对于 Mock 代码来讲,咱们的关注点是 Mock 方法有没有被调用,以什么样的参数被调用,被调用的次数,以及多个 Mock 函数的前后调用顺序。
@Test
public void testAddUser4SendEmail() {
// GIVEN:
AddUserRequest fakeAddUserRequest = new AddUserRequest("zhangsan", "zhangsan@163.com");
// WHEN
ResultDTO<Long> addResult = userService.addUser(fakeAddUserRequest);
// THEN
assertTrue(addResult.isSuccess());
// 验证sendVerifyEmail的调用1次,而且调用参数为咱们fake数据中指定的邮箱
verify(emailService, times(1)).sendVerifyEmail(any());
verify(emailService).sendVerifyEmail(fakeAddUserRequest.getEmail());
}
复制代码
固然,咱们也能够经过修改Stub的实现,达到和Mock同样的效果。
public class EmailServiceStub implements EmailService{
public int invokeCount = 0;
@Override
public boolean sendVerifyEmail(String email) {
invokeCount ++;
// do something
return true;
}
}
public class UserServiceImplTest {
AddUserRequest fakeAddUserRequest;
private UserServiceImpl userService;
private EmailServiceStub emailServiceStub;
@Before
public void init() {
fakeAddUserRequest = new AddUserRequest("zhangsan", "zhangsan@163.com");
emailServiceStub = new EmailServiceStub();
userService= new UserServiceImpl();
userService.setEmailService(emailServiceStub);
}
@Test
public void testAddUser4SendEmail() {
// GIVEN: fakeAddUserRequest
// WHEN
ResultDTO<Long> addResult = userService.addUser(fakeAddUserRequest);
// THEN:发送邮件接口被调用次数是否为1
Assert.assertEquals(emailServiceStub.invokeCount, 1);
}
}
复制代码
Stub和Mock的区别
Stub和Mock的区别在于,Stub偏向于结果验证,Mock则更加偏向于行为验证。
好比,测试addUser方法时,若是是Stub方式则关注方法返回结果,即用户是否添加成功,邮件是否发送成功;而Mock方式则倾向于本次添加的行为验证,好比sendEmail方法调用次数等。
Mock替代Stub
Mock和Stub本质上是不一样的,可是随着各类Mock框架的引入,Stub和Mock的边界愈来愈模糊,使得Mock不只能够进行行为验证,一样也具有Stub对接口的假实现的能力。
目前大多数的mock工具都提供mock退化为stub的支持,以Mockito为例,咱们能够经过anyObject(), any等方式对参数的进行匹配;使用verify方法能够对方法的调用次数和参数进行检验,这和stub就几乎没有本质区别了。
when(userDao.insert(any())).thenReturn(1L);
when(emailService.sendVerifyEmail(anyString())).thenReturn(true);
复制代码
stub理论上也是能够向mock的方向作转化,上文也说起stub是能够经过增长代码来实现一些expectiation的特性,而从使得二者的界限更加的模糊。
因此,若是对于Stub和Mock的概念仍是比较模糊,也没必要过分纠结,这并不影响写出优秀的单测。
R—Repeatable:可重复执行
单测是能够重复执行的,不能受到外界环境的影响。 同一测试用例,即便是在不一样的机器,不一样的环境中运行屡次,每次运行都会产生相同的结果。
避免隐式输入(Hidden imput),好比测试代码中不能依赖当前日期,随机数等,不然程序就会变得不可控从而变得不可重复执行。
S—Self-verifying:自我验证
单测须要经过断言进行结果验证,即当单测执行完毕以后,用来判断执行结果是否和假设一致,无需人工检查是否执行成功。
固然,除了对执行结果进行检查,也能对执行过程进行校验,如方法调用次数等。下面是笔者在工做中常常见到的写法,这些都是无效的单测。
// 直接打印结果
public void testAddUser4DbError() {
// GIVEN
fakeAddUserRequest.setUserName("badcase");
// WHEN
ResultDTO<Long> addResult = userService.addUser(fakeAddUserRequest);
// THEN
System.out.println(addResult);
}
// 吞没异常失败case
public void testAddUser4DbError() {
// GIVEN
fakeAddUserRequest.setUserName("badcase");
// WHEN
try {
ResultDTO<Long> addResult = userService.addUser(fakeAddUserRequest);
// THEN
Assert.assertTrue(addResult.isSuccess());
} catch(Exception e) {
System.out.println("测试执行失败");
}
}
复制代码
正解以下:
@Test
public void testAddUser4DbError() {
// GIVEN
fakeAddUserRequest.setUserName("badcase");
// WHEN
ResultDTO<Long> addResult = userService.addUser(fakeAddUserRequest);
// THEN
Assert.assertEquals(addResult.getMsg(), "添加用户失败,请稍后重试");
}
复制代码
T—Timely&Thorough:及时,全面
理想状态固然是TDD模式开发,即测试驱动开发。如前面提到的,编写代码逻辑以前写最佳,边开发边写次之,等代码稳定运行再来补单测收益多是最低的。
除了及时性,笔者认为T应当有另外一层含义,即全面性(Thorough)。理想状况下每行代码都要被覆盖到,每个逻辑分支都必须有一个测试用例。
不过想要100%的测试覆盖率是很是耗费精力的,甚至会和咱们最初提升效率的初衷相悖。因此花合理的时间抓出大多数bug,要好过穷尽一辈子抓出全部bug。
一般状况下咱们要至少考虑到参数的边界,特殊值,正常场景(与设计文档结合)以及异常场景,保证咱们的核心流程是正确的。
工欲善其事必先利其器,选择一个合适的Mock框架与手动实现Stub比,每每可以让咱们的单测事半功倍。
须要说明的是,Mock框架并非必须的。正如上文所说,咱们能够实现Stub代码来隔离依赖,当须要使用到Mock对象时,咱们只须要对Stub的实现稍做修改便可。
市面上有许多Mock框架可供选择,如常见的Mockito,PowerMock,Spock,EasyMock,JMock等。如何选择合适的框架呢?
若是你想半个小时就能上手,不妨试试Mockito,绝对如丝般顺滑!固然,若是有时间而且对Groovy语言感兴趣,不妨花半天时间了解下Spock,能让测试代码更加精简。
如下是几种经常使用的Mock框架对比,不知道怎么选时,不妨根据现状,须要注意的是,大部分Mock框架都不支持Mock静态方法。
写单测通常包括3个部分,即Given(Mock外部依赖&准备Fake数据),When(调用被测方法)以及Then(断言执行结果),这种写法和Spock的语法结构也是一致的。
为了更好的理解单元测试,笔者将针对以下代码,分别使用Mockito和Spock写一个简单的示例,让你们感觉一下二者的各自的特色和不一样。
@Service
@AllArgsConstructor
@NoArgsConstructor
public class UserServiceImpl implements UserService {
@Autowired
private UserDao userDao;
@Autowired
private EmailService emailService;
public ResultDTO<Long> addUser(AddUserRequest request) {
// 1. 校验参数
ResultDTO<Void> validateResult = validateAddUserParam(request);
if (!validateResult.isSuccess()) {
return ResultDTO.paramError(validateResult.getMsg());
}
// 2. 添加用户
UserDO userDO = request.buildUserDO();
long id = userDao.insert(userDO);
// 3. 添加成功,返回验证激活邮件
if (id > 0) {
emailService.sendVerifyEmail(request.getEmail());
return ResultDTO.success(id);
}
return ResultDTO.internalError("添加用户失败,请稍后重试");
}
/** * 校验添加用户参数 */
private ResultDTO<Void> validateAddUserParam(AddUserRequest request) {
if (Objects.isNull(request)) {
return ResultDTO.paramError("添加用户参数不能为空");
}
if (StringUtils.isBlank(request.getUserName())) {
return ResultDTO.paramError("用户名不能为空");
}
if (!EmailValidator.validate(request.getEmail())) {
return ResultDTO.paramError("邮箱格式错误");
}
return ResultDTO.success();
}
}
复制代码
基于Mockito的单测示例以下,须要注意的下面是纯java代码,没有对象显示调用的方法都是已经静态导入过的。
@RunWith(MockitoJUnitRunner.class)
public class UserServiceImplTest {
// Fake:须要提早构造的假数据
AddUserRequest fakeAddUserRequest;
// Mock: mock外部依赖
@InjectMocks
private UserServiceImpl userService;
@Mock
private UserDao userDao;
@Mock
private EmailService emailService;
@Before
public void init() {
fakeAddUserRequest = new AddUserRequest("zhangsan", "zhangsan@163.com");
when(userDao.insert(any())).thenReturn(1L);
when(emailService.sendVerifyEmail(anyString())).thenReturn(true);
}
@Test
public void testAddUser4NullParam() {
// GIVEN
fakeAddUserRequest = null;
// WHEN
ResultDTO<Long> addResult = userService.addUser(fakeAddUserRequest);
// THEN
assertEquals(addResult.getMsg(), "添加用户参数不能为空");
}
@Test
public void testAddUser4BadEmail() {
// GIVEN
fakeAddUserRequest.setEmail(null);
// WHEN
ResultDTO<Long> addResult = userService.addUser(fakeAddUserRequest);
// THEN
assertEquals(addResult.getMsg(), "邮箱格式错误");
}
@Test
public void testAddUser4BadUserName() {
// GIVEN
fakeAddUserRequest.setUserName(null);
// WHEN
ResultDTO<Long> addResult = userService.addUser(fakeAddUserRequest);
// THEN
assertEquals(addResult.getMsg(), "用户名不能为空");
}
@Test
public void testAddUser4DbError() {
// GIVEN
when(userDao.insert(any())).thenReturn(-1L);
// WHEN
ResultDTO<Long> addResult = userService.addUser(fakeAddUserRequest);
// THEN
assertEquals(addResult.getMsg(), "添加用户失败,请善后重试");
}
@Test
public void testAddUser4SendEmail() {
// GIVEN
// WHEN
ResultDTO<Long> addResult = userService.addUser(fakeAddUserRequest);
// THEN
assertTrue(addResult.isSuccess());
verify(emailService, times(1)).sendVerifyEmail(any());
verify(emailService).sendVerifyEmail(fakeAddUserRequest.getEmail());
}
}
复制代码
正如上文提到的,Spock可以让代码更加精简,尤为是在代码逻辑分支比较多的场景下。下面是基于Spock的单测。
class UserServiceImplSpec extends Specification {
UserServiceImpl userService = new UserServiceImpl();
AddUserRequest fakeAddUserRequest;
def userDao = Mock(UserDao)
def emailService = Mock(EmailService)
def setup() {
// Fake数据建立
fakeAddUserRequest = new AddUserRequest(userName: "zhangsan", email: "zhangsan@163.com")
// 注入Mock对象
userService.userDao = userDao
userService.emailService = emailService
}
def "testAddUser4BadParam"() {
given:
if (Objects.isNull(userName) || Objects.is(email)) {
fakeAddUserRequest = null
} else {
fakeAddUserRequest.setUserName(userName)
fakeAddUserRequest.setEmail(email)
}
when:
def result = userService.addUser(fakeAddUserRequest)
then:
Objects.equals(result.getMsg(), resultMsg)
where:
userName | email | resultMsg
null | null | "添加用户参数不能为空"
"Java填坑笔记" | null | "邮箱格式错误"
null | "javaTKBJ@163.com" | "用户名不能为空"
}
def "testAddUser4DbError"() {
given:
_ * userDao.insert(_) >> -1L
when:
def result = userService.addUser(fakeAddUserRequest)
then:
Objects.equals(result.getMsg(), "添加用户失败,请稍后重试")
}
def "testAddUser4SendEmail"() {
given:
_ * userDao.insert() >> 1
when:
def result = userService.addUser(fakeAddUserRequest)
then:
result.isSuccess()
1 * emailService.sendVerifyEmail(fakeAddUserRequest.getEmail())
}
}
复制代码
在验证商业模式以前,时刻要想考虑投入产出比。时间和商业成本过高不利于产品快速推向市场,因此何时推广单测,须要更高阶的人决策。
测试不可能序错误,单测也不例外。单测只测试程序单元自身的功能。所以,它不能发现集成错误、性能、或者其余系统级别的问题。
单测可以提升代码质量,驱动代码设计,帮助咱们更早发现问题,保障持续优化和重构,是工程师的一项必备技能。
参考资料:
blog.testlodge.com/tdd-vs-bdd/ martinfowler.com/articles/mo… callistaenterprise.se/blogg/tekni… segmentfault.com/a/119000003…