背景

• leader 提了个需求，想要在产品功能迭代时，测试通过的时候可以附带一份这个功能的增量代码覆盖率报告，以此来衡量测试是否充分

为什么给我来做

• 之前是做 Java 的，接触过覆盖率，也尝试过统计集成测试阶段的代码覆盖率
• 之前的情况是：
  • Java 项目打成 jar 包，在启动时，使用 JaCoCo 的 On-The-Fly 模式，添加代理，比如java -javaagent:/root/jacoco/lib/org.jacoco.agent-0.8.4-runtime.jar=includes=com.hundsun.broker.cic.*,output=tcpserver,port=10004,address=127.0.0.1 –jar /root/test.jar
  • 测试完毕后，dump 出 exec 文件，比如java -jar /root/jacoco/lib/org.jacoco.cli-0.8.4-nodeps.jar dump --address 127.0.0.1 --port 10004 --destfile /root/jacoco.exec
  • 最后生成覆盖率报告文件，比如java -jar org.jacoco.cli-0.8.4-nodeps.jar report jacoco.exec --classfiles /opt/JENKINS_HOME/workspace/TestCenter-UF30-CIC-6-Jacoco/Class/ --sourcefiles /opt/JENKINS_HOME/workspace/TestCenter-UF30-CIC-6-Jacoco/Source/ --html jacoco/html --csv jacoco/jacoco.csv --xml jacoco/jacoco.xml
  • 没有做过增量代码相关的

查找资料

• 在 GitHub 上，搜了一下 code coverage python 相关的项目，感觉相关的有如下几个
  • https://github.com/Bachmann1234/diff_cover
  • https://github.com/coveralls-clients/coveralls-python
  • https://github.com/nedbat/coveragepy
  • https://github.com/bystep15/google-diff-match-patch
• 了解了一下 coverage.py 这个项目，好像可以类似 JaCoCo 一样，在启动 Python Web 项目时注入代理，然后测试完毕后获取覆盖率结果

我的疑问

• 如何获取增量代码，比如开发的分支是从 release 上切出来的，提测的时候怎么能获取到改动的部分，git diff 不知能不能实现
• 假设获取到了增量代码，上述 coverage.py 能实现这个需求吗，如何在程序运行的时候监控到这部分代码
• 发此贴主要是想请教一下大家，尤其是做过类似工具的前辈们，能否讲下具体实现的思路和可行性，跪谢 Orz!