¿Cómo funcionan las herramientas de cobertura de código?

Question

¿De qué manera las herramientas de cobertura de código como NCover saben qué partes del código se ejecutaron y qué partes no?

Answer 1

Cita directamente de la NCover FAQ: NCover informa el porcentaje de sucursales en el código que se han tomado durante el transcurso de sus pruebas automatizadas. Lo logra instrumentando el código fuente en cada rama, y ​​escribiendo los puntos de 'golpe' en un archivo. Estos puntos de 'golpe' se comparan con el total de puntos posibles que podrían haber sido 'golpeados'.

Answer 2

Requiere que ejecute sus pruebas una vez con el análisis de cobertura de código habilitado, y luego simplemente cuenta el número de bloques (es decir, bloques de alcance) cubiertos y se compara con el número total de bloques en el proyecto (s) están probando.

El razonamiento básico es que si se cubre cada posible combinación de bloques de códigos, todas las rutas de códigos están cubiertas . El principal argumento en contra de poner demasiado peso en los números de cobertura de código es que los bloques "fáciles" como getters y setters, que no dan ningún valor real (y apenas podrían salir mal ...) cuentan tanto como más bloques de código propensos a errores .

---

^{1) Como ha señalado Ira Baxter en un comentario, la redacción anterior de esta frase es incorrecta. Por favor, lea los comentarios para una discusión sobre esto.}

Answer 3

Aquí hay un documento técnico sobre How to Implement test coverage tools for arbitrary languages.

Mi empresa crea una familia de herramientas de cobertura de prueba para Java, C#, C++, PHP, COBOL, PLSQL, ... basadas en este principio.

Answer 4

Sé que esta es una pregunta antigua, pero si aún está interesado, puede ver un ejemplo de cómo se realiza dicha instrumentación para aplicaciones .NET mirando el proyecto de código abierto OpenCover.

OpenCover inserta puntos de instrumentación en puntos significativos en el código.

1. Para la cobertura de líneas de código que utiliza los puntos de secuencia tomadas de un archivo
2. PDB para la cobertura rama instrucciones de instrumentos de TI COND_BRANCH instrumentando el objetivo (s) de salto y la siguiente instrucción después de la instrucción de salto es decir, ningún salto.
3. Para instrumentación de método, instrumenta la primera instrucción de cualquier método.

Todas estas reglas se aplican en CoverageInstrumentation.cpp después de que se hayan ubicado los puntos apropiados utilizando Mono.Cecil y se hayan pasado al perfilador desde el host de la consola.

El código fuente para PartCover también está disponible (como se indica), pero esto es mucho más difícil de seguir, pero también utiliza puntos de secuencia de PDB para determinar dónde instrumenta el código.

Answer 5

De this fuente:

NCover utiliza la API .NET perfilador Marco para supervisar la ejecución de una aplicación.Cuando un método se carga por el CLR, NCover recupera la IL y lo reemplaza con IL código instrumentado

Así que en resumen, se engancha en sí en la compilación justo a tiempo.

No todas las herramientas funcionan de la misma manera. Otras herramientas funcionan modificando el bytecode de su aplicación una vez que el código ha sido compilado.