¿Qué marcos de pruebas de mutaciones existen?

En otro question pregunté si mutation-testing es útil en la práctica. Como no obtuve ninguna respuesta que me satisfaga, quiero consultar las herramientas actuales. Por lo tanto, necesito una descripción general sobre los actuales marcos de pruebas de mutaciones existentes. ¿Cuáles de ellos son los más útiles y por qué?¿Qué marcos de pruebas de mutaciones existen?

Programa en Java, así que preferiría las herramientas de Java, pero me arriesgaría a mirar marcos interesantes para diferentes idiomas.
Quiero integrarme en un proceso de compilación automático, por lo que preferiría las herramientas que se pueden ejecutar a través de la línea de comandos.

Fuente

2008-10-29 Mnementh

sólo sé de dos marcos, pero son tanto para Java :)

No he utilizado ninguno de los dos, yo tengo miedo.

Fuente

2008-10-29 12:03:08

El enlace para Jester tiene un '' p 'adicional. –

@Andrew: arreglado, gracias. –

Puede intentar µJava. No lo he usado, pero parece que las pruebas de mutación podrían ser una forma interesante de evaluar suites de prueba.

Fuente

2008-10-29 12:13:48

Para Ruby hay Heckle, y un recién llegado llamado Boo_hiss.

Fuente

2009-02-13 11:17:32

Echa un vistazo al cazador. Es la nueva genialidad para Ruby. –

Y zombie-chaser. Pruebas de mutaciones ... ¡con zombies! –

Para la comunidad .Net, existe NesTer, pero tiene algunas limitaciones serias. P.ej. solo es compatible con C# y NUnit.

No parece que se mantenga activamente tampoco, pero podría ser un punto de partida.

Fuente

2009-04-15 09:35:56 Haugholt

Solo funciona para soluciones desarrolladas en visual studio 2005 –

Eché un vistazo a Jester (el código fuente real) y me parece que no admite demasiadas mutaciones. Hay un archivo allí donde se especifican estas mutaciones. Podría estar equivocado sobre lo anterior, pero lo que definitivamente no me gustó fue la mezcla entre el lanzamiento de la herramienta desde la línea de comandos y la pequeña interfaz de retroalimentación GUI. ¿Por qué no dar feedback en la línea de comando como lo hace JUnit cuando se ejecuta fuera de un IDE?

El revoltijo es otra cosa :). Tiene una interfaz de línea de comando simple y viene con un plugin de Eclipse también. La respuesta es todo el texto en la consola. Estoy contento con esta herramienta y planeo escribir algún objetivo ANT para agregarlo a la integración continua de mi proyecto.

También estoy buscando en Javalanche pero no lo intenté todavía.

Tendré noticias en unas pocas semanas.

Fuente

2010-01-28 07:56:10

Jester proporciona un archivo para las mutaciones y son limitadas. Hasta cierto punto, puede agregar sus propias mutaciones al archivo.

Experimenté con Jumble y Jester y encontré que Jumble proporciona más mutaciones y mejor documentación. Además, recibí respuestas rápidas de los propietarios del proyecto cuando les envié un correo electrónico. Una desventaja de Jumble es que opera en el bytecode usando BCEL. Eso presenta una especie de curva de aprendizaje para muchos desarrolladores.

Mi empresa, State Farm, escribió una tarea Ant que podemos contribuir al proyecto Jumble. En base a lo que he leído en sus listas de correo, otros están trabajando en una tarea Ant para Jumble también.

Estoy viendo Javalanche también. Estaré encantado de compartir lo que sé cuando haya terminado.

Fuente

2010-02-15 15:42:13 Patrick

También hay PIT que pueden engancharse en su construcción a través de un plugin maven o una interfaz de línea de comando.

Proporciona informes mucho mejores que las otras herramientas disponibles con mutación combinada y cobertura de línea. También funciona considerablemente más rápido que las herramientas basadas en fuente para Java como Jester, y aproximadamente el doble de rápido que Jumble.

A diferencia de Jumble y Javalanche también funciona con todos los principales frameworks de burlas (Mockito, JMock, EasyMock, PowerMock y JMockit).

(revelación Soy el autor).

Fuente

2011-03-01 22:30:21 henry

¿Hay alguna forma de guardar los mutantes generados por PIT en mi carpeta deseada? para que pueda ser utilizado por otros programas? – Milson

@Milson no tiene nada incorporado, pero si revisa el historial del grupo de Google, encontrará publicaciones que describen cómo enganchar en el marco y escribirlas en el disco – henry

CREAM es una herramienta para C# /. Net http://galera.ii.pw.edu.pl/~adr/CREAM/index.php

Fuente

2011-06-15 19:29:09

Esta herramienta se ve muy bien y es compatible con .NET 4.0, etc. Gracias +1 – dotnetdev

MμClipse sólo admite JUnit 3 y ya no se mantiene. Bufón en cuanto a eso, es laborioso y requiere una configuración complicada; más no se mantiene más. La mejor herramienta que pude encontrar es Javalanche I had wrote a entire article about this !

Fuente

2012-03-10 10:41:04

Sé que es un hilo viejo, pero aún así es una respuesta a la pregunta. Estoy trabajando con algunos amigos en un marco de prueba de mutación de .NET de código abierto llamado NinjaTurtles, que puedes encontrar on CodePlex y on Nuget. El sitio web principal del proyecto es here.

Fuente

2012-04-23 14:45:16

I 'Vre probé las NinjaTurtles, pero está mal documentado y no puedo entender qué sucede o qué estoy haciendo exactamente mal ... Así que probé CREAM y funciona muy bien. – DaMachk

Aún se está desarrollando, estoy dispuesto a ayudar. –

Puede ser de algún interés. Microsoft Research: https://pex4fun.com/

Fuente

2012-10-22 13:46:00 nashwan

@urig gracias por destacar, URL actualizada. – nashwan

Gracias por la nueva URL @nashwan. Eliminé mi comentario para no engañar a futuros lectores. – urig

¿Qué marcos de pruebas de mutaciones existen?

Respuesta

Cuestiones relacionadas