UI Testing Framework + Integración continua?

Question

Así que tengo una aplicación que heredé y quiero construir un conjunto de pruebas automatizadas a su alrededor. La aplicación no fue diseñada con la capacidad de prueba en mente, y el código es una "gran bola de barro". Mi plan era usar un marco de prueba de automatización de UI y crear un conjunto de pruebas en el nivel de UI hasta que tuviera la cobertura suficiente que me permitiera comenzar a refactorizar con confianza e introducir algunas costuras en el código para mejorar la capacidad de prueba y el diseño.

Es una aplicación .NET Windows Forms, y los dos marcos yo sepa son:

NUnitForms

y

Project White

Por lo que he leído pose ambos marcos problemas al tratar de ejecutar como parte de una compilación automatizada (Integración continua) debido al hecho de que la mayoría de los productos de CI se ejecutan como un servicio de Windows y si la interfaz de usuario usa cuadros de diálogo modales la aplicación morirá de forma horrible muerte Estoy usando CruiseControl.Net como mi herramienta de CI.

¿Alguien tiene alguna sugerencia para solucionar este problema? ¿Un marco de trabajo alternativo que pueda mejorar la situación?

Gracias,

Dylan

Answer 1

NUnitForms tiene una característica de "escritorio oculto" que permite ejecutar pruebas unitarias de cc.net.

http://automaticchainsaw.blogspot.com/2007/09/winforms-testing-using-nunitforms.html http://automaticchainsaw.blogspot.com/2007/09/hidden-desktops-and-nunitforms.html

Answer 2

No he intentado todavía, pero no es el UI Automation Framework de Microsoft:

Answer 3

En realidad se puede ejecutar el control de crucero a través de la aplicación de consola para que pueda tener acceso desde el escritorio interactivo. No se recuperará automáticamente si el servidor se reinicia o se bloquea, pero al menos puede hacerlo.

Dicho esto, el enfoque que la mayoría de las personas toma con las pruebas de IU automatizadas (winforms, wpf o web) es ejecutar todas las pruebas no interactivas a través del servidor de compilación. Una vez que pasan esas pruebas, implementan la aplicación en un entorno de prueba y activan manualmente una prueba contra la versión recién construida del código.

Esto brinda a las personas la posibilidad de restablecer el entorno de prueba (importante para las pruebas de IU), así como comprobar que la nueva versión de la aplicación se haya creado correctamente y que se hayan superado todas las pruebas unitarias. Después de todo, no tiene sentido ejecutar las pruebas de UI si sabes que las pruebas de la unidad se cayeron. :-)

Answer 4

Realizamos las pruebas de aceptación de integración continua en modo consola en lugar de como un servicio de Windows dentro de una PC virtual registrada. Eso funcionó para nosotros.

Answer 5

Eche un vistazo a this approach. Hay información detallada en el project's wiki.