AsegCalidadSoftware : Mensaje: RE: [ACS] software para pruebas

Hola amigos,

mi nombre es Gabriel, soy de gerente de QA en una empresa de software y me gustaría contarles parte de nuestra experiencia.

Nuestro producto es un ERP muy grande y muy parametrizable, con cambios, modificaciones y agregados constantes (demasiados para mi gusto), pero bueno, es la demanda que hoy tenemos y hay que enfrentarla de alguna manera.

Como se imaginarán, al ser muy parametrizable, tenemos casos de uso que necesitan una cantidad considerable de casos de prueba para cubrir prácticamente el 100% del código (actualmente tenemos casos de uso con más de 300 casos de prueba aprox., y no llegamos al 50% de cobertura); y como sufre constantemente modificaciones, los test funcionales y de regresión son prácticamente interminables.

En este entorno, las pruebas manuales resultan más antieconómicas que el propio mantenimiento de scripts, haciendo que la automatización sea casi inevitable. Como ejemplo les puedo decir que nuestros robots corren durante el día y noche, prácticamente todos los días, y para ello estamos utilizando Rational.

Es cierto que el mantenimiento de los scripts puede resultar algo casi tan caro y complejo como mantener el código fuente del producto, y al principio sufrimos esto (el proyecto de QA lo empezamos en el 2000), pero para nosotros, la automatización era una de nuestras prioridades. A medida que fuimos adquiriendo experiencia nos dimos cuenta que necesitábamos un robot más genérico tanto por la dinámica de nuestro departamento de desarrollo como por el tiempo que insumía mantener estos scripts.

Así fue surgiendo un robot al que cada vez teníamos que modificar con menos frecuencia, hasta que al principio de este año logramos "la automatización de la automatización".

¿Suena raro no?, pero es así. Logramos que el robot fuera capaz de ejecutar cualquier caso de prueba para cualquiera de nuestras aplicaciones. Con esto redujimos las horas de mantenimiento del robot a casi 0 (cero).

Con esto también intento responder algunos de los interrogantes aquí planteados; creo que la automatización puede llegar a depender de:

El tipo de test que se necesite realizar (funcional, regresión, perfomace, stress, etc).
Frecuencia de ejecución de los tests.
Complejidad tanto de la aplicación como del propio test.

Aunque también creo que si se trata de un área de test interna, siempre se debería buscar el camino de la automatización ya que el espectro de aplicaciones a testear es acotado y siempre conocido, con lo cual los testeos se vuelven repetitivos automáticamente.

Espero haber aportado algo sin aburrirlos.

Saludos

Gabriel Caricari

Gerente QA

CWA S.A.

-----Original Message-----
From: Claudio Moreno [mailto:cmoreno@...]
Sent: Martes, 19 de Octubre de 2004 14:38
To: AsegCalidadSoftware@...
Subject: Re: [ACS] software para pruebas

Leo:
    Además de el Rational Suite existn en el mercado otras herramientas que te ayudan a automatizar pruebas como las de Mercury Interactive. Sin embargo, me gustaría preguntar al foro que experiencias exitosas que hayan sido proyectos de recuperación de inversión en 2 o 3años.
    En nuestra experiencia, la automatización utilizando estas herramientas generó un costo adicional de mantienimiento de Scripts que tornó practicamente antieconómico la prueba automatizada. Me parece que el factor de éxito de este proyecto es no tener que insumir demasiado tiempo en mantener los scripts. Se me ocurre que la robotización es viable para los siguientes proyectos:
1) Pruebas de comportamiento bajo diferentes entornos operativos (WIN2000,XP,NT).
2) Pruebas de Humo
3) Pruebas de un producto multi-tier con un front-end o capa de presentación de baja volatilidad
4) Pruebas de un producto multi-tier con recurrencia de ejecuciones por alta necesidad de regresiones
5) Armado de juegos de prueba donde la navegación es la misma y solo cambian los datos a cargar
6) Pruebas fuera de horario normal.
    Quizás esta lista pueda extenderse y me gustaría que gente con experiencia en este tema sume su opinión o sus propias experiencias para analizar Fortalezas/Oportunidades/Debilidades/Amenazas de esta práctica por otro lado, sería muy interesante conocer casos concretos de proyectos de test con este tipo de herramientas ya que en la organización para la cual trabajo estamos evaluando la eficiencia de una inversión de este tipo frente al clásico testeo manual.
Gracias a todos.
SOFIA ALVAREZ wrote:
LeoPara las pruebas Rational trae varios Soft. Entre ellos esta Robot que permite crear script de pruebas para aplicaciones escritorio y Web, trae Test factory, Test manual, y otras mas. Es muy amplio. Es Soft propietario y caroSaludosSofia
Leo Contreras <lcontreras@...> wrote:
Hola:
   alguno de ud. sabe si existe algún software que me permita automatizar la
fase de pruebas. un software que pruebe aplicaciones (de escritorio o web)
en función de parámetros que se le configuren, o algo por el estilo??

------------------------------
AsegCalidadSoftware:
Aseguramiento de la Calidad del Software
------------------------------
Direcciones de la lista:
Publicar un mensaje: AsegCalidadSoftware@eGroups.com
Suscribirse........: AsegCalidadSoftware-Subscribe@eGroups.com
Desuscribirse......: AsegCalidadSoftware-Unsubscribe@eGroups.com
Administrador......: AsegCalidadSoftware-Owner@eGroups.com
Página de la lista.: http://es.eGroups.com/group/AsegCalidadSoftware
------------------------------
http://www.navegana.com/dinero/chanzes.html

Do you Yahoo!?
Yahoo! Mail Address AutoComplete - You start. We finish.
------------------------------
AsegCalidadSoftware:
Aseguramiento de la Calidad del Software
------------------------------
Direcciones de la lista:
Publicar un mensaje: AsegCalidadSoftware@eGroups.com
Suscribirse........: AsegCalidadSoftware-Subscribe@eGroups.com
Desuscribirse......: AsegCalidadSoftware-Unsubscribe@eGroups.com
Administrador......: AsegCalidadSoftware-Owner@eGroups.com
Página de la lista.: http://es.eGroups.com/group/AsegCalidadSoftware
------------------------------
http://www.navegana.com/dinero/chanzes.html

*********************************************************************
Visite http://www.bancorio.com.ar y tenga el Banco al alcance de su
mano.
*********************************************************************

NOTA DE CONFIDENCIALIDAD / CONFIDENTIALITY NOTE
Este mensaje (y sus anexos) es confidencial y puede contener
información (i) de propiedad exclusiva de Banco Rio de la Plata S.A.
sus afiliadas o subsidiarias; o (ii) amparada por el secreto
profesional. Si usted ha recibido este fax o e-mail por error, por
favor comuníquelo inmediatamente vía fax o e-mail y tenga la
amabilidad de destruirlo; no debera copiar el mensaje ni divulgar su
contenido a ninguna persona.
Muchas gracias.

This message (including attachments) is confidential. It may also
contain information that (i) is exclusively property of Banco Rio de
la Plata S.A. or its affiliates or subsidiaries; or (ii) is
privileged or otherwise legally exempt from disclosure. If you have
received it by mistake please let us know by fax or e-mail
immediately and destroy or delete it from your files or system; you
should also not copy the message nor disclose its contents to anyone.
Thank you.
*********************************************************************

------------------------------ AsegCalidadSoftware: Aseguramiento de la Calidad del Software ------------------------------ Direcciones de la lista: Publicar un mensaje: AsegCalidadSoftware@eGroups.com Suscribirse........: AsegCalidadSoftware-Subscribe@eGroups.com Desuscribirse......: AsegCalidadSoftware-Unsubscribe@eGroups.com Administrador......: AsegCalidadSoftware-Owner@eGroups.com Página de la lista.: http://es.eGroups.com/group/AsegCalidadSoftware ------------------------------ http://www.navegana.com/dinero/chanzes.html

Consejos

¿Sabías que...?

Mensajes