Prueba

CUADRO DESTACADO 9.8
MEDIDA DE LA EFECTIVIDAD Y LA EFICIENCIA DE LA PRUEBA
La medida de la efectividad de la prueba es un aspecto relevante de la planificación y la
generación de informes de resultados. Graham (1996b) señala que la efectividad de prueba
puede medirse dividiendo el número de defectos localizados por una prueba dada por el
número total de defectos encontrados (incluidosaquellos que se descubren después de la
prueba). Supóngase, por ejemplo, que durante una prueba de integración se descubren 56
defectos y que durante el proceso de prueba completo se encuentran 70 defectos en total.
Entonce, la medida de Graham de la efectividad de prueba indica para la prueba de
integración una efectividad del 80%. Sin embargo, supóngase que el sistema se entrega
después delocalizar y subsanar esos 70 defectos, pero que durante los primeros seis meses
de operación del sistema se encuentran 70 defectos más. Por lo tanto, la prueba de
integración es responsable de la localización de 56 de los 140 defectos, lo que da una
efectividad de sólo un 40%.
Este enfoque para la evaluación del impacto de una fase o técnica particular de prueba puede
ser ajustado de variasmaneras. Es posible categorizar las fallas por niveles de severidad y se
puede calcular la efectividad de prueba por niveles. Con este criterio, la prueba de
integración podría tener una efectividad del 50% para la localización de defectos que
provocan fallas críticas, pero ser un 80% efectiva para descubrir defectos que causan fallas
menores. Como alternativa, la efectividad de prueba puedecombinarse con el análisis de
causa raíz, de modo que se puede describir la efectividad para encontrar defectos tan pronto
como sea posible en el proceso de desarrollo. Por ejemplo, la prueba de integración puede
localizar el 80% de los defectos, pero la mitad de ellos podría haber sido descubierta más
temprano, durante la revisión del diseño, ya que se trata de problemas de diseño.
La eficiencia deprueba se calcula dividiendo el número de defectos encontrados
durante las pruebas por el esfuerzo necesario para realizarlas, lo que da un valor mensurable
en defectos por hora-plantel. La medida de la eficiencia ayuda a comprender el costo que
conlleva encontrar los defectos así como los costos relativos de localizarlos en diferentes
fases del proceso de prueba.
Ambas medidas, efectividad yeficiencia, pueden ser útiles en la planificación de la
prueba; se pretende maximizar efectividad y eficiencia basándose en el historial de pruebas.
Por lo tanto, la documentación de las pruebas actuales puede incluir medidas que permitan
calcular la efectividad y la eficiencia.
Manual Aseguramiento Calidad de Software
87

CUADRO DESTACADO 9.13
POR QUÉ LOS ESFUERZOS DE SIX-SIGMA NO SEAPLICAN AL SOFTWARE
Cuando se piensa en sistemas de alta calidad, se suelen utilizar analogías del hardware para
justificar la aplicación de técnicas exitosas del hardware al software. Pero Binder (1997)
explica por qué algunas de las técnicas del hardware son inapropiadas para el software. En
particular se considera la noción de construir software para alcanzar lo que se conoce como
las"seis-sigma" restricciones de calidad. Las piezas de fabricación, por lo general, tienen
rango de tolerancias, dentro de los cuales se considera que satisfacen sus metas de diseño.
Por ejemplo, si una pieza debe pesar 45 mg, de hecho se aceptan piezas que pesen entre
44,9998 mg y 50,0002 mg; si el peso de una pieza no está dentro del rango, se dice que es
defectuosa. Una restricción de calidad detipo seis-sigma establece que en mil millones de
partes se deben esperar solamente 3,4 fuera del rango aceptable (es decir, no más de 3,4
partes por cada mil millones son defectuosas). A medida que se incrementa el número de
partes de un producto caen significativamente los chances de encontrar productos libres de
defectos, por lo que la posibilidad de un producto de 100 partes libres de...