¿Qué son las pruebas comparativas de usabilidad?
¿Cuántas veces ha realizado una prueba de usabilidad después de enviar su producto?
Puede parecer una idea loca. Después de todo, es demasiado tarde para cambiar algo. Pero hay un valor real para ejecutar una prueba de usabilidad de referencia. Las pruebas comparativas le brindan puntos de control regulares para asegurarse de que está mejorando la usabilidad de su producto con cada lanzamiento.
Aunque las pruebas comparativas siguen un proceso muy similar a los estudios regulares de usabilidad, tienen un propósito diferente. En lugar de sumergirse en una parte específica del producto, como un conjunto de nuevas características que haya agregado, las pruebas comparativas ejecutan las mismas tareas generales cada vez. Esto le permite realizar un seguimiento del rendimiento de su producto con cada conjunto de funciones nuevas que agrega.
En lugar de recopilar datos sobre dónde se encuentran los problemas principales, las pruebas comparativas recopilan un conjunto común de métricas sobre eficiencia, eficacia y satisfacción. De esta manera, es posible comparar la usabilidad del producto a lo largo del tiempo y realizar un seguimiento del rendimiento de cada versión.
Por ejemplo, suponga que está trabajando en un equipo que está creando una aplicación de reserva de vuelos.
Durante el desarrollo, puede ejecutar pruebas de usabilidad en las nuevas funciones que está agregando, como la adición de una función de comparación de precios o cambios en el proceso de pago. Sin embargo, cuando ejecuta estudios de referencia, tendrá un conjunto de tareas de alto nivel destinadas a probar si el producto cumple con los objetivos generales del equipo del producto.
Estos objetivos no cambian de una versión a otra
Por ejemplo, siempre es importante que las personas puedan buscar destinos y comprar boletos con su aplicación, independientemente de las características específicas que se agregaron en el último ciclo de desarrollo. El equipo también puede tener objetivos para que la experiencia sea emocionante, entretenida, confiable o rápida de completar.
Ejecutar un estudio de referencia después de cada actualización importante del producto le permite realizar un seguimiento de estos objetivos a lo largo del tiempo. Por lo general, asigna a los participantes las mismas tareas cada vez que ejecuta un estudio comparativo y compara los resultados entre las versiones del producto. Como dije, los resultados generalmente se dividen en tres categorías.
La eficiencia es la facilidad con la que las personas pueden completar las tareas
Normalmente, eso se mide por el tiempo dedicado a la tarea frente al tiempo de recuperación de los errores. La eficacia es qué tan bien se las arreglan para completar sus tareas. ¿Reservaron el vuelo correcto? ¿Lo reservaron para el número correcto de personas? La satisfacción es obviamente lo bien que se sienten con el resultado. Con los estudios comparativos sumativos, debe estar seguro de que está capturando datos válidos, lo que generalmente significa tener más participantes, a veces 20 o más.
Puede ser aburrido ejecutar tantos participantes, especialmente cuando no necesariamente está aprendiendo sobre nuevos problemas de usabilidad. También puede ser más difícil justificar el gasto cuando el equipo no ve resultados inmediatos de las sesiones.
Una solución es utilizar un proveedor local o una de las empresas de pruebas en línea para ejecutar cada estudio de referencia por usted. Debido a que no necesita estar atento a nuevos conocimientos durante cada segundo de las sesiones, es fácil encargar este trabajo a un tercero. Y recuerde, una vez que tenga un conjunto de tareas de referencia comunes, no hay razón por la que no pueda ejecutar estas tareas también contra el producto de un competidor.
Eso le mostrará qué tan bien se comparan con su experiencia
Las pruebas comparativas pueden valer mucho la pena porque le brindan una indicación clara de su progreso entre versiones de software. Eso es algo que normalmente es muy difícil de medir, por lo que las métricas comparativas de usabilidad pueden ser una buena manera de hacer que su equipo de usabilidad sea indispensable para la administración y, al mismo tiempo, fomentar un sentido saludable de competencia en el equipo.
