¿Cómo se mide si un cambio de interfaz mejora o reduce la usabilidad?

Question

Para un sitio web de comercio electrónico, ¿cómo se mide si un cambio en su sitio realmente mejora la capacidad de uso? ¿Qué tipo de medidas debería recopilar y cómo establecería un marco para que esta prueba forme parte del desarrollo?

Answer 1

Las pruebas multivariadas y los informes son una excelente manera de medir este tipo de cosas.

Le permite probar qué combinación de elementos de página tiene el mayor índice de conversión, lo que proporciona una mejora continua en el diseño y la usabilidad de su sitio.

Google Web Optimiser tiene soporte para esto.

Answer 2

Métodos similares que usaste para identificar los problemas de usabilidad para comenzar con-- pruebas de usabilidad. Por lo general, usted identifica sus casos de uso y luego tiene un estudio de laboratorio que evalúa cómo los usuarios logran ciertos objetivos. Las pruebas de laboratorio suelen ser buenas con 8-10 personas.

La metodología de información adicional que hemos adoptado para comprender a nuestros usuarios es tener una recopilación de datos anónima (es posible que necesite el permiso del usuario, aclarar sus políticas de privacidad, etc.) Esto es simplemente evaluar en qué botones / menús de navegación hacen clic los usuarios, cómo los usuarios borran algo (es decir, cambiando la cantidad, ¿hay más usuarios ingresando 0 y actualizando la cantidad o presionando X)? Esto es un poco más complejo de configurar; tiene que desarrollar una infraestructura para almacenar estos datos (que en realidad son solo contadores, es decir, "Times clicked x: 138838383, Times ingresó 0: 390393") y permitir que se creen puntos de datos según sea necesario para conectarlos al diseño.

Answer 3

Para impulsar la medición de una mejora de un cambio de UI en la corriente desde el usuario final (donde la recopilación de datos podría tardar un tiempo) en el diseño o la implementación, se pueden utilizar algunas heurísticas simples:

• ¿El número de acciones que se requieren para realizar un escenario es menor? (Si es así, entonces ha mejorado). Medición: # de pasos reducido / agregado.

• ¿El cambio reduce la cantidad de tipos de dispositivos de entrada a usar (incluso si el número de pasos es el mismo)? Con esto, quiero decir que si toma algo que se basa tanto en el mouse como en el teclado y lo cambia para que se base en only con el mouse o only en el teclado, entonces ha mejorado usabilidad. Medición: Cambio en el número de dispositivos utilizados.

• ¿El cambio hace que diferentes partes del sitio web sean consistentes? P.ej. Si una parte del sitio de comercio electrónico pierde los cambios realizados mientras no está conectado y otra parte no, esto es inconsistente. Cambiarlo para que tengan el mismo comportamiento mejora la facilidad de uso (¡de preferencia a los más tolerantes a fallos, por favor!). Medición: haga un gráfico (diagrama de flujo realmente) mapeando las formas en que se podría realizar una acción particular. La mejora es una reducción en el número de bordes en el gráfico.

• Y así sucesivamente ... encuentre algunos consejos generales de UI, descubra algunas métricas como la anterior y puede aproximarse a la mejora de la usabilidad.

Una vez que tenga estas aproximaciones de diseño de la mejora del usuario y luego recopile datos a más largo plazo, puede ver si existe alguna capacidad predictiva para las mejoras de usabilidad a nivel de diseño en la reacción del usuario final (como: En los últimos 10 proyectos , hemos visto un promedio de 1% de escenarios más rápidos por cada acción eliminada, con un rango de 0.25% y un desarrollo estándar de 0.32%).

Answer 4

La primera forma puede ser completamente subjetiva o parcialmente cuantificada: quejas de los usuarios y comentarios positivos. El problema con esto es que puede tener algunos sesgos fuertes cuando se trata de filtrar esos comentarios, por lo que es mejor hacer los más cuantitativos posible. Puede ser útil tener algún sistema de emisión de boletos para archivar todos los informes de los usuarios y recopilar estadísticas sobre cada versión de la interfaz. Solo obtén tus estadísticas correctas.

La segunda forma es medir la diferencia en un cuestionario sobre la interfaz de los usuarios finales. Las respuestas a cada pregunta deben ser un conjunto de valores discretos y, de nuevo, puede recopilar estadísticas para cada versión de la interfaz.

La última forma puede ser mucho más difícil de configurar (diseñar un cuestionario y posiblemente el entorno controlado para él, así como las pautas para interpretar los resultados es una tarea en sí misma), pero la primera hace que resulte desagradablemente fácil estropearlo. mediciones. Por ejemplo, debe tener en cuenta el hecho de que la cantidad de tickets que obtiene para cada versión depende del tiempo que se usa y de que todos los rangos de tiempo no son iguales (por ejemplo, es posible que nunca se descubra una clase completa de problemas críticos antes de Tercera o cuarta semana de uso, o los usuarios pueden tender a no presentar los tickets los primeros días de uso, incluso si encuentran problemas, etc.).

Answer 5

Torial robó mi respuesta. Aunque si hay una medida de cuánto tiempo se tarda en realizar una determinada tarea. Si se reduce el tiempo y la tarea aún se completa, eso es bueno.

Además, si hay una forma de registrar el número de cancelaciones, eso también funcionaría.