T4 – Evaluación de la Usabilidad Técnicas y Métodos de Evaluación Elena García & Miguel-Ángel Sicilia
Contenidos (i) • Introducción: – Preliminares y definición – Formas de llevar a cabo la evaluación – Tipos de técnicas de evaluación
• Evaluación por Inspección – – – –
Evaluación heurística Paseo cognitiva Inspección de consistencia Inspección de estándares
– Inspección formal
Miguel-Angel Sicilia & Elena García - 2004-05
2
Contenidos (ii) • Evaluación por Indagación – Aproximaciones de campo • Observación de campo
– Aproximaciones en grupo • Grupos orientados
– Aproximaciones individuales • Cuestionarios • Entrevistas
Miguel-Angel Sicilia & Elena García - 2004-05
3
Contenidos (iii) • Pruebas de Usabilidad – – – – – –
Protocolo de pensamiento manifiesto Protocolo de preguntas Método tutorizado Método de descubrimiento conjunto Test retrospectivo Método de instrucción previa
Miguel-Angel Sicilia & Elena García - 2004-05
4
Evaluación por indagación • Clasificación de métodos dependiendo de la forma en la que se produzca la aproximación al usuario para averiguar su opinión: – Aproximación de campo. El evaluador se traslada al entorno donde el usuario trabajará. – Aproximación de grupo. Se realizan sesiones fuera del entorno laboral con un grupo de usuarios que haya utilizado el sistema, a los que se pregunta por sus opiniones y preferencias acerca del sistema objeto de evaluación. – Aproximación individual. La evaluación se lleva a cabo realizando preguntas efectivas a usuarios individuales. – Aproximación remota o a distancia. Se realiza sin tener contacto directo con el usuario del sistema. • Cuestionarios, • Evaluación basada en videoconferencias • Captación automatizada de datos. Miguel-Angel Sicilia & Elena García - 2004-05
5
Observación de Campo • La observación de los usuarios en su entorno habitual puede ser la mejor forma de determinar sus requerimientos de usabilidad.
– El test de usabilidad facilita la captación y registro de datos (entorno de laboratorio), pero saca al usuario y al producto del contexto del lugar de trabajo. – En ocasiones es preferible ver cómo se hacen las cosas en el mundo real.
• ¿Cómo se lleva a cabo? – Disponer la visita:
• ¿A cuántos usuario? • ¿De cuántos sitios de trabajo?
– Realizar la visita:
• Planificar el tiempo
– Observación – Entrevista » ¿cómo funciona? » ¿lo hace alguien de forma diferente?, ¿por qué?...
Miguel-Angel Sicilia & Elena García - 2004-05
6
Observación de campo • Capturar información: – Identificar artefactos: objetos físicos utilizados en un determinado lugar. – Identificar afloramientos: rasgos físicos que caracterizan al lugar en cuestión – Identificar relaciones de grupo – Identificar patrones de comunicación: Quién habla con quién
• ¿Cuándo se aplica? – En etapas muy tempranas: captura de requisitos…
Miguel-Angel Sicilia & Elena García - 2004-05
7
Grupos orientados • Permiten preguntar a los usuarios acerca de sus experiencias y preferencias respecto de un producto. – No permiten capturar el contexto, pero si la opición del usuario sobr el producto.
• ¿Cómo se lleva a cabo? – Identificar el tipo de información que se quiere conocer. – Formular las preguntas acerca del producto • Se guían por el tipo de información que se quiere conocer. • Se interactúan con el usuario (se exige presencialidad). • Se permite la interacción entre los usuarios del grupo. – Se obtiene información sobre problemas comunes.
• Las preguntas no deben ser directas ni cerradas: – Sigue hablando... – Explícame como haces.... – Describe como te gustaría que.... Miguel-Angel Sicilia & Elena García - 2004-05
8
Grupos orientados • Se pueden utilizar distintas técnicas durante la sesión: – Completar frases/ asociar palabras: » “La caraceterística más absurda de esta aplicación es....” » “Lo mejor de esta aplicación es....” » “Le diría al responsable del proyecto.....” – Volver a empezar: » Imaginar que nunca se ha utilizado una aplicación o que la aplicación se va a usar al comienzo de los estudios... – Ordenación: » Poner junta funcionalidades, palabras, imágenes... según el sujeto crea que deben ir juntas.
• ¿Cuándo se aplica? – En cualquier etapa: • En fases tardías, para conocer y mejorar la satisfacción del usuario. • En fases tempranas, para completar los requisitos. Miguel-Angel Sicilia & Elena García - 2004-05
9
Cuestionarios • Son herramientas para recoger, registrar y almacenar información. – Permiten obtener información de manera directa desde el usuario. – Són fáciles de administrar. – Arrojan datos subjetivos. – No aportan retroalimentación de cara a un rediseño.
• Tipos de cuestionarios en la evaluación: – De hechos: Permiten recoger información pública y observable • Permiten controlar el resultado de la evlauación en función de los perfiles del usuario.
– De opinión: Solicitan al encuestado su opinión fundamentada sobre algo. – De satisfacción: Solicitan el parece subjetivo del encuestado. Miguel-Angel Sicilia & Elena García - 2004-05
10
Cuestionarios • Pueden contener: – Preguntas abiertas – Preguntas cerradas
• Tienen medidas de fiabilidad y validez. – Pueden no estar contrastados.
• ¿Cuándo se aplican? – En cualquier etapa del proceso de desarrollo.
Miguel-Angel Sicilia & Elena García - 2004-05
11