evaluación de usabilidad unadeivihc.yolasite.com/...evaluacion_usabilidad.pdf · facetas de la ux...

Evaluación de la usabilidad

de sistemas interactivos

Andrés Fernando Solano AlegríaAndrés Fernando Solano Alegría

Grupo de Investigación en Telemática e Informática Aplicada (GITI)

ExPin Media Lab

Investigación y Desarrollo en Ingeniería de Software (IDIS)

Noviembre de 2015

Agenda

2 Usabilidad

Motivación1

2

4 Tecnología de apoyo

5 Tips

3 Métodos de evaluación

Motivación

Los sistemas interactivos (SI) están creciendo en popularidad.

Constante desafío: mejorar la calidad de los sistemas.

33

Motivación

4

Los SI están dirigidos a un público cada vez más amplio.

Experiencia de Usuario (UX), aspecto fundamental para el

éxito de los SI.

Motivación

UX: “cómo se sienten las personas acerca de un producto y su

satisfacción cuando lo usan, lo miran, lo sostienen, lo abren o

cierran” (Sharp, Rogers, y Preece, 2007).

Facetas de la UX relacionadas a la calidad de un producto

software (Masip, Oliva, y Granollers, 2011):

5

software (Masip, Oliva, y Granollers, 2011):

� Usabilidad

� Accesibilidad

� Emotividad

� Jugabilidad

� Multiculturalidad

� …

Foco: Evaluación de la usabilidadde sistemas interactivos.

Motivación

� Característica de calidad más visible.

� Influye directamente en el éxito del sistema.

� Conlleva una serie de métricas y métodos de evaluación

–> objetivo: obtener sistemas fáciles de usar y de aprender.

¿Por qué usabilidad?

6

–> objetivo: obtener sistemas fáciles de usar y de aprender.

Agenda

1 Motivación

Usabilidad2

7


5 Tips


Usabilidad

¿A qué se refiere?

� Fácil de usar o de utilizar y de aprender.

� ¿Qué?

� Rapidez y facilidad con que las personas

llevan a cabo sus tareas a través del uso

del producto con el que están trabajando.

8

del producto con el que están trabajando.

Persona Tarea

Contexto

Usabilidad

¿A qué se refiere?

9

Definición

ISO 9241: “Usabilidad es el grado en el que un

producto software puede ser utilizado por usuarios

específicos para alcanzar objetivos específicos con

Usabilidad

10

específicos para alcanzar objetivos específicos con

efectividad, eficiencia y satisfacción en un contexto

de uso específico”.

� Jakob Nielsen: “La utilidad de un sistema en

cuanto a medio para conseguir un objetivo,

tiene un componente de funcionalidad

(utilidad funcional) y otro basado en el

modo en que los usuarios pueden usar esta

Componentes

Usabilidad

11

modo en que los usuarios pueden usar esta

funcionalidad”.

� Componentes principales:

Aspecto funcional del sistema

Las acciones u operaciones que el sistema realiza.

Cómo los usuarios pueden usar una funcionalidad

Usabilidad

� Aproximación al usuario:

Conocer, entender y trabajar con usuarios actuales o potenciales del

producto.

� Conocimiento del contexto de uso:

Entender los objetivos/trabajos/tareas de los usuarios.

Componentes

12

Entender los objetivos/trabajos/tareas de los usuarios.

Producto considerado fácil de aprender y de usar –> tiempo que toma al

usuario llevar a cabo su objetivo.

� Satisfacer necesidades del usuario:

El producto debe adaptarse a modelos mentales de los usuarios

(usabilidad -> productividad, calidad).

� Los usuarios y NO los diseñadores o los desarrolladores, son los

que determinan cuándo un producto es fácil de usar.

Usabilidad

¿Cómo se consigue un buen nivel de usabilidad en los sistemas?

No confundir “implicar al usuario

en el diseño del sistema” con

“realizar el diseño del sistema

13

“realizar el diseño del sistema

pensando en el usuario”.

Agenda

1 Motivación

2 Usabilidad

Métodos de evaluación3

14


5 Tips

Métodos de evaluación3

� Analizar la calidad de uso de un SI, en diferentes etapas del desarrollo.

� Participación de varias personas (con diferentes roles).

¿Para qué?

� Para validar que el producto final cumple con los requerimientos y es

Métodos de Evaluación de Usabilidad

Evaluación de usabilidad

15

� Para validar que el producto final cumple con los requerimientos y es

usable.

Objetivos

� Evaluar el alcance y la accesibilidad de la funcionalidad de los sistemas.

IMPORTANTE: las funcionalidades deben cumplir con los requerimientos

del usuario.

� Evaluar la experiencia del usuario en su interacción con el sistema.

� Identificar problemas específicos en el sistema.

Consecuencias

� Mejoramiento en la calidad de los procesos:

Cultura de desarrollo organizada y consciente de la importancia de la

evaluación.



16

evaluación.

� Mejoramiento en la calidad en los productos:

Validación consciente y temprana de prototipos.

� Manejo eficiente de los recursos tiempo y dinero:

Corrección temprana de fallas.

� Posibilidad de reproducir éxitos en otros proyectos:

Módulo desarrollados -> fuente confiable de código reutilizable.

Consecuencias

� Dominación de los riesgos del proceso:

Detección temprana de fallas -> estrategias de contingencia de riesgos

más efectivas.



17

� Confianza y satisfacción del cliente.

Evita sorpresas desagradables en etapas críticas del desarrollo.

� Procedimiento sistemático para recolectar datos relacionados con la

interacción del usuario final y un producto software o sistema.

� Tipologías: Automáticos/Manuales, CON/SIN usuarios, Laboratorio/In

situ, Inspección/Prueba.

Métodos de inspección: consisten en inspecciones del diseño de la


Métodos de evaluación

18

� Métodos de inspección: consisten en inspecciones del diseño de la

interfaz realizadas por expertos en usabilidad.

Evaluación heurísticaRecorrido cognitivo

Recorrido pluralista

Inspección de estándares

Análisis de acciones

� Métodos de prueba: consisten en pruebas

empíricas del diseño de la interfaz con usuarios

representativos.

Pensando en voz alta


Métodos de evaluación

19

Pensando en voz altaInteracción constructiva

Experimentos formalesGrabación del uso

Medida de prestaciones

Test retrospectivo

Método del conductor

Entrevistas

Cuestionarios [Fotografías incluidas con autorización previa de los usuarios]

� Definición de la prueba (propósito, datos a recolectar, tareas, etc.).


Métodos de prueba

� ¿Dónde son realizados?

� Representación posible de la realidad.

� Proceso similar.

20

� Selección de participantes.

� Preparación de los materiales (acuerdos de confidencialidad, cuestionarios,

documentos guía para el usuario y evaluadores).

� Ejecución de prueba piloto (medidas correctivas).

� Realización de la prueba.

� Análisis de la información recolectada durante la prueba (problemas de

usabilidad, criticidad, frecuencia, promedios, máximos, mínimos, desviación

estándar, porcentaje de completitud de las tareas, soluciones de diseño, etc.).

� Informa final (incluye todo lo anterior).

Laboratorio de Usabilidad


¿Dónde son realizados?

21

Agenda


1 Motivación

2 Usabilidad

22


5 Tips

Tecnología de apoyo4

Tecnología de apoyo

MORAE

� Permite observar y almacenar las sesiones de

prueba con usuarios desde cualquier lugar a través

de la red.

Software

23

Morae Observer: monitoreo y registro de

momentos críticos en tiempo real.

Morae Recorder: captura y almacena todo el

audio, el video y actividad en pantalla.

Morae Manager: análisis efectivo de los registros,

generación de gráficos, cálculos de eficiencia.

http://www.techsmith.com/morae.html


� UserTesting (http://www.usertesting.com)

� Clicktale (https://www.clicktale.com/product/heatmaps)

� UsabilityTools (http://usabilitytools.com/)

� AppSee (https://www.appsee.com/)

IntuitionHQ (http://www.intuitionhq.com/)

Software

24

� IntuitionHQ (http://www.intuitionhq.com/)

� UserZoom (http://www.userzoom.es)

� GazePoint (http://gazept.com)

� Silverback (http://silverbackapp.com/)

� Open-HEREDEUX

(http://www.grihotools.udl.cat/openheredeux/cake_1_3/heuristics/index)

� ECUSI (www.ecusi.com)

� …

Eye-Tracking

� Seguimiento ocular (Tobii, SMI, Gazepoint, …)

http://www.tobii.com/en/products-services/

https://theeyetribe.com/


Hardware

25

Disponible en la URL: http://www.tobii.com/. Disponible en la URL: https://theeyetribe.com/.

Eye-Tracking


26

Disponible en la URL:

http://www.gazept.com/product/gazepoint-gp3-eye-

tracker/.

http://www.gazept.com/product/gazepoint-analysis-ux-

edition-software/

EMOTIV

� Análisis de ondas cerebrales


Hardware

Disponible en la URL: https://emotiv.com/.

27

[Fotografías incluidas con

autorización previa de los

usuarios]

Agenda


1 Motivación

2 Usabilidad

28



Tips6

� No conocer el producto que estamos investigando.

� No conocer el perfil de los usuarios. Debe garantizarse que se tiene a las

personas correctas para realizar el estudio. Las personas son el punto de

entrada número 1. Los hallazgos no serían de confianza.

� Omitir la prueba piloto.

Tips para la evaluación

Errores

29

� Hacer preguntas sesgadas (cerradas, con una/pocas opciones). Evitar

preguntas con respuestas SI o NO.

� No motivar a los participantes cuando nos dan realimentación.

� Hacer una pregunta que previamente ha sido respondida. Puede

perderse el respeto y confianza, pues el usuario piensa que no se presta la

atención de manera adecuada.

� Perder el foco.

� No estar preparado de manera adecuada para hacer pruebas remotas.

� No alternar el orden de las tareas o prototipos. No necesariamente debe

hacerse las tareas en el mismo orden para todos los participantes, si

aplica.

� Olvidarse de grabar. Conviene hacer una lista de verificación sin

importar los años de experiencia!

Tips para la evaluación

Errores

30

importar los años de experiencia!

� Discutir con otros observadores entre las pruebas. Conviene esperar

hasta el final de las pruebas, así se contaría con tiempo suficiente.

Referencias

1. Nielsen, J. (1993). Usability engineering: Morgan Kaufmann.

2. Sharp, H., Rogers, Y., y Preece, J. (2007). Interaction Design Beyond Human - Computer

Interaction (2 ed.): Wiley, John & Sons, Incorporated.

3. Masip, L., Oliva, M., y Granollers, T. (2011). User experience specification through quality

attributes Human-Computer Interaction–INTERACT 2011 (pp. 656-660): Springer.

4. Ferré, X., y Bevan, N. (2011). Usability planner: a tool to support the process of selecting

usability methods Human-Computer Interaction–INTERACT 2011 (pp. 652-655): Springer.

5. Ferré, X. (2005). Marco de integración de la usabilidad en el proceso de desarrollo software.

31

5. Ferré, X. (2005). Marco de integración de la usabilidad en el proceso de desarrollo software.

Tesis Doctoral, Universidad Politécnica de Madrid, Madrid.

6. Masip, L., Oliva, M., y Granollers, T. (2011). Classification of Interactive System Components

Enables Planning Heuristic Evaluation Easier Design, User Experience, and Usability. Theory,

Methods, Tools and Practice (pp. 478-486): Springer.

7. Lewis, J. R. (2014). Usability: Lessons Learned… and Yet to Be Learned. International Journal of

Human-Computer Interaction, 30, 663–684.

Gracias por su atención…

32

Andrés Solano

[email protected]

Contacto

Reflexión

Cómo se ve: Realidad:

33

Pruebas de usabilidad: no se reconoce la

dificultad que conlleva!

evaluación de usabilidad unadeivihc.yolasite.com/...evaluacion_usabilidad.pdf · facetas de la ux...

Documents