Modelo para la Evaluacin de Espacios Internet, en el marco de la Ingeniera de la Usabilidad y del Di

1
Modelo para la Evaluación de Espacios Internet,
en el marco de la Ingeniería de la Usabilidad y
del Diseño Centrado en el Usuario

• Tesis Doctoral

Juan José Fábregas Ruesgas Director Josep María
Monguet Fierro
2
Esquema de la presentación
Objetivos y método de la investigación
Estudio teórico
Trabajo empírico
Resultados y Conclusiones
3
Escenario
4
Escenario
Motivos de uso Experiencia y conocimientos Capacid
ad para atender y percibir
Arquitectura Navegación Aspecto
visual Contenidos Servicios
5
Objetivos y método
Explorar las características de los espacios
Internet que evalúan los usuarios y establecer
las bases de un modelo teórico.
6
Objetivos y método
Estudio teórico
Trabajo empíricoprimera fase
Trabajo empíricosegunda fase
7
Ámbitos de estudio
Diseño
Psicología
Usabilidad Metodologíade diseño.
Estructuras y procesos psicológicos implicados en
la evaluación
8
Esquema de la presentación
Áreas de estudio, objetivos y metodología
Estudio teórico
Trabajo empírico
Resultados y Conclusiones
9
Estudio Teórico
Revisión de conocimientos teóricos y tecnológicos
del ámbito de la Interacción Humano Computadora
(HCI) y de la Psicología del Usuario.
Diseño
10
Estudio Teórico
Revisión de conocimientos teóricos y tecnológicos
del ámbito de la Interacción Humano Computadora
(HCI) y de la Psicología del Usuario.
Diseño
11
Estudio Teórico
Revisión de conocimientos teóricos y tecnológicos
del ámbito de la Interacción Humano Computadora
(HCI) y de la Psicología del Usuario.
Psicología
Qué aspectos de la psicología del usuario están
implicados y porqué.
12
Estudio Teórico
Revisión de conocimientos teóricos y tecnológicos
del ámbito de la Interacción Humano Computadora
(HCI) y de la Psicología del Usuario.
Psicología
Alerta predisposición para recibir determinado
tipo de estímulos.
Atención
Percepción
Orientación enfocar hacia unos u otros estímulos.
Cognición
Motivación
Control ejecutivo distribuyendo recursos durante
el procesamiento de información.
13
Estudio Teórico
Estudio Teórico
Revisión de conocimientos teóricos y tecnológicos
del ámbito de la Interacción Humano Computadora
(HCI) y de la Psicología del Usuario.
Psicología
Activación de información almacenada en la
memoria, relacionada con lo que está siendo
percibido.
Atención
Percepción
Cognición
ReconocimientoSignificación
Contraste
Motivación
Información correspondiente a lo que está siendo
percibido
14
Estudio Teórico
Estudio Teórico
Revisión de conocimientos teóricos y tecnológicos
del ámbito de la Interacción Humano Computadora
(HCI) y de la Psicología del Usuario.
Psicología
Aprendizaje
Atención
Percepción
Memoria
Cognición
Motivación
Resolución de problemas
15
Estudio Teórico
Revisión de conocimientos teóricos y tecnológicos
del ámbito de la Interacción Humano Computadora
(HCI) y de la Psicología del Usuario.
Psicología
Bases cognitivas de la motivación
Atención
Percepción
Expectativas
Cognición
Motivación
Factores de higiene y motivacionales
16
Esquema de la presentación
Objetivos y método de la investigación
Estudio teórico
Trabajo empírico
Resultados y Conclusiones
17
Trabajo Empírico. Primera fase
Primer cuestionario. (314 sujetos)
Prueba (30 sujetos)
Lista definitiva
Comparación con 5 escalas
Prueba (12 sujetos)
Segunda lista de ítems 20 (), 20 (-)
Prueba (25 sujetos)
Primera lista de ítems 25
Estudio teórico
18
Trabajo Empírico. Primera fase
Objetivos de la prueba - Comprobar viabilidad de
la tarea (selección y ordenamiento). -
Adecuación de los ítems.
Primera lista25 ítems
Participantes- 25 sujetos

• Resultados
• Primera parte de la tarea (selección). No
  presenta dificultad.
• Segunda parte de la tarea (ordenamiento). Si
  presenta dificultad.
• Sugerencia. Adjudicar valor de 0 a 10 con
  posibilidad de repetir.
• Sugerencia. Incluir ítems reductores de la
  probabilidad de una nueva visita
• Sugerencia. Recoger información sobre perfil de
  uso.

19
Trabajo empírico. Primera fase
Objetivos de la prueba - Comprobar planteamiento
20 20- Redistribución en las subescalas.
Segunda lista20 20 ítems
Participantes- 12 sujetos

• Resultados
• Coincidencia respecto a la dificultad de ordenar
  los ítems y respecto a la sugerencia de adjudicar
  un valor de 0 a 10 con posibilidad de repetir.
• Sugerencia. Incluir una pregunta abierta
  respecto a las variables desmotivadoras.

20
Trabajo empírico. Primera fase
Objetivos - Comparar la composición de la lista
con el de otras que se utilizan en el ámbito de
la HCI. - Adecuación de los ítems.
Comparacióncon otraslistas
Listas comparadas5 WebMAC, WebQual, QUIS,
SUMI, WAMMI

• Resultados
• Lista con 25 ítems.
• Se ha modificado ligeramente la redacción de
  algunos ítems de las listas originales y otros
  han sido substituidos.

21
Trabajo empírico. Primera fase
Prueba previa Composición de pantallas y
porcentaje del cuestionario que se ha respondido
en cada momento. Asignación 0 a 10. Pregunta
abierta.
Primercuestionario (314 sujetos)

• Objetivos- Identificar contrastar con
  usuarios las características de los espacios
  Internet que influyen en la probabilidad de una
  segunda visita.
• Explorar posibles relaciones con variables
  sociodemográficas y de perfil de usuario.
• Obtener información respecto a variables
  desmotivadoras.

Muestra 314 usuarios 90,6 más de 12 meses de
uso de Internet Media de uso, 53,52 meses 62
hombres, 38 mujeres. Media de edad, 30,58 años
22
Trabajo empírico Primera fase
Primer cuestionario.(314 sujetos)
Selección de diez características de los espacios
Internet que influyen en mayor medida en la
probabilidad de volver a hacer una visita.
23
Trabajo empírico Primera fase
Primer cuestionario.(314 sujetos)
Asignación de peso o grado de influencia.
24
Trabajo empírico Primera fase
Primer cuestionario.(314 sujetos)
Variables de usuario sexo, edad, estudios,
profesión, perfil de uso de Internet
25
Trabajo empírico Primera fase
Primer cuestionario.(314 sujetos)
Característica desmotivadora.
26
Trabajo empírico. Segunda fase
Aplicación del CEEI (259 usuarios)
C.E.E.I
Prueba 10 sujetos.
Borrador
C.E.E.I
Trabajo empírico Primera Fase

• Cuestionario que incluye la escala para la
  evaluación de espacios Internet
• - Pregunta abierta sobre uso de Internet.
• - Preguntas sobre edad y género.
• Escala con 25 ítems.
• Pregunta sobre la probabilidad de segunda visita.

27
Trabajo empírico. Segunda fase
Aplicación del CEEI (259 usuarios)
C.E.E.I
Prueba 10 sujetos.
Borrador
C.E.E.I
Trabajo empírico Primera Fase

• Objetivos
• Identificar factores.
• Comprobar la fiabilidad de la escala.
• Correlación evaluación global probabilidad 2ª
  visita.
• Correlación evaluación cada factor probabilidad
  2ª visita.
• Comprobar capacidad de discriminación de usuarios
  en función dela probabilidad de 2ª visita.
• Correlación evaluación global - experiencia de
  uso.
• Comparación evaluación global perfil de uso.
• Comparación evaluación global orden de
  evaluación espacio similar.

28
Trabajo empírico Segunda fase
Aplicación del CEEI (259 usuarios)
C.E.E.I
Navegar por un espacio Internet y responder un
cuestionario on-line a través de Internet.
29
Trabajo empírico Segunda fase
Aplicación del CEEI (259 usuarios)
C.E.E.I
Responder la escala para la evaluación de
espacios Internet, en relación conel espacio
Internet por el cual se ha estado navegando
previamente.
30
Esquema de la presentación
Objetivos y método de la investigación
Estudio teórico
Trabajo empírico
Resultados y Conclusiones
31
Resultados y Conclusiones.
Estudio Teórico
Arquitectura y navegación
Procesos Cognitivos superiores
Composición de las páginas
Atención
Diseño de los objetos y textos
Percepción
Contenidos y servicios
Motivación
32
Resultados y Conclusiones.
Estudio Teórico
33
Resultados y Conclusiones.
Trabajo empírico. Primera fase

• Características de los espacios Internet más
  influyentes o con más peso sobre la decisión de
  realizar una segunda visita a un espacio
  Internet
• Utilidad e interés de los contenidos y servicios.
• Rapidez de carga.
• Organización (arquitectura) y facilidad de
  orientación navegación.
• Precisión y corrección de los contenidos.

• Características de los espacios Internet menos
  influyentes o con menos peso sobre la decisión de
  realizar una segunda visita a un espacio
  Internet
• Posibilidad de comunicarse con los responsables.
• Facilidad para apreciar la importancia de cada
  contenido.
• Contenidos y servicios complementarios.
• Ayuda útil y fácil de encontrar.
• Reconocimiento de la empresa propietaria.

34
Resultados y Conclusiones. Trabajo empírico.
Primera fase
Trabajo empírico. Primera fase
Las evaluaciones son muy homogéneas entre hombres
y mujeres, y entre grupos de usuarios creados en
función de la experiencia y el perfil de uso, es
decir, se aprecian muy pocas diferencias
estadísticamente significativas. Futuras
investigaciones deberían buscar confirmación de
la homogeneidad de estos resultados en espacios
generalistas y explorar lo que ocurre en espacios
especializados.

• Las variables o características más
  desmotivadoras de una segunda visita son
• La presencia de publicidad, especialmente en
  pop-ups, pero también en banners.
• El tiempo excesivo de carga.
• Objetivos y contenidos poco claros o explícitos.
• La presencia de animaciones injustificadas que
  capten la atención involuntaria.
• Contenidos de poca calidad.
• Dificultad para orientarse y navegar.

35
Resultados y Conclusiones. Trabajo empírico.
Segunda fase
Trabajo empírico. Segunda fase

• Factores
• Usabilidad A Arquitectura y navegación del
  espacio Internet. Corrección de textos, facilidad
  de comprensión, control por parte del usuario y
  tiempo de carga.
• Usabilidad B Diseño visual, legibilidad de los
  textos, soporte visual a la jerarquía lógica de
  los contenidos.
• Utilidad básica Utilidad, interés y precisión de
  los contenidos.
• Valor añadido Contenidos y servicios no
  especialmente necesarios.
• Credibilidad. Posibilidad de comunicarse con los
  responsables. Futuras investigaciones deberían
  revisar la constitución y relevancia de este
  factor.

Solidez de la estructura factorial.
Fiabilidad de la escala Alpha de Cronbach
0,9298
36
Resultados y Conclusiones. Trabajo empírico.
Segunda fase
Trabajo empírico. Segunda fase
Se produce una fuerte correlación entre los
resultados de la evaluación y la probabilidad
percibida por los usuarios de que realizarán una
segunda visita al espacio Internet, tanto en la
evaluación global, como por factores.
37
Resultados y Conclusiones. Trabajo empírico.
Segunda fase
Trabajo empírico. Segunda fase

• Otros resultados
• A partir de los resultados de la evaluación se
  puede discriminar a los usuarios en función de la
  probabilidad percibida por ellos de realizar una
  segunda visita.
• No se producen correlaciones significativas entre
  los resultados de la evaluación y la experiencia
  de uso.
• No se encuentran diferencias significativas en
  los resultados de la evaluación entre los
  perfiles de uso.
• El CEEI puede ser sensible al hecho de que un
  espacio Internet sea evaluado inmediatamente
  después de haber navegado por otro espacio
  similar (o de la competencia).
• Los resultados de las evaluaciones reflejan el
  grado de usabilidad y utilidad de los espacios
  Internet evaluados.

38
Resultados y Conclusiones. Trabajo empírico.
Segunda fase
Futuras investigaciones

• Análisis factorial confirmatorio.
• Revisión del efecto que tiene sobre la
  evaluación, la experiencia y perfil de uso.
• Diseños experimentales para probar hipótesis que
  relacionen las características del espacio
  Internet y los resultados de la evaluación
  desarrollada por usuarios y, el efecto del uso
  previo de un espacio Internet similar al
  evaluado.
• Optimización del CEEI.

39
Modelo para la Evaluación de Espacios Internet,
en el marco de la Ingeniería de la Usabilidad y
del Diseño Centrado en el Usuario

• Tesis Doctoral

Juan José Fábregas Ruesgas Director Josep María
Monguet Fierro