Presentación Víctor Bórquez para optar al título de Ingeniero Informático de la Universidad de Valparaíso.
Transcript
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
Contenido
Introduccioacuten
Marco Conceptual
Definicioacuten del Problema
Disentildeo de la Solucioacuten
Disentildeo de la Evaluacioacuten
Ejecucioacuten de la Evaluacioacuten
Anaacutelisis de Resultados
Conclusiones
Trabajos Futuros
Bibliografiacutea
Introduccioacuten
Introduccioacuten
bull No existe un estudio que determine el grado de usabilidad de las universidades pertenecientes al consejo de rectores
bull Rol de las universidades
ndash En la formacioacuten de excelencia
ndash Compromiso con el desarrollo de Chile
ndash Producir Investigacioacuten de Calidad
bull Importancia de la informacioacuten que muestra a la comunidad en sus portales Web
Marco Conceptual
Marco Conceptual
bull Usabilidad
ndash La eficacia eficiencia y satisfaccioacuten con la que un producto permite alcanzar objetivos especiacuteficos en un contexto de uso especiacutefico ISOIEC 9241
ndash Medida para evaluar la calidad de la experiencia del usuario al interactuar con un sistema y su grado de satisfaccioacuten
ndash Uno de los principales atributos del software
Marco Conceptual
bull Atributos Usabilidad
ndash Facilidad de aprendizaje
bull iquestQue tan faacutecil es para los usuarios realizar tareas baacutesicas la primera vez que se encuentra con el disentildeo
ndash Eficiencia de uso
bull Una vez que los usuarios han aprendido en el disentildeo iquestcuaacuten raacutepido pueden realizar tareas
Marco Conceptual
bull Atributos Usabilidad
ndash Recuerdo en el tiempo
bull Cuando los usuarios vuelven al disentildeo despueacutes de un perıodo de no usarlo iquestcon queacute facilidad pueden restablecer las tareas realizadas anteriormente
ndash Tasa de errores
bull iquestCuaacutentos errores hacen los usuarios
bull iquestCuaacuten graves son estos errores y coacutemo faacutecilmente puede recuperarse de ellos
Marco Conceptual
bull Atributos Usabilidad
ndash Satisfaccioacuten subjetiva
bull iquestCuaacuten agradable es que utilice el disentildeo
Marco Conceptual
bull Meacutetodos de evaluacioacuten
ndash Meacutetodos de Inspeccioacuten
bull Expertos en Usabilidad
ndash Meacutetodos de Prueba
bull Usuario Representativos
Marco Conceptual
bull Meacutetodos de Inspeccioacuten
ndash Evaluacioacuten heuriacutestica
bull Evaluadores inspeccionan el disentildeo de interfaz basada en principios de usabilidad
Marco Conceptual
bull Meacutetodos de Prueba
ndash Interaccioacuten constructiva
bull Dos usuarios de prueba exploran el sistema juntos Profundizan en el conocimiento de su conversacioacuten en el desempentildeo de tareas especiacuteficas
ndash Teacutecnicas de consulta
bull Entrevistas y cuestionarios
Marco Conceptual
bull Portales Web
ndash Gran puerta o punto de acceso para iniciar la navegacioacuten
ndash Asiacute como muchas paacuteginas web (vinculadas fiacutesica y temaacuteticamente entre siacute) conforman un sitio varios sitios web conforman un portal
ndash Contiene canales
bull Espacios concebidos especialmente para los diferentes puacuteblicos objetivos de una institucioacuten segmentaacutendolo y brindaacutendoles una oferta de contenidos
ndash Integrado por 25 universidades puacuteblicas y tradicionales
ndash Universidades fundadas antes de 1980
ndash Presidente es el Ministro de Educacioacuten
ndash Comprende una importante estadiacutestica
bull 48 matriacutecula pregrado en total
bull 67 matriacutecula postgrado en total
bull 81 acadeacutemicos con doctorado
Definicioacuten del Problema
Definicioacuten del Problema
bull Problema
ndash No existe un estudio actual que determine el grado de usabilidad
de los portales Web de las Universidades pertenecientes al
Consejo de Rectores de Chile
Definicioacuten del Problema
bull Preguntas de investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash iquestCuaacutel es el grado de usabilidad que estos poseen
ndash iquestCuaacuteles son los principios maacutes vulnerados
ndash iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
Definicioacuten del Problema
bull Solucioacuten Propuesta
ndash Se aplicaraacute una metodologiacutea de evaluacioacuten de usabilidad particularizada para determinar el grado de usabilidad de los portales Web de las Universidades del Consejo de Rectores
ndash Se analizaraacuten y compararaacuten los resultados obtenidos para dar respuesta a los objetivos planteados
Definicioacuten del Problema
bull Objetivo General
ndash Determinar el grado de usabilidad de los portales web de las Universidades pertenecientes al consejo de rectores
Definicioacuten del Problema
bull Objetivos especiacuteficos
ndash Determinar el rol estadiacutesticas relevantes y los portales web de las universidades pertenecientes al consejo de rectores
ndash Particularizar los conceptos de usabilidad al contexto de los portales web de estas universidades
ndash Analizar los meacutetodos de evaluacioacuten de usabilidad
ndash Aplicar los meacutetodos de evaluacioacuten de usabilidad a los portales web de estas universidades de acuerdo a una metodologiacutea de trabajo
ndash Comparar resultados obtenidos
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Estudio descriptivo
bull Describir situaciones o eventos
bull Los estudios descriptivos buscan especificar las propiedades importantes de personas grupos comunidades o cualquier otro fenoacutemeno que sea sometido a anaacutelisis (Dankhe 1986)
bull Se selecciona una serie de cuestiones y se mide cada una de ellas independientemente para asiacute describir lo que se investiga
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Etapas
bull Formulacioacuten de la investigacioacuten
bull Recoleccioacuten de informacioacuten
bull Evaluar y aplicar informacioacuten
bull Informar resultados
Definicioacuten del Problema
bull Metodologiacutea de trabajo
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten
bull Solucioacuten Propuesta
ndash Aplicar un meacutetodo de Inspeccioacuten
bull Checklist de evaluacioacuten heuriacutestica
ndash Aplicar meacutetodos de pruebas
bull Interaccioacuten Constructiva
bull Teacutecnicas de Interrogacioacuten
bull Aplicacioacuten de los Meacutetodos
ndash Preparacioacuten
ndash Desarrollo
ndash Anaacutelisis
Disentildeo de la Solucioacuten
bull Meacutetodo de Inspeccioacuten Checklist de Usabilidad particularizado Sirius
ndash Es un sistema de evaluacioacuten de la usabilidad web que parte de la evaluacioacuten heuriacutestica pero que auacutena una serie de caracteriacutesticas que la diferencia de otras propuestas
bull Se aplica a cualquier tipo de sitio web y es aplicable durante todo el ciclo de vida del sitio
bull Entrega como resultado un valor porcentual del nivel de usabilidad del sitio evaluado un dato por tanto cuantitativo
Disentildeo de la Solucioacuten
bull El hecho que entregue un resultado porcentual significa que entrega un dato cuantitativo lo que permite
ndash Cuantificar y comparar la mejora de usabilidad de un portal en el tiempo
ndash Comparar la usabilidad de diferentes portales de un mismo sector
ndash Establecer clasificaciones y ranking en base a la usabilidad
bull Se basa en 10 heuriacutesticas de usabilidad
bull Se evaluacutean 83 problemas en total
Disentildeo de la Solucioacuten
Aspecto 1
bull Criterio 1bull Criterio n
Aspecto 2
bull Criterio 1bull Criterio n
hellip
bull Criterio 1bull Criterio n
Aspecto 10
bull Criterio 1bull Criterio n
Pautas de Evaluacioacuten
Disentildeo de la Solucioacuten
010
bull Grado de conformidad con el cumplimiento del criterio
NTS
bull No se cumple en todo el sitio (Valor 0)
NEP
bull No se cumple en los enlaces principales (valor 25)
NPP
bull No se cumple en la paacutegina principal (Valor 5)
NPI
bull No se cumple en alguna paacutegina interior (Valor 75)
Sbull Se cumple el criterio (Valor 10)
NA
bull Criterio no aplicable al sitio
Valores de Evaluacioacuten
Disentildeo de la Solucioacuten
Aspectos
bull Muy Alta 4bull Alta 3bull Media 2bull Baja 1
Criterio
s
bull Criacutetico 8bull Mayor 4bull Medio 2bull Moderado 1
Valores de Ponderacioacuten
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Contenido
Introduccioacuten
Marco Conceptual
Definicioacuten del Problema
Disentildeo de la Solucioacuten
Disentildeo de la Evaluacioacuten
Ejecucioacuten de la Evaluacioacuten
Anaacutelisis de Resultados
Conclusiones
Trabajos Futuros
Bibliografiacutea
Introduccioacuten
Introduccioacuten
bull No existe un estudio que determine el grado de usabilidad de las universidades pertenecientes al consejo de rectores
bull Rol de las universidades
ndash En la formacioacuten de excelencia
ndash Compromiso con el desarrollo de Chile
ndash Producir Investigacioacuten de Calidad
bull Importancia de la informacioacuten que muestra a la comunidad en sus portales Web
Marco Conceptual
Marco Conceptual
bull Usabilidad
ndash La eficacia eficiencia y satisfaccioacuten con la que un producto permite alcanzar objetivos especiacuteficos en un contexto de uso especiacutefico ISOIEC 9241
ndash Medida para evaluar la calidad de la experiencia del usuario al interactuar con un sistema y su grado de satisfaccioacuten
ndash Uno de los principales atributos del software
Marco Conceptual
bull Atributos Usabilidad
ndash Facilidad de aprendizaje
bull iquestQue tan faacutecil es para los usuarios realizar tareas baacutesicas la primera vez que se encuentra con el disentildeo
ndash Eficiencia de uso
bull Una vez que los usuarios han aprendido en el disentildeo iquestcuaacuten raacutepido pueden realizar tareas
Marco Conceptual
bull Atributos Usabilidad
ndash Recuerdo en el tiempo
bull Cuando los usuarios vuelven al disentildeo despueacutes de un perıodo de no usarlo iquestcon queacute facilidad pueden restablecer las tareas realizadas anteriormente
ndash Tasa de errores
bull iquestCuaacutentos errores hacen los usuarios
bull iquestCuaacuten graves son estos errores y coacutemo faacutecilmente puede recuperarse de ellos
Marco Conceptual
bull Atributos Usabilidad
ndash Satisfaccioacuten subjetiva
bull iquestCuaacuten agradable es que utilice el disentildeo
Marco Conceptual
bull Meacutetodos de evaluacioacuten
ndash Meacutetodos de Inspeccioacuten
bull Expertos en Usabilidad
ndash Meacutetodos de Prueba
bull Usuario Representativos
Marco Conceptual
bull Meacutetodos de Inspeccioacuten
ndash Evaluacioacuten heuriacutestica
bull Evaluadores inspeccionan el disentildeo de interfaz basada en principios de usabilidad
Marco Conceptual
bull Meacutetodos de Prueba
ndash Interaccioacuten constructiva
bull Dos usuarios de prueba exploran el sistema juntos Profundizan en el conocimiento de su conversacioacuten en el desempentildeo de tareas especiacuteficas
ndash Teacutecnicas de consulta
bull Entrevistas y cuestionarios
Marco Conceptual
bull Portales Web
ndash Gran puerta o punto de acceso para iniciar la navegacioacuten
ndash Asiacute como muchas paacuteginas web (vinculadas fiacutesica y temaacuteticamente entre siacute) conforman un sitio varios sitios web conforman un portal
ndash Contiene canales
bull Espacios concebidos especialmente para los diferentes puacuteblicos objetivos de una institucioacuten segmentaacutendolo y brindaacutendoles una oferta de contenidos
ndash Integrado por 25 universidades puacuteblicas y tradicionales
ndash Universidades fundadas antes de 1980
ndash Presidente es el Ministro de Educacioacuten
ndash Comprende una importante estadiacutestica
bull 48 matriacutecula pregrado en total
bull 67 matriacutecula postgrado en total
bull 81 acadeacutemicos con doctorado
Definicioacuten del Problema
Definicioacuten del Problema
bull Problema
ndash No existe un estudio actual que determine el grado de usabilidad
de los portales Web de las Universidades pertenecientes al
Consejo de Rectores de Chile
Definicioacuten del Problema
bull Preguntas de investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash iquestCuaacutel es el grado de usabilidad que estos poseen
ndash iquestCuaacuteles son los principios maacutes vulnerados
ndash iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
Definicioacuten del Problema
bull Solucioacuten Propuesta
ndash Se aplicaraacute una metodologiacutea de evaluacioacuten de usabilidad particularizada para determinar el grado de usabilidad de los portales Web de las Universidades del Consejo de Rectores
ndash Se analizaraacuten y compararaacuten los resultados obtenidos para dar respuesta a los objetivos planteados
Definicioacuten del Problema
bull Objetivo General
ndash Determinar el grado de usabilidad de los portales web de las Universidades pertenecientes al consejo de rectores
Definicioacuten del Problema
bull Objetivos especiacuteficos
ndash Determinar el rol estadiacutesticas relevantes y los portales web de las universidades pertenecientes al consejo de rectores
ndash Particularizar los conceptos de usabilidad al contexto de los portales web de estas universidades
ndash Analizar los meacutetodos de evaluacioacuten de usabilidad
ndash Aplicar los meacutetodos de evaluacioacuten de usabilidad a los portales web de estas universidades de acuerdo a una metodologiacutea de trabajo
ndash Comparar resultados obtenidos
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Estudio descriptivo
bull Describir situaciones o eventos
bull Los estudios descriptivos buscan especificar las propiedades importantes de personas grupos comunidades o cualquier otro fenoacutemeno que sea sometido a anaacutelisis (Dankhe 1986)
bull Se selecciona una serie de cuestiones y se mide cada una de ellas independientemente para asiacute describir lo que se investiga
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Etapas
bull Formulacioacuten de la investigacioacuten
bull Recoleccioacuten de informacioacuten
bull Evaluar y aplicar informacioacuten
bull Informar resultados
Definicioacuten del Problema
bull Metodologiacutea de trabajo
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten
bull Solucioacuten Propuesta
ndash Aplicar un meacutetodo de Inspeccioacuten
bull Checklist de evaluacioacuten heuriacutestica
ndash Aplicar meacutetodos de pruebas
bull Interaccioacuten Constructiva
bull Teacutecnicas de Interrogacioacuten
bull Aplicacioacuten de los Meacutetodos
ndash Preparacioacuten
ndash Desarrollo
ndash Anaacutelisis
Disentildeo de la Solucioacuten
bull Meacutetodo de Inspeccioacuten Checklist de Usabilidad particularizado Sirius
ndash Es un sistema de evaluacioacuten de la usabilidad web que parte de la evaluacioacuten heuriacutestica pero que auacutena una serie de caracteriacutesticas que la diferencia de otras propuestas
bull Se aplica a cualquier tipo de sitio web y es aplicable durante todo el ciclo de vida del sitio
bull Entrega como resultado un valor porcentual del nivel de usabilidad del sitio evaluado un dato por tanto cuantitativo
Disentildeo de la Solucioacuten
bull El hecho que entregue un resultado porcentual significa que entrega un dato cuantitativo lo que permite
ndash Cuantificar y comparar la mejora de usabilidad de un portal en el tiempo
ndash Comparar la usabilidad de diferentes portales de un mismo sector
ndash Establecer clasificaciones y ranking en base a la usabilidad
bull Se basa en 10 heuriacutesticas de usabilidad
bull Se evaluacutean 83 problemas en total
Disentildeo de la Solucioacuten
Aspecto 1
bull Criterio 1bull Criterio n
Aspecto 2
bull Criterio 1bull Criterio n
hellip
bull Criterio 1bull Criterio n
Aspecto 10
bull Criterio 1bull Criterio n
Pautas de Evaluacioacuten
Disentildeo de la Solucioacuten
010
bull Grado de conformidad con el cumplimiento del criterio
NTS
bull No se cumple en todo el sitio (Valor 0)
NEP
bull No se cumple en los enlaces principales (valor 25)
NPP
bull No se cumple en la paacutegina principal (Valor 5)
NPI
bull No se cumple en alguna paacutegina interior (Valor 75)
Sbull Se cumple el criterio (Valor 10)
NA
bull Criterio no aplicable al sitio
Valores de Evaluacioacuten
Disentildeo de la Solucioacuten
Aspectos
bull Muy Alta 4bull Alta 3bull Media 2bull Baja 1
Criterio
s
bull Criacutetico 8bull Mayor 4bull Medio 2bull Moderado 1
Valores de Ponderacioacuten
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Introduccioacuten
Introduccioacuten
bull No existe un estudio que determine el grado de usabilidad de las universidades pertenecientes al consejo de rectores
bull Rol de las universidades
ndash En la formacioacuten de excelencia
ndash Compromiso con el desarrollo de Chile
ndash Producir Investigacioacuten de Calidad
bull Importancia de la informacioacuten que muestra a la comunidad en sus portales Web
Marco Conceptual
Marco Conceptual
bull Usabilidad
ndash La eficacia eficiencia y satisfaccioacuten con la que un producto permite alcanzar objetivos especiacuteficos en un contexto de uso especiacutefico ISOIEC 9241
ndash Medida para evaluar la calidad de la experiencia del usuario al interactuar con un sistema y su grado de satisfaccioacuten
ndash Uno de los principales atributos del software
Marco Conceptual
bull Atributos Usabilidad
ndash Facilidad de aprendizaje
bull iquestQue tan faacutecil es para los usuarios realizar tareas baacutesicas la primera vez que se encuentra con el disentildeo
ndash Eficiencia de uso
bull Una vez que los usuarios han aprendido en el disentildeo iquestcuaacuten raacutepido pueden realizar tareas
Marco Conceptual
bull Atributos Usabilidad
ndash Recuerdo en el tiempo
bull Cuando los usuarios vuelven al disentildeo despueacutes de un perıodo de no usarlo iquestcon queacute facilidad pueden restablecer las tareas realizadas anteriormente
ndash Tasa de errores
bull iquestCuaacutentos errores hacen los usuarios
bull iquestCuaacuten graves son estos errores y coacutemo faacutecilmente puede recuperarse de ellos
Marco Conceptual
bull Atributos Usabilidad
ndash Satisfaccioacuten subjetiva
bull iquestCuaacuten agradable es que utilice el disentildeo
Marco Conceptual
bull Meacutetodos de evaluacioacuten
ndash Meacutetodos de Inspeccioacuten
bull Expertos en Usabilidad
ndash Meacutetodos de Prueba
bull Usuario Representativos
Marco Conceptual
bull Meacutetodos de Inspeccioacuten
ndash Evaluacioacuten heuriacutestica
bull Evaluadores inspeccionan el disentildeo de interfaz basada en principios de usabilidad
Marco Conceptual
bull Meacutetodos de Prueba
ndash Interaccioacuten constructiva
bull Dos usuarios de prueba exploran el sistema juntos Profundizan en el conocimiento de su conversacioacuten en el desempentildeo de tareas especiacuteficas
ndash Teacutecnicas de consulta
bull Entrevistas y cuestionarios
Marco Conceptual
bull Portales Web
ndash Gran puerta o punto de acceso para iniciar la navegacioacuten
ndash Asiacute como muchas paacuteginas web (vinculadas fiacutesica y temaacuteticamente entre siacute) conforman un sitio varios sitios web conforman un portal
ndash Contiene canales
bull Espacios concebidos especialmente para los diferentes puacuteblicos objetivos de una institucioacuten segmentaacutendolo y brindaacutendoles una oferta de contenidos
ndash Integrado por 25 universidades puacuteblicas y tradicionales
ndash Universidades fundadas antes de 1980
ndash Presidente es el Ministro de Educacioacuten
ndash Comprende una importante estadiacutestica
bull 48 matriacutecula pregrado en total
bull 67 matriacutecula postgrado en total
bull 81 acadeacutemicos con doctorado
Definicioacuten del Problema
Definicioacuten del Problema
bull Problema
ndash No existe un estudio actual que determine el grado de usabilidad
de los portales Web de las Universidades pertenecientes al
Consejo de Rectores de Chile
Definicioacuten del Problema
bull Preguntas de investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash iquestCuaacutel es el grado de usabilidad que estos poseen
ndash iquestCuaacuteles son los principios maacutes vulnerados
ndash iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
Definicioacuten del Problema
bull Solucioacuten Propuesta
ndash Se aplicaraacute una metodologiacutea de evaluacioacuten de usabilidad particularizada para determinar el grado de usabilidad de los portales Web de las Universidades del Consejo de Rectores
ndash Se analizaraacuten y compararaacuten los resultados obtenidos para dar respuesta a los objetivos planteados
Definicioacuten del Problema
bull Objetivo General
ndash Determinar el grado de usabilidad de los portales web de las Universidades pertenecientes al consejo de rectores
Definicioacuten del Problema
bull Objetivos especiacuteficos
ndash Determinar el rol estadiacutesticas relevantes y los portales web de las universidades pertenecientes al consejo de rectores
ndash Particularizar los conceptos de usabilidad al contexto de los portales web de estas universidades
ndash Analizar los meacutetodos de evaluacioacuten de usabilidad
ndash Aplicar los meacutetodos de evaluacioacuten de usabilidad a los portales web de estas universidades de acuerdo a una metodologiacutea de trabajo
ndash Comparar resultados obtenidos
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Estudio descriptivo
bull Describir situaciones o eventos
bull Los estudios descriptivos buscan especificar las propiedades importantes de personas grupos comunidades o cualquier otro fenoacutemeno que sea sometido a anaacutelisis (Dankhe 1986)
bull Se selecciona una serie de cuestiones y se mide cada una de ellas independientemente para asiacute describir lo que se investiga
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Etapas
bull Formulacioacuten de la investigacioacuten
bull Recoleccioacuten de informacioacuten
bull Evaluar y aplicar informacioacuten
bull Informar resultados
Definicioacuten del Problema
bull Metodologiacutea de trabajo
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten
bull Solucioacuten Propuesta
ndash Aplicar un meacutetodo de Inspeccioacuten
bull Checklist de evaluacioacuten heuriacutestica
ndash Aplicar meacutetodos de pruebas
bull Interaccioacuten Constructiva
bull Teacutecnicas de Interrogacioacuten
bull Aplicacioacuten de los Meacutetodos
ndash Preparacioacuten
ndash Desarrollo
ndash Anaacutelisis
Disentildeo de la Solucioacuten
bull Meacutetodo de Inspeccioacuten Checklist de Usabilidad particularizado Sirius
ndash Es un sistema de evaluacioacuten de la usabilidad web que parte de la evaluacioacuten heuriacutestica pero que auacutena una serie de caracteriacutesticas que la diferencia de otras propuestas
bull Se aplica a cualquier tipo de sitio web y es aplicable durante todo el ciclo de vida del sitio
bull Entrega como resultado un valor porcentual del nivel de usabilidad del sitio evaluado un dato por tanto cuantitativo
Disentildeo de la Solucioacuten
bull El hecho que entregue un resultado porcentual significa que entrega un dato cuantitativo lo que permite
ndash Cuantificar y comparar la mejora de usabilidad de un portal en el tiempo
ndash Comparar la usabilidad de diferentes portales de un mismo sector
ndash Establecer clasificaciones y ranking en base a la usabilidad
bull Se basa en 10 heuriacutesticas de usabilidad
bull Se evaluacutean 83 problemas en total
Disentildeo de la Solucioacuten
Aspecto 1
bull Criterio 1bull Criterio n
Aspecto 2
bull Criterio 1bull Criterio n
hellip
bull Criterio 1bull Criterio n
Aspecto 10
bull Criterio 1bull Criterio n
Pautas de Evaluacioacuten
Disentildeo de la Solucioacuten
010
bull Grado de conformidad con el cumplimiento del criterio
NTS
bull No se cumple en todo el sitio (Valor 0)
NEP
bull No se cumple en los enlaces principales (valor 25)
NPP
bull No se cumple en la paacutegina principal (Valor 5)
NPI
bull No se cumple en alguna paacutegina interior (Valor 75)
Sbull Se cumple el criterio (Valor 10)
NA
bull Criterio no aplicable al sitio
Valores de Evaluacioacuten
Disentildeo de la Solucioacuten
Aspectos
bull Muy Alta 4bull Alta 3bull Media 2bull Baja 1
Criterio
s
bull Criacutetico 8bull Mayor 4bull Medio 2bull Moderado 1
Valores de Ponderacioacuten
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Introduccioacuten
bull No existe un estudio que determine el grado de usabilidad de las universidades pertenecientes al consejo de rectores
bull Rol de las universidades
ndash En la formacioacuten de excelencia
ndash Compromiso con el desarrollo de Chile
ndash Producir Investigacioacuten de Calidad
bull Importancia de la informacioacuten que muestra a la comunidad en sus portales Web
Marco Conceptual
Marco Conceptual
bull Usabilidad
ndash La eficacia eficiencia y satisfaccioacuten con la que un producto permite alcanzar objetivos especiacuteficos en un contexto de uso especiacutefico ISOIEC 9241
ndash Medida para evaluar la calidad de la experiencia del usuario al interactuar con un sistema y su grado de satisfaccioacuten
ndash Uno de los principales atributos del software
Marco Conceptual
bull Atributos Usabilidad
ndash Facilidad de aprendizaje
bull iquestQue tan faacutecil es para los usuarios realizar tareas baacutesicas la primera vez que se encuentra con el disentildeo
ndash Eficiencia de uso
bull Una vez que los usuarios han aprendido en el disentildeo iquestcuaacuten raacutepido pueden realizar tareas
Marco Conceptual
bull Atributos Usabilidad
ndash Recuerdo en el tiempo
bull Cuando los usuarios vuelven al disentildeo despueacutes de un perıodo de no usarlo iquestcon queacute facilidad pueden restablecer las tareas realizadas anteriormente
ndash Tasa de errores
bull iquestCuaacutentos errores hacen los usuarios
bull iquestCuaacuten graves son estos errores y coacutemo faacutecilmente puede recuperarse de ellos
Marco Conceptual
bull Atributos Usabilidad
ndash Satisfaccioacuten subjetiva
bull iquestCuaacuten agradable es que utilice el disentildeo
Marco Conceptual
bull Meacutetodos de evaluacioacuten
ndash Meacutetodos de Inspeccioacuten
bull Expertos en Usabilidad
ndash Meacutetodos de Prueba
bull Usuario Representativos
Marco Conceptual
bull Meacutetodos de Inspeccioacuten
ndash Evaluacioacuten heuriacutestica
bull Evaluadores inspeccionan el disentildeo de interfaz basada en principios de usabilidad
Marco Conceptual
bull Meacutetodos de Prueba
ndash Interaccioacuten constructiva
bull Dos usuarios de prueba exploran el sistema juntos Profundizan en el conocimiento de su conversacioacuten en el desempentildeo de tareas especiacuteficas
ndash Teacutecnicas de consulta
bull Entrevistas y cuestionarios
Marco Conceptual
bull Portales Web
ndash Gran puerta o punto de acceso para iniciar la navegacioacuten
ndash Asiacute como muchas paacuteginas web (vinculadas fiacutesica y temaacuteticamente entre siacute) conforman un sitio varios sitios web conforman un portal
ndash Contiene canales
bull Espacios concebidos especialmente para los diferentes puacuteblicos objetivos de una institucioacuten segmentaacutendolo y brindaacutendoles una oferta de contenidos
ndash Integrado por 25 universidades puacuteblicas y tradicionales
ndash Universidades fundadas antes de 1980
ndash Presidente es el Ministro de Educacioacuten
ndash Comprende una importante estadiacutestica
bull 48 matriacutecula pregrado en total
bull 67 matriacutecula postgrado en total
bull 81 acadeacutemicos con doctorado
Definicioacuten del Problema
Definicioacuten del Problema
bull Problema
ndash No existe un estudio actual que determine el grado de usabilidad
de los portales Web de las Universidades pertenecientes al
Consejo de Rectores de Chile
Definicioacuten del Problema
bull Preguntas de investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash iquestCuaacutel es el grado de usabilidad que estos poseen
ndash iquestCuaacuteles son los principios maacutes vulnerados
ndash iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
Definicioacuten del Problema
bull Solucioacuten Propuesta
ndash Se aplicaraacute una metodologiacutea de evaluacioacuten de usabilidad particularizada para determinar el grado de usabilidad de los portales Web de las Universidades del Consejo de Rectores
ndash Se analizaraacuten y compararaacuten los resultados obtenidos para dar respuesta a los objetivos planteados
Definicioacuten del Problema
bull Objetivo General
ndash Determinar el grado de usabilidad de los portales web de las Universidades pertenecientes al consejo de rectores
Definicioacuten del Problema
bull Objetivos especiacuteficos
ndash Determinar el rol estadiacutesticas relevantes y los portales web de las universidades pertenecientes al consejo de rectores
ndash Particularizar los conceptos de usabilidad al contexto de los portales web de estas universidades
ndash Analizar los meacutetodos de evaluacioacuten de usabilidad
ndash Aplicar los meacutetodos de evaluacioacuten de usabilidad a los portales web de estas universidades de acuerdo a una metodologiacutea de trabajo
ndash Comparar resultados obtenidos
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Estudio descriptivo
bull Describir situaciones o eventos
bull Los estudios descriptivos buscan especificar las propiedades importantes de personas grupos comunidades o cualquier otro fenoacutemeno que sea sometido a anaacutelisis (Dankhe 1986)
bull Se selecciona una serie de cuestiones y se mide cada una de ellas independientemente para asiacute describir lo que se investiga
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Etapas
bull Formulacioacuten de la investigacioacuten
bull Recoleccioacuten de informacioacuten
bull Evaluar y aplicar informacioacuten
bull Informar resultados
Definicioacuten del Problema
bull Metodologiacutea de trabajo
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten
bull Solucioacuten Propuesta
ndash Aplicar un meacutetodo de Inspeccioacuten
bull Checklist de evaluacioacuten heuriacutestica
ndash Aplicar meacutetodos de pruebas
bull Interaccioacuten Constructiva
bull Teacutecnicas de Interrogacioacuten
bull Aplicacioacuten de los Meacutetodos
ndash Preparacioacuten
ndash Desarrollo
ndash Anaacutelisis
Disentildeo de la Solucioacuten
bull Meacutetodo de Inspeccioacuten Checklist de Usabilidad particularizado Sirius
ndash Es un sistema de evaluacioacuten de la usabilidad web que parte de la evaluacioacuten heuriacutestica pero que auacutena una serie de caracteriacutesticas que la diferencia de otras propuestas
bull Se aplica a cualquier tipo de sitio web y es aplicable durante todo el ciclo de vida del sitio
bull Entrega como resultado un valor porcentual del nivel de usabilidad del sitio evaluado un dato por tanto cuantitativo
Disentildeo de la Solucioacuten
bull El hecho que entregue un resultado porcentual significa que entrega un dato cuantitativo lo que permite
ndash Cuantificar y comparar la mejora de usabilidad de un portal en el tiempo
ndash Comparar la usabilidad de diferentes portales de un mismo sector
ndash Establecer clasificaciones y ranking en base a la usabilidad
bull Se basa en 10 heuriacutesticas de usabilidad
bull Se evaluacutean 83 problemas en total
Disentildeo de la Solucioacuten
Aspecto 1
bull Criterio 1bull Criterio n
Aspecto 2
bull Criterio 1bull Criterio n
hellip
bull Criterio 1bull Criterio n
Aspecto 10
bull Criterio 1bull Criterio n
Pautas de Evaluacioacuten
Disentildeo de la Solucioacuten
010
bull Grado de conformidad con el cumplimiento del criterio
NTS
bull No se cumple en todo el sitio (Valor 0)
NEP
bull No se cumple en los enlaces principales (valor 25)
NPP
bull No se cumple en la paacutegina principal (Valor 5)
NPI
bull No se cumple en alguna paacutegina interior (Valor 75)
Sbull Se cumple el criterio (Valor 10)
NA
bull Criterio no aplicable al sitio
Valores de Evaluacioacuten
Disentildeo de la Solucioacuten
Aspectos
bull Muy Alta 4bull Alta 3bull Media 2bull Baja 1
Criterio
s
bull Criacutetico 8bull Mayor 4bull Medio 2bull Moderado 1
Valores de Ponderacioacuten
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Marco Conceptual
Marco Conceptual
bull Usabilidad
ndash La eficacia eficiencia y satisfaccioacuten con la que un producto permite alcanzar objetivos especiacuteficos en un contexto de uso especiacutefico ISOIEC 9241
ndash Medida para evaluar la calidad de la experiencia del usuario al interactuar con un sistema y su grado de satisfaccioacuten
ndash Uno de los principales atributos del software
Marco Conceptual
bull Atributos Usabilidad
ndash Facilidad de aprendizaje
bull iquestQue tan faacutecil es para los usuarios realizar tareas baacutesicas la primera vez que se encuentra con el disentildeo
ndash Eficiencia de uso
bull Una vez que los usuarios han aprendido en el disentildeo iquestcuaacuten raacutepido pueden realizar tareas
Marco Conceptual
bull Atributos Usabilidad
ndash Recuerdo en el tiempo
bull Cuando los usuarios vuelven al disentildeo despueacutes de un perıodo de no usarlo iquestcon queacute facilidad pueden restablecer las tareas realizadas anteriormente
ndash Tasa de errores
bull iquestCuaacutentos errores hacen los usuarios
bull iquestCuaacuten graves son estos errores y coacutemo faacutecilmente puede recuperarse de ellos
Marco Conceptual
bull Atributos Usabilidad
ndash Satisfaccioacuten subjetiva
bull iquestCuaacuten agradable es que utilice el disentildeo
Marco Conceptual
bull Meacutetodos de evaluacioacuten
ndash Meacutetodos de Inspeccioacuten
bull Expertos en Usabilidad
ndash Meacutetodos de Prueba
bull Usuario Representativos
Marco Conceptual
bull Meacutetodos de Inspeccioacuten
ndash Evaluacioacuten heuriacutestica
bull Evaluadores inspeccionan el disentildeo de interfaz basada en principios de usabilidad
Marco Conceptual
bull Meacutetodos de Prueba
ndash Interaccioacuten constructiva
bull Dos usuarios de prueba exploran el sistema juntos Profundizan en el conocimiento de su conversacioacuten en el desempentildeo de tareas especiacuteficas
ndash Teacutecnicas de consulta
bull Entrevistas y cuestionarios
Marco Conceptual
bull Portales Web
ndash Gran puerta o punto de acceso para iniciar la navegacioacuten
ndash Asiacute como muchas paacuteginas web (vinculadas fiacutesica y temaacuteticamente entre siacute) conforman un sitio varios sitios web conforman un portal
ndash Contiene canales
bull Espacios concebidos especialmente para los diferentes puacuteblicos objetivos de una institucioacuten segmentaacutendolo y brindaacutendoles una oferta de contenidos
ndash Integrado por 25 universidades puacuteblicas y tradicionales
ndash Universidades fundadas antes de 1980
ndash Presidente es el Ministro de Educacioacuten
ndash Comprende una importante estadiacutestica
bull 48 matriacutecula pregrado en total
bull 67 matriacutecula postgrado en total
bull 81 acadeacutemicos con doctorado
Definicioacuten del Problema
Definicioacuten del Problema
bull Problema
ndash No existe un estudio actual que determine el grado de usabilidad
de los portales Web de las Universidades pertenecientes al
Consejo de Rectores de Chile
Definicioacuten del Problema
bull Preguntas de investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash iquestCuaacutel es el grado de usabilidad que estos poseen
ndash iquestCuaacuteles son los principios maacutes vulnerados
ndash iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
Definicioacuten del Problema
bull Solucioacuten Propuesta
ndash Se aplicaraacute una metodologiacutea de evaluacioacuten de usabilidad particularizada para determinar el grado de usabilidad de los portales Web de las Universidades del Consejo de Rectores
ndash Se analizaraacuten y compararaacuten los resultados obtenidos para dar respuesta a los objetivos planteados
Definicioacuten del Problema
bull Objetivo General
ndash Determinar el grado de usabilidad de los portales web de las Universidades pertenecientes al consejo de rectores
Definicioacuten del Problema
bull Objetivos especiacuteficos
ndash Determinar el rol estadiacutesticas relevantes y los portales web de las universidades pertenecientes al consejo de rectores
ndash Particularizar los conceptos de usabilidad al contexto de los portales web de estas universidades
ndash Analizar los meacutetodos de evaluacioacuten de usabilidad
ndash Aplicar los meacutetodos de evaluacioacuten de usabilidad a los portales web de estas universidades de acuerdo a una metodologiacutea de trabajo
ndash Comparar resultados obtenidos
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Estudio descriptivo
bull Describir situaciones o eventos
bull Los estudios descriptivos buscan especificar las propiedades importantes de personas grupos comunidades o cualquier otro fenoacutemeno que sea sometido a anaacutelisis (Dankhe 1986)
bull Se selecciona una serie de cuestiones y se mide cada una de ellas independientemente para asiacute describir lo que se investiga
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Etapas
bull Formulacioacuten de la investigacioacuten
bull Recoleccioacuten de informacioacuten
bull Evaluar y aplicar informacioacuten
bull Informar resultados
Definicioacuten del Problema
bull Metodologiacutea de trabajo
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten
bull Solucioacuten Propuesta
ndash Aplicar un meacutetodo de Inspeccioacuten
bull Checklist de evaluacioacuten heuriacutestica
ndash Aplicar meacutetodos de pruebas
bull Interaccioacuten Constructiva
bull Teacutecnicas de Interrogacioacuten
bull Aplicacioacuten de los Meacutetodos
ndash Preparacioacuten
ndash Desarrollo
ndash Anaacutelisis
Disentildeo de la Solucioacuten
bull Meacutetodo de Inspeccioacuten Checklist de Usabilidad particularizado Sirius
ndash Es un sistema de evaluacioacuten de la usabilidad web que parte de la evaluacioacuten heuriacutestica pero que auacutena una serie de caracteriacutesticas que la diferencia de otras propuestas
bull Se aplica a cualquier tipo de sitio web y es aplicable durante todo el ciclo de vida del sitio
bull Entrega como resultado un valor porcentual del nivel de usabilidad del sitio evaluado un dato por tanto cuantitativo
Disentildeo de la Solucioacuten
bull El hecho que entregue un resultado porcentual significa que entrega un dato cuantitativo lo que permite
ndash Cuantificar y comparar la mejora de usabilidad de un portal en el tiempo
ndash Comparar la usabilidad de diferentes portales de un mismo sector
ndash Establecer clasificaciones y ranking en base a la usabilidad
bull Se basa en 10 heuriacutesticas de usabilidad
bull Se evaluacutean 83 problemas en total
Disentildeo de la Solucioacuten
Aspecto 1
bull Criterio 1bull Criterio n
Aspecto 2
bull Criterio 1bull Criterio n
hellip
bull Criterio 1bull Criterio n
Aspecto 10
bull Criterio 1bull Criterio n
Pautas de Evaluacioacuten
Disentildeo de la Solucioacuten
010
bull Grado de conformidad con el cumplimiento del criterio
NTS
bull No se cumple en todo el sitio (Valor 0)
NEP
bull No se cumple en los enlaces principales (valor 25)
NPP
bull No se cumple en la paacutegina principal (Valor 5)
NPI
bull No se cumple en alguna paacutegina interior (Valor 75)
Sbull Se cumple el criterio (Valor 10)
NA
bull Criterio no aplicable al sitio
Valores de Evaluacioacuten
Disentildeo de la Solucioacuten
Aspectos
bull Muy Alta 4bull Alta 3bull Media 2bull Baja 1
Criterio
s
bull Criacutetico 8bull Mayor 4bull Medio 2bull Moderado 1
Valores de Ponderacioacuten
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Marco Conceptual
bull Usabilidad
ndash La eficacia eficiencia y satisfaccioacuten con la que un producto permite alcanzar objetivos especiacuteficos en un contexto de uso especiacutefico ISOIEC 9241
ndash Medida para evaluar la calidad de la experiencia del usuario al interactuar con un sistema y su grado de satisfaccioacuten
ndash Uno de los principales atributos del software
Marco Conceptual
bull Atributos Usabilidad
ndash Facilidad de aprendizaje
bull iquestQue tan faacutecil es para los usuarios realizar tareas baacutesicas la primera vez que se encuentra con el disentildeo
ndash Eficiencia de uso
bull Una vez que los usuarios han aprendido en el disentildeo iquestcuaacuten raacutepido pueden realizar tareas
Marco Conceptual
bull Atributos Usabilidad
ndash Recuerdo en el tiempo
bull Cuando los usuarios vuelven al disentildeo despueacutes de un perıodo de no usarlo iquestcon queacute facilidad pueden restablecer las tareas realizadas anteriormente
ndash Tasa de errores
bull iquestCuaacutentos errores hacen los usuarios
bull iquestCuaacuten graves son estos errores y coacutemo faacutecilmente puede recuperarse de ellos
Marco Conceptual
bull Atributos Usabilidad
ndash Satisfaccioacuten subjetiva
bull iquestCuaacuten agradable es que utilice el disentildeo
Marco Conceptual
bull Meacutetodos de evaluacioacuten
ndash Meacutetodos de Inspeccioacuten
bull Expertos en Usabilidad
ndash Meacutetodos de Prueba
bull Usuario Representativos
Marco Conceptual
bull Meacutetodos de Inspeccioacuten
ndash Evaluacioacuten heuriacutestica
bull Evaluadores inspeccionan el disentildeo de interfaz basada en principios de usabilidad
Marco Conceptual
bull Meacutetodos de Prueba
ndash Interaccioacuten constructiva
bull Dos usuarios de prueba exploran el sistema juntos Profundizan en el conocimiento de su conversacioacuten en el desempentildeo de tareas especiacuteficas
ndash Teacutecnicas de consulta
bull Entrevistas y cuestionarios
Marco Conceptual
bull Portales Web
ndash Gran puerta o punto de acceso para iniciar la navegacioacuten
ndash Asiacute como muchas paacuteginas web (vinculadas fiacutesica y temaacuteticamente entre siacute) conforman un sitio varios sitios web conforman un portal
ndash Contiene canales
bull Espacios concebidos especialmente para los diferentes puacuteblicos objetivos de una institucioacuten segmentaacutendolo y brindaacutendoles una oferta de contenidos
ndash Integrado por 25 universidades puacuteblicas y tradicionales
ndash Universidades fundadas antes de 1980
ndash Presidente es el Ministro de Educacioacuten
ndash Comprende una importante estadiacutestica
bull 48 matriacutecula pregrado en total
bull 67 matriacutecula postgrado en total
bull 81 acadeacutemicos con doctorado
Definicioacuten del Problema
Definicioacuten del Problema
bull Problema
ndash No existe un estudio actual que determine el grado de usabilidad
de los portales Web de las Universidades pertenecientes al
Consejo de Rectores de Chile
Definicioacuten del Problema
bull Preguntas de investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash iquestCuaacutel es el grado de usabilidad que estos poseen
ndash iquestCuaacuteles son los principios maacutes vulnerados
ndash iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
Definicioacuten del Problema
bull Solucioacuten Propuesta
ndash Se aplicaraacute una metodologiacutea de evaluacioacuten de usabilidad particularizada para determinar el grado de usabilidad de los portales Web de las Universidades del Consejo de Rectores
ndash Se analizaraacuten y compararaacuten los resultados obtenidos para dar respuesta a los objetivos planteados
Definicioacuten del Problema
bull Objetivo General
ndash Determinar el grado de usabilidad de los portales web de las Universidades pertenecientes al consejo de rectores
Definicioacuten del Problema
bull Objetivos especiacuteficos
ndash Determinar el rol estadiacutesticas relevantes y los portales web de las universidades pertenecientes al consejo de rectores
ndash Particularizar los conceptos de usabilidad al contexto de los portales web de estas universidades
ndash Analizar los meacutetodos de evaluacioacuten de usabilidad
ndash Aplicar los meacutetodos de evaluacioacuten de usabilidad a los portales web de estas universidades de acuerdo a una metodologiacutea de trabajo
ndash Comparar resultados obtenidos
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Estudio descriptivo
bull Describir situaciones o eventos
bull Los estudios descriptivos buscan especificar las propiedades importantes de personas grupos comunidades o cualquier otro fenoacutemeno que sea sometido a anaacutelisis (Dankhe 1986)
bull Se selecciona una serie de cuestiones y se mide cada una de ellas independientemente para asiacute describir lo que se investiga
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Etapas
bull Formulacioacuten de la investigacioacuten
bull Recoleccioacuten de informacioacuten
bull Evaluar y aplicar informacioacuten
bull Informar resultados
Definicioacuten del Problema
bull Metodologiacutea de trabajo
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten
bull Solucioacuten Propuesta
ndash Aplicar un meacutetodo de Inspeccioacuten
bull Checklist de evaluacioacuten heuriacutestica
ndash Aplicar meacutetodos de pruebas
bull Interaccioacuten Constructiva
bull Teacutecnicas de Interrogacioacuten
bull Aplicacioacuten de los Meacutetodos
ndash Preparacioacuten
ndash Desarrollo
ndash Anaacutelisis
Disentildeo de la Solucioacuten
bull Meacutetodo de Inspeccioacuten Checklist de Usabilidad particularizado Sirius
ndash Es un sistema de evaluacioacuten de la usabilidad web que parte de la evaluacioacuten heuriacutestica pero que auacutena una serie de caracteriacutesticas que la diferencia de otras propuestas
bull Se aplica a cualquier tipo de sitio web y es aplicable durante todo el ciclo de vida del sitio
bull Entrega como resultado un valor porcentual del nivel de usabilidad del sitio evaluado un dato por tanto cuantitativo
Disentildeo de la Solucioacuten
bull El hecho que entregue un resultado porcentual significa que entrega un dato cuantitativo lo que permite
ndash Cuantificar y comparar la mejora de usabilidad de un portal en el tiempo
ndash Comparar la usabilidad de diferentes portales de un mismo sector
ndash Establecer clasificaciones y ranking en base a la usabilidad
bull Se basa en 10 heuriacutesticas de usabilidad
bull Se evaluacutean 83 problemas en total
Disentildeo de la Solucioacuten
Aspecto 1
bull Criterio 1bull Criterio n
Aspecto 2
bull Criterio 1bull Criterio n
hellip
bull Criterio 1bull Criterio n
Aspecto 10
bull Criterio 1bull Criterio n
Pautas de Evaluacioacuten
Disentildeo de la Solucioacuten
010
bull Grado de conformidad con el cumplimiento del criterio
NTS
bull No se cumple en todo el sitio (Valor 0)
NEP
bull No se cumple en los enlaces principales (valor 25)
NPP
bull No se cumple en la paacutegina principal (Valor 5)
NPI
bull No se cumple en alguna paacutegina interior (Valor 75)
Sbull Se cumple el criterio (Valor 10)
NA
bull Criterio no aplicable al sitio
Valores de Evaluacioacuten
Disentildeo de la Solucioacuten
Aspectos
bull Muy Alta 4bull Alta 3bull Media 2bull Baja 1
Criterio
s
bull Criacutetico 8bull Mayor 4bull Medio 2bull Moderado 1
Valores de Ponderacioacuten
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Marco Conceptual
bull Atributos Usabilidad
ndash Facilidad de aprendizaje
bull iquestQue tan faacutecil es para los usuarios realizar tareas baacutesicas la primera vez que se encuentra con el disentildeo
ndash Eficiencia de uso
bull Una vez que los usuarios han aprendido en el disentildeo iquestcuaacuten raacutepido pueden realizar tareas
Marco Conceptual
bull Atributos Usabilidad
ndash Recuerdo en el tiempo
bull Cuando los usuarios vuelven al disentildeo despueacutes de un perıodo de no usarlo iquestcon queacute facilidad pueden restablecer las tareas realizadas anteriormente
ndash Tasa de errores
bull iquestCuaacutentos errores hacen los usuarios
bull iquestCuaacuten graves son estos errores y coacutemo faacutecilmente puede recuperarse de ellos
Marco Conceptual
bull Atributos Usabilidad
ndash Satisfaccioacuten subjetiva
bull iquestCuaacuten agradable es que utilice el disentildeo
Marco Conceptual
bull Meacutetodos de evaluacioacuten
ndash Meacutetodos de Inspeccioacuten
bull Expertos en Usabilidad
ndash Meacutetodos de Prueba
bull Usuario Representativos
Marco Conceptual
bull Meacutetodos de Inspeccioacuten
ndash Evaluacioacuten heuriacutestica
bull Evaluadores inspeccionan el disentildeo de interfaz basada en principios de usabilidad
Marco Conceptual
bull Meacutetodos de Prueba
ndash Interaccioacuten constructiva
bull Dos usuarios de prueba exploran el sistema juntos Profundizan en el conocimiento de su conversacioacuten en el desempentildeo de tareas especiacuteficas
ndash Teacutecnicas de consulta
bull Entrevistas y cuestionarios
Marco Conceptual
bull Portales Web
ndash Gran puerta o punto de acceso para iniciar la navegacioacuten
ndash Asiacute como muchas paacuteginas web (vinculadas fiacutesica y temaacuteticamente entre siacute) conforman un sitio varios sitios web conforman un portal
ndash Contiene canales
bull Espacios concebidos especialmente para los diferentes puacuteblicos objetivos de una institucioacuten segmentaacutendolo y brindaacutendoles una oferta de contenidos
ndash Integrado por 25 universidades puacuteblicas y tradicionales
ndash Universidades fundadas antes de 1980
ndash Presidente es el Ministro de Educacioacuten
ndash Comprende una importante estadiacutestica
bull 48 matriacutecula pregrado en total
bull 67 matriacutecula postgrado en total
bull 81 acadeacutemicos con doctorado
Definicioacuten del Problema
Definicioacuten del Problema
bull Problema
ndash No existe un estudio actual que determine el grado de usabilidad
de los portales Web de las Universidades pertenecientes al
Consejo de Rectores de Chile
Definicioacuten del Problema
bull Preguntas de investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash iquestCuaacutel es el grado de usabilidad que estos poseen
ndash iquestCuaacuteles son los principios maacutes vulnerados
ndash iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
Definicioacuten del Problema
bull Solucioacuten Propuesta
ndash Se aplicaraacute una metodologiacutea de evaluacioacuten de usabilidad particularizada para determinar el grado de usabilidad de los portales Web de las Universidades del Consejo de Rectores
ndash Se analizaraacuten y compararaacuten los resultados obtenidos para dar respuesta a los objetivos planteados
Definicioacuten del Problema
bull Objetivo General
ndash Determinar el grado de usabilidad de los portales web de las Universidades pertenecientes al consejo de rectores
Definicioacuten del Problema
bull Objetivos especiacuteficos
ndash Determinar el rol estadiacutesticas relevantes y los portales web de las universidades pertenecientes al consejo de rectores
ndash Particularizar los conceptos de usabilidad al contexto de los portales web de estas universidades
ndash Analizar los meacutetodos de evaluacioacuten de usabilidad
ndash Aplicar los meacutetodos de evaluacioacuten de usabilidad a los portales web de estas universidades de acuerdo a una metodologiacutea de trabajo
ndash Comparar resultados obtenidos
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Estudio descriptivo
bull Describir situaciones o eventos
bull Los estudios descriptivos buscan especificar las propiedades importantes de personas grupos comunidades o cualquier otro fenoacutemeno que sea sometido a anaacutelisis (Dankhe 1986)
bull Se selecciona una serie de cuestiones y se mide cada una de ellas independientemente para asiacute describir lo que se investiga
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Etapas
bull Formulacioacuten de la investigacioacuten
bull Recoleccioacuten de informacioacuten
bull Evaluar y aplicar informacioacuten
bull Informar resultados
Definicioacuten del Problema
bull Metodologiacutea de trabajo
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten
bull Solucioacuten Propuesta
ndash Aplicar un meacutetodo de Inspeccioacuten
bull Checklist de evaluacioacuten heuriacutestica
ndash Aplicar meacutetodos de pruebas
bull Interaccioacuten Constructiva
bull Teacutecnicas de Interrogacioacuten
bull Aplicacioacuten de los Meacutetodos
ndash Preparacioacuten
ndash Desarrollo
ndash Anaacutelisis
Disentildeo de la Solucioacuten
bull Meacutetodo de Inspeccioacuten Checklist de Usabilidad particularizado Sirius
ndash Es un sistema de evaluacioacuten de la usabilidad web que parte de la evaluacioacuten heuriacutestica pero que auacutena una serie de caracteriacutesticas que la diferencia de otras propuestas
bull Se aplica a cualquier tipo de sitio web y es aplicable durante todo el ciclo de vida del sitio
bull Entrega como resultado un valor porcentual del nivel de usabilidad del sitio evaluado un dato por tanto cuantitativo
Disentildeo de la Solucioacuten
bull El hecho que entregue un resultado porcentual significa que entrega un dato cuantitativo lo que permite
ndash Cuantificar y comparar la mejora de usabilidad de un portal en el tiempo
ndash Comparar la usabilidad de diferentes portales de un mismo sector
ndash Establecer clasificaciones y ranking en base a la usabilidad
bull Se basa en 10 heuriacutesticas de usabilidad
bull Se evaluacutean 83 problemas en total
Disentildeo de la Solucioacuten
Aspecto 1
bull Criterio 1bull Criterio n
Aspecto 2
bull Criterio 1bull Criterio n
hellip
bull Criterio 1bull Criterio n
Aspecto 10
bull Criterio 1bull Criterio n
Pautas de Evaluacioacuten
Disentildeo de la Solucioacuten
010
bull Grado de conformidad con el cumplimiento del criterio
NTS
bull No se cumple en todo el sitio (Valor 0)
NEP
bull No se cumple en los enlaces principales (valor 25)
NPP
bull No se cumple en la paacutegina principal (Valor 5)
NPI
bull No se cumple en alguna paacutegina interior (Valor 75)
Sbull Se cumple el criterio (Valor 10)
NA
bull Criterio no aplicable al sitio
Valores de Evaluacioacuten
Disentildeo de la Solucioacuten
Aspectos
bull Muy Alta 4bull Alta 3bull Media 2bull Baja 1
Criterio
s
bull Criacutetico 8bull Mayor 4bull Medio 2bull Moderado 1
Valores de Ponderacioacuten
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Marco Conceptual
bull Atributos Usabilidad
ndash Recuerdo en el tiempo
bull Cuando los usuarios vuelven al disentildeo despueacutes de un perıodo de no usarlo iquestcon queacute facilidad pueden restablecer las tareas realizadas anteriormente
ndash Tasa de errores
bull iquestCuaacutentos errores hacen los usuarios
bull iquestCuaacuten graves son estos errores y coacutemo faacutecilmente puede recuperarse de ellos
Marco Conceptual
bull Atributos Usabilidad
ndash Satisfaccioacuten subjetiva
bull iquestCuaacuten agradable es que utilice el disentildeo
Marco Conceptual
bull Meacutetodos de evaluacioacuten
ndash Meacutetodos de Inspeccioacuten
bull Expertos en Usabilidad
ndash Meacutetodos de Prueba
bull Usuario Representativos
Marco Conceptual
bull Meacutetodos de Inspeccioacuten
ndash Evaluacioacuten heuriacutestica
bull Evaluadores inspeccionan el disentildeo de interfaz basada en principios de usabilidad
Marco Conceptual
bull Meacutetodos de Prueba
ndash Interaccioacuten constructiva
bull Dos usuarios de prueba exploran el sistema juntos Profundizan en el conocimiento de su conversacioacuten en el desempentildeo de tareas especiacuteficas
ndash Teacutecnicas de consulta
bull Entrevistas y cuestionarios
Marco Conceptual
bull Portales Web
ndash Gran puerta o punto de acceso para iniciar la navegacioacuten
ndash Asiacute como muchas paacuteginas web (vinculadas fiacutesica y temaacuteticamente entre siacute) conforman un sitio varios sitios web conforman un portal
ndash Contiene canales
bull Espacios concebidos especialmente para los diferentes puacuteblicos objetivos de una institucioacuten segmentaacutendolo y brindaacutendoles una oferta de contenidos
ndash Integrado por 25 universidades puacuteblicas y tradicionales
ndash Universidades fundadas antes de 1980
ndash Presidente es el Ministro de Educacioacuten
ndash Comprende una importante estadiacutestica
bull 48 matriacutecula pregrado en total
bull 67 matriacutecula postgrado en total
bull 81 acadeacutemicos con doctorado
Definicioacuten del Problema
Definicioacuten del Problema
bull Problema
ndash No existe un estudio actual que determine el grado de usabilidad
de los portales Web de las Universidades pertenecientes al
Consejo de Rectores de Chile
Definicioacuten del Problema
bull Preguntas de investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash iquestCuaacutel es el grado de usabilidad que estos poseen
ndash iquestCuaacuteles son los principios maacutes vulnerados
ndash iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
Definicioacuten del Problema
bull Solucioacuten Propuesta
ndash Se aplicaraacute una metodologiacutea de evaluacioacuten de usabilidad particularizada para determinar el grado de usabilidad de los portales Web de las Universidades del Consejo de Rectores
ndash Se analizaraacuten y compararaacuten los resultados obtenidos para dar respuesta a los objetivos planteados
Definicioacuten del Problema
bull Objetivo General
ndash Determinar el grado de usabilidad de los portales web de las Universidades pertenecientes al consejo de rectores
Definicioacuten del Problema
bull Objetivos especiacuteficos
ndash Determinar el rol estadiacutesticas relevantes y los portales web de las universidades pertenecientes al consejo de rectores
ndash Particularizar los conceptos de usabilidad al contexto de los portales web de estas universidades
ndash Analizar los meacutetodos de evaluacioacuten de usabilidad
ndash Aplicar los meacutetodos de evaluacioacuten de usabilidad a los portales web de estas universidades de acuerdo a una metodologiacutea de trabajo
ndash Comparar resultados obtenidos
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Estudio descriptivo
bull Describir situaciones o eventos
bull Los estudios descriptivos buscan especificar las propiedades importantes de personas grupos comunidades o cualquier otro fenoacutemeno que sea sometido a anaacutelisis (Dankhe 1986)
bull Se selecciona una serie de cuestiones y se mide cada una de ellas independientemente para asiacute describir lo que se investiga
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Etapas
bull Formulacioacuten de la investigacioacuten
bull Recoleccioacuten de informacioacuten
bull Evaluar y aplicar informacioacuten
bull Informar resultados
Definicioacuten del Problema
bull Metodologiacutea de trabajo
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten
bull Solucioacuten Propuesta
ndash Aplicar un meacutetodo de Inspeccioacuten
bull Checklist de evaluacioacuten heuriacutestica
ndash Aplicar meacutetodos de pruebas
bull Interaccioacuten Constructiva
bull Teacutecnicas de Interrogacioacuten
bull Aplicacioacuten de los Meacutetodos
ndash Preparacioacuten
ndash Desarrollo
ndash Anaacutelisis
Disentildeo de la Solucioacuten
bull Meacutetodo de Inspeccioacuten Checklist de Usabilidad particularizado Sirius
ndash Es un sistema de evaluacioacuten de la usabilidad web que parte de la evaluacioacuten heuriacutestica pero que auacutena una serie de caracteriacutesticas que la diferencia de otras propuestas
bull Se aplica a cualquier tipo de sitio web y es aplicable durante todo el ciclo de vida del sitio
bull Entrega como resultado un valor porcentual del nivel de usabilidad del sitio evaluado un dato por tanto cuantitativo
Disentildeo de la Solucioacuten
bull El hecho que entregue un resultado porcentual significa que entrega un dato cuantitativo lo que permite
ndash Cuantificar y comparar la mejora de usabilidad de un portal en el tiempo
ndash Comparar la usabilidad de diferentes portales de un mismo sector
ndash Establecer clasificaciones y ranking en base a la usabilidad
bull Se basa en 10 heuriacutesticas de usabilidad
bull Se evaluacutean 83 problemas en total
Disentildeo de la Solucioacuten
Aspecto 1
bull Criterio 1bull Criterio n
Aspecto 2
bull Criterio 1bull Criterio n
hellip
bull Criterio 1bull Criterio n
Aspecto 10
bull Criterio 1bull Criterio n
Pautas de Evaluacioacuten
Disentildeo de la Solucioacuten
010
bull Grado de conformidad con el cumplimiento del criterio
NTS
bull No se cumple en todo el sitio (Valor 0)
NEP
bull No se cumple en los enlaces principales (valor 25)
NPP
bull No se cumple en la paacutegina principal (Valor 5)
NPI
bull No se cumple en alguna paacutegina interior (Valor 75)
Sbull Se cumple el criterio (Valor 10)
NA
bull Criterio no aplicable al sitio
Valores de Evaluacioacuten
Disentildeo de la Solucioacuten
Aspectos
bull Muy Alta 4bull Alta 3bull Media 2bull Baja 1
Criterio
s
bull Criacutetico 8bull Mayor 4bull Medio 2bull Moderado 1
Valores de Ponderacioacuten
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Marco Conceptual
bull Atributos Usabilidad
ndash Satisfaccioacuten subjetiva
bull iquestCuaacuten agradable es que utilice el disentildeo
Marco Conceptual
bull Meacutetodos de evaluacioacuten
ndash Meacutetodos de Inspeccioacuten
bull Expertos en Usabilidad
ndash Meacutetodos de Prueba
bull Usuario Representativos
Marco Conceptual
bull Meacutetodos de Inspeccioacuten
ndash Evaluacioacuten heuriacutestica
bull Evaluadores inspeccionan el disentildeo de interfaz basada en principios de usabilidad
Marco Conceptual
bull Meacutetodos de Prueba
ndash Interaccioacuten constructiva
bull Dos usuarios de prueba exploran el sistema juntos Profundizan en el conocimiento de su conversacioacuten en el desempentildeo de tareas especiacuteficas
ndash Teacutecnicas de consulta
bull Entrevistas y cuestionarios
Marco Conceptual
bull Portales Web
ndash Gran puerta o punto de acceso para iniciar la navegacioacuten
ndash Asiacute como muchas paacuteginas web (vinculadas fiacutesica y temaacuteticamente entre siacute) conforman un sitio varios sitios web conforman un portal
ndash Contiene canales
bull Espacios concebidos especialmente para los diferentes puacuteblicos objetivos de una institucioacuten segmentaacutendolo y brindaacutendoles una oferta de contenidos
ndash Integrado por 25 universidades puacuteblicas y tradicionales
ndash Universidades fundadas antes de 1980
ndash Presidente es el Ministro de Educacioacuten
ndash Comprende una importante estadiacutestica
bull 48 matriacutecula pregrado en total
bull 67 matriacutecula postgrado en total
bull 81 acadeacutemicos con doctorado
Definicioacuten del Problema
Definicioacuten del Problema
bull Problema
ndash No existe un estudio actual que determine el grado de usabilidad
de los portales Web de las Universidades pertenecientes al
Consejo de Rectores de Chile
Definicioacuten del Problema
bull Preguntas de investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash iquestCuaacutel es el grado de usabilidad que estos poseen
ndash iquestCuaacuteles son los principios maacutes vulnerados
ndash iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
Definicioacuten del Problema
bull Solucioacuten Propuesta
ndash Se aplicaraacute una metodologiacutea de evaluacioacuten de usabilidad particularizada para determinar el grado de usabilidad de los portales Web de las Universidades del Consejo de Rectores
ndash Se analizaraacuten y compararaacuten los resultados obtenidos para dar respuesta a los objetivos planteados
Definicioacuten del Problema
bull Objetivo General
ndash Determinar el grado de usabilidad de los portales web de las Universidades pertenecientes al consejo de rectores
Definicioacuten del Problema
bull Objetivos especiacuteficos
ndash Determinar el rol estadiacutesticas relevantes y los portales web de las universidades pertenecientes al consejo de rectores
ndash Particularizar los conceptos de usabilidad al contexto de los portales web de estas universidades
ndash Analizar los meacutetodos de evaluacioacuten de usabilidad
ndash Aplicar los meacutetodos de evaluacioacuten de usabilidad a los portales web de estas universidades de acuerdo a una metodologiacutea de trabajo
ndash Comparar resultados obtenidos
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Estudio descriptivo
bull Describir situaciones o eventos
bull Los estudios descriptivos buscan especificar las propiedades importantes de personas grupos comunidades o cualquier otro fenoacutemeno que sea sometido a anaacutelisis (Dankhe 1986)
bull Se selecciona una serie de cuestiones y se mide cada una de ellas independientemente para asiacute describir lo que se investiga
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Etapas
bull Formulacioacuten de la investigacioacuten
bull Recoleccioacuten de informacioacuten
bull Evaluar y aplicar informacioacuten
bull Informar resultados
Definicioacuten del Problema
bull Metodologiacutea de trabajo
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten
bull Solucioacuten Propuesta
ndash Aplicar un meacutetodo de Inspeccioacuten
bull Checklist de evaluacioacuten heuriacutestica
ndash Aplicar meacutetodos de pruebas
bull Interaccioacuten Constructiva
bull Teacutecnicas de Interrogacioacuten
bull Aplicacioacuten de los Meacutetodos
ndash Preparacioacuten
ndash Desarrollo
ndash Anaacutelisis
Disentildeo de la Solucioacuten
bull Meacutetodo de Inspeccioacuten Checklist de Usabilidad particularizado Sirius
ndash Es un sistema de evaluacioacuten de la usabilidad web que parte de la evaluacioacuten heuriacutestica pero que auacutena una serie de caracteriacutesticas que la diferencia de otras propuestas
bull Se aplica a cualquier tipo de sitio web y es aplicable durante todo el ciclo de vida del sitio
bull Entrega como resultado un valor porcentual del nivel de usabilidad del sitio evaluado un dato por tanto cuantitativo
Disentildeo de la Solucioacuten
bull El hecho que entregue un resultado porcentual significa que entrega un dato cuantitativo lo que permite
ndash Cuantificar y comparar la mejora de usabilidad de un portal en el tiempo
ndash Comparar la usabilidad de diferentes portales de un mismo sector
ndash Establecer clasificaciones y ranking en base a la usabilidad
bull Se basa en 10 heuriacutesticas de usabilidad
bull Se evaluacutean 83 problemas en total
Disentildeo de la Solucioacuten
Aspecto 1
bull Criterio 1bull Criterio n
Aspecto 2
bull Criterio 1bull Criterio n
hellip
bull Criterio 1bull Criterio n
Aspecto 10
bull Criterio 1bull Criterio n
Pautas de Evaluacioacuten
Disentildeo de la Solucioacuten
010
bull Grado de conformidad con el cumplimiento del criterio
NTS
bull No se cumple en todo el sitio (Valor 0)
NEP
bull No se cumple en los enlaces principales (valor 25)
NPP
bull No se cumple en la paacutegina principal (Valor 5)
NPI
bull No se cumple en alguna paacutegina interior (Valor 75)
Sbull Se cumple el criterio (Valor 10)
NA
bull Criterio no aplicable al sitio
Valores de Evaluacioacuten
Disentildeo de la Solucioacuten
Aspectos
bull Muy Alta 4bull Alta 3bull Media 2bull Baja 1
Criterio
s
bull Criacutetico 8bull Mayor 4bull Medio 2bull Moderado 1
Valores de Ponderacioacuten
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Marco Conceptual
bull Meacutetodos de evaluacioacuten
ndash Meacutetodos de Inspeccioacuten
bull Expertos en Usabilidad
ndash Meacutetodos de Prueba
bull Usuario Representativos
Marco Conceptual
bull Meacutetodos de Inspeccioacuten
ndash Evaluacioacuten heuriacutestica
bull Evaluadores inspeccionan el disentildeo de interfaz basada en principios de usabilidad
Marco Conceptual
bull Meacutetodos de Prueba
ndash Interaccioacuten constructiva
bull Dos usuarios de prueba exploran el sistema juntos Profundizan en el conocimiento de su conversacioacuten en el desempentildeo de tareas especiacuteficas
ndash Teacutecnicas de consulta
bull Entrevistas y cuestionarios
Marco Conceptual
bull Portales Web
ndash Gran puerta o punto de acceso para iniciar la navegacioacuten
ndash Asiacute como muchas paacuteginas web (vinculadas fiacutesica y temaacuteticamente entre siacute) conforman un sitio varios sitios web conforman un portal
ndash Contiene canales
bull Espacios concebidos especialmente para los diferentes puacuteblicos objetivos de una institucioacuten segmentaacutendolo y brindaacutendoles una oferta de contenidos
ndash Integrado por 25 universidades puacuteblicas y tradicionales
ndash Universidades fundadas antes de 1980
ndash Presidente es el Ministro de Educacioacuten
ndash Comprende una importante estadiacutestica
bull 48 matriacutecula pregrado en total
bull 67 matriacutecula postgrado en total
bull 81 acadeacutemicos con doctorado
Definicioacuten del Problema
Definicioacuten del Problema
bull Problema
ndash No existe un estudio actual que determine el grado de usabilidad
de los portales Web de las Universidades pertenecientes al
Consejo de Rectores de Chile
Definicioacuten del Problema
bull Preguntas de investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash iquestCuaacutel es el grado de usabilidad que estos poseen
ndash iquestCuaacuteles son los principios maacutes vulnerados
ndash iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
Definicioacuten del Problema
bull Solucioacuten Propuesta
ndash Se aplicaraacute una metodologiacutea de evaluacioacuten de usabilidad particularizada para determinar el grado de usabilidad de los portales Web de las Universidades del Consejo de Rectores
ndash Se analizaraacuten y compararaacuten los resultados obtenidos para dar respuesta a los objetivos planteados
Definicioacuten del Problema
bull Objetivo General
ndash Determinar el grado de usabilidad de los portales web de las Universidades pertenecientes al consejo de rectores
Definicioacuten del Problema
bull Objetivos especiacuteficos
ndash Determinar el rol estadiacutesticas relevantes y los portales web de las universidades pertenecientes al consejo de rectores
ndash Particularizar los conceptos de usabilidad al contexto de los portales web de estas universidades
ndash Analizar los meacutetodos de evaluacioacuten de usabilidad
ndash Aplicar los meacutetodos de evaluacioacuten de usabilidad a los portales web de estas universidades de acuerdo a una metodologiacutea de trabajo
ndash Comparar resultados obtenidos
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Estudio descriptivo
bull Describir situaciones o eventos
bull Los estudios descriptivos buscan especificar las propiedades importantes de personas grupos comunidades o cualquier otro fenoacutemeno que sea sometido a anaacutelisis (Dankhe 1986)
bull Se selecciona una serie de cuestiones y se mide cada una de ellas independientemente para asiacute describir lo que se investiga
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Etapas
bull Formulacioacuten de la investigacioacuten
bull Recoleccioacuten de informacioacuten
bull Evaluar y aplicar informacioacuten
bull Informar resultados
Definicioacuten del Problema
bull Metodologiacutea de trabajo
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten
bull Solucioacuten Propuesta
ndash Aplicar un meacutetodo de Inspeccioacuten
bull Checklist de evaluacioacuten heuriacutestica
ndash Aplicar meacutetodos de pruebas
bull Interaccioacuten Constructiva
bull Teacutecnicas de Interrogacioacuten
bull Aplicacioacuten de los Meacutetodos
ndash Preparacioacuten
ndash Desarrollo
ndash Anaacutelisis
Disentildeo de la Solucioacuten
bull Meacutetodo de Inspeccioacuten Checklist de Usabilidad particularizado Sirius
ndash Es un sistema de evaluacioacuten de la usabilidad web que parte de la evaluacioacuten heuriacutestica pero que auacutena una serie de caracteriacutesticas que la diferencia de otras propuestas
bull Se aplica a cualquier tipo de sitio web y es aplicable durante todo el ciclo de vida del sitio
bull Entrega como resultado un valor porcentual del nivel de usabilidad del sitio evaluado un dato por tanto cuantitativo
Disentildeo de la Solucioacuten
bull El hecho que entregue un resultado porcentual significa que entrega un dato cuantitativo lo que permite
ndash Cuantificar y comparar la mejora de usabilidad de un portal en el tiempo
ndash Comparar la usabilidad de diferentes portales de un mismo sector
ndash Establecer clasificaciones y ranking en base a la usabilidad
bull Se basa en 10 heuriacutesticas de usabilidad
bull Se evaluacutean 83 problemas en total
Disentildeo de la Solucioacuten
Aspecto 1
bull Criterio 1bull Criterio n
Aspecto 2
bull Criterio 1bull Criterio n
hellip
bull Criterio 1bull Criterio n
Aspecto 10
bull Criterio 1bull Criterio n
Pautas de Evaluacioacuten
Disentildeo de la Solucioacuten
010
bull Grado de conformidad con el cumplimiento del criterio
NTS
bull No se cumple en todo el sitio (Valor 0)
NEP
bull No se cumple en los enlaces principales (valor 25)
NPP
bull No se cumple en la paacutegina principal (Valor 5)
NPI
bull No se cumple en alguna paacutegina interior (Valor 75)
Sbull Se cumple el criterio (Valor 10)
NA
bull Criterio no aplicable al sitio
Valores de Evaluacioacuten
Disentildeo de la Solucioacuten
Aspectos
bull Muy Alta 4bull Alta 3bull Media 2bull Baja 1
Criterio
s
bull Criacutetico 8bull Mayor 4bull Medio 2bull Moderado 1
Valores de Ponderacioacuten
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Marco Conceptual
bull Meacutetodos de Inspeccioacuten
ndash Evaluacioacuten heuriacutestica
bull Evaluadores inspeccionan el disentildeo de interfaz basada en principios de usabilidad
Marco Conceptual
bull Meacutetodos de Prueba
ndash Interaccioacuten constructiva
bull Dos usuarios de prueba exploran el sistema juntos Profundizan en el conocimiento de su conversacioacuten en el desempentildeo de tareas especiacuteficas
ndash Teacutecnicas de consulta
bull Entrevistas y cuestionarios
Marco Conceptual
bull Portales Web
ndash Gran puerta o punto de acceso para iniciar la navegacioacuten
ndash Asiacute como muchas paacuteginas web (vinculadas fiacutesica y temaacuteticamente entre siacute) conforman un sitio varios sitios web conforman un portal
ndash Contiene canales
bull Espacios concebidos especialmente para los diferentes puacuteblicos objetivos de una institucioacuten segmentaacutendolo y brindaacutendoles una oferta de contenidos
ndash Integrado por 25 universidades puacuteblicas y tradicionales
ndash Universidades fundadas antes de 1980
ndash Presidente es el Ministro de Educacioacuten
ndash Comprende una importante estadiacutestica
bull 48 matriacutecula pregrado en total
bull 67 matriacutecula postgrado en total
bull 81 acadeacutemicos con doctorado
Definicioacuten del Problema
Definicioacuten del Problema
bull Problema
ndash No existe un estudio actual que determine el grado de usabilidad
de los portales Web de las Universidades pertenecientes al
Consejo de Rectores de Chile
Definicioacuten del Problema
bull Preguntas de investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash iquestCuaacutel es el grado de usabilidad que estos poseen
ndash iquestCuaacuteles son los principios maacutes vulnerados
ndash iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
Definicioacuten del Problema
bull Solucioacuten Propuesta
ndash Se aplicaraacute una metodologiacutea de evaluacioacuten de usabilidad particularizada para determinar el grado de usabilidad de los portales Web de las Universidades del Consejo de Rectores
ndash Se analizaraacuten y compararaacuten los resultados obtenidos para dar respuesta a los objetivos planteados
Definicioacuten del Problema
bull Objetivo General
ndash Determinar el grado de usabilidad de los portales web de las Universidades pertenecientes al consejo de rectores
Definicioacuten del Problema
bull Objetivos especiacuteficos
ndash Determinar el rol estadiacutesticas relevantes y los portales web de las universidades pertenecientes al consejo de rectores
ndash Particularizar los conceptos de usabilidad al contexto de los portales web de estas universidades
ndash Analizar los meacutetodos de evaluacioacuten de usabilidad
ndash Aplicar los meacutetodos de evaluacioacuten de usabilidad a los portales web de estas universidades de acuerdo a una metodologiacutea de trabajo
ndash Comparar resultados obtenidos
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Estudio descriptivo
bull Describir situaciones o eventos
bull Los estudios descriptivos buscan especificar las propiedades importantes de personas grupos comunidades o cualquier otro fenoacutemeno que sea sometido a anaacutelisis (Dankhe 1986)
bull Se selecciona una serie de cuestiones y se mide cada una de ellas independientemente para asiacute describir lo que se investiga
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Etapas
bull Formulacioacuten de la investigacioacuten
bull Recoleccioacuten de informacioacuten
bull Evaluar y aplicar informacioacuten
bull Informar resultados
Definicioacuten del Problema
bull Metodologiacutea de trabajo
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten
bull Solucioacuten Propuesta
ndash Aplicar un meacutetodo de Inspeccioacuten
bull Checklist de evaluacioacuten heuriacutestica
ndash Aplicar meacutetodos de pruebas
bull Interaccioacuten Constructiva
bull Teacutecnicas de Interrogacioacuten
bull Aplicacioacuten de los Meacutetodos
ndash Preparacioacuten
ndash Desarrollo
ndash Anaacutelisis
Disentildeo de la Solucioacuten
bull Meacutetodo de Inspeccioacuten Checklist de Usabilidad particularizado Sirius
ndash Es un sistema de evaluacioacuten de la usabilidad web que parte de la evaluacioacuten heuriacutestica pero que auacutena una serie de caracteriacutesticas que la diferencia de otras propuestas
bull Se aplica a cualquier tipo de sitio web y es aplicable durante todo el ciclo de vida del sitio
bull Entrega como resultado un valor porcentual del nivel de usabilidad del sitio evaluado un dato por tanto cuantitativo
Disentildeo de la Solucioacuten
bull El hecho que entregue un resultado porcentual significa que entrega un dato cuantitativo lo que permite
ndash Cuantificar y comparar la mejora de usabilidad de un portal en el tiempo
ndash Comparar la usabilidad de diferentes portales de un mismo sector
ndash Establecer clasificaciones y ranking en base a la usabilidad
bull Se basa en 10 heuriacutesticas de usabilidad
bull Se evaluacutean 83 problemas en total
Disentildeo de la Solucioacuten
Aspecto 1
bull Criterio 1bull Criterio n
Aspecto 2
bull Criterio 1bull Criterio n
hellip
bull Criterio 1bull Criterio n
Aspecto 10
bull Criterio 1bull Criterio n
Pautas de Evaluacioacuten
Disentildeo de la Solucioacuten
010
bull Grado de conformidad con el cumplimiento del criterio
NTS
bull No se cumple en todo el sitio (Valor 0)
NEP
bull No se cumple en los enlaces principales (valor 25)
NPP
bull No se cumple en la paacutegina principal (Valor 5)
NPI
bull No se cumple en alguna paacutegina interior (Valor 75)
Sbull Se cumple el criterio (Valor 10)
NA
bull Criterio no aplicable al sitio
Valores de Evaluacioacuten
Disentildeo de la Solucioacuten
Aspectos
bull Muy Alta 4bull Alta 3bull Media 2bull Baja 1
Criterio
s
bull Criacutetico 8bull Mayor 4bull Medio 2bull Moderado 1
Valores de Ponderacioacuten
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Marco Conceptual
bull Meacutetodos de Prueba
ndash Interaccioacuten constructiva
bull Dos usuarios de prueba exploran el sistema juntos Profundizan en el conocimiento de su conversacioacuten en el desempentildeo de tareas especiacuteficas
ndash Teacutecnicas de consulta
bull Entrevistas y cuestionarios
Marco Conceptual
bull Portales Web
ndash Gran puerta o punto de acceso para iniciar la navegacioacuten
ndash Asiacute como muchas paacuteginas web (vinculadas fiacutesica y temaacuteticamente entre siacute) conforman un sitio varios sitios web conforman un portal
ndash Contiene canales
bull Espacios concebidos especialmente para los diferentes puacuteblicos objetivos de una institucioacuten segmentaacutendolo y brindaacutendoles una oferta de contenidos
ndash Integrado por 25 universidades puacuteblicas y tradicionales
ndash Universidades fundadas antes de 1980
ndash Presidente es el Ministro de Educacioacuten
ndash Comprende una importante estadiacutestica
bull 48 matriacutecula pregrado en total
bull 67 matriacutecula postgrado en total
bull 81 acadeacutemicos con doctorado
Definicioacuten del Problema
Definicioacuten del Problema
bull Problema
ndash No existe un estudio actual que determine el grado de usabilidad
de los portales Web de las Universidades pertenecientes al
Consejo de Rectores de Chile
Definicioacuten del Problema
bull Preguntas de investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash iquestCuaacutel es el grado de usabilidad que estos poseen
ndash iquestCuaacuteles son los principios maacutes vulnerados
ndash iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
Definicioacuten del Problema
bull Solucioacuten Propuesta
ndash Se aplicaraacute una metodologiacutea de evaluacioacuten de usabilidad particularizada para determinar el grado de usabilidad de los portales Web de las Universidades del Consejo de Rectores
ndash Se analizaraacuten y compararaacuten los resultados obtenidos para dar respuesta a los objetivos planteados
Definicioacuten del Problema
bull Objetivo General
ndash Determinar el grado de usabilidad de los portales web de las Universidades pertenecientes al consejo de rectores
Definicioacuten del Problema
bull Objetivos especiacuteficos
ndash Determinar el rol estadiacutesticas relevantes y los portales web de las universidades pertenecientes al consejo de rectores
ndash Particularizar los conceptos de usabilidad al contexto de los portales web de estas universidades
ndash Analizar los meacutetodos de evaluacioacuten de usabilidad
ndash Aplicar los meacutetodos de evaluacioacuten de usabilidad a los portales web de estas universidades de acuerdo a una metodologiacutea de trabajo
ndash Comparar resultados obtenidos
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Estudio descriptivo
bull Describir situaciones o eventos
bull Los estudios descriptivos buscan especificar las propiedades importantes de personas grupos comunidades o cualquier otro fenoacutemeno que sea sometido a anaacutelisis (Dankhe 1986)
bull Se selecciona una serie de cuestiones y se mide cada una de ellas independientemente para asiacute describir lo que se investiga
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Etapas
bull Formulacioacuten de la investigacioacuten
bull Recoleccioacuten de informacioacuten
bull Evaluar y aplicar informacioacuten
bull Informar resultados
Definicioacuten del Problema
bull Metodologiacutea de trabajo
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten
bull Solucioacuten Propuesta
ndash Aplicar un meacutetodo de Inspeccioacuten
bull Checklist de evaluacioacuten heuriacutestica
ndash Aplicar meacutetodos de pruebas
bull Interaccioacuten Constructiva
bull Teacutecnicas de Interrogacioacuten
bull Aplicacioacuten de los Meacutetodos
ndash Preparacioacuten
ndash Desarrollo
ndash Anaacutelisis
Disentildeo de la Solucioacuten
bull Meacutetodo de Inspeccioacuten Checklist de Usabilidad particularizado Sirius
ndash Es un sistema de evaluacioacuten de la usabilidad web que parte de la evaluacioacuten heuriacutestica pero que auacutena una serie de caracteriacutesticas que la diferencia de otras propuestas
bull Se aplica a cualquier tipo de sitio web y es aplicable durante todo el ciclo de vida del sitio
bull Entrega como resultado un valor porcentual del nivel de usabilidad del sitio evaluado un dato por tanto cuantitativo
Disentildeo de la Solucioacuten
bull El hecho que entregue un resultado porcentual significa que entrega un dato cuantitativo lo que permite
ndash Cuantificar y comparar la mejora de usabilidad de un portal en el tiempo
ndash Comparar la usabilidad de diferentes portales de un mismo sector
ndash Establecer clasificaciones y ranking en base a la usabilidad
bull Se basa en 10 heuriacutesticas de usabilidad
bull Se evaluacutean 83 problemas en total
Disentildeo de la Solucioacuten
Aspecto 1
bull Criterio 1bull Criterio n
Aspecto 2
bull Criterio 1bull Criterio n
hellip
bull Criterio 1bull Criterio n
Aspecto 10
bull Criterio 1bull Criterio n
Pautas de Evaluacioacuten
Disentildeo de la Solucioacuten
010
bull Grado de conformidad con el cumplimiento del criterio
NTS
bull No se cumple en todo el sitio (Valor 0)
NEP
bull No se cumple en los enlaces principales (valor 25)
NPP
bull No se cumple en la paacutegina principal (Valor 5)
NPI
bull No se cumple en alguna paacutegina interior (Valor 75)
Sbull Se cumple el criterio (Valor 10)
NA
bull Criterio no aplicable al sitio
Valores de Evaluacioacuten
Disentildeo de la Solucioacuten
Aspectos
bull Muy Alta 4bull Alta 3bull Media 2bull Baja 1
Criterio
s
bull Criacutetico 8bull Mayor 4bull Medio 2bull Moderado 1
Valores de Ponderacioacuten
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Marco Conceptual
bull Portales Web
ndash Gran puerta o punto de acceso para iniciar la navegacioacuten
ndash Asiacute como muchas paacuteginas web (vinculadas fiacutesica y temaacuteticamente entre siacute) conforman un sitio varios sitios web conforman un portal
ndash Contiene canales
bull Espacios concebidos especialmente para los diferentes puacuteblicos objetivos de una institucioacuten segmentaacutendolo y brindaacutendoles una oferta de contenidos
ndash Integrado por 25 universidades puacuteblicas y tradicionales
ndash Universidades fundadas antes de 1980
ndash Presidente es el Ministro de Educacioacuten
ndash Comprende una importante estadiacutestica
bull 48 matriacutecula pregrado en total
bull 67 matriacutecula postgrado en total
bull 81 acadeacutemicos con doctorado
Definicioacuten del Problema
Definicioacuten del Problema
bull Problema
ndash No existe un estudio actual que determine el grado de usabilidad
de los portales Web de las Universidades pertenecientes al
Consejo de Rectores de Chile
Definicioacuten del Problema
bull Preguntas de investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash iquestCuaacutel es el grado de usabilidad que estos poseen
ndash iquestCuaacuteles son los principios maacutes vulnerados
ndash iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
Definicioacuten del Problema
bull Solucioacuten Propuesta
ndash Se aplicaraacute una metodologiacutea de evaluacioacuten de usabilidad particularizada para determinar el grado de usabilidad de los portales Web de las Universidades del Consejo de Rectores
ndash Se analizaraacuten y compararaacuten los resultados obtenidos para dar respuesta a los objetivos planteados
Definicioacuten del Problema
bull Objetivo General
ndash Determinar el grado de usabilidad de los portales web de las Universidades pertenecientes al consejo de rectores
Definicioacuten del Problema
bull Objetivos especiacuteficos
ndash Determinar el rol estadiacutesticas relevantes y los portales web de las universidades pertenecientes al consejo de rectores
ndash Particularizar los conceptos de usabilidad al contexto de los portales web de estas universidades
ndash Analizar los meacutetodos de evaluacioacuten de usabilidad
ndash Aplicar los meacutetodos de evaluacioacuten de usabilidad a los portales web de estas universidades de acuerdo a una metodologiacutea de trabajo
ndash Comparar resultados obtenidos
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Estudio descriptivo
bull Describir situaciones o eventos
bull Los estudios descriptivos buscan especificar las propiedades importantes de personas grupos comunidades o cualquier otro fenoacutemeno que sea sometido a anaacutelisis (Dankhe 1986)
bull Se selecciona una serie de cuestiones y se mide cada una de ellas independientemente para asiacute describir lo que se investiga
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Etapas
bull Formulacioacuten de la investigacioacuten
bull Recoleccioacuten de informacioacuten
bull Evaluar y aplicar informacioacuten
bull Informar resultados
Definicioacuten del Problema
bull Metodologiacutea de trabajo
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten
bull Solucioacuten Propuesta
ndash Aplicar un meacutetodo de Inspeccioacuten
bull Checklist de evaluacioacuten heuriacutestica
ndash Aplicar meacutetodos de pruebas
bull Interaccioacuten Constructiva
bull Teacutecnicas de Interrogacioacuten
bull Aplicacioacuten de los Meacutetodos
ndash Preparacioacuten
ndash Desarrollo
ndash Anaacutelisis
Disentildeo de la Solucioacuten
bull Meacutetodo de Inspeccioacuten Checklist de Usabilidad particularizado Sirius
ndash Es un sistema de evaluacioacuten de la usabilidad web que parte de la evaluacioacuten heuriacutestica pero que auacutena una serie de caracteriacutesticas que la diferencia de otras propuestas
bull Se aplica a cualquier tipo de sitio web y es aplicable durante todo el ciclo de vida del sitio
bull Entrega como resultado un valor porcentual del nivel de usabilidad del sitio evaluado un dato por tanto cuantitativo
Disentildeo de la Solucioacuten
bull El hecho que entregue un resultado porcentual significa que entrega un dato cuantitativo lo que permite
ndash Cuantificar y comparar la mejora de usabilidad de un portal en el tiempo
ndash Comparar la usabilidad de diferentes portales de un mismo sector
ndash Establecer clasificaciones y ranking en base a la usabilidad
bull Se basa en 10 heuriacutesticas de usabilidad
bull Se evaluacutean 83 problemas en total
Disentildeo de la Solucioacuten
Aspecto 1
bull Criterio 1bull Criterio n
Aspecto 2
bull Criterio 1bull Criterio n
hellip
bull Criterio 1bull Criterio n
Aspecto 10
bull Criterio 1bull Criterio n
Pautas de Evaluacioacuten
Disentildeo de la Solucioacuten
010
bull Grado de conformidad con el cumplimiento del criterio
NTS
bull No se cumple en todo el sitio (Valor 0)
NEP
bull No se cumple en los enlaces principales (valor 25)
NPP
bull No se cumple en la paacutegina principal (Valor 5)
NPI
bull No se cumple en alguna paacutegina interior (Valor 75)
Sbull Se cumple el criterio (Valor 10)
NA
bull Criterio no aplicable al sitio
Valores de Evaluacioacuten
Disentildeo de la Solucioacuten
Aspectos
bull Muy Alta 4bull Alta 3bull Media 2bull Baja 1
Criterio
s
bull Criacutetico 8bull Mayor 4bull Medio 2bull Moderado 1
Valores de Ponderacioacuten
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Marco Conceptual
bull Consejo de Rectores y sus universidades
ndash Integrado por 25 universidades puacuteblicas y tradicionales
ndash Universidades fundadas antes de 1980
ndash Presidente es el Ministro de Educacioacuten
ndash Comprende una importante estadiacutestica
bull 48 matriacutecula pregrado en total
bull 67 matriacutecula postgrado en total
bull 81 acadeacutemicos con doctorado
Definicioacuten del Problema
Definicioacuten del Problema
bull Problema
ndash No existe un estudio actual que determine el grado de usabilidad
de los portales Web de las Universidades pertenecientes al
Consejo de Rectores de Chile
Definicioacuten del Problema
bull Preguntas de investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash iquestCuaacutel es el grado de usabilidad que estos poseen
ndash iquestCuaacuteles son los principios maacutes vulnerados
ndash iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
Definicioacuten del Problema
bull Solucioacuten Propuesta
ndash Se aplicaraacute una metodologiacutea de evaluacioacuten de usabilidad particularizada para determinar el grado de usabilidad de los portales Web de las Universidades del Consejo de Rectores
ndash Se analizaraacuten y compararaacuten los resultados obtenidos para dar respuesta a los objetivos planteados
Definicioacuten del Problema
bull Objetivo General
ndash Determinar el grado de usabilidad de los portales web de las Universidades pertenecientes al consejo de rectores
Definicioacuten del Problema
bull Objetivos especiacuteficos
ndash Determinar el rol estadiacutesticas relevantes y los portales web de las universidades pertenecientes al consejo de rectores
ndash Particularizar los conceptos de usabilidad al contexto de los portales web de estas universidades
ndash Analizar los meacutetodos de evaluacioacuten de usabilidad
ndash Aplicar los meacutetodos de evaluacioacuten de usabilidad a los portales web de estas universidades de acuerdo a una metodologiacutea de trabajo
ndash Comparar resultados obtenidos
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Estudio descriptivo
bull Describir situaciones o eventos
bull Los estudios descriptivos buscan especificar las propiedades importantes de personas grupos comunidades o cualquier otro fenoacutemeno que sea sometido a anaacutelisis (Dankhe 1986)
bull Se selecciona una serie de cuestiones y se mide cada una de ellas independientemente para asiacute describir lo que se investiga
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Etapas
bull Formulacioacuten de la investigacioacuten
bull Recoleccioacuten de informacioacuten
bull Evaluar y aplicar informacioacuten
bull Informar resultados
Definicioacuten del Problema
bull Metodologiacutea de trabajo
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten
bull Solucioacuten Propuesta
ndash Aplicar un meacutetodo de Inspeccioacuten
bull Checklist de evaluacioacuten heuriacutestica
ndash Aplicar meacutetodos de pruebas
bull Interaccioacuten Constructiva
bull Teacutecnicas de Interrogacioacuten
bull Aplicacioacuten de los Meacutetodos
ndash Preparacioacuten
ndash Desarrollo
ndash Anaacutelisis
Disentildeo de la Solucioacuten
bull Meacutetodo de Inspeccioacuten Checklist de Usabilidad particularizado Sirius
ndash Es un sistema de evaluacioacuten de la usabilidad web que parte de la evaluacioacuten heuriacutestica pero que auacutena una serie de caracteriacutesticas que la diferencia de otras propuestas
bull Se aplica a cualquier tipo de sitio web y es aplicable durante todo el ciclo de vida del sitio
bull Entrega como resultado un valor porcentual del nivel de usabilidad del sitio evaluado un dato por tanto cuantitativo
Disentildeo de la Solucioacuten
bull El hecho que entregue un resultado porcentual significa que entrega un dato cuantitativo lo que permite
ndash Cuantificar y comparar la mejora de usabilidad de un portal en el tiempo
ndash Comparar la usabilidad de diferentes portales de un mismo sector
ndash Establecer clasificaciones y ranking en base a la usabilidad
bull Se basa en 10 heuriacutesticas de usabilidad
bull Se evaluacutean 83 problemas en total
Disentildeo de la Solucioacuten
Aspecto 1
bull Criterio 1bull Criterio n
Aspecto 2
bull Criterio 1bull Criterio n
hellip
bull Criterio 1bull Criterio n
Aspecto 10
bull Criterio 1bull Criterio n
Pautas de Evaluacioacuten
Disentildeo de la Solucioacuten
010
bull Grado de conformidad con el cumplimiento del criterio
NTS
bull No se cumple en todo el sitio (Valor 0)
NEP
bull No se cumple en los enlaces principales (valor 25)
NPP
bull No se cumple en la paacutegina principal (Valor 5)
NPI
bull No se cumple en alguna paacutegina interior (Valor 75)
Sbull Se cumple el criterio (Valor 10)
NA
bull Criterio no aplicable al sitio
Valores de Evaluacioacuten
Disentildeo de la Solucioacuten
Aspectos
bull Muy Alta 4bull Alta 3bull Media 2bull Baja 1
Criterio
s
bull Criacutetico 8bull Mayor 4bull Medio 2bull Moderado 1
Valores de Ponderacioacuten
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Definicioacuten del Problema
Definicioacuten del Problema
bull Problema
ndash No existe un estudio actual que determine el grado de usabilidad
de los portales Web de las Universidades pertenecientes al
Consejo de Rectores de Chile
Definicioacuten del Problema
bull Preguntas de investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash iquestCuaacutel es el grado de usabilidad que estos poseen
ndash iquestCuaacuteles son los principios maacutes vulnerados
ndash iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
Definicioacuten del Problema
bull Solucioacuten Propuesta
ndash Se aplicaraacute una metodologiacutea de evaluacioacuten de usabilidad particularizada para determinar el grado de usabilidad de los portales Web de las Universidades del Consejo de Rectores
ndash Se analizaraacuten y compararaacuten los resultados obtenidos para dar respuesta a los objetivos planteados
Definicioacuten del Problema
bull Objetivo General
ndash Determinar el grado de usabilidad de los portales web de las Universidades pertenecientes al consejo de rectores
Definicioacuten del Problema
bull Objetivos especiacuteficos
ndash Determinar el rol estadiacutesticas relevantes y los portales web de las universidades pertenecientes al consejo de rectores
ndash Particularizar los conceptos de usabilidad al contexto de los portales web de estas universidades
ndash Analizar los meacutetodos de evaluacioacuten de usabilidad
ndash Aplicar los meacutetodos de evaluacioacuten de usabilidad a los portales web de estas universidades de acuerdo a una metodologiacutea de trabajo
ndash Comparar resultados obtenidos
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Estudio descriptivo
bull Describir situaciones o eventos
bull Los estudios descriptivos buscan especificar las propiedades importantes de personas grupos comunidades o cualquier otro fenoacutemeno que sea sometido a anaacutelisis (Dankhe 1986)
bull Se selecciona una serie de cuestiones y se mide cada una de ellas independientemente para asiacute describir lo que se investiga
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Etapas
bull Formulacioacuten de la investigacioacuten
bull Recoleccioacuten de informacioacuten
bull Evaluar y aplicar informacioacuten
bull Informar resultados
Definicioacuten del Problema
bull Metodologiacutea de trabajo
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten
bull Solucioacuten Propuesta
ndash Aplicar un meacutetodo de Inspeccioacuten
bull Checklist de evaluacioacuten heuriacutestica
ndash Aplicar meacutetodos de pruebas
bull Interaccioacuten Constructiva
bull Teacutecnicas de Interrogacioacuten
bull Aplicacioacuten de los Meacutetodos
ndash Preparacioacuten
ndash Desarrollo
ndash Anaacutelisis
Disentildeo de la Solucioacuten
bull Meacutetodo de Inspeccioacuten Checklist de Usabilidad particularizado Sirius
ndash Es un sistema de evaluacioacuten de la usabilidad web que parte de la evaluacioacuten heuriacutestica pero que auacutena una serie de caracteriacutesticas que la diferencia de otras propuestas
bull Se aplica a cualquier tipo de sitio web y es aplicable durante todo el ciclo de vida del sitio
bull Entrega como resultado un valor porcentual del nivel de usabilidad del sitio evaluado un dato por tanto cuantitativo
Disentildeo de la Solucioacuten
bull El hecho que entregue un resultado porcentual significa que entrega un dato cuantitativo lo que permite
ndash Cuantificar y comparar la mejora de usabilidad de un portal en el tiempo
ndash Comparar la usabilidad de diferentes portales de un mismo sector
ndash Establecer clasificaciones y ranking en base a la usabilidad
bull Se basa en 10 heuriacutesticas de usabilidad
bull Se evaluacutean 83 problemas en total
Disentildeo de la Solucioacuten
Aspecto 1
bull Criterio 1bull Criterio n
Aspecto 2
bull Criterio 1bull Criterio n
hellip
bull Criterio 1bull Criterio n
Aspecto 10
bull Criterio 1bull Criterio n
Pautas de Evaluacioacuten
Disentildeo de la Solucioacuten
010
bull Grado de conformidad con el cumplimiento del criterio
NTS
bull No se cumple en todo el sitio (Valor 0)
NEP
bull No se cumple en los enlaces principales (valor 25)
NPP
bull No se cumple en la paacutegina principal (Valor 5)
NPI
bull No se cumple en alguna paacutegina interior (Valor 75)
Sbull Se cumple el criterio (Valor 10)
NA
bull Criterio no aplicable al sitio
Valores de Evaluacioacuten
Disentildeo de la Solucioacuten
Aspectos
bull Muy Alta 4bull Alta 3bull Media 2bull Baja 1
Criterio
s
bull Criacutetico 8bull Mayor 4bull Medio 2bull Moderado 1
Valores de Ponderacioacuten
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Definicioacuten del Problema
bull Problema
ndash No existe un estudio actual que determine el grado de usabilidad
de los portales Web de las Universidades pertenecientes al
Consejo de Rectores de Chile
Definicioacuten del Problema
bull Preguntas de investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash iquestCuaacutel es el grado de usabilidad que estos poseen
ndash iquestCuaacuteles son los principios maacutes vulnerados
ndash iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
Definicioacuten del Problema
bull Solucioacuten Propuesta
ndash Se aplicaraacute una metodologiacutea de evaluacioacuten de usabilidad particularizada para determinar el grado de usabilidad de los portales Web de las Universidades del Consejo de Rectores
ndash Se analizaraacuten y compararaacuten los resultados obtenidos para dar respuesta a los objetivos planteados
Definicioacuten del Problema
bull Objetivo General
ndash Determinar el grado de usabilidad de los portales web de las Universidades pertenecientes al consejo de rectores
Definicioacuten del Problema
bull Objetivos especiacuteficos
ndash Determinar el rol estadiacutesticas relevantes y los portales web de las universidades pertenecientes al consejo de rectores
ndash Particularizar los conceptos de usabilidad al contexto de los portales web de estas universidades
ndash Analizar los meacutetodos de evaluacioacuten de usabilidad
ndash Aplicar los meacutetodos de evaluacioacuten de usabilidad a los portales web de estas universidades de acuerdo a una metodologiacutea de trabajo
ndash Comparar resultados obtenidos
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Estudio descriptivo
bull Describir situaciones o eventos
bull Los estudios descriptivos buscan especificar las propiedades importantes de personas grupos comunidades o cualquier otro fenoacutemeno que sea sometido a anaacutelisis (Dankhe 1986)
bull Se selecciona una serie de cuestiones y se mide cada una de ellas independientemente para asiacute describir lo que se investiga
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Etapas
bull Formulacioacuten de la investigacioacuten
bull Recoleccioacuten de informacioacuten
bull Evaluar y aplicar informacioacuten
bull Informar resultados
Definicioacuten del Problema
bull Metodologiacutea de trabajo
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten
bull Solucioacuten Propuesta
ndash Aplicar un meacutetodo de Inspeccioacuten
bull Checklist de evaluacioacuten heuriacutestica
ndash Aplicar meacutetodos de pruebas
bull Interaccioacuten Constructiva
bull Teacutecnicas de Interrogacioacuten
bull Aplicacioacuten de los Meacutetodos
ndash Preparacioacuten
ndash Desarrollo
ndash Anaacutelisis
Disentildeo de la Solucioacuten
bull Meacutetodo de Inspeccioacuten Checklist de Usabilidad particularizado Sirius
ndash Es un sistema de evaluacioacuten de la usabilidad web que parte de la evaluacioacuten heuriacutestica pero que auacutena una serie de caracteriacutesticas que la diferencia de otras propuestas
bull Se aplica a cualquier tipo de sitio web y es aplicable durante todo el ciclo de vida del sitio
bull Entrega como resultado un valor porcentual del nivel de usabilidad del sitio evaluado un dato por tanto cuantitativo
Disentildeo de la Solucioacuten
bull El hecho que entregue un resultado porcentual significa que entrega un dato cuantitativo lo que permite
ndash Cuantificar y comparar la mejora de usabilidad de un portal en el tiempo
ndash Comparar la usabilidad de diferentes portales de un mismo sector
ndash Establecer clasificaciones y ranking en base a la usabilidad
bull Se basa en 10 heuriacutesticas de usabilidad
bull Se evaluacutean 83 problemas en total
Disentildeo de la Solucioacuten
Aspecto 1
bull Criterio 1bull Criterio n
Aspecto 2
bull Criterio 1bull Criterio n
hellip
bull Criterio 1bull Criterio n
Aspecto 10
bull Criterio 1bull Criterio n
Pautas de Evaluacioacuten
Disentildeo de la Solucioacuten
010
bull Grado de conformidad con el cumplimiento del criterio
NTS
bull No se cumple en todo el sitio (Valor 0)
NEP
bull No se cumple en los enlaces principales (valor 25)
NPP
bull No se cumple en la paacutegina principal (Valor 5)
NPI
bull No se cumple en alguna paacutegina interior (Valor 75)
Sbull Se cumple el criterio (Valor 10)
NA
bull Criterio no aplicable al sitio
Valores de Evaluacioacuten
Disentildeo de la Solucioacuten
Aspectos
bull Muy Alta 4bull Alta 3bull Media 2bull Baja 1
Criterio
s
bull Criacutetico 8bull Mayor 4bull Medio 2bull Moderado 1
Valores de Ponderacioacuten
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Definicioacuten del Problema
bull Preguntas de investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash iquestCuaacutel es el grado de usabilidad que estos poseen
ndash iquestCuaacuteles son los principios maacutes vulnerados
ndash iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
Definicioacuten del Problema
bull Solucioacuten Propuesta
ndash Se aplicaraacute una metodologiacutea de evaluacioacuten de usabilidad particularizada para determinar el grado de usabilidad de los portales Web de las Universidades del Consejo de Rectores
ndash Se analizaraacuten y compararaacuten los resultados obtenidos para dar respuesta a los objetivos planteados
Definicioacuten del Problema
bull Objetivo General
ndash Determinar el grado de usabilidad de los portales web de las Universidades pertenecientes al consejo de rectores
Definicioacuten del Problema
bull Objetivos especiacuteficos
ndash Determinar el rol estadiacutesticas relevantes y los portales web de las universidades pertenecientes al consejo de rectores
ndash Particularizar los conceptos de usabilidad al contexto de los portales web de estas universidades
ndash Analizar los meacutetodos de evaluacioacuten de usabilidad
ndash Aplicar los meacutetodos de evaluacioacuten de usabilidad a los portales web de estas universidades de acuerdo a una metodologiacutea de trabajo
ndash Comparar resultados obtenidos
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Estudio descriptivo
bull Describir situaciones o eventos
bull Los estudios descriptivos buscan especificar las propiedades importantes de personas grupos comunidades o cualquier otro fenoacutemeno que sea sometido a anaacutelisis (Dankhe 1986)
bull Se selecciona una serie de cuestiones y se mide cada una de ellas independientemente para asiacute describir lo que se investiga
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Etapas
bull Formulacioacuten de la investigacioacuten
bull Recoleccioacuten de informacioacuten
bull Evaluar y aplicar informacioacuten
bull Informar resultados
Definicioacuten del Problema
bull Metodologiacutea de trabajo
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten
bull Solucioacuten Propuesta
ndash Aplicar un meacutetodo de Inspeccioacuten
bull Checklist de evaluacioacuten heuriacutestica
ndash Aplicar meacutetodos de pruebas
bull Interaccioacuten Constructiva
bull Teacutecnicas de Interrogacioacuten
bull Aplicacioacuten de los Meacutetodos
ndash Preparacioacuten
ndash Desarrollo
ndash Anaacutelisis
Disentildeo de la Solucioacuten
bull Meacutetodo de Inspeccioacuten Checklist de Usabilidad particularizado Sirius
ndash Es un sistema de evaluacioacuten de la usabilidad web que parte de la evaluacioacuten heuriacutestica pero que auacutena una serie de caracteriacutesticas que la diferencia de otras propuestas
bull Se aplica a cualquier tipo de sitio web y es aplicable durante todo el ciclo de vida del sitio
bull Entrega como resultado un valor porcentual del nivel de usabilidad del sitio evaluado un dato por tanto cuantitativo
Disentildeo de la Solucioacuten
bull El hecho que entregue un resultado porcentual significa que entrega un dato cuantitativo lo que permite
ndash Cuantificar y comparar la mejora de usabilidad de un portal en el tiempo
ndash Comparar la usabilidad de diferentes portales de un mismo sector
ndash Establecer clasificaciones y ranking en base a la usabilidad
bull Se basa en 10 heuriacutesticas de usabilidad
bull Se evaluacutean 83 problemas en total
Disentildeo de la Solucioacuten
Aspecto 1
bull Criterio 1bull Criterio n
Aspecto 2
bull Criterio 1bull Criterio n
hellip
bull Criterio 1bull Criterio n
Aspecto 10
bull Criterio 1bull Criterio n
Pautas de Evaluacioacuten
Disentildeo de la Solucioacuten
010
bull Grado de conformidad con el cumplimiento del criterio
NTS
bull No se cumple en todo el sitio (Valor 0)
NEP
bull No se cumple en los enlaces principales (valor 25)
NPP
bull No se cumple en la paacutegina principal (Valor 5)
NPI
bull No se cumple en alguna paacutegina interior (Valor 75)
Sbull Se cumple el criterio (Valor 10)
NA
bull Criterio no aplicable al sitio
Valores de Evaluacioacuten
Disentildeo de la Solucioacuten
Aspectos
bull Muy Alta 4bull Alta 3bull Media 2bull Baja 1
Criterio
s
bull Criacutetico 8bull Mayor 4bull Medio 2bull Moderado 1
Valores de Ponderacioacuten
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Definicioacuten del Problema
bull Solucioacuten Propuesta
ndash Se aplicaraacute una metodologiacutea de evaluacioacuten de usabilidad particularizada para determinar el grado de usabilidad de los portales Web de las Universidades del Consejo de Rectores
ndash Se analizaraacuten y compararaacuten los resultados obtenidos para dar respuesta a los objetivos planteados
Definicioacuten del Problema
bull Objetivo General
ndash Determinar el grado de usabilidad de los portales web de las Universidades pertenecientes al consejo de rectores
Definicioacuten del Problema
bull Objetivos especiacuteficos
ndash Determinar el rol estadiacutesticas relevantes y los portales web de las universidades pertenecientes al consejo de rectores
ndash Particularizar los conceptos de usabilidad al contexto de los portales web de estas universidades
ndash Analizar los meacutetodos de evaluacioacuten de usabilidad
ndash Aplicar los meacutetodos de evaluacioacuten de usabilidad a los portales web de estas universidades de acuerdo a una metodologiacutea de trabajo
ndash Comparar resultados obtenidos
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Estudio descriptivo
bull Describir situaciones o eventos
bull Los estudios descriptivos buscan especificar las propiedades importantes de personas grupos comunidades o cualquier otro fenoacutemeno que sea sometido a anaacutelisis (Dankhe 1986)
bull Se selecciona una serie de cuestiones y se mide cada una de ellas independientemente para asiacute describir lo que se investiga
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Etapas
bull Formulacioacuten de la investigacioacuten
bull Recoleccioacuten de informacioacuten
bull Evaluar y aplicar informacioacuten
bull Informar resultados
Definicioacuten del Problema
bull Metodologiacutea de trabajo
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten
bull Solucioacuten Propuesta
ndash Aplicar un meacutetodo de Inspeccioacuten
bull Checklist de evaluacioacuten heuriacutestica
ndash Aplicar meacutetodos de pruebas
bull Interaccioacuten Constructiva
bull Teacutecnicas de Interrogacioacuten
bull Aplicacioacuten de los Meacutetodos
ndash Preparacioacuten
ndash Desarrollo
ndash Anaacutelisis
Disentildeo de la Solucioacuten
bull Meacutetodo de Inspeccioacuten Checklist de Usabilidad particularizado Sirius
ndash Es un sistema de evaluacioacuten de la usabilidad web que parte de la evaluacioacuten heuriacutestica pero que auacutena una serie de caracteriacutesticas que la diferencia de otras propuestas
bull Se aplica a cualquier tipo de sitio web y es aplicable durante todo el ciclo de vida del sitio
bull Entrega como resultado un valor porcentual del nivel de usabilidad del sitio evaluado un dato por tanto cuantitativo
Disentildeo de la Solucioacuten
bull El hecho que entregue un resultado porcentual significa que entrega un dato cuantitativo lo que permite
ndash Cuantificar y comparar la mejora de usabilidad de un portal en el tiempo
ndash Comparar la usabilidad de diferentes portales de un mismo sector
ndash Establecer clasificaciones y ranking en base a la usabilidad
bull Se basa en 10 heuriacutesticas de usabilidad
bull Se evaluacutean 83 problemas en total
Disentildeo de la Solucioacuten
Aspecto 1
bull Criterio 1bull Criterio n
Aspecto 2
bull Criterio 1bull Criterio n
hellip
bull Criterio 1bull Criterio n
Aspecto 10
bull Criterio 1bull Criterio n
Pautas de Evaluacioacuten
Disentildeo de la Solucioacuten
010
bull Grado de conformidad con el cumplimiento del criterio
NTS
bull No se cumple en todo el sitio (Valor 0)
NEP
bull No se cumple en los enlaces principales (valor 25)
NPP
bull No se cumple en la paacutegina principal (Valor 5)
NPI
bull No se cumple en alguna paacutegina interior (Valor 75)
Sbull Se cumple el criterio (Valor 10)
NA
bull Criterio no aplicable al sitio
Valores de Evaluacioacuten
Disentildeo de la Solucioacuten
Aspectos
bull Muy Alta 4bull Alta 3bull Media 2bull Baja 1
Criterio
s
bull Criacutetico 8bull Mayor 4bull Medio 2bull Moderado 1
Valores de Ponderacioacuten
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Definicioacuten del Problema
bull Objetivo General
ndash Determinar el grado de usabilidad de los portales web de las Universidades pertenecientes al consejo de rectores
Definicioacuten del Problema
bull Objetivos especiacuteficos
ndash Determinar el rol estadiacutesticas relevantes y los portales web de las universidades pertenecientes al consejo de rectores
ndash Particularizar los conceptos de usabilidad al contexto de los portales web de estas universidades
ndash Analizar los meacutetodos de evaluacioacuten de usabilidad
ndash Aplicar los meacutetodos de evaluacioacuten de usabilidad a los portales web de estas universidades de acuerdo a una metodologiacutea de trabajo
ndash Comparar resultados obtenidos
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Estudio descriptivo
bull Describir situaciones o eventos
bull Los estudios descriptivos buscan especificar las propiedades importantes de personas grupos comunidades o cualquier otro fenoacutemeno que sea sometido a anaacutelisis (Dankhe 1986)
bull Se selecciona una serie de cuestiones y se mide cada una de ellas independientemente para asiacute describir lo que se investiga
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Etapas
bull Formulacioacuten de la investigacioacuten
bull Recoleccioacuten de informacioacuten
bull Evaluar y aplicar informacioacuten
bull Informar resultados
Definicioacuten del Problema
bull Metodologiacutea de trabajo
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten
bull Solucioacuten Propuesta
ndash Aplicar un meacutetodo de Inspeccioacuten
bull Checklist de evaluacioacuten heuriacutestica
ndash Aplicar meacutetodos de pruebas
bull Interaccioacuten Constructiva
bull Teacutecnicas de Interrogacioacuten
bull Aplicacioacuten de los Meacutetodos
ndash Preparacioacuten
ndash Desarrollo
ndash Anaacutelisis
Disentildeo de la Solucioacuten
bull Meacutetodo de Inspeccioacuten Checklist de Usabilidad particularizado Sirius
ndash Es un sistema de evaluacioacuten de la usabilidad web que parte de la evaluacioacuten heuriacutestica pero que auacutena una serie de caracteriacutesticas que la diferencia de otras propuestas
bull Se aplica a cualquier tipo de sitio web y es aplicable durante todo el ciclo de vida del sitio
bull Entrega como resultado un valor porcentual del nivel de usabilidad del sitio evaluado un dato por tanto cuantitativo
Disentildeo de la Solucioacuten
bull El hecho que entregue un resultado porcentual significa que entrega un dato cuantitativo lo que permite
ndash Cuantificar y comparar la mejora de usabilidad de un portal en el tiempo
ndash Comparar la usabilidad de diferentes portales de un mismo sector
ndash Establecer clasificaciones y ranking en base a la usabilidad
bull Se basa en 10 heuriacutesticas de usabilidad
bull Se evaluacutean 83 problemas en total
Disentildeo de la Solucioacuten
Aspecto 1
bull Criterio 1bull Criterio n
Aspecto 2
bull Criterio 1bull Criterio n
hellip
bull Criterio 1bull Criterio n
Aspecto 10
bull Criterio 1bull Criterio n
Pautas de Evaluacioacuten
Disentildeo de la Solucioacuten
010
bull Grado de conformidad con el cumplimiento del criterio
NTS
bull No se cumple en todo el sitio (Valor 0)
NEP
bull No se cumple en los enlaces principales (valor 25)
NPP
bull No se cumple en la paacutegina principal (Valor 5)
NPI
bull No se cumple en alguna paacutegina interior (Valor 75)
Sbull Se cumple el criterio (Valor 10)
NA
bull Criterio no aplicable al sitio
Valores de Evaluacioacuten
Disentildeo de la Solucioacuten
Aspectos
bull Muy Alta 4bull Alta 3bull Media 2bull Baja 1
Criterio
s
bull Criacutetico 8bull Mayor 4bull Medio 2bull Moderado 1
Valores de Ponderacioacuten
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Definicioacuten del Problema
bull Objetivos especiacuteficos
ndash Determinar el rol estadiacutesticas relevantes y los portales web de las universidades pertenecientes al consejo de rectores
ndash Particularizar los conceptos de usabilidad al contexto de los portales web de estas universidades
ndash Analizar los meacutetodos de evaluacioacuten de usabilidad
ndash Aplicar los meacutetodos de evaluacioacuten de usabilidad a los portales web de estas universidades de acuerdo a una metodologiacutea de trabajo
ndash Comparar resultados obtenidos
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Estudio descriptivo
bull Describir situaciones o eventos
bull Los estudios descriptivos buscan especificar las propiedades importantes de personas grupos comunidades o cualquier otro fenoacutemeno que sea sometido a anaacutelisis (Dankhe 1986)
bull Se selecciona una serie de cuestiones y se mide cada una de ellas independientemente para asiacute describir lo que se investiga
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Etapas
bull Formulacioacuten de la investigacioacuten
bull Recoleccioacuten de informacioacuten
bull Evaluar y aplicar informacioacuten
bull Informar resultados
Definicioacuten del Problema
bull Metodologiacutea de trabajo
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten
bull Solucioacuten Propuesta
ndash Aplicar un meacutetodo de Inspeccioacuten
bull Checklist de evaluacioacuten heuriacutestica
ndash Aplicar meacutetodos de pruebas
bull Interaccioacuten Constructiva
bull Teacutecnicas de Interrogacioacuten
bull Aplicacioacuten de los Meacutetodos
ndash Preparacioacuten
ndash Desarrollo
ndash Anaacutelisis
Disentildeo de la Solucioacuten
bull Meacutetodo de Inspeccioacuten Checklist de Usabilidad particularizado Sirius
ndash Es un sistema de evaluacioacuten de la usabilidad web que parte de la evaluacioacuten heuriacutestica pero que auacutena una serie de caracteriacutesticas que la diferencia de otras propuestas
bull Se aplica a cualquier tipo de sitio web y es aplicable durante todo el ciclo de vida del sitio
bull Entrega como resultado un valor porcentual del nivel de usabilidad del sitio evaluado un dato por tanto cuantitativo
Disentildeo de la Solucioacuten
bull El hecho que entregue un resultado porcentual significa que entrega un dato cuantitativo lo que permite
ndash Cuantificar y comparar la mejora de usabilidad de un portal en el tiempo
ndash Comparar la usabilidad de diferentes portales de un mismo sector
ndash Establecer clasificaciones y ranking en base a la usabilidad
bull Se basa en 10 heuriacutesticas de usabilidad
bull Se evaluacutean 83 problemas en total
Disentildeo de la Solucioacuten
Aspecto 1
bull Criterio 1bull Criterio n
Aspecto 2
bull Criterio 1bull Criterio n
hellip
bull Criterio 1bull Criterio n
Aspecto 10
bull Criterio 1bull Criterio n
Pautas de Evaluacioacuten
Disentildeo de la Solucioacuten
010
bull Grado de conformidad con el cumplimiento del criterio
NTS
bull No se cumple en todo el sitio (Valor 0)
NEP
bull No se cumple en los enlaces principales (valor 25)
NPP
bull No se cumple en la paacutegina principal (Valor 5)
NPI
bull No se cumple en alguna paacutegina interior (Valor 75)
Sbull Se cumple el criterio (Valor 10)
NA
bull Criterio no aplicable al sitio
Valores de Evaluacioacuten
Disentildeo de la Solucioacuten
Aspectos
bull Muy Alta 4bull Alta 3bull Media 2bull Baja 1
Criterio
s
bull Criacutetico 8bull Mayor 4bull Medio 2bull Moderado 1
Valores de Ponderacioacuten
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Estudio descriptivo
bull Describir situaciones o eventos
bull Los estudios descriptivos buscan especificar las propiedades importantes de personas grupos comunidades o cualquier otro fenoacutemeno que sea sometido a anaacutelisis (Dankhe 1986)
bull Se selecciona una serie de cuestiones y se mide cada una de ellas independientemente para asiacute describir lo que se investiga
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Etapas
bull Formulacioacuten de la investigacioacuten
bull Recoleccioacuten de informacioacuten
bull Evaluar y aplicar informacioacuten
bull Informar resultados
Definicioacuten del Problema
bull Metodologiacutea de trabajo
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten
bull Solucioacuten Propuesta
ndash Aplicar un meacutetodo de Inspeccioacuten
bull Checklist de evaluacioacuten heuriacutestica
ndash Aplicar meacutetodos de pruebas
bull Interaccioacuten Constructiva
bull Teacutecnicas de Interrogacioacuten
bull Aplicacioacuten de los Meacutetodos
ndash Preparacioacuten
ndash Desarrollo
ndash Anaacutelisis
Disentildeo de la Solucioacuten
bull Meacutetodo de Inspeccioacuten Checklist de Usabilidad particularizado Sirius
ndash Es un sistema de evaluacioacuten de la usabilidad web que parte de la evaluacioacuten heuriacutestica pero que auacutena una serie de caracteriacutesticas que la diferencia de otras propuestas
bull Se aplica a cualquier tipo de sitio web y es aplicable durante todo el ciclo de vida del sitio
bull Entrega como resultado un valor porcentual del nivel de usabilidad del sitio evaluado un dato por tanto cuantitativo
Disentildeo de la Solucioacuten
bull El hecho que entregue un resultado porcentual significa que entrega un dato cuantitativo lo que permite
ndash Cuantificar y comparar la mejora de usabilidad de un portal en el tiempo
ndash Comparar la usabilidad de diferentes portales de un mismo sector
ndash Establecer clasificaciones y ranking en base a la usabilidad
bull Se basa en 10 heuriacutesticas de usabilidad
bull Se evaluacutean 83 problemas en total
Disentildeo de la Solucioacuten
Aspecto 1
bull Criterio 1bull Criterio n
Aspecto 2
bull Criterio 1bull Criterio n
hellip
bull Criterio 1bull Criterio n
Aspecto 10
bull Criterio 1bull Criterio n
Pautas de Evaluacioacuten
Disentildeo de la Solucioacuten
010
bull Grado de conformidad con el cumplimiento del criterio
NTS
bull No se cumple en todo el sitio (Valor 0)
NEP
bull No se cumple en los enlaces principales (valor 25)
NPP
bull No se cumple en la paacutegina principal (Valor 5)
NPI
bull No se cumple en alguna paacutegina interior (Valor 75)
Sbull Se cumple el criterio (Valor 10)
NA
bull Criterio no aplicable al sitio
Valores de Evaluacioacuten
Disentildeo de la Solucioacuten
Aspectos
bull Muy Alta 4bull Alta 3bull Media 2bull Baja 1
Criterio
s
bull Criacutetico 8bull Mayor 4bull Medio 2bull Moderado 1
Valores de Ponderacioacuten
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Definicioacuten del Problema
bull Metodologiacutea de investigacioacuten
ndash Etapas
bull Formulacioacuten de la investigacioacuten
bull Recoleccioacuten de informacioacuten
bull Evaluar y aplicar informacioacuten
bull Informar resultados
Definicioacuten del Problema
bull Metodologiacutea de trabajo
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten
bull Solucioacuten Propuesta
ndash Aplicar un meacutetodo de Inspeccioacuten
bull Checklist de evaluacioacuten heuriacutestica
ndash Aplicar meacutetodos de pruebas
bull Interaccioacuten Constructiva
bull Teacutecnicas de Interrogacioacuten
bull Aplicacioacuten de los Meacutetodos
ndash Preparacioacuten
ndash Desarrollo
ndash Anaacutelisis
Disentildeo de la Solucioacuten
bull Meacutetodo de Inspeccioacuten Checklist de Usabilidad particularizado Sirius
ndash Es un sistema de evaluacioacuten de la usabilidad web que parte de la evaluacioacuten heuriacutestica pero que auacutena una serie de caracteriacutesticas que la diferencia de otras propuestas
bull Se aplica a cualquier tipo de sitio web y es aplicable durante todo el ciclo de vida del sitio
bull Entrega como resultado un valor porcentual del nivel de usabilidad del sitio evaluado un dato por tanto cuantitativo
Disentildeo de la Solucioacuten
bull El hecho que entregue un resultado porcentual significa que entrega un dato cuantitativo lo que permite
ndash Cuantificar y comparar la mejora de usabilidad de un portal en el tiempo
ndash Comparar la usabilidad de diferentes portales de un mismo sector
ndash Establecer clasificaciones y ranking en base a la usabilidad
bull Se basa en 10 heuriacutesticas de usabilidad
bull Se evaluacutean 83 problemas en total
Disentildeo de la Solucioacuten
Aspecto 1
bull Criterio 1bull Criterio n
Aspecto 2
bull Criterio 1bull Criterio n
hellip
bull Criterio 1bull Criterio n
Aspecto 10
bull Criterio 1bull Criterio n
Pautas de Evaluacioacuten
Disentildeo de la Solucioacuten
010
bull Grado de conformidad con el cumplimiento del criterio
NTS
bull No se cumple en todo el sitio (Valor 0)
NEP
bull No se cumple en los enlaces principales (valor 25)
NPP
bull No se cumple en la paacutegina principal (Valor 5)
NPI
bull No se cumple en alguna paacutegina interior (Valor 75)
Sbull Se cumple el criterio (Valor 10)
NA
bull Criterio no aplicable al sitio
Valores de Evaluacioacuten
Disentildeo de la Solucioacuten
Aspectos
bull Muy Alta 4bull Alta 3bull Media 2bull Baja 1
Criterio
s
bull Criacutetico 8bull Mayor 4bull Medio 2bull Moderado 1
Valores de Ponderacioacuten
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Definicioacuten del Problema
bull Metodologiacutea de trabajo
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten
bull Solucioacuten Propuesta
ndash Aplicar un meacutetodo de Inspeccioacuten
bull Checklist de evaluacioacuten heuriacutestica
ndash Aplicar meacutetodos de pruebas
bull Interaccioacuten Constructiva
bull Teacutecnicas de Interrogacioacuten
bull Aplicacioacuten de los Meacutetodos
ndash Preparacioacuten
ndash Desarrollo
ndash Anaacutelisis
Disentildeo de la Solucioacuten
bull Meacutetodo de Inspeccioacuten Checklist de Usabilidad particularizado Sirius
ndash Es un sistema de evaluacioacuten de la usabilidad web que parte de la evaluacioacuten heuriacutestica pero que auacutena una serie de caracteriacutesticas que la diferencia de otras propuestas
bull Se aplica a cualquier tipo de sitio web y es aplicable durante todo el ciclo de vida del sitio
bull Entrega como resultado un valor porcentual del nivel de usabilidad del sitio evaluado un dato por tanto cuantitativo
Disentildeo de la Solucioacuten
bull El hecho que entregue un resultado porcentual significa que entrega un dato cuantitativo lo que permite
ndash Cuantificar y comparar la mejora de usabilidad de un portal en el tiempo
ndash Comparar la usabilidad de diferentes portales de un mismo sector
ndash Establecer clasificaciones y ranking en base a la usabilidad
bull Se basa en 10 heuriacutesticas de usabilidad
bull Se evaluacutean 83 problemas en total
Disentildeo de la Solucioacuten
Aspecto 1
bull Criterio 1bull Criterio n
Aspecto 2
bull Criterio 1bull Criterio n
hellip
bull Criterio 1bull Criterio n
Aspecto 10
bull Criterio 1bull Criterio n
Pautas de Evaluacioacuten
Disentildeo de la Solucioacuten
010
bull Grado de conformidad con el cumplimiento del criterio
NTS
bull No se cumple en todo el sitio (Valor 0)
NEP
bull No se cumple en los enlaces principales (valor 25)
NPP
bull No se cumple en la paacutegina principal (Valor 5)
NPI
bull No se cumple en alguna paacutegina interior (Valor 75)
Sbull Se cumple el criterio (Valor 10)
NA
bull Criterio no aplicable al sitio
Valores de Evaluacioacuten
Disentildeo de la Solucioacuten
Aspectos
bull Muy Alta 4bull Alta 3bull Media 2bull Baja 1
Criterio
s
bull Criacutetico 8bull Mayor 4bull Medio 2bull Moderado 1
Valores de Ponderacioacuten
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten
bull Solucioacuten Propuesta
ndash Aplicar un meacutetodo de Inspeccioacuten
bull Checklist de evaluacioacuten heuriacutestica
ndash Aplicar meacutetodos de pruebas
bull Interaccioacuten Constructiva
bull Teacutecnicas de Interrogacioacuten
bull Aplicacioacuten de los Meacutetodos
ndash Preparacioacuten
ndash Desarrollo
ndash Anaacutelisis
Disentildeo de la Solucioacuten
bull Meacutetodo de Inspeccioacuten Checklist de Usabilidad particularizado Sirius
ndash Es un sistema de evaluacioacuten de la usabilidad web que parte de la evaluacioacuten heuriacutestica pero que auacutena una serie de caracteriacutesticas que la diferencia de otras propuestas
bull Se aplica a cualquier tipo de sitio web y es aplicable durante todo el ciclo de vida del sitio
bull Entrega como resultado un valor porcentual del nivel de usabilidad del sitio evaluado un dato por tanto cuantitativo
Disentildeo de la Solucioacuten
bull El hecho que entregue un resultado porcentual significa que entrega un dato cuantitativo lo que permite
ndash Cuantificar y comparar la mejora de usabilidad de un portal en el tiempo
ndash Comparar la usabilidad de diferentes portales de un mismo sector
ndash Establecer clasificaciones y ranking en base a la usabilidad
bull Se basa en 10 heuriacutesticas de usabilidad
bull Se evaluacutean 83 problemas en total
Disentildeo de la Solucioacuten
Aspecto 1
bull Criterio 1bull Criterio n
Aspecto 2
bull Criterio 1bull Criterio n
hellip
bull Criterio 1bull Criterio n
Aspecto 10
bull Criterio 1bull Criterio n
Pautas de Evaluacioacuten
Disentildeo de la Solucioacuten
010
bull Grado de conformidad con el cumplimiento del criterio
NTS
bull No se cumple en todo el sitio (Valor 0)
NEP
bull No se cumple en los enlaces principales (valor 25)
NPP
bull No se cumple en la paacutegina principal (Valor 5)
NPI
bull No se cumple en alguna paacutegina interior (Valor 75)
Sbull Se cumple el criterio (Valor 10)
NA
bull Criterio no aplicable al sitio
Valores de Evaluacioacuten
Disentildeo de la Solucioacuten
Aspectos
bull Muy Alta 4bull Alta 3bull Media 2bull Baja 1
Criterio
s
bull Criacutetico 8bull Mayor 4bull Medio 2bull Moderado 1
Valores de Ponderacioacuten
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Disentildeo de la Solucioacuten
bull Solucioacuten Propuesta
ndash Aplicar un meacutetodo de Inspeccioacuten
bull Checklist de evaluacioacuten heuriacutestica
ndash Aplicar meacutetodos de pruebas
bull Interaccioacuten Constructiva
bull Teacutecnicas de Interrogacioacuten
bull Aplicacioacuten de los Meacutetodos
ndash Preparacioacuten
ndash Desarrollo
ndash Anaacutelisis
Disentildeo de la Solucioacuten
bull Meacutetodo de Inspeccioacuten Checklist de Usabilidad particularizado Sirius
ndash Es un sistema de evaluacioacuten de la usabilidad web que parte de la evaluacioacuten heuriacutestica pero que auacutena una serie de caracteriacutesticas que la diferencia de otras propuestas
bull Se aplica a cualquier tipo de sitio web y es aplicable durante todo el ciclo de vida del sitio
bull Entrega como resultado un valor porcentual del nivel de usabilidad del sitio evaluado un dato por tanto cuantitativo
Disentildeo de la Solucioacuten
bull El hecho que entregue un resultado porcentual significa que entrega un dato cuantitativo lo que permite
ndash Cuantificar y comparar la mejora de usabilidad de un portal en el tiempo
ndash Comparar la usabilidad de diferentes portales de un mismo sector
ndash Establecer clasificaciones y ranking en base a la usabilidad
bull Se basa en 10 heuriacutesticas de usabilidad
bull Se evaluacutean 83 problemas en total
Disentildeo de la Solucioacuten
Aspecto 1
bull Criterio 1bull Criterio n
Aspecto 2
bull Criterio 1bull Criterio n
hellip
bull Criterio 1bull Criterio n
Aspecto 10
bull Criterio 1bull Criterio n
Pautas de Evaluacioacuten
Disentildeo de la Solucioacuten
010
bull Grado de conformidad con el cumplimiento del criterio
NTS
bull No se cumple en todo el sitio (Valor 0)
NEP
bull No se cumple en los enlaces principales (valor 25)
NPP
bull No se cumple en la paacutegina principal (Valor 5)
NPI
bull No se cumple en alguna paacutegina interior (Valor 75)
Sbull Se cumple el criterio (Valor 10)
NA
bull Criterio no aplicable al sitio
Valores de Evaluacioacuten
Disentildeo de la Solucioacuten
Aspectos
bull Muy Alta 4bull Alta 3bull Media 2bull Baja 1
Criterio
s
bull Criacutetico 8bull Mayor 4bull Medio 2bull Moderado 1
Valores de Ponderacioacuten
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Disentildeo de la Solucioacuten
bull Meacutetodo de Inspeccioacuten Checklist de Usabilidad particularizado Sirius
ndash Es un sistema de evaluacioacuten de la usabilidad web que parte de la evaluacioacuten heuriacutestica pero que auacutena una serie de caracteriacutesticas que la diferencia de otras propuestas
bull Se aplica a cualquier tipo de sitio web y es aplicable durante todo el ciclo de vida del sitio
bull Entrega como resultado un valor porcentual del nivel de usabilidad del sitio evaluado un dato por tanto cuantitativo
Disentildeo de la Solucioacuten
bull El hecho que entregue un resultado porcentual significa que entrega un dato cuantitativo lo que permite
ndash Cuantificar y comparar la mejora de usabilidad de un portal en el tiempo
ndash Comparar la usabilidad de diferentes portales de un mismo sector
ndash Establecer clasificaciones y ranking en base a la usabilidad
bull Se basa en 10 heuriacutesticas de usabilidad
bull Se evaluacutean 83 problemas en total
Disentildeo de la Solucioacuten
Aspecto 1
bull Criterio 1bull Criterio n
Aspecto 2
bull Criterio 1bull Criterio n
hellip
bull Criterio 1bull Criterio n
Aspecto 10
bull Criterio 1bull Criterio n
Pautas de Evaluacioacuten
Disentildeo de la Solucioacuten
010
bull Grado de conformidad con el cumplimiento del criterio
NTS
bull No se cumple en todo el sitio (Valor 0)
NEP
bull No se cumple en los enlaces principales (valor 25)
NPP
bull No se cumple en la paacutegina principal (Valor 5)
NPI
bull No se cumple en alguna paacutegina interior (Valor 75)
Sbull Se cumple el criterio (Valor 10)
NA
bull Criterio no aplicable al sitio
Valores de Evaluacioacuten
Disentildeo de la Solucioacuten
Aspectos
bull Muy Alta 4bull Alta 3bull Media 2bull Baja 1
Criterio
s
bull Criacutetico 8bull Mayor 4bull Medio 2bull Moderado 1
Valores de Ponderacioacuten
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Disentildeo de la Solucioacuten
bull El hecho que entregue un resultado porcentual significa que entrega un dato cuantitativo lo que permite
ndash Cuantificar y comparar la mejora de usabilidad de un portal en el tiempo
ndash Comparar la usabilidad de diferentes portales de un mismo sector
ndash Establecer clasificaciones y ranking en base a la usabilidad
bull Se basa en 10 heuriacutesticas de usabilidad
bull Se evaluacutean 83 problemas en total
Disentildeo de la Solucioacuten
Aspecto 1
bull Criterio 1bull Criterio n
Aspecto 2
bull Criterio 1bull Criterio n
hellip
bull Criterio 1bull Criterio n
Aspecto 10
bull Criterio 1bull Criterio n
Pautas de Evaluacioacuten
Disentildeo de la Solucioacuten
010
bull Grado de conformidad con el cumplimiento del criterio
NTS
bull No se cumple en todo el sitio (Valor 0)
NEP
bull No se cumple en los enlaces principales (valor 25)
NPP
bull No se cumple en la paacutegina principal (Valor 5)
NPI
bull No se cumple en alguna paacutegina interior (Valor 75)
Sbull Se cumple el criterio (Valor 10)
NA
bull Criterio no aplicable al sitio
Valores de Evaluacioacuten
Disentildeo de la Solucioacuten
Aspectos
bull Muy Alta 4bull Alta 3bull Media 2bull Baja 1
Criterio
s
bull Criacutetico 8bull Mayor 4bull Medio 2bull Moderado 1
Valores de Ponderacioacuten
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Disentildeo de la Solucioacuten
Aspecto 1
bull Criterio 1bull Criterio n
Aspecto 2
bull Criterio 1bull Criterio n
hellip
bull Criterio 1bull Criterio n
Aspecto 10
bull Criterio 1bull Criterio n
Pautas de Evaluacioacuten
Disentildeo de la Solucioacuten
010
bull Grado de conformidad con el cumplimiento del criterio
NTS
bull No se cumple en todo el sitio (Valor 0)
NEP
bull No se cumple en los enlaces principales (valor 25)
NPP
bull No se cumple en la paacutegina principal (Valor 5)
NPI
bull No se cumple en alguna paacutegina interior (Valor 75)
Sbull Se cumple el criterio (Valor 10)
NA
bull Criterio no aplicable al sitio
Valores de Evaluacioacuten
Disentildeo de la Solucioacuten
Aspectos
bull Muy Alta 4bull Alta 3bull Media 2bull Baja 1
Criterio
s
bull Criacutetico 8bull Mayor 4bull Medio 2bull Moderado 1
Valores de Ponderacioacuten
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Disentildeo de la Solucioacuten
010
bull Grado de conformidad con el cumplimiento del criterio
NTS
bull No se cumple en todo el sitio (Valor 0)
NEP
bull No se cumple en los enlaces principales (valor 25)
NPP
bull No se cumple en la paacutegina principal (Valor 5)
NPI
bull No se cumple en alguna paacutegina interior (Valor 75)
Sbull Se cumple el criterio (Valor 10)
NA
bull Criterio no aplicable al sitio
Valores de Evaluacioacuten
Disentildeo de la Solucioacuten
Aspectos
bull Muy Alta 4bull Alta 3bull Media 2bull Baja 1
Criterio
s
bull Criacutetico 8bull Mayor 4bull Medio 2bull Moderado 1
Valores de Ponderacioacuten
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Disentildeo de la Solucioacuten
Aspectos
bull Muy Alta 4bull Alta 3bull Media 2bull Baja 1
Criterio
s
bull Criacutetico 8bull Mayor 4bull Medio 2bull Moderado 1
Valores de Ponderacioacuten
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Interaccioacuten Constructiva (1)
ndash Acuerdo de confidencialidad
ndash Interaccioacuten entre dos personas que intercambian informacioacuten a viva voz de acuerdo a una lista de tareas a realizar
ndash Se almacena en audio yo video
ndash Se genera un documento que lista los problemas encontrados
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Disentildeo de la Solucioacuten
>
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Disentildeo de la Solucioacuten
bull Meacutetodo de Prueba Teacutecnicas de Interrogacioacuten (2)
bull Acuerdo de confidencialidad
bull Problemas de relevancia critica y mayor del checklist de evaluacioacuten heuriacutestica son evaluados o ponderados
bull Se genera un documento que lista los problemas antes descritos y son evaluados de 0 a 4
ndash Notas miacutenimas corresponden al no cumplimiento o calificacioacuten negativa Notas maacuteximas corresponden al cumplimiento o calificacioacuten positiva
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Disentildeo de la Solucioacuten
Meacutetrica de Evaluacioacuten
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Disentildeo de la Evaluacioacuten
bull Para responder a las preguntas de investigacioacuten
bull iquestQueacute problemas de usabilidad son los maacutes frecuentes
ndash Checklist de Usabilidad con las ponderaciones de cada criterio de usabilidad (o problema) que establece si se cumplen o no yo en que grado se cumplen
ndash Interaccioacuten constructiva con los problemas encontrados por los usuarios representativos y si los problemas son parecidos o iguales a los del Checklist
ndash Teacutecnicas de interrogacioacuten se derivan del Checklist de Usabilidad pero las ponderaciones soacutelo corresponden a problemas criacuteticos o mayores en clasificacioacuten de severidad
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Disentildeo de la Evaluacioacuten
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad hace una clasificacioacuten de los problemas potenciales de usabilidad
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad entrega directamente el grado o porcentaje de usabilidad de cada portal web evaluado
ndash Teacutecnicas de Interrogacioacuten entrega una ponderacioacuten de una escala de 0 a 4 que despueacutes se transforma a porcentaje
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad entrega los problemas con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
ndash Teacutecnicas de interrogacioacuten entrega los problemas criacuteticos o mayores con las maacutes bajas ponderaciones o el no cumplimiento definitivo de la heuriacutestica
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Disentildeo de la Evaluacioacuten
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad entrega un ranking de porcentaje o grado de usabilidad en forma directa
ndash Teacutecnicas de Interrogacioacuten entrega un ranking de ponderaciones de problemas criacuteticos o mayores que despueacutes son llevadas a porcentaje
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Ejecucioacuten de la Evaluacioacuten
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
>
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 6614 H9 Y H10 H2Universidad Catoacutelica del Norte 6369 H9 Y H10 H4Universidad de Antofagasta 5939 H9 Y H10 H8Universidad de Atacama 4888 H9 Y H10 H8Universidad de La Serena 6924 H10 H6Universidad de Tarapacaacute 7005 H9 Y H10 H5
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 7103 H10 H4Universidad Teacutecnica Federico Santa Mariacutea 7554 H10 H2Universidad de Valparaiacuteso 7920 H10 H6Universidad de Playa Ancha de Ciencias de la Educacioacuten 7624 H7 H4Universidad de Chile 7985 H10 H2Pontificia Universidad Catoacutelica de Chile 8013 H10 H2Universidad de Santiago de Chile 7808 H10 H8Universidad Metropolitana de Ciencias de la Educacioacuten 6875 H10 H2Universidad Tecnoloacutegica Metropolitana 7520 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 6393 H10 H2Universidad Austral de Chile 6069 H7 H5Universidad del Bio - Bio 6517 H10 H4Universidad de La Frontera 6883 H10 H4Universidad de Magallanes 6680 H10 H4Universidad de Talca 7346 H10 H2Universidad de Los Lagos 6424 H10 H4Universidad Catoacutelica del Maule 7732 H10 H6Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7561 H10 H5Universidad Catoacutelica de Temuco 7024 H10 H8
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
66146369
5939
4888
6924 7005
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
4000
6000
8000
10000
7103 7554 7920 7624 7985 8013 78086875
7520
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000
6393 6069 6517 6883 66807346
64247732 7561 7024
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Zona Norte Zona Central Zona Sur4000
5000
6000
7000
8000
9000
10000
6290
7600
6863
Promedios por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
Criterios Zona Norte Zona Central Zona SurHEURIacuteSTICO ASPECTOS GENERALES 635 722 700IDENTIDAD E INFORMACIOacuteN 883 941 877ESTRUCTURA Y NAVEGACIOacuteN 696 765 734ROTULADO 814 919 770LAYOUT DE LA PAacuteGINA 891 823 877ENTENDIBILIDAD Y FACILIDAD EN LA INTERACCIOacuteN 857 877 800CONTROL Y RETORALIMENTACIOacuteN 528 664 473ELEMENTOS MULTIMEDIA 858 883 840BUacuteSQUEDA 164 628 491AYUDA 000 114 354
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Ejecucioacuten de la evaluacioacuten
bull Checklist Usabilidad
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
C
ES
TR
UC
TU
RA
Y N
AV
EG
AC
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
IL
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000100200300400500600700800900
1000
635
883
696
814
891857
528
858
164
000
722
941
765
919
823877
664
883
628
114
700
877
734770
877
800
473
840
491
354
Zona Norte
Zona Central
Zona Sur
Pu
ntu
acio
nes
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
ndash Heuriacutesticas vulneradas correspondiente a la herramienta SIRIUS
bull Aspectos Generales
bull Estructura y Navegacioacuten
bull Layout de la Paacutegina
bull Entendibilidad y Facilidad en la Interaccioacuten
bull Elementos Multimedia
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
HEURIacuteSTICAS Ocurrencias UniversidadesAspectos Generales 28 20Identidad y Informacioacuten 0 0Estructura y Navegacioacuten 32 20Rotulado 0 0Layout de la Paacutegina 15 13Entendibilidad y Facilidad en la Interaccioacuten 12 11Control y Retroalimentacioacuten 0 0Elementos Multimedia 6 6Buacutesqueda 0 0Ayuda 0 0
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
0
10
20
3028
0
32
0
15 12
06
0 0
Ocurrencias
Ocurrencias
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Ejecucioacuten de la evaluacioacuten
bull Interaccioacuten Constructiva
Aspec
tos
Gener
ales
Iden
tidad
y In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
dibilid
ad y
Fac
ilidad
en
la In
tera
ccioacuten
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
05
10152025 20
0
20
0
13 11
0
6
0 0
Universidades
Universidades
Can
tid
ad
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Grado () Maacutes Vulnerada Menos VulneradaUniversidad Arturo Prat 7417 H9 Y H10 H1Universidad Catoacutelica del Norte 4833 H9 H8Universidad de Antofagasta 5750 H5 H8Universidad de Atacama 6917 H10 H7Universidad de La Serena 5917 H9 H3Universidad de Tarapacaacute 8417 H10 H1
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Centro Grado () Maacutes Vulnerada Menos VulneradaPontificia Universidad Catoacutelica de Valparaiacuteso 5167 H9 Y H10 H2Universidad Teacutecnica Federico Santa Mariacutea 6500 H10 H3Universidad de Valparaiacuteso 7500 H9 Y H10 H1Universidad de Playa Ancha de Ciencias de la Educacioacuten 7250 H10 H1Universidad de Chile 6250 H7 H2Pontificia Universidad Catoacutelica de Chile 6917 H10 H4Universidad de Santiago de Chile 6833 H10 H5Universidad Metropolitana de Ciencias de la Educacioacuten 6667 H2 H1Universidad Tecnoloacutegica Metropolitana 6583 H10 H2
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Sur Grado () Maacutes Vulnerada Menos VulneradaUniversidad de Concepcioacuten 8917 H7 H1Universidad Austral de Chile 5333 H10 H2Universidad del Bio - Bio 5167 H10 H2Universidad de La Frontera 6333 H10 H6Universidad de Magallanes 4667 H10 H8Universidad de Talca 5583 H10 H3Universidad de Los Lagos 7500 H10 H4Universidad Catoacutelica del Maule 7083 H10 H1Universidad Catoacutelica de la Santiacutesima Concepcioacuten 7917 H10 H1Universidad Catoacutelica de Temuco 7167 H8 H4
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Universidad Ar-turo Prat
Universidad Catoacutelica del
Norte
Universidad de Antofagasta
Universidad de Atacama
Universidad de La Serena
Universidad de Tarapacaacute
4000
5000
6000
7000
8000
9000
10000
7417
4833
5750
6917
5917
8417
Zona Norte - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
4000
6000
8000
10000
51676500
7500 72506250
6917 6833 6667 6583
Zona Centro - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Univer
sidad
de
Conce
pcioacuten
Univer
sidad
Aus
tral d
e Chil
e
Univer
sidad
del
Bio - B
io
Univer
sidad
de
La F
ront
era
Univer
sidad
de
Mag
allan
es
Univer
sidad
de
Talca
Univer
sidad
de
Los
Lago
s
Univer
sidad
Cat
oacutelica
del
Mau
le
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
Univer
sidad
Cat
oacutelica
de
Temuc
o4000
6000
8000
10000 8917
5333 51676333
46675583
7500 70837917
7167
Zona Sur - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
Zona Norte Zona Centro Zona Sur4000
5000
6000
7000
8000
9000
10000
6542 6630 6567
Promedio por Zonas - Grado ()
Grado ()
Po
rcen
taje
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Ejecucioacuten de la evaluacioacuten
bull Teacutecnicas de Interrogacioacuten
HE
UR
IacuteST
ICO
AS
PE
CT
OS
IDE
NT
IDA
D E
INF
OR
MA
CIOacute
N
ES
TR
UC
TU
RA
Y N
AV
EG
A
RO
TU
LAD
O
LAY
OU
T D
E LA
PAacute
GIN
A
EN
TE
ND
IBILID
AD
Y F
AC
ILI
CO
NT
RO
L Y R
ET
OR
ALIM
E
ELE
ME
NT
OS
MU
LTIM
ED
IA
BUacute
SQ
UE
DA
AY
UD
A
000
050
100
150
200
250
300
350
400
256
328 322 322
244
289261
311
144 139
322307 315
330
252278
233
304
222
089
293 290 290313
293 290
223
260 260
113
Zona NorteZona CentralZona Sur
Pu
ntu
acio
nes
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Anaacutelisis de Resultados
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
1- U
niver
sidad
de
Chile
2- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Chile
3- U
niver
sidad
de
Conce
pcioacuten
4- P
ontif
icia
Univer
sidad
Cat
oacutelica
de
Valpar
aiacuteso
5- U
niver
sidad
Teacutec
nica
Feder
ico S
anta
Mar
iacutea
6- U
niver
sidad
de
Santia
go d
e Chil
e
7- U
niver
sidad
Aus
tral d
e Chil
e
8- U
niver
sidad
Cat
oacutelica
del
Norte
9- U
niver
sidad
de
Valpar
aiacuteso
10-
Univer
sidad
de
Antof
agas
ta
11-
Univer
sidad
de
La S
eren
a
12-
Univer
sidad
del
Bio - B
io
13-
Univer
sidad
de
La F
ront
era
14-
Univer
sidad
de
Mag
allan
es
15-
Univer
sidad
de
Talca
16-
Univer
sidad
de
Ataca
ma
17-
Univer
sidad
de
Tarap
acaacute
18-
Univer
sidad
Artu
ro P
rat
19-
Univer
sidad
Met
ropo
litana
de
Ciencia
s de
la E
duca
cioacuten
20-
Univer
sidad
de
Playa
Ancha
de
Ciencia
s de
la E
duca
cioacuten
21-
Univer
sidad
Tec
noloacuteg
ica M
etro
polita
na
22-
Univer
sidad
de
Los
Lago
s
23-
Univer
sidad
Cat
oacutelica
del
Mau
le
24-
Univer
sidad
Cat
oacutelica
de
la San
tiacutesim
a Con
cepc
ioacuten
25-
Univer
sidad
Cat
oacutelica
de
Temuc
o400050006000700080009000
10000
Checklist Tec Interr
Po
rcen
taje
Coeficiente de Correlacioacuten = 01831
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Anaacutelisis de Resultados
bull Relacioacuten Checklist y Teacutecnicas de Interrogacioacuten
Aspec
tos
Gener
ales
Iden
tidad
e In
form
acioacuten
Estru
ctur
a y
Naveg
acioacuten
Rotula
do
Layo
ut d
e la
Paacutegina
Enten
debil
idad
y Fac
ilidad
en
la In
tera
ccion
Contro
l y R
etro
alim
enta
cioacuten
Elemen
tos
Mult
imed
ia
Buacutesqu
eda
Ayuda
000
200
400
600
800
1000
000050100150200250300350
Checklist Teacutecnicas de Interrogacioacuten
Pu
ntu
acio
nes
Coeficiente de Correlacioacuten = 08711
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Anaacutelisis de Resultados
bull Para responder a las preguntas de Investigacioacuten
ndash iquestQueacute problemas de usabilidad son los maacutes frecuentes
bull Checklist de Usabilidad
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
bull Interaccioacuten constructiva
ndash Con respecto a la correspondencia del checklist de evaluacioacuten de Usabilidad y esta prueba fueron Estructura y Navegacioacuten
bull Teacutecnicas de interrogacioacuten
ndash Establecioacute 10 criterios o potenciales problemas de Usabilidad
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Anaacutelisis de Resultados
bull iquestSon de la misma categoriacutea estos problemas en los diferentes portales web
ndash Checklist de Usabilidad
bull Aspectos Generalesbull Identidad e Informacioacutenbull Estructura y Navegacioacutenbull Rotuladobull Layout de la Paacuteginabull Entendibilidad y Facilidad en la Interaccioacutenbull Control y Retroalimentacioacutenbull Elementos Multimediabull Buacutesquedabull Ayuda
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Anaacutelisis de Resultados
bull iquestCuaacutel es el grado de usabilidad que estos poseen
ndash Checklist de Usabilidad y Teacutecnicas de Interrogacioacuten
bull Entregoacute directamente el grado o porcentaje de usabilidad de cada portal web evaluado
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Anaacutelisis de Resultados
bull iquestCuaacuteles son los principios mas vulnerados
ndash Checklist de Usabilidad
bull Buacutesqueda y Ayuda
ndash Teacutecnicas de Interrogacioacuten
bull Buacutesqueda y Ayuda
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Anaacutelisis de Resultados
bull iquestCuaacuteles son los portales que presentan un mayor grado de usabilidad
ndash Checklist de Usabilidad
bull Pontificia Universidad Catoacutelica de Chile (mayor)
bull Universidad de Talca (menor)
ndash Teacutecnicas de Interrogacioacuten
bull Universidad de Concepcioacuten (mayor)
bull Universidad de Magallanes (menor)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Conclusiones
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Conclusiones
bull Cada Universidad Chilena perteneciente al consejo de Rectores posee un portal institucional en el cual se exhibe importante informacioacuten relacionada con su respectiva comunidad universitaria
bull Antes de este estudio se desconociacutea el grado de usabilidad que poseiacutean estos portales puesto que no se disponiacutea de un estudio que proporcionara esta medida
bull Para determinar el grado o porcentaje de usabilidad de los veinticinco portales Web de las Universidades pertenecientes al consejo de rectores de Chile se aplicoacute una herramienta de evaluacioacuten de usabilidad SIRIUS que entregoacute dicho porcentaje el cual fue corroborado por medio de teacutecnicas de interrogacioacuten
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Conclusiones
bull La usabilidad progresivamente se ha transformado en un teacutermino comuacuten entre las tecnologiacuteas de informacioacuten y comunicacioacuten por lo tanto es importante que se encuentre presente en todas estas disciplinas o aacutereas del conocimiento
bull Cada meacutetodo de usabilidad entrega informacioacuten relevante y son clasificados en inspeccioacuten y prueba
bull Los meacutetodos de inspeccioacuten y prueba se complementan pero de ninguna manera se pueden remplazar entre siacute
bull Se sugiere que el orden de aplicacioacuten de meacutetodos sea primero los de inspeccioacuten y luego los de prueba
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Conclusiones
bull Las estadiacutesticas demostraron que a pesar de que no fueron los mismos usuarios que participaron en la evaluacioacuten se pudo apreciar una correlacioacuten entre meacutetodos
bull Si bien es cierto que este estudio no propone mejoras si presenta los elementos en los cuales se debe prestar maacutes atencioacuten y tambieacuten cuales presenta mayores fortalezas
bull Con respectos a los objetivos planteados en este trabajo se cumplieron todos y se dieron respuesta a todas las preguntas de investigacioacuten planteadas
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Conclusiones
bull Este estudio determinoacute que las Universidades de la zona central tuvieron mejores ponderaciones con respecto al grado de usabilidad que las de otras zona
bull Las heuriacutesticas maacutes vulneradas fueron Buacutesqueda y Ayuda lo que indica que se debe prestar maacutes atencioacuten a ellas y trabajar en ellas para mejorar los portales Web
bull Como aporte futuro este trabajo puede servir de base para otras investigaciones o para la creacioacuten de nuevas metodologiacuteas de evaluacioacuten
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Trabajos Futuros
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Trabajos Futuros
bull Incorporar maacutes usuarios para llevar a cabo el Checklist de evaluacioacuten de Usabilidad y asiacute poder hacer maacutes estadiacutesticas y obtener nuevos resultados
bull Llevar a cabo los experimentos formales como meacutetodo de prueba
bull Obtener estadiacutesticas de las acciones de los usuarios con los experimentos formales
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Referencias
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Referencias
1 ISO 9241-111998 Ergonomic requirements for office work with visual display terminals (vdts) ndash part 11 Guidance on usability International Organization for Standardization (November)4 1998
2 K Andrews Human computer interaction Journal of digital imaging the official journal of the Society for Computer Applications in Radiology 24(5)794ndash803 2011
3 K Andrews Human Computer Interaction IICM Graz University of Technology 20124 N Bevan What is usability In In Human Aspects in Computing Design and Use of Interactive Systems with
Terminals pages 651ndash655 Elsevier 19915 N Bevan Usability is quality of use In Katsuhiko Ogawa Yuichiro Anzai and Hirohiko Mori editors Symbiosis of
Human and Artifact Future Computing and Design for Human-Computer Interaction Proceedings of the Sixth International Conference on Human-Computer Interaction (HCI International rsquo95) volume 20 of Advances in Human FactorsErgonomics pages 349 ndash 354 Elsevier 1995
6 N Bevan Quality in use Meeting user needs for quality J Syst Softw 49(1)89ndash96 December 19997 T Brinck D Gergle and SDWood DesigningWeb Sites thatWork Usability for the Web The Morgan Kaufmann
Series in Interactive Technologies Morgan Kaufmann Publishers 20028 J Cato User-Centered Web Design Addison-Wesley 2001 9 B Chaparro Usability evaluation of a university portal website Technical report Wichita State University USA
200810 Consejo de Rectores de las Universidades Chilenas Presentacioacuten institucional del consejo de rectores Website
Ultima visita 15 de abril de 2012 httpwwwconsejoderectorescl11 Serrano E Accesibilidad vs usabilidad web evaluacioacuten y correlacioacuten Investigacioacuten Bibliotecoloacutegica Meacutexico
23(48)61ndash103 mayoagosto 200912 E Folmer and J Bosch Architecting for usability a survey Journal of Systems and Software 70(1-2)61ndash78 2004
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Referencias
13 WO Galitz The Essential Guide to User Interface Design An Introduction to GUI Design Principles and Techniques Wiley Desktop Editions John Wiley amp Sons 2007
14 J Garciacutea Los portales de Internet Fac Documentacioacuten Universidad de Murcia Espantildea 200115 ISOIEC ISOIEC 9126 Software engineering ndash Product quality ISOIEC 2001 16 ISOIEC 9241 International standards for hci and usability Website Ultima visita 15 de abril de 201217 httpwwwusabilitynetorgtoolsr_internationalhtm18 K Holzblatt J Whiteside J Bennett Usability engineering our experience and evolution In Handbook of Human-
Computer Interaction Helander M Elsevier 198819 N E Jacobsen M Hertzum and B E John The evaluator effect in usability tests In CHI rsquo98 CHI 98 conference
summary on Human factors in computing systems pages 255ndash256 New York NY USA 1998 ACM20 J Karat User-Centered Software Evaluation Methodologies volume 2 pages 689ndash704 Elsevier Science 199721 S Krug No me hagas pensar una aproximacioacuten a la usabilidad en la web Madrid [etc] Pearson Educacioacuten
200622 DJ Mayhew The Usability Engineering Lifecycle A Practitionerrsquos Handbook for User Interface Design The Morgan
Kaufmann Series in Interactive Technologies Morgan Kaufmann Publishers 199923 SH Mustafa and LF Al-Zouarsquobi Usability of the academic websites of jordanrsquos universities an evaluation study
Technical report Faculty of Information Technology Yarmouk University Irbid JORDAN 200824 J Nielsen Finding usability problems through heuristic evaluation In Proceedings of the SIGCHI conference on
Human factors in computing systems CHI rsquo92 pages 373ndash380 New York NY USA 1992 ACM25 J Nielsen Usability inspection methods chapter Heuristic evaluation pages 25ndash62 John Wiley amp Sons Inc New
York NY USA 199426 J Nielsen Usability 101 Introduction to usability Website Ultima visita 23 de enero de 2013 2003
httpwwwnngroupcomarticles
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Referencias
27 J Nielsen Ten Usability Heuristics Website Ultima visita 23 de enero de 2013 2005 httpwwwuseitcompapersheuristicheuristic listhtml
28 J Nielsen and R L Mack editors Usability inspection methods JohnWiley amp Sons Inc New York NY USA 199429 J Nielsen and R Molich Heuristic evaluation of user interfaces In Proc ACM CHIrsquo90 Conf (Seattle WA 1-5 April)
pages 249ndash25630 R Otaiza C Rusu and S Roncagliolo Evaluating the usability of transactional web sites In Proceedings of the
2010 Third International Conference on Advances in Computer-Human Interactions ACHI rsquo10 pages 32ndash37 Washington DC USA 2010 IEEE Computer Society
31 K Patterson and A Ellis Usability and meeting the needs of educational web site users Technical report Southern Cross University Australia 2004
32 K Pierce Web site usability report for harvard university Technical report Capella University USA 200533 J Preece and Y Rogers Human-computer interaction Ics Series Addison-Wesley Pub Co 199434 W Quesenbery What Does Usability Mean Looking Beyond rsquoEase of Use volume 48 pages 1ndash7 200135 C N Quinn Pragmatic evaluation lessons from usability 13th Annual Conference of the Australasian Society for
pages 1ndash6 199636 J Redish Are we really entering a post-usability era SIGDOC Asterisk J Comput Doc 19(1)18ndash24 March 199537 MB Rosson and JM Carroll Usability Engineering Scenario-Based Development of Human-Computer Interaction
Morgan Kaufmann Series in Interactive Technologies Academic Press 200238 C Rusu Human computer interaction 2009 Presentacioacuten Power Point del Curso39 HCI Magister en Ingenieriacutea Informaacutetica Pontificia Universidad Catoacutelica de Valparaiacuteso40 R Sampieri C Fernaacutendez and P Baptista Metodologiacutea de la Investigacioacuten McGraw Hill 199741 B Shneiderman Designing the User Interface Addison Wesley Longman third edition 1998
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Referencias
42 M Suarez Sirius Sistema de evaluacioacuten de usabilidad web orientado al usuario y basado en la determinacioacuten de tareas criticas Technical report Universidad de Oviedo Oviedo Espantildea 2011
43 B Woodward Evaluation methods in usability testing Website 1998 Ultima visita 15 de abril de 2012 httpwwwswtedu hd015326projectsBWOODWARDHTM
44 P Zaphiris and E Darin Website usability and content accessibility of the top usa universities Technical report Wayne State University USA 2001
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)
ldquoEstudio de Usabilidad en Portales Web de las Universidades
Pertenecientes al Consejo de Rectores de Chilerdquo
Viacutector Eduardo Boacuterquez Hermosilla
Presentacioacuten para optar al Tiacutetulo de Ingeniero en Informaacutetica Aplicada
Comisioacuten EvaluadoraProf Guiacutea Mg Roberto Muntildeoz SotoProf Informantes Dr Carlos Becerra Castro
Mg Reneacute Noumlel LoacutepezEnero 2013
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per
Contenido
Slide 3
Introduccioacuten
Slide 5
Marco Conceptual
Marco Conceptual (2)
Marco Conceptual (3)
Marco Conceptual (4)
Marco Conceptual (5)
Marco Conceptual (6)
Marco Conceptual (7)
Marco Conceptual (8)
Marco Conceptual (9)
Slide 15
Definicioacuten del Problema
Definicioacuten del Problema (2)
Definicioacuten del Problema (3)
Definicioacuten del Problema (4)
Definicioacuten del Problema (5)
Definicioacuten del Problema (6)
Definicioacuten del Problema (7)
Definicioacuten del Problema (8)
Slide 24
Disentildeo de la Solucioacuten
Disentildeo de la Solucioacuten (2)
Disentildeo de la Solucioacuten (3)
Disentildeo de la Solucioacuten (4)
Disentildeo de la Solucioacuten (5)
Disentildeo de la Solucioacuten (6)
Disentildeo de la Solucioacuten (7)
Disentildeo de la Solucioacuten (8)
Disentildeo de la Solucioacuten (9)
Disentildeo de la Solucioacuten (10)
Disentildeo de la Solucioacuten (11)
Disentildeo de la Solucioacuten (12)
Disentildeo de la Evaluacioacuten
Disentildeo de la Evaluacioacuten (2)
Disentildeo de la Evaluacioacuten (3)
Disentildeo de la Evaluacioacuten (4)
Slide 41
Ejecucioacuten de la evaluacioacuten
Ejecucioacuten de la evaluacioacuten (2)
Ejecucioacuten de la evaluacioacuten (3)
Ejecucioacuten de la evaluacioacuten (4)
Ejecucioacuten de la evaluacioacuten (5)
Ejecucioacuten de la evaluacioacuten (6)
Ejecucioacuten de la evaluacioacuten (7)
Ejecucioacuten de la evaluacioacuten (8)
Ejecucioacuten de la evaluacioacuten (9)
Ejecucioacuten de la evaluacioacuten (10)
Ejecucioacuten de la evaluacioacuten (11)
Ejecucioacuten de la evaluacioacuten (12)
Ejecucioacuten de la evaluacioacuten (13)
Ejecucioacuten de la evaluacioacuten (14)
Ejecucioacuten de la evaluacioacuten (15)
Ejecucioacuten de la evaluacioacuten (16)
Ejecucioacuten de la evaluacioacuten (17)
Ejecucioacuten de la evaluacioacuten (18)
Ejecucioacuten de la evaluacioacuten (19)
Ejecucioacuten de la evaluacioacuten (20)
Ejecucioacuten de la evaluacioacuten (21)
Ejecucioacuten de la evaluacioacuten (22)
Slide 64
Anaacutelisis de Resultados
Anaacutelisis de Resultados (2)
Anaacutelisis de Resultados (3)
Anaacutelisis de Resultados (4)
Anaacutelisis de Resultados (5)
Anaacutelisis de Resultados (6)
Anaacutelisis de Resultados (7)
Slide 72
Conclusiones
Conclusiones (2)
Conclusiones (3)
Conclusiones (4)
Slide 77
Trabajos Futuros
Slide 79
Referencias
Referencias (2)
Referencias (3)
Referencias (4)
Preguntas
ldquoEstudio de Usabilidad en Portales Web de las Universidades Per (2)