Test di usabilità con utenti della regione Emilia Romagna

Prefazione

Questa relazione è stato svolta per il corso di Progettazione di siti e portali web e laboratorio associato che fanno parte del corso di laurea di Tecnologie Web e Multimediali dell'Università degli studi di Udine.

Componenti del gruppo

Data di ultima modifica: 25 luglio 2006.

Indice

  1. Introduzione e Metodologia

  2. Utenti

  3. Compiti

  4. Risultati del Test

  5. Conclusioni

Introduzione e Metodoligia

Lo scopo del test è quello di determinare difetti delle interfacce utente e si differenzia dagli altri metodi poichè prevede l'impiego di utenti reali permettendo di osservare l'interazione di questi con l'interfaccia. Permette inoltre di individuare possibili elementi del sito in esame che ostacolano il corretto svolgimento dei compiti da parte di un utente medio. I dati forniti dal test non hanno validità statistica, ma forniscono utili indicazioni di tendenza da confrontare con le prestazioni riscontrate.

Metodologia e strumenti utilizzati

Il test è stato condotto utilizzando un computer fisso con le seguenti caratteristiche:

Le fasi seguite per il test sono le seguenti:

Briefing:
Viene spiegato all'utente lo scopo del test e le modalità con le quali verrà svolto; dopo aver risposto ad eventuali chiarimenti, l'utente viene invitato a compilare un questionario con alcuni suoi dati personali, ricordandogli che il test rimarrà comunque anonimo.
Esecuzione del test:
viene chiesto all'utente di svolgere i compiti decisi da noi in precedenza comunicandoglieli in forma verbale, uno alla volta. In questa fase si prende nota delle azioni dell'utente e si valuta l'esito della prova.
Debriefing:
Terminati tutti i compiti, l'utente è invitato a compilare un questionario post-test con domande legate al test appena concluso.

Questionario pre-test

  1. Sesso;
  2. Età;
  3. Professione;
  4. Utilizzo di internet;
    • meno di 1 ora alla settimana;
    • da 1 a 5 ore alla settimana;
    • da 5 a 10 ora alla settimana;
    • più di 10 ore alla settimana;
  5. conoscenze informatiche;
    • basse;
    • medie;
    • alte;
Torna alle fasi del test

Questionario post-test

  1. Nei compiti eseguiti durante il test hai incontrato delle difficoltà riguardo a cosa ti è stato chiesto?
  2. Ti sei fatto un'idea di come è organizzato il sito?
  3. Quale parte del sito o quale caratteristica e/o funzionalità ritieni soddisfacenti?
  4. Quale parte del sito e/o funzionalità avrebbe bisogno di miglioramenti?
  5. Pensi che i contenuti del sito siano attendibili? Li ritieni utili?
Torna alle fasi del test
Torna all'indice

Utenti

Criteri di scelta

Gli utenti vengono scelti in base ai fattori riscontati dal questionario post-test. Agli utenti, prima dello svolgimento del test, è stato spiegato che sarebbe stato possibile utilizzare il motore di ricerca interno al sito solo se si trovavano in difficoltà e non riuscivano a trovare le informazioni desiderate.Gli utenti sono stati informati che tutte le informazioni erano nel sito ed ogni qualvolta gli capitava di trovarsi in un link esterno erano invitati a tornare indietro in quanto era inutile proseguire per quella strada. E' stata inoltre data l'opportunitá agli utente di terminare il compito corrente qualora lo avessere ritenuto impossibile per la natura del sito o per l'architettura informativa del sito stesso.

Per ottenere risultati validi non è necessario ricorrere ad un elevato numero di utenti da sottoporre al test; sono sufficienti dai 3 agli 8 utenti. Per questo test sono stati impiegati 4 utenti a cui è stato fatto un questionario pre-test riportando i dati nella tabella di seguito:

Utente Sesso Età Professione Utilizzo di internet Conoscenze informatiche
A M 27 Enologo da 5 a 10 ore a settimana Medie
B M 24 Studente Universitario più di 10 ore a settimna Alte
C F 21 Impiegata da 1 a 5 ore a settimana Basse
D M 29 Impiegato più di 10 a settimana Alte
E M 23 Studente Universitario da 5 a 10 ore a settimana Medie
Torna all'indice

Compiti

Compito 1

Compito 2

Compito 3

Compito 4

Torna all'indice

Risultati del Test

Utente A

  1. Primo compito

    • Parte dalla home ed entra immediatamente nel menù a destra Il lavoro e le professioni sotto la voce Enti pubblici clicca sul link Assunzioni in Regione scorrendo la pagina giunge alla sezione Le norme e gli atti in vigore dove si può scaricare il Pdf con tutte le informazioni che si cercavo
    • Tempo impiegato per svolgere il compito 30 secondi

    Esito: superatosuperato

  2. Secondo compito

    • Parte dalla home e da uno sguardo genrale a tutta la pagina notando quasi subito il link Biblioteche nel menù Servizi online a destra però si accorge che l'informazione che cerca non è presente e torna nella home page.
    • Altro sguardo genrale e clicca sul link Enti locali in rete ma si accorge che è un link esterno e torna alla hometorna alla home.
    • Clicca nuovamente sul link Biblioteche a destra pensando di non aver visto bene prima, sceglie catalobo multibiblioteca ma trovandosi di nuovo in un link esterno torna nella home
    • Dopo 2 minuti e dieci secondi ritiene che il compito sia impossibile.

    Esito: non superatonon superato

  3. Terzo compito

    • Parte dalla Home e clicca sul link Vivere il tempo libero: cultura, turismo, sport, natura nel menù a sinstra tra i menù visibili sceglie Informazioni al turista, ma non trova quello che cerca e torna al livello precedente
    • Dopo un rapido sguqdo sceglie il link Eventi ma anche quì non trova le informazioni desiderate e torna nuovamente il livello superiore
    • Sceglie come ultima opzione Strutture ricettive però neanche quì trova nulla di interessante
    • Dopo un minuto e 58 secondi ritiene il compito impossibile in quanto secondo lui le informazioni richieste non sono reperibili nel sito della regione

    Esito: superatosuperato

  4. Quarto compito

    • Partendo dalla home nota il link Opportunità di lavoro in regione nel menù Servizi online a destra ma torna subito nella Home.
    • Clicca sul link Bollettino ufficiale nel menù la regione sempre a destra ma neanche quì trova niente e torna nuovamente alla pagina di partenza del compito
    • A questo punto trovandosi in difficolta decide di usare la funzione cerca nel sito, ma visto lo spropositato numero di risultati opta per un'altra soluzione e torna alla home
    • A questo punto nota nel menù a sinstra la sezione L´istruzione e la formazione nella lista di link che appare sceglie Borse di studio e scorrendo la pagina trova i moduli che carcava

    Esito: superatosuperato

Utente B

  1. Primo compito

    • Partendo dalla home nota subito il menù a sinstra Il lavoro e le professioni cliccando sul link Domanda e offerta di lavoro sotto la voce Lavoro, ma con uno sguardo veloce non trova le info desiderate e torna indietro
    • A questo punto nota il link Assunzioni in Regione sotto la voce Enti pubblici e scorrendo la pagina giunge alla sezione Le norme e gli atti in vigore dove si può scaricare il Pdf del regolamento
    • Tempo impiegato per svolgere il compito 1minuto e 28 secondi

    Esito: superatosuperato

  2. Secondo compito

    • Dalla home clicca sul link I servizi sociali e i diritti delle persone nel menù a sinstra, ma non trova niente di inteessante e torna nella home
    • Sempre dalla home clicca sul link Vivere il tempo libero: cultura, turismo, sport, natura nel menù a sinistra e poi su Biblioteche nella voce Cultura ma anche quì non trova niente e torna nuovamente alla home
    • Nota un link a sinistra Telefoni ed Indirizzi nel menù La regione e lo clicca quasi per caso
    • sempre per caso clicca sul link vai all'organigramma e quì si rende conto che forse ha trovato quello che carcava
    • clicca su biblioteche sceglie quella di suo interesse e giunge finalmente agli orari della struttura
    • Dopo 3 minuti e 30 secondi trova quello che cercava

    Esito: superatosuperato

  3. Terzo compito

    • Dalla home clicca nel menù a sinistra sul link Vivere il tempo libero: cultura, turismo, sport, natura e sotto la voce Turismo il link Informazioni al turista ma non trovando niente torna indietro
    • Sempre dal menù a sinistra clicca su Il mondo delle imprese am torna subito indietro
    • ritorna nella sezione Vivere il tempo libero: cultura, turismo, sport, natura e sempre sotto la voce Turismo clicca sul link Strutture ricettive ma notando che conduce ad un link esterno giunge alla conclusione che tali informazioni non sono reperibili sul sito della regione
    • Dopo 2 minuti e 40 secondi afferma che secondo lui il compito è impossibile

    Esito: superatosuperato

  4. Quarto compito

    • Partendo dalla Home si reca nel menù a sinistra Il lavoro e le professioni ma non trova niente e torna nella home
    • Nel menù Servizi online a destra clicca sul link Opportunità di lavoro in regione ma anche in questo caso torna indietro dopo un nulla di fatto
    • Nello stesso menù clicca sul link modulistica online ma torna quasi subo nella home
    • Rivolge per una seconda volta lo sguardo al menù di sinistra ed entra nella sezione I servizi sociali e i diritti delle persone e poi sul link Giovani, ma senza nessun risultato
    • Sempre dal menù a sinistra entra nella sezione L´istruzione e la formazione e sotto la voce diritto allo studio clicca sul link Borse di studio e scorrendo la pagina trova i moduli per la domanda
    • Dopo 5 minuti e 20 secondi raggiunge l'obbiettivo

    Esito: superatosuperato

Utente C

  1. Primo compito

    • Partendo dalla home dopo uno sgurdo generale nota nel menù a sinistra la sezione Il lavoro e le professioni
    • nella sezione prima citata clicca sul link Sistema informativo lavoro (SIL) sotto a voce lavoro senza trovare le informazioni desiderate
    • Dopo 1 minuto e 50 secondi ritiene che le informazioni non sono presenti nel sito ed afferma il compito impossibile.

    Esito: non superatonon superato

  2. Secondo compito

    • dopo uno sguardo generale alle varie sezioni della home decide di cliccare sul link Biblioteche nella Sezione servizi online ma torna quasi subito nella home
    • Sempre dalla home clicca sul link Enti ed istituti nella sezione La regione ma anche qu' non trova niente e torna indietro
    • Decide a questo punto di utilizzare il motore di ricerca, tra i risultati apre diversi link che conducono tutti a portali esterni decide pertanto di tornare nella home e trovare una strada alternativa
    • entra nella sezione L´istruzione e la formazione dal menù a sinistra ma neanche quì trova niente
    • Dopo 10 minuti l'utente non trova quello che carcava

    Esito: non superatonon superato

  3. Terzo compito

    • Dalla home clicca sul link Telefoni e Indirizzi nel menù La regione a destra e nella sezione di ricerca denominata Cerca strutture inserisce la parola albergo, la ricerca non da alcun risultato e l'utente decide di tornare nella home.
    • Nel menù a sinistra entra nella sezione Vivere il tempo libero: cultura, turismo, sport, natura e sotto la voce turismo apre prima il link Informazioi al turista e poi Strutture ricettive ma senza alcun risultato così decide di tornare nuovamente alla home
    • Clicca nuovamente sul link Telefoni e Indirizzi e poi su vai all'organigramma nella sezione strutture organizzative,clicca nuovamente su Autorità, Aziende, Enti e poi su APT Servizi - azienda di promozione turistica senza però nessun risultato
    • Dopo 6 minuti e 15 secondi afferma che secondo il suo punto di vista tale informazione non è reperibile sul sito

    Esito: superatosuperato

  4. Quarto compito

    • Partendo dalla home l'utente clicca sul link Modulistica online nella sezione Servizi online a destra ma dopo uno sguardo veloce torna alla home
    • sempre dalla home entra nella sezione L´istruzione e la formazione dal menù a sinistra e da quì clicca sul link Bandi e valutazione progetti sotto la voce Enti di formazione ma non trovando nulla di interessante torna al livello superiore
    • quì vede il link borse di studio e scorrendo la pagina giunge alla sezione Modulistica online
    • Dopo 3 minuti e 50 secondi completa il compito trovando i moduli per la domanda

    Esito: superatosuperato

Utente D

  1. Primo compito

    • Dalla home entra subito nella sezione Il lavoro e le professioni dal menù a sinistra, sotto la voce Enti pubblici clicca sul link Assunzioni in Regione e scorrendo la pagina giunge alle Regolamento in materia di accesso agli organici regionali
    • Pertanto dopo circa 30 secondi risolve il compito

    Esito: superatosuperato

  2. Secondo compito

    • Dalla home si reca nella sezione La comunicazione, l´informazione e la telematica dal menù a sinistra ma dopo un veloce sguardo torna alla home
    • Dal precedente menù entra nella sezione L´istruzione e la formazione ma anche in questo caso torna subito alla home
    • A questo punto rivisita le due sezioni precedenti con più attenzione ma non trovando nulla di interessante decide di utilizzare il motore di ricerca all'interno della home
    • Nella prima ricerca utilizza la parola "Biblioteca" ma visto il numero elevato di risultati decide di rieseguire la ricerca utilizzando come parole chiave"biblioteca suolo"
    • anche in questo caso la ricerca non da i risultati sperati e l'utente rassegnato dopo 5 minuti e 30 secondi afferma che secondo lui l'informazione non è presente nel sito

    Esito: non superatonon superato

  3. Terzo compito

    • Dalla Home entra nella sezione Il territorio e l´abitare dal solito menù a sinistra, ma dopo una lettura veloce a tutti i link disponibili torna alla home
    • Nota la sezione Vivere il tempo libero: cultura, turismo, sport, natura sempre nel menù a sinistra e vi accede
    • Quì sotto la voce Turismo clippa prima sul link Informazioni al turista ma vedendo che va su un link esterno giunge alla conlusione che tale informazione non è reperibile sul sito in questione
    • Dopo 3 minuti e 40 secondi afferma che il compito è impossibile

    Esito: superatosuperato

  4. Quarto compito

    • Dalla home va nella sezione Il mondo delle imprese dal menù a sinistra in quanto pensa che le borse di studi siano fornite dalle imprese, ma non trovando ciò che cerca cambia sezione
    • La sua attenzione, pensando ai tirocini, ricade sulla sezione Il lavoro e le professioni dal solito menù a sinistra, ma anche quì nulla di fatto
    • A questo punto entra nella sezione L´istruzione e la formazione sotto la voce Università clicca sul link Master Universitari, ma trona subito alla pagina precedente
    • Quì nota il link Borse di studio sotto la voce Diritto allo studio e scorrendo la pagina dopo 4 minuti e 20 secondi trova i moduli per la domanda

    Esito: superatosuperato

Utente E

  1. Primo compito

    • La prima cosa che fa l'utenteè ingrandire il font in quanto gli sembra troppo piccolo
    • Prova ad utilizzare il motore di ricerca interno al sito utilizzando la parola chiave "regolamento" ma visto l'elevato numero di risultati e dopo averne letti alcuni torna alla home
    • Nota nella sezione servizi Online il link Opportunità di lavoro in Regione, lo clicca e giunge al Regolamento che cercava
    • Il compito è stato risolto in 1 minuto e 40 secondi

    Esito: superatosuperato

  2. Secondo compito

    • Nella home da uno sguardo generale ai vari link fino a quando non decide di accedere alla sezione L´ambiente e la natura nel menù a sinistra, ma non trovando nulla di interessante torna subito alla home
    • Decide di utilizzare il motore di ricerca utilizzando le parole chiave "biblioteca", poi "biblioteca ambiente" ma nn trova niente di utile e torna alla home
    • Accede alla sezione Il territorio e l´abitare ma non trovando nulla opta nuovamente per il motore di ricerca.
    • Questa volta come parola chiave usa "direzione ambiente" e cliccando su uno dei risultati dopo 6 minuti e 14 secondi trova le informazioni desiderate.

    Esito: superatosuperato

  3. Terzo compito

    • Dalla home clicca sul link Informazioni, media e ricerchema fattogli notare che è esterno torna alla home
    • Decide di utilizzare il motore di ricerca utilizzando le parole chiave"alberghi bologna" ma tra i risultati non trova nulla di interessante, ripeta la ricerca con"b&b bologna" poi “ bologna hotel” ma non ottiene risultati soddisfacenti e torna alla home
    • Dalla home accede alla sezione Vivere il tempo libero: cultura, turismo, sport, natura dal menù a sinistra poi passa alla sezione Il territorio e l´abitare ma non trovando niente e decide di tornare alla home per dare un altro sguardo generale
    • Clicca sul link Telefoni e indirizzi ed in Ricerca strutture, cerca "alberghi bologna" ma nn trova nulla
    • Passano 7 minuti e l'utente non riesce a trovare quello che carcava

    Esito: non superatonon superato

  4. Quarto compito

    • L'utente dalla home accede subito nel link Modulistica on line nel menù Servizi online a destra ma nn trova nulla e rimane sorpreso in quanto era sicuro di trovare l'informazione lì, decide così di tornare alla home
    • Clicca sul link Enti e Istituti nel menù la regione ma torna indietro perchè non trova niente
    • Da uno sguardo alla lista di link a sinistra ma opta per l'utilizzo del motore di ricerca con parola chiave "borsa studio modulo" apre i primo link e trova un file pdf ma si rende conto che non è quello che carcava. Va sul secondo link ma non trova nulla e torna alla home
    • Clicca sul link Sala stampa nella parte centrale superiore della home ed inizia a leggere i vari link, trova un file .xls ma decide di non aprirlo,in quanto secondo lui non e’ quello che cerca.
    • Sempre in Sala stampa clicca sul link "Scuola - Formazione professionale - Università - Lavoro - Pari opportunità" ed accede ad una pagina con numerosi link sottolineati e vicini l'uno all'altro, ma non riuscendo a distinguerli bene torna nella home
    • Dopo 7 minuti l'utente non riesce a trovare quello che cercava

    Esito: non superatonon superato

Risposte degli utenti al questionario post-test

  1. Nei compiti eseguiti durante il test hai incontrato delle difficoltà riguardo a cosa ti è stato chiesto?

    • Utente A: Si, ho trovato molta difficoltà.
    • Utente B: No, nessuna difficoltà.
    • Utente C: Si, il primo compito non era chiara.
    • Utente D: Solo il secondo compito.
    • Utente E: Si nell'ultimo compito, non ho capito bene quale fosse la richiesta, la domanda era troppo generica.
  2. Ti sei fatto un'idea di come è organizzato il sito?

    • Utente A: Si, e mi sembra fatto abbastanza male.
    • Utente B: Si, è fatto male, troppi link dispersivi.
    • Utente C: Si.
    • Utente D:Si, abbastanza.
    • Utente E: G rosso modo no, nn ci ho navigato molto, forse con un ulteriore compito avrei capito un po’ di piu.
  3. Quale parte del sito o quale caratteristica e/o funzionalità ritieni soddisfacenti?

    • Utente A: Niente.
    • Utente B: L'unica cosa positiva sono le briciole di pane.
    • Utente C: Il numero elevato di link.
    • Utente D: L'organizzazione del menù a sinistra.
    • Utente E: I link della home sono visibili, le pagine sono strutturate bene. Forse bisogna ingrandire il carattere
  4. Quale parte del sito e/o funzionalità avrebbe bisogno di miglioramenti?

    • Utente A: Il menù blu a sinistra, mi rifiutavo di usarlo perchè non leggevo bene forse per la scrittura piccola.
    • Utente B: Cambierei tutto il sistema di navigazione.
    • Utente C: Informazioni troppo difficili da recuperare perchè troppo nascoste.
    • Utente D: Il menù a destra è inutile , personalmente preferisco un solo menù.
    • Utente E: I link sottolineati troppo vicini e in maiuscolo.
  5. Pensi che i contenuti del sito siano attendibili? Li ritieni utili?

    • Utente A: Si, il contenuto è attendibile. No perchè ci sono cose che non cercherei mai nel sito della regione.
    • Utente B: Si, il contenuto è attendibile. Li ritengo abbastanza utili.
    • Utente C: Si, il contenuto è attendibile. Si, li ritengo utili.
    • Utente D:Si. Si.
    • Utente E: Si, il sito della regione deve spaziare in tutti i campi.
Torna all'indice

Conclusioni

Riassumendo:

Utente Primo compito Secondo compito Terzo compito Quarto compito
A superato non superato superato superato
B superato superato superato superato
C non superato non superato superato superato
D superato non superato superato superato
E superato superato non superato non superato

Attraverso l'user testing abbiamo ottenuto risultati che sinceramente ci aspettavamo. Come già detto in precedenza il test mirava a problemi, riscontrati nelle altre valutazioni, che secondo il nostro parere influivano sull'accessibilità del portale . Come ci si attendeva gli utenti si sono lamentati dell'elevato numero di link presenti nel sito, fatta eccezione per l'utente C che al contrario lo ha evidenziato tra uno dei pregi. Altro grave problema riguarda l'utilizzo del motore di ricerca messo a disposizione degli utenti. I risultati prodotti sono innumerevoli e nella maggior parte dei casi non riconducibili a quello che si cercava. Gli stessi utenti, che ne hanno fatto uso durante il test, si sono lamentati del fatto che non era assolutamente di aiuto.Altri problemi minori fattici notare dagli utenti riguardano la necessità di ingrandire il carattere. Infine il secondo compito mirava a mettere in evidenza il fatto che alcune informazioni sono nascoste a causa del numero elevato di link con nomi simili che in alcuni casi disorientano l'utente. In particolare il compito riguardava la ricerca di un'informazione in una sezione che non era facilmente individuabile e come volevasi dimostrare solo 3 utenti su 4 non hanno concluso il compito, mentre gli altri 2 hanno ammesso che sono arrivati alla soluzione per puro caso. Per concludere riteniamo che il test sia un utile strumento di appoggio alle altre analisi anche se come già detto tende a confermare quello che già avevamo riscontarto nelle altre valutazioni.

Torna all'indice