User Testing

Sito analizzato: Università Ca' Foscari Venezia

Sito UniversitÓ Ca Foscari di Venezia

Introduzione

Lo user test è un metodo empirico, cioè basato sull'effettivo utilizzo del sito da parte di potenziali utenti, informale (prevede un controllo delle condizioni ambientali, in cui il test si svolge, da parte degli sperimentatori). E' estremamente efficace per validare il modello concettuale, confrontandolo col modello mentale che l'utente ha del sistema ed inoltre è di tipo esplorativo in quanto permette di esplorare le possibili barriere di usabilitá che un'interfaccia potrebbe erigere.

Metodologia

Durante la pianificazione del test si stendono dei criteri di screening che permettono di identificare le caratteristiche che ciascun partecipante deve possedere. Il test informale prevede che ciascuno degli utenti del campione scelto debba svolgere un certo numero di compiti, singolarmente e alla presenza di 1-2 sperimentatori. Viene normalmente utilizzato il protocollo think-aloud che ha lo scopo di esternalizzare i processi mentali dei partecipanti durante lo svolgimento dei compiti loro assegnati, facendogli raccontare ad alta voce i pensieri che gli passano per la mente. Attraverso questo meccanismo lo sperimentatore è in grado di conoscere cosa sta pensando l'utente, o sul motivo di una eventuale sua esitazione, gesto o espressione.

I passi quindi sono:

  • pianificazione: scelta dell'obiettivo da raggiungere, degli utenti da coinvolgere nel test e dei compiti che devono svolgere.
  • reclutamento: scelta degli utenti
  • briefing: fase in cui si spiegano all'utente lo scopo dell'esperimento e le modalità di svolgimento. Si sottopone inoltre l'utente a un questionario per condurre lo screening e capire se l'utente soddisfa le caratteristiche della categoria di utenti scelta per il test.
  • svolgimento del test: viene comunicato all'utente il compito da svolgere e viene chiesto loro di "pensare ad alta voce" mentre svolgono le varie azioni.
  • debriefing: fase in cui vengono raccolte le idee che l'utente si è fatto durante il test,come mai si è comportato in una certa maniera.

UTENTI

Utente1:

  • Età: 49
  • Sesso: F
  • Conoscenze informatiche: basso livello
  • Ore di utilizzo settimanali del computer: 1 ora
  • Per fare cosa: navigare
  • Avevi già visitato il sito dell'università di Venezia? No

Utente2:

  • Età: 16
  • Sesso: M
  • Conoscenze informatiche: medio livello
  • Ore di utilizzo settimanali del computer: 8 ora
  • Per fare cosa: giocare, navigare, chattare
  • Avevi già visitato il sito dell'università di Venezia? No

Utente3:

  • Età: 50
  • Sesso: M
  • Conoscenze informatiche: medio livello
  • Ore di utilizzo settimanali del computer: 7 ora
  • Per fare cosa: per lavoro e scrivere qualche articolo
  • Avevi già visitato il sito dell'università di Venezia? No

Utente4:

  • Età: 23
  • Sesso: M
  • Conoscenze informatiche: medio/alto livello
  • Ore di utilizzo settimanali del computer: 70 ora
  • Per fare cosa: studiare, progettazione, navigare, chattare, giocare
  • Avevi già visitato il sito dell'università di Venezia? No

Utente5:

  • Età: 50
  • Sesso: M
  • Conoscenze informatiche: basso livello
  • Ore di utilizzo settimanali del computer: 4 ora
  • Per fare cosa: leggere posta, quotidiani online
  • Avevi già visitato il sito dell'università di Venezia? No

COMPITI

Scenario1:

Ti sei appena diplomato e sei interessato ai corsi offerti dall'università di Venezia.

Obiettivo: cercare le facoltà presenti e i corsi svolti in ogni facoltà
Soluzione possibile: Home > didattica > lauree
Difficoltà: facile
Tempo previsto: 2minuti

Scenario2:

Ti devi immatricolare all'università Ca' Foscari e sei interessato a sapere l'importo delle tasse ed entro quando devi pagare la prima rata.

Obiettivo: cercare l'ammontare delle rate universitarie e i periodi entro cui pagarle.
Soluzione possibile: Home > Offerta Formativa > Immatricolazioni, iscrizioni, tasse > Tasse e contributi universitari - a.a. 2010/2011 > Lauree > Importi e scadenze
Difficoltà: media
Tempo previsto: 3minuti

Scenario3:

Stai cercando lavoro come docente universitario.

Obiettivo: cercare se ci sono dei bandi per personale docente-ricercatore universitario.
Soluzione possibile: Home > Ateneo > Bandi e concorsi > Personale Docente-Ricercatore universitario
Difficoltà: facile
Tempo previsto: 3minuti

Scenario4:

Sei uno studente iscritto alla facoltà di Scienze matematiche e vuoi sapere in che periodi vengono svolte le sessioni d'esame.

Obiettivo: cercare quando iniziano e finiscono le sessioni d'esami.
Soluzione possibile: Home > Facoltà > (entro nel link relativo alla facoltà di scienze matematiche) Home Page della Facoltà di Scienze Matematiche, Fisiche e Naturali > Informazioni generali > Calendario accademico 2010/2011
Difficoltà: difficile
Tempo previsto: 7minuti

Scenario5:

Sei uno studente universitario iscritto al primo anno e il prossimo anno vuoi andare a studiare all'estero.

Obiettivo: cercare informazioni utili riguardanti l'erasmus.
Soluzione possibile: Home > CaFoscari Internazionale > Studiare all'estero > Programma LLP/Erasmus
Difficoltà: media
Tempo previsto: 4 minuti

DETTAGLI RISULTATI

Utente1:

Compito1:

Comportamento: Va in offerta formativa, entra in percorso formativo universitario, scorre la pagina, si sofferma un po' e poi clicca sull'icona Guida ai corsi a.a.2010-2011. Si accorge che nel file pdf aperto ci sono solo le facoltà e non i corsi così torna in home, va su Facoltà, Offerta Formativa ed entra in Lauree.

Tempo: 2.30 minuti
Esito: superato

Compito2:

Comportamento: Entra in Servizi studenti/laureati, guarda i link presenti nella sezione,va su Segreteria studenti, trova il link Tasse e contributi, va poi su lauree, importi e scadenze.

Tempo: 1.30 minuti
Esito: superato

Compito3:

Comportamento: Entra in ricerca, va in valutazione triennale della ricerca e clicca sul link Bando di partecipazione e poi torna in home,guarda i link presenti in comunicazioni e in CaFoscari internazionale. All'interno di quest'ultimo vede il link Professori e ricercatori internazionali a Ca' Foscari e decide di entrare, va poi sul primo link presente e avendo capito di aver sbagliato torna nella home. Visita quasi tutti i link prima di trovare quello esatto, cioè Ateneo > Bandi e concorsi.

Tempo: 8 minuti
Esito: superato

Compito4:

Comportamento: Va subito su Offerta formativa, entra in Lauree e nella Facoltà di scienze matematiche, va in appelli esami e trova solo gli appelli relativi al mese di gennaio. Cerca poi attraverso il form ma non trova le notizie che cerca. Ritenta cercando in Servizi studenti.

Tempo: 7 minuti
Esito: non superato

Compito5:

Comportamento: va in Offerta formativa e clicca sul link Erasmus Veneziano. Torna in home ed entra in CaFoscari internazionale, trova il link Studiare all'estero e poi va in Programma LLP/Erasmus.

Tempo: 2 minuti
Esito: superato

Domande di debriefing:

Cosa ti è piaciuto del sito? Niente in particolare.

Cosa non ti è piaciuto? Si fa fatica a trovare le cose.

Cosa cambieresti del sito? Metterei link più chiari. Sono troppo dispersivi, infatti tocca girare tante voci per trovarne una.

Utente2:

Compito1:

Comportamento: guarda il menu, vede il link facoltà ma poi entra in Didattica e successivamente in Lauree.

Tempo: 2 minuti
Esito: superato

Compito2:

Comportamento: Guarda i link e poi entra in Fondazione Università Ca' Foscari e torna in home. Va poi in Offerta formativa, vede il link Immatricolazioni, iscrizioni, tasse, ci entra e va in tasse e contributi universitari, Lauree e infine Importi e scadenze.

Tempo: 2.30 minuti
Esito: superato

Compito3:

Comportamento: Entra in CaFoscari Internazionale e si ritrova in Informazioni per lavorare all'estero. Torna in Home, entra in Ateneo e clicca su Bandi e concorsi.

Tempo: 2 minuti
Esito: superato

Compito4:

Comportamento: Entra in Didattica, va su Facoltà di Scienze Matematiche e si ritrova immediatamente nel calendario Accademico.

Tempo: 1.30 minuti
Esito: superato

Compito5:

Comportamento: Entra in Servizi Studenti, trova il link Studiare all'estero e successivamente Programma.

Tempo: 1 minuti
Esito: superato

Domande di debriefing:

Cosa ti è piaciuto del sito? Nulla.

Cosa non ti è piaciuto? Il fatto che è disorganizzato.

Cosa cambieresti del sito? Metterei le cose più importanti in prima pagina, farei dei link più dettagliati e chiari.

Utente3:

Compito1:

Comportamento: va in Offerta formativa ed entra in Lauree.

Tempo: 30 secondi
Esito: superato

Compito2:

Comportamento: Va in Servizi studenti, Segreterie studenti, clicca Tasse e contributi universitari,Guida tasse e contributi e legge il file pdf relativo.

Tempo: 1.30 minuti
Esito: superato

Compito3:

Comportamento: Entra in Didattica e successivamente in Dottorati di ricerca e informazioni sul dottorato. All'interno trova la voce Concorso di ammissione e clicca su Bando di concorso parte generale. Torna quindi in home, guarda un po' tutti i link prima di entrare in Ateneo e trovare il link Bandi e concorsi.

Tempo: 5 minuti
Esito: superato

Compito4:

Comportamento: va nei Servizi per gli studenti, entra poi in segreterie studenti, va su iscrizione esami. Qua gli si presenta una pagina di login e così torna in home. Va alla voce Esami di stato sempre nel sottomenu Servizi studenti, e va sul calendario esami 2010. Torna di nuovo in home, entra nel sito della facoltà di interesse, guarda sia Offerta formativa che Informazioni generali. Entra quindi in quest'ultima voce ed entra nel Calendario accademico.

Tempo: 7 minuti
Esito: superato

Compito5:

Comportamento: Va in Servizi studenti e successivamente in Studiare all'estero e programma Erasmus.

Tempo: 30 secondi
Esito: superato

Domande di debriefing:

Cosa ti è piaciuto del sito? Ha tante informazioni.

Cosa non ti è piaciuto? E' un po' dispersivo ma non essendo studente universitario faccio più fatica a destreggiarmi.

Cosa cambieresti del sito? Secondo me va bene per uno studente perchè sa cosa cercare mentre io ho fatto difficoltà perchè non so i servizi che servono a uno studente.

Utente4:

Compito1:

Comportamento: va in Offerta formativa, entra su percorso foramtivo universitario, va su lauree.

Tempo: 44 secondi
Esito: superato

Compito2:

Comportamento: va su servizi studenti/laureati, va su modulistica, immatricolazione e su registrazione online, in fondo tasse e contributi universitari.

Tempo: 1.57 minuti
Esito: superato

Compito3:

Comportamento: dalla home va in ateneo e subito dopo in bandi e concorsi, clicca all'interno della voce personale docente e si trova nella sezione dei bandi relativa alle fasce del personale docente universitario.

Tempo: 1.58 minuti
Esito: superato

Compito4:

Comportamento: dalla home va su servizi studenti laureati, iscrizione agli esami, torna indietro alla home, va su didattica, liste iscritti appelli, clicca all'interno di scienze matematiche, clicca su avvia ricerca, torna indietro alla facoltà di economia, calendario accademico 2010/2011.

Tempo: 6.58 minuti
Esito: superato

Compito5:

Comportamento: dalla home, cerca informazioni dell'erasmus, va in servizi studenti laureati, programma erasmus.

Tempo: 40.4 secondi
Esito: superato

Domande di debriefing:

Cosa ti è piaciuto del sito? L'unica nota positiva dell'esito è la home, sul menù laterale sinistro scorrendo sopra con il mouse si visualizzano le varie sottovoci al centro della pagina.

Cosa non ti è piaciuto? Il calendario accademico è strutturato male e non si capisce niente. Il pulsante cerca è praticamente invisibile, quasi inutilizzabile.

Cosa cambieresti del sito? La grandezza dei caratteri(troppo piccola), il menù laterale è esageratamente grande e non si capisce che ci sono delle sotto voci. Il colore non è piacevole.

Utente5:

Compito1:

Comportamento: va in Offerta formativa, va su servizi di orientamento, torna indietro alla home, torna in percorso offerta formativa entra su percorso foramtivo universitario, va su lauree.

Tempo: 1.38 secondi
Esito: superato

Compito2:

Comportamento: va su cerca scrive tasse, legge i vari risultati, e sceglie il primo. Trova la pagina del riepilogo delle tasse.

Tempo: 1.0 minuti
Esito: superato

Compito3:

Comportamento: dalla home va in facoltà, torna alla home, entra in didattica, dottorati di ricerca, torna alla home va in ateneo e subito dopo in bandi e concorsi, e si trova nella sezione dei bandi relativa alle fasce del personale docente universitario.

Tempo: 2.08 minuti
Esito: superato

Compito4:

Comportamento: dalla home va nella sezione didattica, va su Facoltà di Scienze Matematiche e dopo una sensazione di smarrimento dice di aver trovato la pagina.

Tempo: 1.18 minuti
Esito: superato

Compito5:

Comportamento: dalla home, va prima in ateneo, poi in didattica, sempre dal menù laterale, poi in facoltà, apre la facoltà di scienze matematiche, offerta formativa, erasmus veneziano.

Tempo: 3.20 secondi
Esito: superato

Domande di debriefing:

Cosa ti è piaciuto del sito? Non molto il sito non è fatto molto bene le informazioni non sono di facile reperibilità.

Cosa non ti è piaciuto?Praticamente tutto, la struttura fatta molto male, i caratteri molto piccoli bisogna faticare per leggere, ed è molto dispersivo.

Cosa cambieresti del sito? Cercare di mettere le informazioni più importanti più visibili, cambiare la struttura del sito, se uno non sa cosa cercare e dove non la trova facilmente.

SOMMARIO RISULTATI

Compito 1 Compito 2 Compito 3 Compito 4 Compito 5
Utente 1 superato superato superato non superato superato
Utente 2 superato superato superato superato superato
Utente 3 superato superato superato superato superato
Utente 4 superato superato superato superato superato
Utente 5 superato superato superato superato superato

Quasi tutti gli utenti sono riusciti a svolgere tutti i compiti, anche se hanno trovato i link molto dispersivi.
Spesso si sono trovati a dover analizzare tante voci prima di addentrarsi in un link specifico e non sempre era quello giusto.
Alcune notizie sono riscritte in punti diversi, come ad esempio l' importo delle rate che è presente in almeno due link, uno dei quali apre un file pdf mentre l' altro contiente una descrizione testuale.
Tutti gli utenti hanno trovato difficoltà a cercare i periodi delle sessioni d'esame, e gli utenti che sono riusciti a trovare il calendario hanno fatto dei percorsi differenti, quindi ci sono più modi per arrivare alla stessa notizia.
Difficoltà anche nel trovare i bandi e concorsi disponibili.