User Testing eseguito sul sito del comune di Pordenone

Belfiore Katia
Chiabai Massimiliano
Duriavig Davide

Data stesura rapporto: 9-13 Ottobre 2006

Indice

Introduzione

Lo User Testing è un metodo di analisi che abbiamo utilizzato per determinare errori o difetti  di presentazione, di architettura o di navigazione, nel sito del comune di Pordenone. Esso consiste nel far svolgere determinati compiti a un gruppo di utenti, omogenei nelle loro caratteristiche, ed ha il pregio di riportare fatti e non valutazioni soggettive. Questi compiti sono stati presentati con degli scenari, in cui si potrebbero trovare dei possibili utenti del sito esaminato. Essi sono stati scelti per testare alcuni aspetti del sito, a nostro avviso dei difetti, che possono creare delle difficoltà nella navigazione.
Il test è stato eseguito utilizzando sempre lo stesso notebook, un collegamento wireless alla rete Internet e il browser Mozilla Firefox 1.5.0.7.
Come prima passo abbiamo eseguito un test pilota, con un utente di caratteristiche simili agli utenti che hanno poi partecipato allo UserTest effettivo. Questo è servito per correggere alcuni errori nella presentazione dei compiti e per valutare se l'ordine in cui li presentavamo era adeguato alle loro difficoltà.

Lo User Test è suddiviso in diverse fasi:

  1. Fase di briefing:

    come prima cosa abbiamo spiegato all'utente che il test aveva lo scopo di testare il sito e non l'utente. Poi abbiamo delineato quali domande poteva rivolgerci durante l'esecuzione e quali no. Gli abbiamo illustrato in cosa consiste la tecnica del "think aloud" (protocollo che prevede che l'utente racconti a voce alta quello che pensa) e lo abbaimo invitato ad utilizzarla nello svolgimento dei compiti. Dopodichè, ad ogni utente, abbiamo somministrato delle domande per conoscerne l'età, il sesso, la professione, l'esperienza nell'ambito informatico, le ore settimanali di utilizzo di Internet, il motivo di questo utilizzo e se ha mai navigato sul sito del comune di Pordenone.

  2. Fase di svolgimento del test:

    ad ogni utente abbiamo presentato, in ordine di difficoltà crescente, i compiti da svolgere e gli abbiamo chiesto di portarli a termine utilizzando la tecnica think aloud. Come valutatori abbiamo osservato cosa faceva l'utente e uno di noi ha annotato le sue azioni, i suoi commenti ed atteggiamenti. Abbiamo risposto alle domande ritenute lecite e ne abbiamo formulate altre, sempre evitando di fornire indizi, per chiedere alcuni chiarimenti.

  3. Fase di debriefing:

    è stato somministrato all'utente un rapido questionario per conoscere ulteriori aspetti dello svolgimento del test, abbiamo risposto ad eventuali domande a cui prima non avevamo potuto rispondere e abbiamo spiegato il motivo della scelta di determinati compiti. Abbiamo ringraziato e salutato l'utente.

    Questionario debriefing:
    Quali aspetti del sito ritieni positivi e quali negativi?
    Cosa cambieresti o miglioreresti?
    Hai incontrato qualche difficoltà durante il test?

Inizio pagina

Compiti e Casi D'Uso

  1. Compito 1: Trovare le informazioni e gli aiuti sul sito

    Scopo: Testare se il link relativo all'informazioni del sito è visibile dagli utenti.
    Caso d'uso: E' la prima volta che accedi al sito del comune di Pordenone e vuoi conoscere le informazioni riguardanti il sito per aiutarti nella navigazione. Cerca le informazioni e gli aiuti.
    Difficoltà prevista: Bassa.
    Tempo previsto: 2 minuti.
    Punto di partenza: Home-Page.
    Punto di arrivo: Home » Info - Aiuto

  2. Compito 2: Trovare informazioni sulla carta d'identità elettronica

    Scopo: Trovare informazioni su quali operazioni compiere per ottenere la carta d'identità elettronica, se disponibile.
    Caso d'uso: Sei un cittadino del comune di Pordenone e dopo essere venuto a conoscenza della possibilità di poter ottenere la carta d'identità elettronica, vuoi sapere se il tuo comune offre questa possibilità e cosa devi fare per fartela rilasciare.
    Difficoltà prevista: Bassa.
    Tempo previsto: 5 minuti.
    Punto di partenza: Home-Page.
    Punto di arrivo: Home » Servizi Demografici » La Carta di Identità Elettronica » GUIDA AL RILASCIO DELLA C.I.E.

  3. Compito 3: Cercare il contatto dell'assessore all'istruzione

    Scopo: Ottenere un numero di telefono o un indirizzo email per contattare l'assessore all'istruzione.
    Caso d'uso: Sei uno studente del comune di Pordenone e da anni aspetti che il tuo comune organizzi qualche attività per gli studenti nel periodo estivo, ma fin'ora nessuna iniziativa. Vuoi contattare l'assessore alla formazione, cultura ed istruzione per richiedere l'istituzione di un centro estivo. Trova il suo contatto telefonico o l'indirizzo email.
    Difficoltà prevista: Bassa.
    Tempo previsto: 7 minuti.
    Punto di partenza: Home-Page.
    Punto di arrivo: Home » Comune » Giunta

  4. Compito 4: Trovare informazioni sulle limitazioni al traffico

    Scopo: Trovare per quali aree della città sono previste delle limitazioni al traffico.
    Caso d'uso: Sei un cittadino del comune di Pordenone e vuoi sapere a quali zone della città puoi accedere con la tua automobile e a quali no. Cerca la sezione relativa alle limitazioni del traffico e le indicazioni sulle targhe alterne, sulle vie percorribili e sugli orari per i giorni festivi e quelli feriali.
    Difficoltà prevista: Media.
    Tempo previsto: 8 minuti.
    Punto di partenza: Home-Page.
    Punto di arrivo: Home » Città e Territorio » Viabilità e trasporti » Limitazioni traffico per inquinamento dell'aria » Limitazioni traffico per inquinamento: fase A

  5. Compito 5: Trovare informazioni sulla raccolta differenziata

    Scopo: Capire se il comune adotta la politica della raccolta differenziata dei rifiuti e, se si, come la applica.
    Caso d'uso: Sei un cittadino del comune di Pordenone e vuoi sapere se si effettua la raccolta differenziata dei rifiuti e in che modalità.
    Difficoltà prevista: Media.
    Tempo previsto: 8 minuti.
    Punto di partenza: Home-Page.
    Punto di arrivo: Home » Città e territorio » Ambiente » Raccolta differenziata

  6. Compito 6: Cercare borse di formazione lavoro per i giovani

    Scopo: Ottenere informazioni su borse di lavoro offerte dal comune.
    Caso d'uso: Sei un adolescente che vive nel comune di Pordenone e stai cercando la tua prima occupazione, però dopo tanti colloqui non hai trovato un impiego. Cerca se il tuo comune offre delle borse di lavoro per gli adolescenti.
    Difficoltà previsto: Alta.
    Tempo massimo: 15 minuti.
    Punto di partenza: Home-Page.
    Punto di arrivo: Home » Comune » Strutture » Servizi Sociali » Minori e Giovani » Borse di Formazione Lavoro

Inizio pagina

Utenti

Gli utenti coinvolti nel test sono cinque e per ognuno abbiamo raccolto alcune informazioni personali.

  1. Utente 1

    Età: 23 anni
    Sesso: M
    Professione: studente universitario
    Livello conoscenze informatiche: principiante avanzato
    Ore di utilizzo di internet settimanali: 4-7 ore
    Motivo: posta elettronica, ricerca informazioni, download musica e film
    Hai mai navigato sul sito del comune di Pordenone? No

  2. Utente 2

    Età: 20 anni
    Sesso: M
    Professione: studente universitario
    Livello conoscenze informatiche: principiante avanzato
    Ore di utilizzo di internet settimanali: 8-15 ore
    Motivo: posta elettronica, ricerca informazioni, download musica e film, chat e giochi online
    Hai mai navigato sul sito del comune di Pordenone? No

  3. Utente 3

    Età: 18 anni
    Sesso: M
    Professione: studente
    Livello conoscenze informatiche: principiante avanzato
    Ore di utilizzo di internet settimanali: più di 15 ore
    Motivo: posta elettronica, ricerca informazioni, download musica e film, chat e gestione siti web
    Hai mai navigato sul sito del comune di Pordenone? No

  4. Utente 4

    Età: 22 anni
    Sesso: M
    Professione: studente universitario
    Livello conoscenze informatiche: competente
    Ore di utilizzo di internet settimanali: 8-15 ore
    Motivo: posta elettronica, download musica e film
    Hai mai navigato sul sito del comune di Pordenone? No

  5. Utente 5

    Età: 25 anni
    Sesso: M
    Professione: studente universitario
    Livello conoscenze informatiche: principiante avanzato
    Ore di utilizzo di internet settimanali:1-3 ore
    Motivo: ricerca informazioni
    Hai mai navigato sul sito del comune di Pordenone? No

Inizio pagina

Sommario

Questo test ci ha permesso di evidenziare alcuni difetti del sito analizzato, ma anche un aspetto decisamente positivo.
Quattro utenti su cinque non hanno completato con successo il compito numero tre, poichè hanno trovato il contatto di un assessore diverso da quello richiesto. Nel sito, infatti, è possibile trovare informazioni su diversi assessori, che si occupano dell'istruzione, ma non viene fatta una chiara distinzione dei loro compiti e soprattutto, non è indicato in modo esplicito qual è quello attualmente in carica. Accedendo alla sezione riguardante la Giunta Comunale è possibile consultare l'elenco degli assessori che la compongono, ma se, invece, si utilizza la funzione di ricerca si reperiscono informazioni su assessori che in realtà non fanno parte di tale Giunta.
Altro difetto che abbiamo potuto notare, tramite le reazioni degli utenti durante il test, è la costruzione della pagina "Città e Territorio". Questa riporta nel corpo centrale solo una frase e tutti i collegamenti alle sottosezioni vengono presentati solo in un menù a sinistra. Questa impaginazione ha disorientato due utenti, i quali si aspettavano di trovare qualche riferimento alle sottosezioni, raggiungibili da tale pagina, anche nel corpo della stessa.
pordenone_città
Il compito riguardante le informazioni relative al traffico limitato ha, invece, evidenziato una somiglianza eccessiva tra due link, che riguardano entrambi l'argomento ("Zona a Traffico Limitato (ZTL)" e "Limitazioni traffico per inquinamento dell'aria"). Questa somiglianza ha lasciato perplessi gli utenti che, per reperire le informazioni riguardanti le limitazioni del traffico, hanno dovuto consultare entrambe le pagine. Sarebbe stato meglio presentare queste informazioni in unica sezione.
La maggior parte degli utenti, inoltre, ha fatto notare che il sito ha il pregio di fornire molti contenuti, ma il menù presentato nella sua Home-page non è articolato in maniera adeguata. Alcuni di loro hanno suggerito di utilizzare dei sottomenù o dei menù a tendina, per indicare le pagine collegate ad ogni sezione. Questa permetterebbe di trovare più velocemente le informazioni d'interesse e di crearsi più facilmente una mappa mentale del sito.
L'elemento del sito più apprezzato dagli utenti è il form per la ricerca. Quattro utenti su cinque, infatti, hanno fatto notare che questa funziona è stata costruita al meglio, poichè fornisce risultati realmente attinenti alle parole chiave inserite, di conseguenza risulta molto utile nel reperimento dei dati. Per molti degli utenti si è dimostrata un ausilio essenziale per portare a termine i diversi compiti richiesti.

Inizio pagina

Risultati

Utente 1

Inizio pagina

Utente 2

Inizio pagina

Utente 3

Inizio pagina

Utente 4

Inizio pagina

Utente 5

Inizio pagina

Tabelle riassuntive

Compito 1

Utente Risultato Tempo esecuzione Tempo previsto Utilizzo del "cerca"
1 Successo 10 sec 2 minuti NO
2 Successo 50 sec 2 minuti NO
3 Successo 1 min e 38 sec 2 minuti NO
4 Successo 50 sec 2 minuti NO
5 Successo 30 sec 2 minuti NO
Inizio pagina

Compito 2

Utente Risultato Tempo esecuzione Tempo previsto Utilizzo del "cerca"
1 Successo 2 min e 57 sec 5 minuti SI
2 Successo 3 min 5 minuti NO
3 Successo 2 min e 52 sec 5 minuti SI
4 Successo 13 min 5 minuti NO
5 Successo 4 min e 20 sec 5 minuti NO
Inizio pagina

Compito 3

Utente Risultato Tempo esecuzione Tempo previsto Utilizzo del "cerca"
1 Insuccesso 1 min e 40 sec 7 minuti SI
2 Successo 1 min e 20 sec 7 minuti NO
3 Insuccesso 5 min e 20 sec 7 minuti SI
4 Insuccesso 11 min 7 minuti SI
5 Insuccesso 12 min 7 minuti SI
Inizio pagina

Compito 4

Utente Risultato Tempo esecuzione Tempo previsto Utilizzo del "cerca"
1 Successo 2 min e 46 sec 8 minuti NO
2 Successo 2 min e 40 sec 8 minuti NO
3 Insuccesso 2 min e 44 sec 8 minuti NO
4 Successo 5 min e 19 sec 8 minuti NO
5 Successo 5 min e 6 sec 8 minuti SI
Inizio pagina

Compito 5

Utente Risultato Tempo esecuzione Tempo previsto Utilizzo del "cerca"
1 Successo 1 min e 40 sec 8 minuti SI
2 Successo 1 min 8 minuti NO
3 Successo 1 min e 20 sec 8 minuti NO
4 Successo 1 min e 30 sec 8 minuti NO
5 Successo 2 min 8 minuti SI
Inizio pagina

Compito 6

Utente Risultato Tempo esecuzione Tempo previsto Utilizzo del "cerca"
1 Successo 6 min 15 minuti SI
2 Successo 11 min 15 minuti SI
3 Successo 2 min e 15 sec 15 minuti SI
4 Successo 7 min 15 minuti SI
5 Successo 4 min e 10 sec 15 minuti SI
Inizio pagina

Tabella esiti

  Compito n°1 Compito n°2 Compito n°3 Compito n°4 Compito n°5 Compito n°6
Utente n°1 completato completato fallito completato completato completato
Utente n°2 completato completato completato completato completato completato
Utente n°3 completato completato fallito fallito completato completato
Utente n°4 completato completato fallito completato completato completato
Utente n°5 completato completato fallito completato completato completato
Inizio pagina