Valutazione dell'usabilità di un sistema per l'e-learning in ambito ...

A50
ferimento. Come definito nel manuale SUMI (20), punteggi
medi maggiori o uguali al valore di riferimento sono
da considerarsi soddisfacenti per l’usabilità del sistema.
Valori inferiori a 40 suggeriscono la necessità di una revisione
del sistema. Nel nostro studio, quindi, il sistema risulta
usabile per tutte le scale SUMI.
Inoltre sono stati calcolati i coefficienti di correlazione
tra i punteggi del questionario SUS e quelli di ogni scala del
SUMI. I risultati mostrano una correlazione positiva in tutti
i casi, soprattutto per quanto riguarda le scale di Learnibility
e di Efficiency. I risultati dei due questionari indicano
che il sistema risulta essere non soltanto di facile impiego
per gli utenti - che velocemente apprendono come utilizzarlo
- ma anche efficiente nel permettere di portare a termine
il proprio compito. La concordanza di dati ci permette inoltre
di ipotizzare un uso alternativo dei due questionari in base
alle ipotesi di ricerca privilegiando l’adozione del SUS
quando si intende ridurre i tempi di somministrazione.
L’analisi dei dati effettuata sul questionario LOC-L ha
avuto come scopo quello di indagare il locus of control dei
soggetti dello studio. Questo in quanto eventuali comportamenti
di marcata esternalità o internalità degli individui
possono polarizzare i loro giudizi di usabilità, compromettendo
quindi l’intera analisi. I dati del questionario LOC-L
sono stati trattati in modo da ricavare uno score di esternalità.
I risultati ottenuti mostrano come gli score individuali
del questionario si concentrino attorno al valore centrale
della scala (media 92.63; deviazione standard 11.38), mostrando
in questo modo che il campione si discosta sia dall’estremo
superiore (alta esternalità) sia da quello inferiore
della scala (bassa esternalità). Questo permette di ipotizzare
che il giudizio di usabilità espresso dai soggetti possa non
essere condizionato dal tipo di locus of control individuale.
Si è in seguito proceduto ad analizzare le relazioni tra
i punteggi riportati dai soggetti nel SUS e la loro esperienza
informatica che è stata indagata nel questionario
preliminare. Si è osservato come i soggetti fossero caratterizzati
da una certa eterogeneità in termini di background
informatico. Ci si è quindi chiesto se tali diversità
fossero correlabili con il punteggio SUS. Per quanto riguarda
le ore settimanali di uso del PC il test ANOVA non
ha evidenziato una differenza statisticamente rilevante nel
punteggio SUS dei tre gruppi. Il punteggio SUS risulta
quindi essere indipendente dalle ore di uso del PC.
In relazione alla esperienza pregressa con strumenti di
e-learning da parte dei soggetti si è ritenuto di interesse indagare
se gli individui con un background nell’uso dei sistemi
di e-learning tendessero a valutare meglio il sistema
in termini di usabilità rispetto a utenti privi di tale esperienza.
Nonostante i primi abbiano mediamente riportato
uno score SUS più alto rispetto ai secondi, dal t-test effettuato
non è emerso un impatto significativo dell’esperienza
con i sistemi di e-learning sullo score SUS.
Analizzando i punteggi relativi all’opinione dei soggetti
nei confronti dei sistemi di e-learning si è inteso valutare
la tendenza dei soggetti con migliori aspettative verso
l’e-learning in generale ad assegnare a questo sistema
di apprendimento un alto punteggio SUS. Il coefficiente di
correlazione ottenuto, di modesta entità (0.41), ha indicato
una scarsa dipendenza tra le due variabili.
G Ital Med Lav Erg 2009; 31:1, Suppl A, Psicol
http://gimle.fsm.it
Relativamente alle performance del test d’ingresso e
del test finale, si è osservata, nel primo caso, una modesta
preparazione (media 22.68; deviazione standard 5.88), seguita
da un sostanziale miglioramento al test finale (media
28.74; deviazione standard 2.07). Come dimostrazione
che il sistema di e-learning ha consentito l’apprendimento,
il t-test ha evidenziato tra i due test un significativo miglioramento
medio, pari a 6.05 punti.
Si può concludere affermando come gli obiettivi del
presente studio siano stati raggiunti. L’analisi di usabilità
mediante i questionari SUS e SUMI ha mostrato come la
piattaforma di e-learning, oggetto della presente ricerca, sia
stata considerata, da parte del campione di utenti, in modo
mediamente positivo. Gli studi già presenti nella letteratura
mostrano come il SUMI si sia dimostrato un questionario
affidabile e con un certo potere discriminante tra diverse
specie di software (17). Utilizzando tale questionario l’usabilità
di un prodotto software o di un prototipo può essere
valutata in modo oggettivo ponendosi come obiettivo la
soddisfazione nell’utilizzo da parte dell’utente finale (23).
Infine il SUMI è citato nelle linee guida ISO 9241 come
metodo riconosciuto per la valutazione della soddisfazione
da parte dell’utente finale nell’utilizzo di un software (17).
Le diverse ricerche presenti in letteratura documentano
come il SUS generalmente mostri alti livelli di usabilità soggettiva
e fornisca alti risultati in termini di affidabilità già a
partire da un campione di 14 soggetti. La media dei punteggi
si colloca generalmente tra 65 e 70 (24), come è avvenuto
nel presente studio. Inoltre il SUS, a confronto con altri
questionari, fornisce punteggi superiori di valutazione dell’usabilità
dei siti web. Infine è stato rilevato un coefficiente
di correlazione con il SUMI pari a 0.86 (25). La presente ricerca
mostra come sia il SUS che il SUMI siano strumenti
idonei alla valutazione di un sistema software e come la piattaforma
di e-learning analizzata abbia raggiunto buoni livelli
di usabilità. Inoltre tale software si è dimostrato essere efficace
nel permettere al soggetto di portare a termine il proprio
compito, obiettivo principale dell’usabilità (1).
Dal questionario preliminare, che si occupa di indagare
variabili soggettive quali l’esperienza dei soggetti in
ambito informatico, quella nell’utilizzo di sistemi di elearning,
le loro idee in generale sull’apprendimento on-line,
si è riscontrato come i soggetti riportino opinioni positive
nei confronti dell’e-learning.
È stato inoltre quantificato in modo statisticamente
fondato l’impatto delle variabili sopra descritte e del tipo
di locus of control individuale sui giudizi di usabilità degli
utenti. Le analisi effettuate hanno tuttavia mostrato
come in nessun caso i giudizi di usabilità degli utenti siano
stati influenzati in modo significativo da tali variabili,
confermando quindi la piena validità dello studio di
usabilità condotto.
Sarebbe interessante, in un ulteriore studio, effettuare
alla fine del corso delle interviste in cui siano gli stessi
soggetti ad esprimere le difficoltà incontrate durante l’utilizzo
del sistema. Individuando le problematiche riscontrate
dal campione, il sistema potrebbe essere modificato
in base anche all’esigenze e abilità cognitive del campione
di riferimento e nuovamente testato. Risulterebbe oltremodo
opportuno che il sistema software rilevasse, in mo-