Alberto Mucignat

random thoughts around web stuffs (è tutto un equilibrio sopra la follia…)

Longitudinal testing: Gmail testa con gli utenti nel tempo

Scritto il a proposito di User experience - Commenta

Da qualche tempo il look di Gmail e dei prodotti Google è cambiato. Non senza qualche reazione stizzita, compresa la mia.

La cosa interessante è che in realtà il team di Gmail ha monitorato costantemente le reazioni degli utenti e ha corretto l’interfaccia di conseguenza.

In realtà, ieri (giorno dell’usabilità mondiale) è uscito un post molto bello che spiega come il team di Gmail abbia fatto test di usabilità per un lungo periodo prima di rilasciare il prodotto.

In particolare viene introdotto un tipo di test e osservazione degli utenti definito “Longitudinal study” che consiste nel ripetere il test con le stesse persone nel tempo:

As we continued to develop the new look, we evaluated our progress through additional usability studies with even more people. Much of what we captured from these studies was users’ first reactions to the new look. But Gmail is something people use repeatedly, not just once. So in addition to first impressions, we were also interested in seeing how people adjusted to the new look as they used it repeatedly in their daily lives. To find that out, we conducted a different kind of study called a longitudinal study. Longitudinal studies are used to observe the longer term effects our products have on people’s usage.

The longitudinal study consisted of turning on the new look for a group of Gmail users. We captured their initial reactions after their first experience. Then we let them use the new look in Gmail as they normally would as part of their everyday lives. As the days and weeks passed by, we periodically checked with them to see how they were adjusting to all the changes. Like with anything new, there were some changes that our participants initially needed time to adjust to, but later came to prefer as they used the new look more. On the other hand, problems that were not seen during the first couple times of use later emerged after more prolonged use. For example, many of the changes we made to the new left navigation were the result of people reporting their repeated experiences using labels and the chat area over time.

È un tipo di ricerca indicata quindi per prodotti il cui uso è prolungato nel tempo. Tuttavia, quasi tutti i servizi web che hanno un minimo di loyalty ricadono nella categoria.

Il fatto di utilizzare sempre gli stessi utenti secondo me ha due grandi pregi:

  • rispetta l’evoluzione (e la “formazione”) degli utenti all’interno del servizio
  • fa emergere i cambiamenti nell’utilizzo e fornisce insight per definire la UX del primo utilizzo e dell’utilizzo avanzato
  • consente di scoprire i problemi durante gli utilizzi evoluti, che altrimenti non sarebbero emersi con un singolo test.

Mi è già capitato di utilizzare questo tipo di test in alcune ricerche, anche se devo dire che in pratica facevamo solo 2 sessioni di test: in una sessione verificavamo l’utilizzo di fronte alla novità e dopo un periodo di tempo testavamo il comportamento avanzato, consapevoli del fatto che gli utenti avrebbero nel frattempo acquisito informazioni ed esperienza con l’interfaccia.

Tuttavia qui si tratta di una cosa diversa: seguire un gruppo di utenti nel tempo, pianificare periodici test e osservare come cambiano ed evolvono i comportamenti.

Tag: , , ,

Commenta il post ↓