Meet-AI

Valutare la UX di prodotti che integrano AI

L'immagine presenta la scritta "MEET - AI" in grandi caratteri stilizzati e geometrici. Il colore principale è un verde ottanio vibrante con sfumature più chiare. Le lettere "E" contengono un punto centrale, rendendole simili a degli occhi stilizzati, mentre la "A" di AI è rappresentata da un triangolo con un cerchio all'interno. Sotto il logo principale, in un carattere sans-serif più sottile e di colore turchese, compare l'estensione dell'acronimo: "Metadesign Evaluation Method for AI". Lo sfondo è bianco, conferendo al design un aspetto moderno, pulito e tecnologico.

L'intelligenza artificiale si sta facendo sempre più strada nelle nostre vite, ma come sta influenzando la User Experience (UX) di prodotti e servizi? Quali sono le qualità che gli utenti finali ricercano nei prodotti dotati di intelligenza artificiale? Come possiamo misurare queste qualità?

Queste domande sono state affrontate in un progetto di ricerca annuale, finanziato con fondi FARB (Finanziamento Alla Ricerca di Base), che ha coinvolto sette ricercatori del Dipartimento di Design.
Nello specifico, il progetto di ricerca Meet-AI ha esplorato la User Experience abilitata da quei prodotti che integrano potenzialità legate all’Intelligenza Artificiale. Si tratta di dispositivi come gli smart speaker (es. Amazon Echo, Google Nest) che stanno sempre più popolando le nostre case. Ci ascoltano, ci guardano, ci parlano, imparano le nostre abitudini e adattano il loro comportamento nel tempo.

Questi prodotti stanno cambiando le regole del gioco perché permettono interazioni uomo-macchina che non abbiamo mai sperimentato prima. Tuttavia, finora, la disciplina del Design sembra aver sorvolato sull'impatto che l'introduzione di sistemi di AI può avere sui prodotti industriali.

Il progetto Meet-AI rappresenta uno dei primi tentativi di inquadrare queste questioni attraverso una metodologia strutturata che si è sviluppata in tre fasi principali:

  • Aggiornamento delle dimensioni della UX. Attraverso l’analisi della letteratura e questionari con utenti esperti, abbiamo identificato le qualità che gli utenti cercano nei prodotti che integrano AI e abbiamo compreso come influenzano l'esperienza dell'utente.
  • Costruzione di un metodo di valutazione della UX. Partendo dalle intuizioni acquisite nella prima fase, abbiamo creato un metodo per quantificare la qualità dell'esperienza abilitata da tali dispositivi.
  • Convalida del metodo. Infine, abbiamo validato statisticamente lo strumento per garantirne le prestazioni.

Come si valuta attualmente la UX?

L'idea di valutare l'esperienza utente risale ai primi anni 2000, e si è sviluppata attraverso diversi cambi di orientamento. La prima parte dell'attività di ricerca si è concentrata specificamente sul tracciamento di tutti i metodi disponibili finora. Abbiamo identificato e analizzato 129 metodi per capire la loro idoneità a valutare prodotti che integrano AI e le caratteristiche che misurano. Come risultato, abbiamo creato una lista di metodi che è ora liberamente disponibile per la comunità scientifica.

mappa concettuale delle metriche di usabilità utilizzata per analizzare come diverse componenti tecniche contribuiscano alla qualità pragmatica di un'interfaccia o di un servizio AI.
Fig. 1. Qualità UX per la dimensione pragmatica emerse dalla letteratura.

Come li percepiscono gli utenti finali?

L'analisi della letteratura riguardante l'Intelligenza Artificiale e il Design mostra che nuove qualità dovrebbero essere considerate. Abbiamo verificato questa ipotesi attraverso un questionario sottoposto a 50 utenti esperti.
I risultati evidenziano che gli intervistati non considerano i prodotti con AI come sistemi tradizionali. Le qualità estetiche, la facilità d'uso, l'ergonomia e la piacevolezza d'uso non sono più gli unici elementi che influenzano l'esperienza dell'utente.
Gli utenti finali sono interessati all'intelligenza che essi integrano. Vogliono instaurare una relazione empatica. Vogliono riporre fiducia in questi oggetti ed essere sicuri che non stiano tradendo le loro promesse. In altre parole, cercano assistenti piuttosto che prodotti.

L'immagine mostra un grafico a barre orizzontali di colore lilla che illustra diverse dimensioni di valutazione, probabilmente legate all'esperienza utente o all'intelligenza artificiale. La categoria con il valore più alto è la Trustworthiness (Affidabilità) con un punteggio di 32, seguita dalla Conversational dimension (25) e dall'Intelligence (21). Altre dimensioni includono la Meaningfulness (17), la Aesthetic dimension (10), l'Affective dimension (9), la Pragmatic dimension (7) e, infine, la Hedonic dimension con il valore più basso di 5. La scala sull'asse orizzontale va da 0 a 35, fornendo una chiara comparazione quantitativa dell'importanza o della frequenza di questi diversi criteri.
Fig. 2. Dimensioni UX ritenute più rilevanti dagli utenti esperti.

Quindi, quali sono le nuove qualità che questi prodotti dovrebbero avere?

Partendo dai risultati del questionario, abbiamo costruito lunghe liste di qualità che gli utenti attribuiscono ai potenziati da AI, organizzate secondo otto dimensioni principali. Attraverso un confronto strutturato con la letteratura e all'interno del gruppo di ricercatori. Esse includono la trasparenza nel mostrare quali dati vengono raccolti, come vengono utilizzati, l'affidabilità del sistema, la sua accuratezza e la sua utilità. Abbiamo inoltre incluso qualità come la personalizzazione e l'adattabilità del sistema e, naturalmente, la capacità di ascoltare l'utente e di fornire risposte usando la voce.

La grafica è organizzata come un ecosistema di "bolle" o cluster su uno sfondo verde acqua. Ogni cluster raggruppa concetti correlati tramite etichette di testo e piccoli post-it digitali. Tra i nodi principali troviamo Accuracy (Accuratezza), Adaptability (Adattabilità), Empathy (Empatia), UX Personalization e Human Likeness (Soggettività umana). Alcuni cluster sono collegati tra loro da linee sottili, indicando interdipendenze (ad esempio tra l'accuratezza e il riconoscimento). La mappa copre uno spettro vastissimo di attributi, dai più tecnici come Data Elaboration e Connectivity, a quelli più etici e relazionali come Trustworthiness, Inclusiveness e Human Bias.
Fig. 3. Organizzazione delle qualità emerse dal questionario – Dimensione: Intelligence.

Sono le qualità giuste? Come misurarle?

Per verificare la nostra ipotesi, abbiamo creato un questionario con numerose domande. Lo abbiamo poi sottoposto a un gran numero di intervistati (circa 650), chiedendo loro di valutare il loro smart speaker. In gergo scientifico, questa operazione è detta analisi fattoriale esplorativa. Ciò ha permesso di scremare le qualità meno rilevanti e riconoscere quelle che gli utenti finali considerano significative per la loro esperienza.
Per valutare la correttezza delle qualità identificate, abbiamo chiesto ad altri 700 utenti di rispondere al questionario rivisto alla luce dei risultati del precedente. Questa attività (analisi fattoriale confermativa) ci ha permesso di scremare le domande e giungere al questionario finale.

L'immagine mostra una matrice di classificazione a quattro quadranti, utilizzata per organizzare diversi requisiti o caratteristiche di un sistema (probabilmente legato all'IA e al design) in base alla loro priorità e applicabilità.
Fig. 4. Attività preparatoria per definire le qualità rilevanti e le relative domande.

E ora?

Il risultato ottenuto è un questionario validato statisticamente che valuta l'esperienza utente di sistemi che integrano capacità di AI. Esso include 33 domande e può essere usato da studenti, designer e aziende per valutare la performance di un loro concept o sistema secondo diverse qualità. È il primo del suo genere, e nei prossimi mesi continueremo a perfezionarlo, aggiungendo strumenti per facilitarne l’adozione.

Condividi su: