Analisi e sintesi dei gesti comunicativi per gli - Maurizio Mancini

Capitolo II, Stato dell’arte
Il Generation Module sintetizza poi la voce, i gesti, le espressioni facciali e la postura
dell’agente, e nell’introduzione lo avevamo chiamato corpo dell’agente.
L’implementazione vera e propria di Rea utilizza uno stesso modulo, lo SPUD, sia
per generare il testo delle risposte che per calcolare gesti, intonazione e espressione
facciale. Lo SPUD costruisce una struttura ad albero formalizzata con la grammatica
LTAG (Stone & Doran, 1997) dalla quale vengono ottenuti gli alberi per i gesti e
l'intonazione con un'operazione di sostituzione. Ad esempio, se l'utente chiedesse
all'agente di descrivere la sala da pranzo della casa, lo SPUD potrebbe fornire una
risposta che dopo l'operazione di sostituzione apparirebbe del tipo:
SENTENCESTART
there is astaircase in the
middle ofit
Invece di scegliere ogni gesto da un vocabolario di gesti, il sistema Rea cerca di sin-
tetizzare il gesto dai suoi elementi base, come per esempio la forma delle mani, la
posizione iniziale delle braccia, la loro traiettoria. Inoltre tiene in considerazione il
contesto del discorso e gli obbiettivi della comunicazione. Quindi se l'agente sta de-
scrivendo il giardino della casa allora compirà un lungo arco con le braccia nella di-
rezione del giardino mentre pronuncia le parole "è ampio e molto verde".
La temporizzazione dei gesti non è un elemento centrale come nel caso dell’agente
di Kopp, e l’autore afferma che anche se è stata tenuta in considerazione il risultato
finale non è stato particolarmente convincente.
36