Analisi e sintesi dei gesti comunicativi per gli - Maurizio Mancini

Recommendations

Info

Introduzione • Comprensione e decisione: è l’elemento principale della mente dell’agente. Utilizzando tecniche ad esempio di intelligenza artificiale l’input dell’utente viene interpretato e viene decisa la risposta dell’agente che sarà in generale un testo da pronunciare più alcune meta-informazioni che riguardano il testo e le sue fun- zioni comunicative [39]. Questi dati vengono a questo punto passati in input al sottosistema corpo. • Generazione: la sua funzione è quella di sintetizzare in un file il suono delle parole che l’agente ha deciso di pronunciare fornendo loro la giusta intonazione e di produrre uno o più file contenenti i dati del movimento di tutte le parti del corpo dell’agente. Nelle attuali implementazioni degli agenti conversazionali il modulo di generazione si occupa di calcolare: ♦ l'intonazione con cui si pronunciano le parole ♦ le espressioni della faccia e degli occhi in particolare ♦ la forma e il movimento dei gesti (braccia, mani) ♦ la postura del corpo Tutti questi dati viaggiano su canali separati che nello schema abbiamo indicato come file audio (per il suono della voce) e file di animazione (per il movimento del corpo e della faccia). • Visualizzatore dell’animazione: è l’elemento che genera la rappresentazione grafica dell’agente rendendo visibili tutti i movimenti decisi dal modulo precedente. Si occupa inoltre di riprodurre in modo sincrono il file audio relativo all’animazione. Entriamo nel dettaglio di alcuni aspetti implementativi del modulo di Generazione dei movimenti di un agente conversazionale. 8
Introduzione In generale un programma in grado di calcolare delle animazioni in tempo reale viene chiamato motore grafico. Il motore grafico di un agente conversazionale può utiliz- zare tre diverse tecniche di animazione: ♦ animazione statica - L’agente viene disegnato da un animatore. Tutti i frame di animazione vengono disegnati e trasformati in immagini statiche (bitmap) che il motore poi concatena in modo opportuno. E’ quindi la soluzione più re- strittiva perché impone di conoscere in anticipo quali saranno tutti i possibili movimenti dell’agente. Eventuali nuovi tipi di movimento non posso essere realizzati a meno che non si disegnino i fotogrammi adatti. Con questa tecnica sono stati implementati per esempio gli “Assistenti di Office” della Mi- crosoft. ♦ motion capture - Si immagazzinano tutti gli spostamenti del corpo comprese le espressioni facciali utilizzando un particolare hardware composto da alcuni sensori indossato da una persona (di solito un attore o comunque una persona che riesce ad avere un certo controllo sul proprio corpo). Sequenzializ- zando questi movimenti si genera l’animazione finale. In questo modo il ri- sultato ottenuto può essere molto realistico ma come nel caso precedente ci sono delle limitazioni nell’utilizzo dell’agente. Il problema principale è che si possono riprodurre soltanto i movimenti preregistrati e non crearne dinami- camente altri nuovi. Questa tecnica viene spesso usata nei film di animazione per dare ai personaggi un movimento molto realistico (Final Fantasy, Mon- sters Inc., ecc.). ♦ sintesi del movimento - Si scrivono dei tools grazie ai quali gli sviluppatori possono manipolare tramite algoritmi i vari gradi di libertà di un modello sinteti- co in grafica 3d del corpo dell’agente. E’ necessaria la collaborazione tra animatori, psicologi e studiosi del comportamento umano e il sistema è mol- to più complicato da realizzare ma le possibilità di utilizzo dell’agente au- mentano notevolmente. Esso infatti riesce ad adattarsi almeno in parte (con degli algoritmi appropriati) a qualsiasi situazione reale perché il suo movi- 9
Page 1 and 2: Indice Indice______________________
Page 3 and 4: Introduzione VI.2 Editor delle pose
Page 5 and 6: Introduzione Introduzione Gli esser
Page 7: Introduzione ♦ fornire segnali ch
Page 11 and 12: Introduzione Non ci occuperemo inve
Page 13 and 14: Capitolo I, Gesti comunicativi 13
Page 15 and 16: Capitolo I, Gesti comunicativi per
Page 17 and 18: Capitolo I, Gesti comunicativi liam
Page 19 and 20: Capitolo I, Gesti comunicativi poll
Page 21 and 22: Capitolo I, Gesti comunicativi •
Page 23 and 24: Capitolo I, Gesti comunicativi E’
Page 25 and 26: Capitolo I, Gesti comunicativi Le i
Page 27 and 28: Capitolo I, Gesti comunicativi di c
Page 29 and 30: Capitolo II, Stato dell’arte In q
Page 31 and 32: Capitolo II, Stato dell’arte Come
Page 33 and 34: Capitolo II, Stato dell’arte Fig.
Page 35 and 36: Capitolo II, Stato dell’arte Alla
Page 37 and 38: Capitolo II, Stato dell’arte II.5
Page 39 and 40: Capitolo II, Stato dell’arte Nota
Page 41 and 42: Capitolo III, L’agente Greta III.
Page 43 and 44: Capitolo III, L’agente Greta Uten
Page 45 and 46: Capitolo III, L’agente Greta Man
Page 47 and 48: Capitolo IV, Il sistema dei gesti I
Page 53 and 54: Capitolo IV, Il sistema dei gesti U
Page 55 and 56: Capitolo IV, Il sistema dei gesti
Page 59 and 60:
Capitolo IV, Il sistema dei gesti e
Page 61 and 62:
Capitolo IV, Il sistema dei gesti n
Page 63 and 64:
Capitolo IV, Il sistema dei gesti F
Page 65 and 66:
Capitolo IV, Il sistema dei gesti f
Page 67 and 68:
Capitolo V, Motore gestuale guito s
Page 69 and 70:
Capitolo V, Motore gestuale Innanzi
Page 71 and 72:
Capitolo V, Motore gestuale è racc
Page 73 and 74:
Capitolo V, Motore gestuale • A q
Page 75 and 76:
Capitolo V, Motore gestuale if(esis
Page 77 and 78:
Capitolo V, Motore gestuale (a) il
Page 79 and 80:
Capitolo V, Motore gestuale In figu
Page 81 and 82:
Capitolo V, Motore gestuale Figura
Page 83 and 84:
Capitolo V, Motore gestuale Innanzi
Page 85 and 86:
Capitolo VI, Tools di supporto VI.1
Page 87 and 88:
Capitolo VI, Tools di supporto sura
Page 89 and 90:
Capitolo VI, Tools di supporto Figu
Page 91 and 92:
Capitolo VI, Tools di supporto corr
Page 93 and 94:
Capitolo VI, Tools di supporto clas
Page 95 and 96:
Capitolo VI, Tools di supporto loro
Page 97 and 98:
Capitolo VI, Tools di supporto Ed e
Page 99 and 100:
Capitolo VI, Tools di supporto Cons
Page 101 and 102:
Capitolo VI, Tools di supporto Come
Page 103 and 104:
Capitolo VI, Tools di supporto curr
Page 105 and 106:
Capitolo VI, Tools di supporto Figu
Page 107 and 108:
Capitolo VII, Conclusioni e svilupp
Page 109 and 110:
Capitolo VII, Conclusioni e svilupp
Page 111 and 112:
Appendice A VII.4 Il metodo ModelDr
Page 113 and 114:
Appendice B VII.5 Tabella dei grupp
Page 115 and 116:
Appendice B Spine4: vc5roll, vc5tor
Page 117 and 118:
Appendice C VII.8 H-Anim: Gerarchia
Page 119 and 120:
Appendice C 31 crotch 0.0034 0.8266
Page 121 and 122:
Bibliografia Bibliografia [1] N. Ba
Page 123 and 124:
Bibliografia [22] J.R. Kennaway. Sy
Page 125 and 126:
Bibliografia guage in speech, appli
show all

Analisi e sintesi dei gesti comunicativi per gli - Maurizio Mancini

Create successful ePaper yourself

Delete template?

Save as template?