Emotion: Architecture logicielle

1
Lémotion dans les systèmes interactifs Domaines
dexpérimentation la danse la réalité
augmentée.
2
Conférence - Démonstrationdansée

• Gaël Domenger, Centre Chorégraphique National -
  Thierry Malandain, Ballet Biarritz
• Alexis Clay, ESTIA, LaBRI, Université de
  Bordeaux.
• Elric Delord, ESTIA
• Nadine Couture, ESTIA, LaBRI
• Laurence Nigay, Université Joseph Fourier, LIG

3
(No Transcript)
4
(No Transcript)
5
(No Transcript)
6

7
Démonstration de lapplication
8
INTERPRETATION
Emotion
ANALYSE
Caractéristiques
CAPTURE
Dispositifs
9
Architecture à composants

• Composant boîte noire. Définie par ses entrées,
  sorties (paramètres)
• Communication par flux de signaux entre
  composants
• Avantage réutilisabilité des composants,
  modifiabilité du système

Flux sortants
Flux entrants
paramètre
10
Capture
Interprétation
Analyse
Extracteurs de caractéristiques
Unités de Capture
Interpréteurs
11
Composant Capture
Composant interprétation
Composant Analyse
12
La reconnaissance d'émotion en tant qu'interaction

• Modalité (d, sr) (modalité, sr)
• Ex de SR Coordonnées de mains 2 6 degrés de
  libertés coordonnées du corps complet, 23
  segments ltX, Y, Z, q1, q2, q3, q4gt
• Système représentationnel permet didentifier
  les flux quil est possible de fusionner
• Composition des modalités propriétés CARE

13
Architecture de lapplication
14
Représentation graphique
Niveau Capture
Niveau Analyse
Niveau Interprétation
Unités de capture
Extracteurs de caractéristiques
Interpréteurs
PAC-Amodeus, A Software Architecture Model for
Multimodal Systems, L. Nigay, 1993.
15
Fonctionnement à lexécution
16
Composant Capture
Composant interprétation
Composant Analyse
Pol
Arm
Vert
Speed
Interp
SF
SagX
emotion
1
2
SagN
Moven
Trunk
The contribution of general features of body
movement to the attribution of emotions,
deMeijer, 1989
17
Composant Capture
Composant interprétation
Composant Analyse
Pol
Arm
Vert
Speed
Interp
SF
SagX
emotion
1
2
SagN
Moven
Trunk
18
Composant Capture
Composant interprétation
Composant Analyse
Pol
Arm
Vert
Speed
Interp
SF
SagX
emotion
1
2
SagN
Moven
Trunk
19
Composant Capture
Composant interprétation
Composant Analyse
Changement Calcul sagittal
Pol
Arm
Vert
Speed
Interp
SF
SagX
emotion
1
2
SagN
Moven
Trunk
20
Réutilisabilité
21
Composant Capture
Composant interprétation
Composant Analyse
Pol
Arm
Vert
Speed
SF
SagX
Interp2
SagN
Moven
Trunk
22
Composant Capture
Composant interprétation
Composant Analyse
Pol
Arm
Vert
Speed
SF
SagX
Interp2
SagN
Moven
Trunk
23
Composant Capture
Composant interprétation
Composant Analyse
Pol
Arm
Vert
Speed
SF
SagX
Interp2
SagN
Moven
Trunk
24
Discussion réutilisabilité des éléments

• Unités de capture pleinement
  réutilisable
• Extracteurs de caractéristiques
  condition des données en entrées ?Adaptateurs
• Interpréteurs caractéristiques en
  entrée et format

• La synchronisation et la redistribution des flux
  de données nest pas générique dans la version
  actuelle mais peut être rendue générique
• La fusion est par nature un système ad hoc.

25
Questions?