Table des matières - Institut de Recherche en Informatique de ...

COUV
Remerciements
Résumé :
L'ubiquité des dispositifs interactifs mobiles dans les sphères
professionnelles, culturelles et domestiques constitue une occasion
d'ouverture de nouveaux champs de recherche dans le domaine de l'étude des
usages individuels et coopératifs des Nouvelles technologies de
l'information et de la communication (NTICs). Les technologies mobiles
amènent notamment à renouveler les points de vue sur des questions telles
que, les problèmes d'utilisabilité spécifiques posés par la mobilité, les
méthodes et les dispositifs de recueil de données, la question de
l'identification des facteurs contextuels pertinents pour la conception de
systèmes mobiles, la superposition des espaces d'interaction. De ce point
de vue, nous posons que la mobilité constitue un nouveau paradigme
d'interaction, facteur générateur potentiel de variations contextuelles
riches, pour lequel les styles d'interaction classiques basés sur la de
manipulation directe n'est ne sont pas pas forcément les plus appropriés
sans des adaptations fortes.
L'objectif de cette thèse est de documenter empiriquement la question de
l'usage de disositifs multimodaux en mobilité, de produire des éléments
permettant de poser les bases d'un modèle de l'usage de dispositifs
multimodaux en mobilité, et de fournir un ensemble de principes de
recommandations pour la conception.
Dans un premier temps nous présentons une analyse critique de la
littérature sur les questions relatives à la multimodalité, la mobilité et
le Dans cette thèse, nous nous attachons, après avoir posé les bases
théoriques concernant le Context Aware Computing (CAC),. Nous définissons
ensuite une méthode générale pour l'étude de l'usage de technologies
multimodales en mobilité dans des situations écologiquement valides. Cette
méthode, qui repose sur un dispositif d'enregistrement de données en
situation et sur le recueil de verbalisations consécutives à l'activité
assisté par les traces, est appliquée à une situation de l'interaction
mobile, et multimodale, à étudier empiriquement les usages d'une
application multimodale.dans le contexte d'un jeu collaboratif en mobilité
dans le contexte de la plateforme des usages LUTINen situation naturelle
(Cité des la Sciences et de l'Industrie).
Dans un premier temps, nous présentons des résultats essentiellement
quantitatifs qui permettent d'aborder une descriptionde décrire des un
ensemble d'usages globaux et intra individuels des modalités, puis et
d'examiner décrivent l'influence d'un certain nombre de facteurs
contextuels (internes ou externes) influençant sur les choix d'usage de
cess modalités (, tels que le contexte sonorephysique, social ou encore
l'historique de l'interaction). Dans un second temps, une analyse plus fine
de données qualitatives telles que les verbalisations des utilisateurs ou
l'examen de chroniques d'activités, permet d'expliquer en partie ces choix
d'usages mais également d'identifier de nouveaux facteurs pris en compte
par les sujetspotentiellement explicatifs.
Nous nous servons deutilisons ensuite ces résultats pour proposer une
ébauche de modélisation ainsi qu'un ensemble de des modèles et des
recommandations pour la conception d'interfaces multimodales mobiles. Table des matières ToDo :
P49
P86
position méthodo et techno P14 correct
Résultats p186
Classif mobilité (inclure mob institution, condition de félicité etc)
1. Introduction 14
Chapitre 1. Positionnement du problème et état de l'art 1819
1. Positionnement du problème 1920 1.1. Positionnement théorique 1920
1.1.1. La mobilité comme nouveau paradigme d'interaction 1920
1.1.2. La mobilité comme facteur de variations contextuelles Erreur !
Signet non défini.21
1.1.3. La multimodalité et le CAC comme palliatif des contraintes de la
mobilité 2122 1.2. Positionnement méthodologique 2123
1.2.1. De l'étude de laboratoire (laboratory studies) 2124
1.2.2. En passant par les expériences de terrain (field / quasi
experiments) 2124
1.2.3. A l'étude en contexte naturel (field studies) 2125
1.2.4. Quels outils pour l'analyse des données ? 2125
2. La Mobilité 2229 2.1. Introduction 2229 2.2. Eléments de définition - Essai de taxonomie 2229
2.2.1. Définitions 2229
2.2.2. Catégories analytiques et taxonomies des situations mobiles
2330
2.2.3. Classification "ontologique" 2330
2.2.4. Classification "typologique" 2536
2.2.5. Extension des cadres de description 2637
2.2.6. Mobilité et activités collaboratives 2738 2.3. Caractérisation des systèmes "mobiles" 2841
2.3.1. Point de vue de l'utilisateur 2841
3. Relation Mobilité Contexte 3043 3.1. Introduction 3043 3.2. Eléments de définition 3043
3.2.1. Le contexte en linguistique 3043
3.2.2. Le contexte en psychologie 3044 3.3. Prise en compte du contexte dans les systèmes 3144
3.3.1. Systèmes de capture des informations contextuelles 3145
3.3.2. Finalité de la capture d'informations contextuelles 3349
3.3.3. Automatisme et Contrôle de l'application 3350
3.3.4. Multimodalité & Context-aware computing 3451
4. Multimodalité 3552 4.1. Introduction 3552 4.2. Multimodalité, neurosciences et physiologie 3552
4.2.1. L'hypothèse centraliste invalidée ? 3553
4.2.2. Le sens du mouvement : un sixième sens 3654
4.2.3. Une perception active plutôt que passive 3654
4.2.4. Les sens sans sens ? 3755
4.2.5. Les référentiels absolus et relatifs pour l'action 3756
4.2.6. Modalité de contrôle 3957
4.2.7. Catégories sensorielles et motrices 4059
4.2.8. Les fonctions des gestes 4062 4.3. Multimodalité homme-homme 4062
4.3.1. Description des modalités Homme Hommes 4063
4.3.2. Du contexte à la contextualisation 4063
4.3.3. Contexte partagé et multimodalité 4064
4.3.4. Des interactions Homme-Homme aux interactions Homme-Machine
4065 4.4. Multimodalité dans les IHM 4066
4.4.1. Définitions 4066
4.4.2. Espaces de conception 4774 4.5. Etudes empiriques de la multimodalité en situation fixe et
mobile 5180
4.5.1. Quelques domaines d'application 5785
4.5.2. Usage des modalités 5886
4.5.3. Facteurs influant l'usage de la multimodalité 6396
4.5.4. La multimodalité : solution palliative à la correction des
erreurs 65101 5. Conclusion de la partie théorique 69103
Chapitre 2. Etude empirique 71104
1. Principes Généraux 72105
2. Méthode 73106 2.1. Application 73106 2.2. Modalités d'interactions disponibles 75108 2.3. Tâche et consigne 75108 2.4. Sujets et protocole expérimental 75108 3. Description du dispositif d'enregistrement et de recueil des données
77110 3.1. Vue contextuelle 78112 3.2. Vue Subjective 79113 3.3. Enregistrement des fichiers Log (Logger) 79114 3.4. Sessions de Rejeu et d'autoconfrontations 80115 4. Dispositif technique 82117
5. Cadre d'analyse 83119 5.1. Cadre d'analyse pour la mobilité 83119 5.2. Cadre d'analyse pour l'interaction multimodale 83119 5.3. Le modèle de Norman et Kirsh 83119 5.4. Intérêts du modèle de Norman / Kirsh 84121
5.4.1. Point de vue de la cognition située et distribuée 84121
5.4.2. Prise en compte de la matérialité de la cognition 84121
5.4.3. Notion d'intention 85121
5.4.4. Séquentialité de l'action et de la cognition 85121 5.5. Critique du modèle de Norman / Kirsh 85122
5.5.1. Focus et niveau d'intérêts 85122
5.5.2. Problème du découpage séquentiel de l'activité 85122
5.5.3. Absence de description du comportement des systèmes 86123 6. Méthodologie d'illustration et de formalisation de cas : les patterns
87124
7. Traitement des verbalisations 88127
Chapitre 3. Résultats et analyse 89128
1. Introduction 90129
2. Usages de la multimodalité 91130 2.1. Usage global des trois modalités équivalentes (stylet, vocal,
g2d) 91130
2.1.1. Usage global des modalités après décompte des commandes de
correction (stylet, vocal, g2d) 92131 2.2. Usage des modalités par sujets 93133
2.2.1. Nombre de commandes multimodales par sujets 93133
2.2.2. Répartition de l'usage des modalités par sujets 94134 2.3. Evolution des usages par session 96136
2.3.1. Evolution globale, tous sujets confondus 96136
2.3.2. Evolution intra-individuelle 97136 2.4. Usage des commandes 99138
2.4.1. Usage spécialisé de modalités par commandes au niveau global
99138
2.4.2. Evolution de l'usage global de modalité par commandes 100139
2.4.3. Spécialisation intra-individuelle et évolution des usages
101140 2.5. Transitions et enchaînement des modalités 103143
2.5.1. Enchaînement local des modalités 103144
2.5.2. Enchaînement global des modalités 107147
2.5.3. Verbalisations concernant les séquences d'usage d'une modalité
112151 2.6. Les erreurs au niveau global (modalité vocale et tactile stylet)
114154
2.6.1. Erreurs et commandes 114155
2.6.2. Les erreurs de la modalité vocale 116156
2.6.3. Les erreurs de la modalité tactile stylet 118158 2.7. Préférences individuelles : Verbalisations des sujets 121160
2.7.1. Test et appropriation de l'applic