Soutenue le 28 avril 2017

 

Résumé

  La montée en puissance des écrans tactiles offre de nouvelles possibilités d’interactions gestuelles de plus en plus riches. De nos jours, les utilisateurs se contentent souvent de gestes mono-point ou multipoints simples pour exécuter des manipulations telles que la rotation, le déplacement ou la mise à l’échelle d’objets graphiques, la plupart du temps dans un contexte mono-utilisateur. Le travail décrit ici concerne l’utilisation avancée des gestes multipoints, comportant à la fois plus de commandes de raccourci (appelées commandes indirectes) et de commandes de manipulation (appelées commandes directes) dans un contexte d’utilisateurs multiples sur le même écran.
Pour cela, nous analysons la forme des trajectoires composant le geste multipoints et les relations temporelles et spatiales entre ces trajectoires afin de caractériser ce geste. Nous proposons une modélisation par graphes et développons un système complet d’analyse et de reconnaissance. Pour résoudre le conflit entre la reconnaissance des gestes de manipulation et ceux de commande (directes versus indirectes), nous proposons une stratégie de reconnaissance précoce pour les gestes multipoints basée sur une option de rejet combinant plusieurs classifieurs pour reconnaître ces gestes au plus tôt.
Pour valider nos approches, nous avons construit la base MTGSet composée de 7 938 gestes isolés multipoints de 41 classes différentes et MUMTDB une base de gestes collectés dans un contexte réel d’interaction multiutilisateurs pour l’édition de diagrammes. Les résultats expérimentaux attestent que nos approches peuvent reconnaître les gestes multipoints dans ces différentes situations

Composition du jury

• Mme Nicole Vincent, Professeur des universités, Université Paris Descartes, Rapporteur
• Mme Véronique Eglin, Professeur des universités, INSA de Lyon, Rapporteur
• M. Hubert Cardot, Professeur des universités, Université François-Rabelais de Tours, Examinateur
• M. Harold Mouchère, Maître de Conférences, Université de Nantes, co-encadrant de thèse
• M. Eric Anquetil, Professeur des universités, INSA de Rennes, directeur de thèse
• M. Chritian Viard-Gaudin, Professeur des universités, University of Nantes, directeur de thèse