Multisensoriel

Le langage CORDIS-ANIMA et les systèmes gestuels à retour d'effort permettent de simuler des objets virtuels avec lesquels l'interaction est complète et multisensorielle, c'est-à-dire mettant à contribution simultanément l'action gestuelle, la perception tactile, la perception auditive et la perception visuelle.

  • La première simulation multisensorielle temps réel complète, intitulée "jeu de tennis rétroactif et sonore", a été réalisée en 1983 (cf ci-contre) : objet déformable, retour d'effort, visualisation temps réel et retour sonore.
  • La deuxième démonstration, intitulée "Horloge", présente un modèle physique de mécanisme d'horlogerie complexe qui produit à la fois le son et l'image.

Ces simulations multisensorielles sont aujourd'hui en plein développement, en particulier grâce au dernier simulateur temps-réel TELLURIS. Elles permettent le développement de nouvelles formes d'art combinant le son, l'image et l'interactivité et de nouveaux simulateurs pour des tâches complexes (chirurgie, télécommunication...)

Questions scientifiques et technologiques

Les modèles multisensoriels exigent un simulateur capable d'exécuter de manière synchrone des parties à des fréquences différentes (44,1KHz pour les simulations sonores, 1 KHz pour le geste, 50 Hz pour la visualisation). Ils posent également des questions en psychoperception (transferts intersensoriels, fusion et fission multisensorielles...)

1983 : le jeu de tennis musical à retour d'effort - Image-son-geste temps réel avec retour d'effort, modèle physique d'une balle déformable, d'une raquette rigide et des collisions. La main sent les chocs de la balle sur la raquette.


©ACROE 83 - Auteurs : A. Luciani, J. L. Florens - Logiciel CORDIS-ANIMA (cf. Produits)

Un exemple de mécanisme complexe modélisé avec CORDIS - ANIMA : l'horloge virtuelle. Le son et l'image sont produits par un seul modèle physique particulaire. Animation extraite du film musical "ESQUISSES".


©ACROE 93 - Auteurs : J. Nouiri, C. Cadoz, A. Luciani, A. Habibi - Logiciel CORDIS-ANIMA (cf. Produits)