Aquilon / Bipolar / EnsadLab / Medialab Sciences-Po – Projet en cours

Conception et direction artistique : Thierry Fournier
Curatoriat : Thierry Fournier, Jean-François Robardet, Grégory Diguet
Chef de projet et ingénierie : Jean-Baptiste Droulers
Programmation informatique et collaboration au design d’interface : Mathieu Chamagne
Coordination 3D et architecture : Milovann Yanatchkov
Coordination développement Medialab : Paul Girard
Projet produit avec le soutien de la Région Ile de France et du pôle de compétitivité Cap Digital / Futur en Seine, En collaboration avec le programme de recherche DRii (axe « Surfaces sensibles ») d’EnsadLab (Laboratoire de l’École nationale supérieure des arts décoratifs) et le Médialab de Sciences-Po.
Production déléguée : Aquilon / Pierre-Yves Bérenguer et Bipolar / Grégory Diguet

Le projet Fenêtres augmentées propose à la fois un dispositif interactif d’exploration d’un paysage local et un projet de curatoriat artistique. Prenant la forme d’un grand écran tactile, une Fenêtre est positionnée en un lieu précis dont elle cadre une vue déterminée. Elle permet aux visiteurs de naviguer simultanément dans plusieurs niveaux de lecture du paysage, en s’appuyant sur un système de réalité augmentée : vidéo en temps réel, projets artistiques, représentation en 3D actuelle et historique, géo-référencement d’informations, cartographies comparatives. Chacun de ces niveaux peut être exploré dans le temps : vidéo écoulée depuis un an, historique des représentations, projets basés sur la temporalité, etc.

Une mise en relation et une comparaison peuvent ainsi s’opérer entre de multiples niveaux d’interprétation d’un même lieu : géographique, urbain, architectural, documentaire, fictionnel, artistique, curatorial… Chaque Fenêtre fait coexister des approches habituellement dissociées, mises en comparaison et en perspective à travers un point de vue physique commun : une « cartographie de controverses », un objet d’investigation commun au sens social et politique du terme. Leur enjeu est la vision qu’une communauté construit d’un espace qui la concerne, qu’elle regarde et qu’elle donne à voir.

Une Fenêtre augmentée est donc un objet permanent qui fait l’objet d’une démarche spécifique d’investigation. Elle constitue une « édition » qui fait l’objet d’une lecture singulière d’un paysage et de ses composantes, de propositions artistiques spécifiques, de la construction d’un espace 3D, de sa géo-localisation et le cas échéant de ses temporalités.

Outre sa présence locale, chaque Fenêtre est également consultable sur internet. Chaque « édition » donnera lieu à un miroir consultable en ligne qui permettra d’accéder aux mêmes couches d’informations, sur le même segment de point de vue. La « continuité et l’échelle illimitées » des systèmes géographiques actuels (Google Street View, etc.) sont donc ici délibérément inversées. Le projet active un questionnement public et pluridisciplinaire sur l’objectivité présumée des systèmes d’information géographiques et sur l’invention possible d’une représentation discutable du paysage, cet espace communément partagé et exploré.

Objectifs de la recherche

Le projet Fenêtres Augmentées donnera lieu à une phase de recherche et développement menée au sein de l’axe « Surfaces Sensibles » de l’Ensad / Drii, plus particulièrement consacrée à la synchronisation entre un dispositif tactile, un affichage et une captation vidéo, tous trois de grandes dimensions et alignés géométriquement sur le même segment d’espace. Cette recherche sera menée en étroite collaboration avec le projet de curatoriat, et les études menées sur la « cartographie de controverses » au sein du Médialab de Sciences Po. Le prototype créé pour Futur en Seine constituera le démonstrateur de ces recherches.

Conception et direction artistique : Thierry Fournier
Comité scientifique et textes : Jean Clottes, Christina San Juan Foucher, Pascal Foucher, Yannick Le Guillou, Yoan Rumeau
Ingénierie, direction technique et collaboration au design : Jean-Baptiste Droulers
Programmation informatique et collaboration au design d’interface : Mathieu Chamagne
Pilote d’acquisition de caméra : Antoine Villeret
Construction : Grégoire Chombard
Collaboration muséographique : Transfaire
Photographies : Gilles Cohen, Yoan Rumeau
Traductions : David Beytelmann et Damien Bright
Projet produit par la Communauté de Communes de Saint-Laurent de Nestes, sous la direction de Josette Durrieu
Production déléguée : Orphaz / Pierre-Yves Bérenguer
En collaboration avec le programme de recherche DRii (axe « Surfaces sensibles ») d’EnsadLab (Laboratoire de l’École nationale supérieure des arts décoratifs) – étudiants : Marie-Julie Bourgeois, Anahita Hekmat, Tomek Jarolim, Antoine Villeret.

Dans le cadre de l’axe Surfaces Sensibles ont été menées les études de prototype d’une table interactive multitouch et multi-utilisateurs de très grandes dimensions (480 x 120 cm utiles) créée en juillet 2010 par Thierry Fournier et Orphaz pour Nestploria, Centre d’interprétation numérique des Grottes de Gargas (Hautes-Pyrénées) consacré aux « mains négatives » préhistoriques.

Contexte

Le terme de « mains négatives » désigne la technique de peintures pariétales pratiquées à partir du Paléolithique Supérieur, consistant à pulvériser une matière colorée (soufflée ou frottée) autour d’une main posée sur la paroi, laissant ainsi une trace en négatif de son contour. Les grottes de Gargas constituent un des premiers sites européens de mains négatives – pour le nombre et la qualité des empreintes qu’il rassemble – et un des derniers sites ouverts au public. La datation des empreintes est estimée à -27000 ans environ (période du Gravettien). La table interactive réalisée pour Nestploria permet aux visiteurs de consulter collectivement ou individuellement seize empreintes remarquables, et d’en explorer les caractéristiques historiques et techniques. Elle est associée à d’autres dispositifs interactifs proposés par le musée, créés par d’autres équipes, permettant des approches complémentaires aux plans historiques, géographiques et techniques.

Projet : conception et design interactif

Aborder les « mains négatives » préhistoriques à partir d’un dispositif tactile innovant constituait un raccourci remarquable en même temps qu’un enjeu à la fois muséographique, esthétique et technologique. La table est traitée comme un « cadrage » : une fenêtre de 4,80 x 1,20 m que les visiteurs peuvent déplacer en la faisant glisser, le long d’une très grande image des parois de la grotte, à l’échelle 1. Ils découvrent alors progressivement 16 empreintes préhistoriques, inscrites et repérées dans leur contexte. Lorsqu’on touche l’une d’entre elles, un « plan de travail » apparaît, qui permet d’accéder à un ensemble d’informations et d’actions autour de l’empreinte sélectionnée : composition et application de la couleur, technique employée, hypothèses historiques, examen de détail avec une loupe dynamique. Les visiteurs peuvent également apposer leur propre empreinte sur le plan de travail, en regard de la main préhistorique. L’ensemble de l’interface est intuitive, développée à partir de simples cercles blancs qui s’apparentent au graphisme du Braille : le visiteur découvre les informations « en tâtonnant », au fil de son toucher.

L’ensemble des images (parois, images des mains, empreintes des hommes préhistoriques et des visiteurs) est représenté à l’échelle 1 : les dimensions inhabituelles de la table, propres à un usage collectif, sont inscrites dans un contexte spatial réel – celui de la grotte et de ses parois – qui devient palpable et comparable au corps. L’ensemble des actions des visiteurs s’effectue par le toucher et l’effleurement, dans une référence constante au geste originel des empreintes préhistoriques. Ces deux dimensions – échelle et toucher – actualisent et matérialisent la présence de ces traces multi-millénaires, en même temps qu’elles offrent une proximité d’examen impossible dans la grotte elle-même.

Objectifs du prototype

Le prototype de la table a été développé dans le cadre de Surfaces Sensibles, de novembre 2009 à mai 2010. Il constitue un tiers (160 x 120 cm) de la surface de la table finale (480 x 120 cm). Cette dimension permettait d’expérimenter et d’exemplifier l’ensemble des problématiques technologiques générées par la création d’une table multipoints de cette dimension : système d’illumination infrarouge, captation par caméras synchronisées, contraintes de vidéoprojection, contraintes de structure… L’échelle de ce dispositif et ses caractéristiques constitue ainsi un démonstrateur des recherches menées au sein de l’axe Surfaces Sensibles. Le prototype a été conçu de manière à pouvoir ensuite être pérennisé, indépendamment de la table finale construite à Gargas. Il pourra former le support d’autres projets et expérimentations menées au sein de Drii ou avec d’autres partenaires.

Principaux enjeux de la recherche

1. Réalisation d’un dispositif de captation par illumination de la surface avec des faisceaux lasers infrarouge (LLP), permettant une reconnaissance de l’effleurement. Nos travaux visaient la conception d’un dispositif d’accroche et de réglage des faiseaux lasers qui permette de régler leur alignement avec une précision inférieure à 1mm, du fait de la grande dimension de la table. Ce dispositif devait également interdire toute possibilité de vision des faisceaux dans l’axe pour les visiteurs, tout en permettant un entretien aisé dans un contexte d’exploitation muséographique. Les études d’ingénierie ont conduit à l’utilisation de micro-supports articulés en 3D pour les modules lasers et à la conception d’un capotage mixte (acier et tranches de plexiglas) répondant aux contraintes de sécurité et d’entretien.

2. Mise en œuvre de cette technique sur une très grande surface, nécessitant de résoudre les problèmes d’occlusion optique liés à son utilisation collective (12 personnes en simultané). De nombreux tests avec captations par caméra infrarouge ont été réalisés sur le prototype de 160 x 120 cm, afin de déterminer l’espacement et les répartitions angulaires permettant d’éviter toute occlusion.

3. Réalisation d’une rétroprojection sans déformation à la surface, avec un recul extrêmement réduit (80 cm de hauteur). Cette contrainte se doublait d’une nécessité d’aligner les projecteurs entre eux au pixel près, afin de pouvoir gérer l’affichage de l’image d’ensemble à partir d’une seule scène en Open GL, découpée ensuite en segments continus. Ceci impliquait de ne pouvoir utiliser aucune correction de trapèze ou d’échelle de l’image. L’ensemble de la table a été modélisée en 3D avec tous ses équipements, de manière à optimiser l’emplacement et les dimensions de toutes ses composantes, et déterminer le meilleur compromis en termes de puissance, focale et résolution des vidéoprojections. Nous avons adopté un dispositif composé de 3 vidéoprojecteurs compacts avec focale 0.7 et miroirs mirolège de grande taille, qui permet une vidéoprojection sans aucune déformation ni correction de trapèze. Les 3 projecteurs sont gérés par une carte Matrox Triplehead qui permet l’envoi d’une seule et même matrice vidéo pour l’ensemble. La résolution générale reste modeste (3072 x 768), du fait des modèles disponibles sur le marché combinant faible encombrement et très large focale. Ce point pourra être amélioré dans les versions suivantes, notamment eu égard au fait que la division entre les 3 segments d’image reste perceptible de profil pour les visiteurs – mais invisible lorsque l’on manipule la table de face. Cette disposition a été conçue en allers-retours permanents avec les études de graphisme, conçues pour exploiter au mieux les contraintes de résolution.

4. Conception d’un dispositif de captation par plusieurs caméras avec optique de très grand angle sans déformation, synchronisées sur une grande surface. Nos études et tests à l’Ensad nous ont amenés à opter pour un dispositif de 3 caméras CCD monochromes VGA 1/2 pouce (permettant, avec une focale de 3.5 mm, un champ de 160 x 120 cm, soit la dimension d’un tiers de table et du prototype lui-même), gérées par un pilote créé par Antoine Villeret, qui autorise une gestion d’une seule couche d’image et la reconnaissance de l’ordre des caméras.

5. Résolution des problèmes structurels pour la surface de la table elle-même, nécessitant la conception d’un multicouche répondant à la fois aux contraintes de portée, de qualité de vidéoprojection, de captation par infrarouge et de protection aux chocs. Les études de prototype ont permis de tester un grand nombre de configurations pour le « sandwich » composant la surface de la table, en comparant les résultats obtenus sur ces quatre plans : résistance, absence de flèche, qualité de la rétroprojection, protection de la surface.

6. Une problématique supplémentaire réside ici avec la superposition de l’ensemble de ces enjeux sur un même objet, ce qui entraîne de très nombreuses contraintes en matière d’ingénierie et de dispositif informatique et le différencie d’emblée des conceptions de murs tactiles.

Transfert

La résolution des études de prototype a permis d’aboutir à une table « modulaire » qui peut se décliner par unités de 1,60 x 1,20 m – dont la pérennisation du prototype constitue une illustration. Cet aspect permettra, à terme, un transfert optimal de la recherche vers d’autres projets ou champs d’expérimentation, qu’ils concernent des projets en art, des propositions muséographiques ou institutionnelles.

Quentin Bréant est né en 1986 au Havre. Il rejoint l’Ecole Régionale des Beaux-Arts de Rouen après son cycle secondaire, et obtient en 2009 son DNSEP arts en axant son travail sur la fiction et la politique. Ses fictions mêlent à la fois réalité et imaginaire, géopolitique contemporaine et situations absurdes. Ses réalisations ne s’attachent pas qu’à un seul medium, la pluralité des moyens employés permet au spéctateur divers chemins d’accès.

En 2009, il rejoint l’Ecole Supérieur d’Arts du Havre en section Design Graphique. Il découvre alors une nouvelle facette du multimédia et crée des programmes prenant en compte l’activité de l’utilisateur. Il explore alors les multiples possibilités de l’interactivité, des rythmes sonores aux mouvements dans l’espace, il attache une grande importance au résultat graphique de l’œuvre.

Recherche

La fiction est un scénario écrit à l’avance, quoi qu’il se passe, le scénario ne dévie jamais de l’intention de l’auteur. Or que se passe-t-il si l’on ajoute l’interactivité à la fiction? si une variable non prévue dans le scénario intervient par le biais d’une personne étrangère à la création de la fiction?

Si les bases d’une fiction interactive tournent bien autour d’un scénario, son évolution quant à elle tient plus du registre du système. Un système basé sur des règles prédéfinies mais dont la résultante échappe à l’auteur. Comprendre les règles et surtout les dérivations de ce système permet d’anticiper de plus en plus les facteurs inconnus et ainsi de proposer un système d’auto-génération de la fiction de plus en plus qualiitatif dans l’évolution. Une position, un déplacement, une distance, un son… tous interviennent comme de multiples variables alimentant le système qui s’en nourrit pour évoluer. Le spectateur devient acteur de la fiction, engendrant des réactions auxquelles le système doit s’adapter selon les règles.

After finishing a degree on Sound and Image at Superior School of Arts and Design (ESAD.CR) in Caldas da Rainha, Filipe worked as a multimedia designer at Ydreams in Lisbon and as assistant teacher at ESAD.CR where he taught in the fied of digital arts. At the moment he’s a scholarship student at University of Porto, Faculty of Engineering (Feup), in the Digital Media PhD from the UT Austin-Portugal program and a student researcher at DRII, EnsadLab, in Paris.

He has been developing new media projects since 2004, researching methods to explore routine as an augmented reality, and as a source for aesthetic experience. Using analogue, digital or biological materials his works look for an organic and autonomous behaviour and they are normally based on simple rules that reach complex and ever changing, unpredictable outputs. Lately he has been exploring web-based social networks through a behavioural perspective. Some of his works were already featured at Jovens Criadores, Future Places, Artech, Culturgest, Mapa, Sonda, Cada, Skopje’s Biennial 09 etc.

Research

Keywords: phenomenology; experience; embodiment

Interactive art as a form characterized by a material openness that involves a physical structural change in the artwork and the active participation of the spectator, has been insufficiently inspected by semiotic and linguistic approaches.

The present research aims to understand the relationship between artist, spectator and artwork, analyzing interactive art through a semiotic and phenomenological perspective, with the expectations to define a model regarding aesthetic experience in interaction that might eventually provide a toolbox for designers and artists when drawing their interactions.

Side by side with a conceptual framework development, several experiences using gesture analysis, tangible and haptic interfaces should validate the different assumptions in the model.

http://la-neige-en-ete.net/filipe/

◀ Equipe

Ce logiciel doit être associé à un écran tactile. Il vise à offrir un contrôle rapide et intuitif des lumières d’un plateau. En offrant de larges possibilités autour de variations d’intensité et d’organisation des mémoires et effets lumière, cet outil peut répondre aux besoins de plateau de danse, théâtre, cinéma et dispositifs plastiques.

Les buts et les contraintes de ce logiciel sont défini à partir du travail de recherche mené par Annie Leuridan et Cyrille Henry lors des créations de spectacles.

D’un point de vue technique, l’implémentation actuel est composé d’un moteur en Pure Data, ainsi qu’une interface graphique programmé en python.

Le développement de Jotac se fait avec le soutien du Programme DRii d’EnsadLab (Laboratoire de l’École nationale supérieure des arts décoratifs)



Lux est une application pour iPhone refusée à la distribution sur App Store. Aux dires de l’équipe de développement d’Apple, il s’agit d’une application « aux fonctionnalités minimales et réduites » et de fait, « non appropriée à exister sur l’iPhone ».

Si, comme l’a soigneusement souligné l’équipe d’Apple, ce projet n’a pas de réelle utilité, c’est précisément ce point qui justifie son existence : effectivement, Lux ne sert n’a pas d’utilité, si ce n’est à déplacer les modes d’utilisation de l’iPhone. Pas d’écran à toucher, ni d’images à agrandir, ni de carte géographique à retourner, ou de contenu à lire. Comme son nom l’indique, Lux réduit l’iPhone à une source de lumière. Torche numérique pleine de pixels, le téléphone devient un prisme incertain : chaque mouvement éclate la lumière davantage pour mieux déborder de l’écran.

Par la lumière, l’application évoque le désir d’une interaction au-delà de l’outil d’aujourd’hui, avec lequel le spectateur n’est plus qu’un démonstrateur de dispositifs technologiques. Certes, les relations hommes/machines se diversifient, il n’en découle pourtant rien d’interactif, au sens le plus noble du terme. on interagit pour déclencher, mais l’on ne produit rien. cette lumière sur iphone, c’est un point d’interrogation en forme de rectangle d’un vide à remplir, autrement que par des zones cliquables et/ou touchables.

Prévu pour l’automne 2011, ce spectacle pose cinq circassiens et danseurs dans un décor en mouvement : un écran déformable pouvant s’étirer dans toutes les directions jusqu’à devenir toute la boîte du théâtre. Cette boîte est construite avec un plancher et un plafond suspendus et motorisés de 6 x 8 m. Les murs sont quant à eux faits en textile extensible. Un dispositif vidéo permet de capter la déformation du décor et d’adapter les textures aux objets en temps réel. En jouant ainsi avec cette scénographie ainsi qu’avec les agrès qui viennent la compléter (sangles rebondissantes, échafaudages, escaliers, planches…), les performeurs évoluent dans un monde absurde, déshumanisé où plus aucun repère sensible n’est sûr.

Fantasmallégorie est le premier volet d’un diptyque. Ce nouveau spectacle traitera de la perception de la réalité dans la société numérique de demain. Grâce à la mise en oeuvre de jeux d’optiques inspirés du peintre Esher, dans un environnement ou l’intrusion de données virtuelles dans le réel est devenue la règle au point d’envahir les interprètes jusque dans leurs entités propres. Ces cinq sujets évoluent dans l’espace architectural d’un éternel présent en reconstruction permanente. Ils s’y confrontent pour en explorer les contours, exploiter les failles, sortir de la caverne. L’objectif artistique du projet étant d’accompagner le spectateur dans une prise de recul sur notre système de pensée et la manière dont celui-ci se construit dans une époque où le virtuel prend de plus en plus le pas sur ce qu’on avait encore récemment coutume de considérer comme des réalités tangibles.

Antoine est chargé de la conception et de la réalisation du dispositif interactif ainsi que de la création sonore du spectacle.

Distribution :
Sur scène : Boris Gibé, Eric Lecomte, Florent Blondeau, Xavier Kim (Distribution en cours / 5 acteurs de cirque)

Collaborateurs artistiques :
Conception, scénographie - Boris Gibé
Mise en scène – Camille Boitel
Environnement sonore, dispositif interactif – Antoine Villeret
Création vidéo et illusion – Clément Debailleul
Machinerie, accessoires – Nil Adminrari, Les Choses de Rien
Costumes – Florinda Donga
Photos – Jérôme Vila
Administration de production – Bernard Saderne
Diffusion – Jean-Francois Pyka

L’installation est situé dans un espace parallélépipédique, les murs deviennent les surfaces de la projection. Les images projetées montrent l’espace de l’installation en miroir.

À partir de données 3D captées en temps réel de corps déambulant dans l’espace, la représentation des mouvements se fait dans une continuité temporelle dont la transcription donne l’illusion d’un volume qui creuse des sortes de « galeries » dans l’espace virtuel représenté sous forme de projections vidéos.

lorsque les personnes présentent dans l’espace s’éloignent des murs de la salle, leur déplacement provoque un dédoublement de l’espace virtuel dans lequel le personnage, virtuel, continue son chemin. La projection sur les murs montre ainsi un espace de plus en plus complexe et labyrinthique.

Boo! est une installation interactive, une animation 3d projetée sur un écran. Elle met en scène une horde de zombie affamée, dont l’effectif dépend du nombre de spectateurs. En avant plan, un individu à terre, en piteux état, suppliant les spectateurs/utilisateurs de lui venir en aide.
Seule anomalie à cette scène, l’étrange comportement de ces morts vivants. Si le spectateur cache son visage ou tourne le dos à l’image le zombie se trouvant devant lui avance de quelques pas maladroits. Si le spectateur regarde vers le mort vivant, il s’arrête net. Comme si un simple regard, curieux, dégouté, captivé pouvait éveiller un certain sentiment de timidité ou de honte chez ces êtres sanguinaires.
Le scénario de l’installation, dont l’esthétique est proche de celle d’un «jeu vidéo» actuel, n’a pas d’autre alternative qu’une finalité toujours vouée à l’échec: les morts vivants se ruent sur la victime en l’absence d’utilisateurs ou lorsque que ces derniers regardent discrètement la séquence, caché derrière leur mains.
Une fois que les zombies ont finis leur met favoris, le cadre de la scène s’élargit, laissant apparaître en avant plan une nouvelle victime. Seule la temporalité de l’acte, variant en fonction de l’attitude des utilisateurs, module les évènements.

Au CNRS de 1976 à 1981, il travaille avec le Musée des Arts et Traditions Populaires sur les collections ethnographiques, où il dirige en particulier la publication sur le mobilier rural.

De 1981 à 1986, il est chargé au Ministère de la Culture du développement des Nouvelles Technologies pour les secteurs de la création et du patrimoine.

Il est professeur à l’Ecole Nationale Supérieure des Arts Décoratifs (ENSAD) depuis 1987 où il a développé et coordonne les enseignements sur l’interactivité et le multimédia.

Parallèlement, il met en place le projet Videomuseum (réseau mutualisé des collections d’art moderne et contemporain visant à développer en commun des méthodes et des outils utilisant les nouvelles technologies de traitement de l’information afin de mieux recenser et diffuser la connaissance de leur patrimoine muséographique).

Il est également concepteur et réalisateur de sites Web et CD-Rom dans le domaine culturel :

- Sites Web de l’exposition Cézanne au Grand Palais, du projet « Palais du Cinéma au Palais de Tokyo », de l’ADAGP, …

- CD-Rom « Encyclopédie de l’art moderne et contemporain », catalogues « papier, CD-Rom et Internet » de plusieurs collections ( Musée d’Art Moderne de St-Etienne, collection Design du Centre Pompidou…)

◀ Equipe