Réalité augmentée : passer de la technologie aux usages pédagogiques ?
Par Françoise Grassias le 12 mai 2018, 13:55 - Numérique et enseignement - Lien permanent
[Article du 2016-06-08, révisé]
La « réalité augmentée » qui s'installe dans de nombreuses pratiques culturelles, commerciales, ludiques... permet de réinterpréter la réalité et de l'enrichir par une vision personnelle, de faire voir l'invisible.
S’agit-il d'un simple geste de communication ? Ne s'agit-il que d'un concept ludique ? Ou est-ce un geste potentiellement artistique, voire actuellement artistique ?
Passer de l'utilisateur à l'auteur, pour les professionnels de la communication, il s'agit là d'une ouverture prometteuse... Mais ce concept est-il prometteur aussi en terme de pédagogie des arts plastiques à visée artistique ? Comment passer de la technologie aux usages pédagogiques ? Apporter une valeur ajoutée à la notion de présentation ? Faire œuvre à part entière ?
Le déploiement des classes mobiles de tablettes dans le cadre du plan national pour le numérique pourrait permettre un usage créatif de cet outil qui semble innovant et prometteur particulièrement dans le cadre d'une pédagogie de projets...
Un champ de recherche se présente. En voici un premier volet dans lequel je présente l'état de mes réflexions et expérimentations.
Qu'appelle-t-on réalité augmentée ?
Il existe de nombreuses définitions de la réalité augmentée, procédé dont on peut considérer qu'il s'inscrit dans la Réalité virtuelle à laquelle il apporte une expérience singulière.
La réalité augmentée (RA) mélange en temps réel des images de synthèse avec des images issues du monde réel filmé par une webcam. Elle propose une intégration réel /virtuel. On peut considérer aussi qu'elle crée un espace entre le réel et le virtuel et que c'est là que réside une part de sa singularité. Elle associe un élément virtuel au monde réel. Elle superpose un modèle virtuel 3D ou 2D ou des informations graphiques, textuelles à la perception que nous avons naturellement de la réalité, et cela en temps réel... La presse, notamment les manuels numériques, et la publicité se sont emparées de cette technique.
Cette technique utilise un overlay (d’ « overlay » = recouvrir, terme utilisé en vidéo particulièrement en post-production)
Il existe différentes méthodes qui permettent d'incruster des objets virtuels dans une séquence d'images. Elles permettent de donner l'impression que les deux objets appartiennent à une même réalité.
On se posera d'ailleurs la question d'analyser la spécificité de cette incrustation dont l'expérience se différencie radicalement avec une incrustation vidéo classique (ex ; sur fond vert)
Des « références » potentielles pour un pratique en classe existent déjà. Etat des lieux :
-La RA infiltre la BD. Par exemple dans la BD « La douce » François SCHUITEN fait appel à la réalité augmentée et une locomotive sort du livre.
-La société Dassault système, partenaire, met ses technologies également au service des projets architecturaux de Frank Gerhry
http://projets-architecte-urbanisme.fr/07-10-14-lyon-my-confluence-application-mobile/
La RA permet d 'enrichir le parcours d'exposition, et se trouve présente dans des Projets culturels :
-Projets de Street Art
-Projet culturel GAMME de réalité augmentée pour les musées
http://ecs-digital.com/culture/realite-augmentee-musee-exposition/
Projets pour l'urbanisme :
-Ainsi, le laboratoire de réalité augmentée d'Orange fait découvrir au musée d'Orsay les dessous de L'Atelier du peintre de Gustave Courbet http://www.entrezdanslatelier.fr/fr_FR/
-La RA est au cœur de projets commerciaux. On se souvient du projet Google Glass (2014,) à destination du grand public. Ce dispositif filmait ce qu'on avait devant soi et superposait des informations venant du web. On sait que ce projet n'a pas été suivi du succès escompté
http://lunettesgoogle.fr/
http://ecs-digital.com/culture/realite-augmentee-musee-exposition/
-Le laboratoire de réalité augmentée d'Orange nous fait découvrir au musée d'Orsay les dessous de L'Atelier du peintre de Gustave Courbet
http://www.entrezdanslatelier.fr/fr_FR/
-Pour l'utilisateur, la RA existe donc sous forme d'applications : aide à la navigation, GPS, boussole, aide à la visite de sites patrimoniaux
-Il existe des logiciels commerciaux : Boujou, MatchMover
-On sait aussi que le Futuroscope à Poitiers a proposé depuis 2008 une attraction : Les animaux du Futur qui utilise la RA.
Pour une utilisation en classe ?
Il existe de nombreuses applications pour smartphone ou tablettes. Dans la perspective d’un usage pédagogique en arts plastiques, il s'agit donc en un premier temps de faire un tri entre les applications qui font de l'élève un utilisateur (elles peuvent constituer des ressources culturelles) et celles qui font de lui un auteur / créateur comme Augment ou Aurasma (devenu HP Reveal). Seules des applications dont il existe une version gratuite ont fait l’objet de mon expérimentation.
Augment
Utilisée par Orlan dans l'exposition au CDA (2015), il s'agit d'une application gratuite Un enregistrement doit être effectué en ligne afin de créer un compte. Une connexion à Internet est nécessaire.
La question que je me suis posée est la suivante : Quel est le statut de la production : une simple incrustation ?
J'en ai conclu que la réalité augmentée est différente d'une simple image. C'est différent suivant qu'on est auteur ou simple utilisateur. La RA est une expérience de la visualisation du réel via une caméra avec un ou plusieurs élément(s) ajouté(s). Le réel est vu et manipulé à travers une interface (tablette, smartphone), en temps réel en relation avec le geste. L'acte d’auteur fait vivre cette expérience singulière.
L'application scanne l'image et la recouponnait. Elle lui superpose du contenu. L'objet virtuel ne semble pas être visualisé sur l'écran mais dans l'espace.
La pratique m'est apparue différente de celle que constitue l'infographie. Une pratique même basique de la RA permet de s'emparer autrement du numérique, d'avoir le sentiment d'aller plus loin.
En quoi peut consister cette pratique ? :
On met un modèle en mémoire (ou on utilise un modèle existant dans la bibliothèque -modèle 3D fixe ou animé enregistré dans l'application et enrichi potentiellement par d'autres utilisateurs (ex : une chaise).
Cet objet viendra s'installer dans l'espace visualisé par la webcam . On pourra en prendre un instantané photographique.
Il s'agit d'une prise de vue innovante. Une captation du réel différente du geste photographique habituel. Une sorte d'image fantôme qui s'installe entre le réel et ce qui est filmé..
 |
 |
On peut apprendre à l'application à reconnaître une image et . Enregistrée sous la forme d'un Tracker, le l'application reconnaîtra l'image en question et lui associera automatiquement l'objet enregistré.
Une création personnalisée de volumes à incruster peut être effectuée avec SketchUp. Pour cela il faut disposer d'un compte sur le site.
Ainsi un volume construit avec SketchUp peut être appelé et venir augmenter le réel visualisé sur l'écran. Et cela sans nécessité d'enregistrer une vidéo C'est une interface de monstration
Il s'agit d'un autre geste. Un geste numérique, une incrustation de type Overlay en temps réel .
Quelques pistes pédagogiques se dessinent
-travail sur le rapport d'échelle
-travail sur le vrai/le faux
-travail sur le réel/le virtuel
-on peut imaginer la conception et la mise en place d'une explication (justification, verbalisation textuelle ou sonore qui vient se surimposer.
 |
 |
Aurasma (devenu HP Reveal)
Aurasma est une application gratuite de réalité augmentée dont la mise en œuvre est relativement différente de celle d'Augment.
Avec Aurasma, la démarche est la suivante : on filme quelque chose qu' Aurasma va reconnaître ensuite. Un objet numérique lui sera automatiquement associé à cette « vision »que l'application va reconnaître.
On crée une Aura (l'aura est ce qu'on incruste, un élément Overlay) et on crée l'élément qui est reconnu par l'application comme élément déclencheur. C'est lui qui déclenche l'incrustation. Cet élément déclencheur est appelé Trigger. Dans Augment, il est appelé Tracker.
L'aura est visible sur l'appareil sur lequel elle a été créée.
On peut aussi utiliser des auras toutes faites, disponibles sur le site de l'application.
Par exemple, une piste d'usage pourrait consister à proposer aux élèves de filmer leur production et de concevoir un projet de RA : dès qu’on regarderait la production avec l'application, un document (textuel, sonore, iconographique ou autre) apparaîtrait et viendrait enrichir la production de l'élève.
Ex : l'image déclenchante est un travail d'élève. Elle déclenche l’apparition d'un texte, d’ une image -référence, une vidéo, un texte, un enregistrement sonore qui présente son travail.Quand il viserait sa production (élément du réel) avec la webcam de la tablette ou du smartphone, l'application la reconnaîtra et lui associera l'explication (l'objet virtuel.
D'utilisateur de RA, l'élève devient auteur.
Une sorte de verbalisation augmentée, de narration transmédia.
Liens vers les applications :
- Augment: : https://www.augment.com/
- HP Reveal (anciennement Aurasma) : https://www.hpreveal.com
Conclusions provisoires : Des pistes de mise en oeuvre
La Réalité augmentée de type Overlay constitue une opportunité de renouveler l'expérience du numérique.qui semble prometteuse. Elle peut permettre de travailler l'échelle, la narration (1), une situation insolite, une verbalisation innovante parce que « enrichie »....et est adaptée aux équipements mobiles que sont la tablette et le smartphone.
Elle semble pouvoir s'intégrer dans une démarche de projet en concevant une image enrichie complexe.
Elle semble pouvoir aussi s'intégrer dans un projet interdisciplinaire (EPI)
C’est la question de l'artistique qui se pose à présent. Cela va faire l'objet de la suite de mon expérimentation.
.----
(1) Narration transmedia ? Présentation transmédia ? Verbalisation transmédia ?La narration transmédia (à relier au concept de transmédialité) est une méthode nouvelle de développement d'œuvres (fiction ou documentaire) et de produits ludiques qui se caractérise par l'utilisation combinée de plusieurs médias pour développer des narrations. Chaque média mis en œuvre propose un contenu différent. La narration transmédia est différente des modes de narration classique. C’est une une narration "augmentée".