Depuis deux ans, TELECOM Nancy a mis en place des enseignements et projets dédiés à la réalité augmentée, mixte et s’est dotée de lunettes HoloLens de Microsoft.
L’innovation fait partie des valeurs fondamentales de TELECOM Nancy. L’école, en lien avec ses entreprises et laboratoires de recherche partenaires, fait constamment évoluer ses enseignements afin de former ses élèves aux thématiques et technologies émergentes dans le domaine de l’informatique et du numérique.
Développées par Microsoft en partenariat avec la Nasa et commercialisées depuis fin 2016, ces lunettes permettent, de façon autonome (pas besoin d’ordinateur ou de smartphone), de simuler des hologrammes qui s’intègrent dans le champ de vision de l’utilisateur tout en conservant son environnement réel (à la différence des casques de réalité virtuelle par exemple) et d’interagir avec (on parle ainsi de réalité mixte).
L’école forme ses élèves de 2e année de l’approfondissement « Logiciel embarqué » au développement d’applications sous HoloLens.
Elle bénéficie pour cela du soutien de l’entreprise Actimage, parrain de la promotion 2014 de TELECOM Nancy et partenaire officiel de Microsoft pour les projets de Réalité Augmentée, Mixte.
Les élèves ont pu bénéficier d’une présentation des applications et d’un atelier d’initiation à la plateforme de développement 3D Unity par Jérémy Boistière, expert HoloLens de la Business Unit parisienne d’Actimage, en charge de l’équipe constituée de développeurs, de graphistes 3D et de UI/UX designers développant les applications HoloLens.
Actimage développe de nombreux projets utilisant la technologie HoloLens dans les domaines de la santé, de l’industrie, du commerce, de la culture ou de l’éducation tels que notamment « Hol’Autisme », un projet de recherche et développement sur l’apprentissage avec la réalité mixte pour les enfants atteints de troubles du spectre autistique (Lauréat du concours French IOT 2017).
DES PROJETS AUTOUR DE LA RÉALITÉ AUGMENTÉE, MIXTE À TELECOM NANCY
Dans le cadre des modules « Systèmes Embarqués Portables » et « Objets Connectés Intelligents« , les élèves de l’approfondissement LE de TELECOM Nancy ont travaillé sur un projet couplant des sondes de température, un Winphone et les lunettes HoloLens.
L’objectif du projet est de pouvoir afficher la température d’une pièce du bâtiment en réalité augmentée.
La localisation de l’utilisateur se fait grâce au GPS du smartphone qui récupère la température correspondante en interrogeant la sonde la plus proche. L’information est ensuite communiquée aux lunettes HoloLens qui l’affichent en direct. Certains élèves sont allés jusqu’à la réalité mixte en proposant une interaction « virtuelle » avec la sonde (changement de couleur, d’unité, …).
Ce projet se décompose donc en 3 parties ; le service web fournissant la température à partir des capteurs, l’application sur Winphone pour la localisation et la détection de la sonde la plus proche et l’application sous HoloLens pour l’affichage augmenté et l’interaction.
Les technologies utilisées pour le développement d’applications UWP (Universal Windows Plateform) avec HoloLens sont l’environnement de développement Microsoft avec Visual studio 2017 (également utilisée pour de développement de l’application sous Winphone), la plateforme de développement 3D Unity (moteur de jeu utilisé dans le domaine des jeux vidéo) et les langages C++ ou C#.
Le travail sur ce projet permet aux élèves d’acquérir des compétences dans le domaine des systèmes embarqués et des objets connectés intelligents.
Ces projets sont innovants parce qu’en lien direct avec le monde de la recherche (CRAN / LORIA) autour de l’industrie 4.0 (ou industrie du futur) qui vise à « organiser des processus de production induit par les innovations liées à l’internet des objets et aux technologies du numérique, tels que la cobotique, la réalité augmentée, l’impression 3D, l’intelligence artificielle, afin d’exploiter les données issues du Big data et de la maquette numérique » (définition wikipédia).
Contact : Vincent BOMBARDIER, enseignant-chercheur responsable du module « Logiciel Embarqué«
DÉCOUVREZ DIFFÉRENTS PROJETS DÉVELOPPÉS PAR ACTIMAGE AVEC HOLOLENS :
Mixed Reality Concept n°1: Museum from Actimage on Vimeo.
Mixed Reality Concept n°2: BIM Visualisation from Actimage on Vimeo.
Mixed Reality Concept n°3: Factory Layout from Actimage on Vimeo.
Mixed Reality Concept n°4: A new way to work from Actimage on Vimeo.
Mixed Reality Concept n°5: The future of E-Shopping from Actimage on Vimeo.
Hol'Autisme : pour une meilleure inclusion avec la réalité mixte et l'IA from Actimage on Vimeo.
Actimage – Together let’s create powerful new experiences from Actimage on Vimeo.