Pour acquérir de la maîtrise, les pilotes ont besoin de formation réaliste, mais ils doivent également éviter des coûts inutiles et des risques. Les avions réels fournissent la formation la plus évidemment réaliste, mais ils sont dangereux dans des mains inexpérimentées. Pendant ce temps, les simulateurs peuvent se reproduisent une très grande partie de l’apparence et de la sensation de vol réel sans le danger de perdre un avion ou un pilote, mais ils ne sont pas aussi « intéressants » quand on en vient à des manœuvres complexes comme le ravitaillement de carburant en vol (pour les avions militaires). Aussi, la NASA développe une technologie appelée Fused Reality ou Réalité Fusionnée, qui utilise un casque spécial qui combine un véritable vol dans un avion réel avec une simulation superposée.
La « Fused Reality » a été baptisé ainsi par son inventeur, Ed Bachelder, directeur technique de Systems Technology, Inc de Hawthorne, en Californie, où le développement a commencé en 2003. Le système fonctionne comme des lunettes de réalité augmentée telles que les Google Glass ou des lunettes numériques pour pilotes en combinant le monde réel avec des graphismes informatiques interactifs à l’intérieur de l’écran du casque.
Le résultat est une vue de la zone autour de l’avion qui mêle une scène réelle avec des éléments générés par ordinateur qui permettent à l’élève de pratiquer des exercices compliqués, tels qu’un atterrissage sur une piste en altitude, un vol en formation, et le suivi d’un ravitaillement aérien, sans interférer avec le les opérations régulières de l’avion.
«Je vais voir le monde réel à travers ma caméra, de sorte que je vois les montagnes et les nuages et le panneau de contrôle de l’avion, mais je vole en formation avec un tanker virtuel», explique le pilote Scott Howe, décrivant un vol en formation simulée avec un avion ravitailleur KC -135. «J’essayais juste de rester stable avec cette citerne volante et pratiquer un ravitaillement aérien avec le système (de Fused Reality). »
La technologie de Fused Reality a été testée au Armstrong Flight Research Center de la NASA à Edwards, en Californie, et par la National Test Pilot School (NTPS) à Mojave, où trois vols d’évaluation ont été faits en 2012 en utilisant un simulateur de vol hautement modifié Learjet. Une deuxième phase de test a été réalisée en Septembre 2014, avec neuf vols à bord d’un avion de recherche Gippsland GA-8 Airvan du NTPS.
La NASA voit la Fused Reality comme ayant des applications non seulement dans la formation, mais aussi dans l’évaluation des nouveaux avions en permettant aux pilotes d’essai d’acquérir une expérience pratique des nouvelles configurations, des algorithmes de contrôle de l’avion, et de affichage dans des conditions réelles sans le besoin immédiat d’un avion expérimental. Il peut également trouver des applications dans l’entraînement des astronautes et la pratique d’atterrissage de transporteur.
« La Fused Reality permet à tous les pilotes d’apprendre à exécuter des tâches difficiles et dangereuses telles que le ravitaillement en vol, l’atterrissage sur des porte-avions, le vol en formation et la lutte aérienne, qui sont généralement enseignées dans un simulateur de vol au sol sur la base, en plaçant le simulateur en vol dans un avion réel », explique le directeur du projet Armstrong Bruce Cogan. « Les images virtuelles des pistes, des porte-avions et des avions ravitailleurs sont présentés au pilote dans un écran monté sur le casque qui réagit avec la dynamique réelle de l’aéronef piloté. »
La technologie de Fused Reality subira d’autres tests en Mars prochain au sein du Programme de gestion de test de la Air Force Test Pilot School, où les pilotes vont concevoir un test de vol en utilisant un avion léger Beechcraft King Air C-12, qui sera utilisé pour comparer le système avec une tâches classiques de qualité de manipulation.
http://www.nasa.gov/centers/armstrong/features/fused_reality.html