Holmes, S. L.

Automatización de elementos de cabina de aeronave y su

interacción con equipo personal de vuelo de piloto.

Descripción y Objetivos

El presente proyecto de I+D+i tiene como objetivo el implementar la

utilización de wearables para la monitorización de la salud de los pilotos
de aeronave, así como la automatización de los comandos por voz y la
conectividad de elementos de cabina y el equipo personal de vuelo de los
pilotos de aviones de caza. Dada la singularidad de las maniobras que se
realizan y su posible impacto en su salud que puede ser causa
contribuyente en el accidente de una aeronave. Todo lo anterior está
enfocado a la mejora de las condiciones HMI (Human Machine Interface)
para los pilotos de aeronaves de caza y que en el futuro podría servir de
base para nuevos desarrollos/colaboraciones con la Industria de Defensa
nacional.

El alcance cubre las áreas de medicina aeronáutica, tecnología

electrónica y computacional disponible a nivel comercial para wearables,
aplicación de wearables para Equipo Personal de Vuelo y normativa en
cabina, tecnología de wearables embarcado en aeronave y avances en la
tecnología de wearables, IoT y reconocimiento de voz mediante NLP.

Al tratarse de un proyecto de interés para las Fuerzas Armadas, en

particular del Ejército del Aire, se han establecido contactos con el
Ministerio de Defensa, el Ministerio de Industria y la Universidad de
Castilla la Mancha, en su Departamento de Informática, las cuales han
mostrado interés en el objetivo del proyecto aprovechando la sinergia
Universidad-Empresa-Fuerzas Armadas que caracteriza al marco de la
ciudad de Albacete.
Estudio previo realizado:
• Estudio de Documentación relativa a Medicina Aeroespacial.
En particular, de los parámetros vitales más relevantes para la
Medicina de Vuelo y sus rangos y tolerancias para el
seguimiento de la salud del piloto. A partir de ahí, se decidirá
el tipo y modelo de wearable más apropiado para su
monitorización entre los candidatos relacionados más
adelante.
• Estudio de normativa aplicable a la utilización de medios
inalámbricos y consideraciones de Software y Hardware para
la certificación de Aviónica en un entorno de cabina y
sistemas embarcados. En concreto, análisis de la MIL-STD-
461: “Military Standard: Electromagnetic Interference
Characteristics Requirements For Equipment”, de la DO-254:
“Design Assurance Guidance for Airborne Electronic
Hardware” y de la DO-178C: “Software Considerations in
Airborne Systems and Equipment Certification”.
• Estudio de Documentación relativa a Acústica
En particular, de la aplicación de las últimas tecnologías en
Acústica para su utilización en interfaces de cabina.
• Estudio de Documentación relativa a NLP.
En particular, de la aplicación de las últimas tecnologías en
interfaz de cabina para NLP.
• Estudio de Documentación relativa a Procesado de Señal
Procesado Digital de Señal, transformadas de Fourier, etc.,
para reconocimiento de ruido y señales de diferentes tipos.
• Estudio de Documentación relativa a NFC, Bluetooth, XBee,
Wifi, etc.
En particular, de la aplicación de las últimas tecnologías
Wireless para su utilización en interfaces de cabina.
• Estudio de Documentación relativa a IOT.
En particular, de la aplicación de las últimas tecnologías en
interfaz de cabina para automoción con IOT.
• Familiarización con Python y MySQL. Se realizará un estudio
de dichas tecnologías para su uso en un primer demostrador
de la conexión Computador - Wearable.
• Estudio de Documentación relativa a Flexible Electronics.
En particular, de la aplicación de las últimas tecnologías en
Plastic Electronics para su utilización en interfaces de cabina
y/o wearables.
• Estudio de Documentación relativa a NVIS y LEDs
En particular, de la aplicación de las últimas tecnologías en
interfaz de cabina para NVIS e iluminación de paneles con
LEDs.
• Estudio de Documentación relativa a chips de diferentes
sensores relativos a HMI.
Reconocimiento gestual, comunicaciones NFC, Bluetootth,
FPGAs con motores de AI y reconocimiento NLP, etc. que
permitan usar el interfaz de cabina para interactuar con el
piloto.
• Implementación del demostrador. Se desarrollará una
conexión entre una base de datos MySQL, en la que
previamente se habrán cargado los datos proporcionados por
el dispositivo wearable, y un computador que generará la
información en forma de tablas y gráficos para facilitar su
monitorización.
Diseño e Implementación del Demostrador:
• Diseño de software y hardware basado en modelos con
Matlab/Simulink
Estudio a nivel avanzado que permita que el
software/hardware que se vaya a realizer modelado en
Matlab/Simulink pueda cumplir con DO-178C para equipos
con DAL-D según ARP4754 en entornos de cabina.
• Diseño de Sistemas de Control Digital
En algunos de los prototipos algunas de las funciones pueden
requerir un Sistema de Control, este se implementaría como
un Sistema Continuo ó Digital, valorando cada una de las
opciones según el caso.
• Diseño de Sistemas Digitales en FPGAs como motores IA
En algunos de los prototipos algunas de las funciones pueden
requerir un core de AI para su implementación.
• Implementación del demostrador:
o Se desarrollará el software utilizando los paquetes de
IA relevantes para NLP mediante Python y/o
Matlab/Simulink.
o Se desarrollará el software utilizando los paquetes y
librerías existentes para cada protocolo de
comunicaciones.
o Se desarrollará una conexión entre una base de datos
MySQL, en la que previamente se habrán cargado los
 datos proporcionados por el dispositivo wearable, y un
computador que generará la información en forma de
tablas y gráficos para facilitar su monitorización.
• Pruebas. Se realizarán las pruebas que demuestren el
funcionamiento del demostrador y su potencial integración
con el resto de HW y SW que forme parte del HMI objeto del
proyecto global antes descrito.
Medios a utilizar
• Hardware:
o PC convencional con Windows, un dispositivo
Raspberry Pi con Raspbian y wearables del tipo
smartband de las marcas FitBit y Xiaomi Mi Band.
o Tarjetas de entrenamiento específicas para cada
tecnología, así como las tarjetas a desarrollar
• Software:
o Se usará el IDE Visual Studio Code para desarrollo en
Python y MySQL, el paquete WAMP como servidor web
Apache y base de datos MySQL y Grafana para la
generación de gráficas.
o IDEs y paquetes de software NLP e IA más adecuados
basados en Python y/o Matlab/Simulink.
Valoración medioambiental:

Uno de los principales objetivos del proyecto es la reducción de elementos

electromecánicos de cabina, a través de la integración y virtualización de
los mismos; dicho objetivo se encuadra dentro de la tendencia More
Electric Aircraft (MEA), la cual persigue lo antes mencionado.
De esta manera, se reduciría la necesidad de baterías para los equipos antes
mencionados, y cuya fabricación, almacenamiento y, sobre todo, deshecho,
los cuales tienen un gran impacto medioambiental.
Bibliografía y fuentes consultadas:
• Python: www.python.org
• MySQL: www.mysql.com
• MIL-STD-461
• DO-254
• DO-178C
• Centro de Instrucción de Medicina Aeroespacial (CIMA):
https://ejercitodelaire.defensa.gob.es/EA/cima
• Military Medical Research:
https://mmrjournal.biomedcentral.com
• Formación en Coursera y Udemy sobre IOT.
• Wireless Communications and Networking for Unmanned Aerial
Vehicles. Walid Saad
• ARP4754
• Formación en Coursera y Udemy sobre Flexible Electronics,
etc.
• Formación de canales de youtube (p.e OSRAM LED
Fundamentals)
• Digital Systems Design using VHDL. Charles Roth
• Formación en Coursera y Udemy sobre NLP, Procesado de
Señal.
• Deep Learning for Natural Language Processing. Jason
Brownlee
Estudio de impacto de mercado:

Se considera una oportunidad de mercado tipo “Océano Azul”,

debido a la ausencia de competidores conocidos en el desarrollo de
Interfaz Máquina-Humano orientada a cabina de aviones de caza. No
existe demanda actual del producto en el entorno aeronáutico,
aunque se considera muy atractivo de cara a la Seguridad de Vuelo.
Se trata de un proyecto respaldado por el Ejército del Aire de España;
no obstante, miembros de otras Fuerzas Aéreas han mostrado su
interés en el mismo en las distintas demostraciones del mismo
ofrecidas en Ferias Internacionales de Defensa. Por ello, se considera
su potencial atractivo comercial para dichas Instituciones y también
para Aerolíneas Civiles, para las que se adaptaría una versión
escalable, ya que en ese caso no aplicaría el equipo personal de vuelo.
Además, se considera perfectamente integrable en el desarrollo de
futuros sistemas de armas como el FCAS, por lo que la sería muy
atractivo para la Industria Aeronáutica Europea.

A continuación, se detalla una matriz de Innovación en Valor:

• Eliminar: la atención total del piloto a los diferentes controles
de los equipos de cabina, para poder enfocarse
completamente en la navegación y el combate.
• Aumentar: la Seguridad de Vuelo, la interacción humano-
máquina.
• Reducir: la probabilidad de accidente por desvío de la
atención del piloto.
• Crear: base para desarrollo de técnicas de combate aéreo de
próxima generación.
Vía de financiación:

Se va a contactar con el Centro para el Desarrollo

Tecnológico Industrial (CDTI), para tratar de conseguir la
financiación necesaria para el proyecto, dentro de su
Programa Tecnológico Aeronáutico (PTA PYMES), Apoyo a
proyectos estratégicos de I+D en tecnologías aeronáuticas,
dentro del Objetivo “Nuevas Aeronaves Multipropósito y
Sistemas”.

CDTI: https://www.cdti.es/index.asp?MP=100&MS=924&MN=2

Trabajo realizado por:

Ángel Otálora Abellón
Victoria Gabriela Navarrete Larive
Juan Carlos Fermosell Romero
José Antonio Ortega Arroyo