Drones ISR & Thermal HUD

Todo comenzó como un experimento para llevar la inferencia de visión artificial al borde (edge computing). El objetivo inicial era capturar el feed de video directo de un dron y procesarlo localmente sin una latencia inaceptable. En esta etapa temprana, establecí la arquitectura base: ingesta de video crudo, primeros pipelines de inferencia ligera y transmisión básica en la red local. Este fue el cimiento técnico que me permitió más tarde incorporar modelos pesados.

Así es como funciona el sistema en su estado maduro: El feed de vuelo es interceptado por un servidor MediaMTX que distribuye el flujo hacia el pipeline de inferencia principal. Aquí, YOLO11 (acelerado por TensorRT para máximo rendimiento) detecta objetivos en milisegundos, mientras que ByteTrack mantiene la persistencia de identidad de cada objetivo a través de los cuadros (incluso si se ocultan temporalmente). Finalmente, aplico un post-procesado agresivo que simula visión térmica táctica mediante LUTs calibradas, añadiendo telemetría simulada y enviando el resultado final al navegador web.

Simulación de cámara térmica "White Hot" (Calor). Este procesado extrae el contraste puro del entorno a través de LUTs aplicadas en tiempo real, permitiendo distinguir siluetas con un tiempo de respuesta inmediato. Reproducido en cámara lenta para apreciar el detalle.

Simulación de "Visión Oscura / Night Vision". Filtro táctico para condiciones de visibilidad comprometida que realza los contornos sin destruir el contraste de los negros.