Investigadores del MIPT han desarrollado un módulo inteligente a bordo que convierte automáticamente el flujo de video de las cámaras de los UAV en una escena de objetos estructurada con historial de observaciones y georreferenciación. El desarrollo ayudará a los operadores a inspeccionar objetos industriales y evaluar las consecuencias de accidentes de manera más rápida y eficiente, según informó el servicio de prensa de la universidad.

En lugar de simplemente detectar objetos en el encuadre, el sistema mantiene una cadena continua: segmentación, seguimiento, reidentificación, georreferenciación y memoria de objetos. El valor no reside en cada eslabón por separado, sino en su interconexión. En lugar de "hay algo en el encuadre", el operador recibe un registro: a las 10:15 se detectó un objeto de tal tipo, se observó durante varios segundos, su posición está vinculada a las coordenadas del UAV.

El sistema registra el historial de observación de cada objeto y puede responder a consultas complejas: cuánto tiempo se observó el objeto, si se movió, dónde estaba en el mapa, qué tan confiable es el resultado del reconocimiento. La inteligencia artificial no solo segmenta objetos y determina sus clases, sino que también combina estos datos con información de los sistemas de navegación, lo que hace que el sistema sea más confiable en condiciones reales.

Cada objeto recibe un "pasaporte" digital: tipo, máscara en la imagen, identificador de seguimiento, tiempo de observación, coordenadas y representación vectorial para una búsqueda repetida incluso con cambios de iluminación y ángulo. El módulo puede obtener una imagen de referencia del objeto y, durante el vuelo, verificar si alguno de los objetos observados se parece al patrón dado. Si hay una coincidencia segura, el objeto se registra en la memoria de la escena y se incluye en el informe. Este sistema es especialmente útil para monitorear territorios, analizar las consecuencias de accidentes y buscar un objetivo específico.