Integration of the image in the case of manifold lightless appliances

В.М Карташов,А.И Капуста,Л.П Тимошенко,Н.В Рыбников,В.Н Олейников,М.М Колендовская

doi:10.30837/rt.2020.2.201.10

Abstract

The most promising direction for solving the urgent task of detecting and tracking unmanned aerial vehicles (UAVs) is the use of a multispectral optoelectronic system for acquiring and integrating images of different wavelength ranges. In practice, taking into account the peculiarities of spectrozonal processing and image formation, it becomes necessary to implement a complex multi-stage procedure for obtaining, assessing quality, making decisions about the possibility of using the resulting images and their immediate subsequent complex use. The article considers the task of complexing images in the visible and near infrared ranges when UAVs are detected. It is shown that it is advisable to perform the integration at the level of channel decisions, or by forming a combined image. In this case, the accuracy of combining the fields of view of multispectral sensors is important. At the stage of forming a generalized image, it is advisable to use formalized informational criteria that sufficiently reflect the subjective value of the images. When obtaining the resulting image, it is preferable to use the weight function method, which allows combining channels using a priori information about their value, as well as on the basis of adaptation to changing input information. Among the methods of complexing by decomposing images into a spectrum, the most preferable is the method using wavelet transform, since it allows you to obtain information about objects in the spatial-frequency representation. If poorly formalized partial images enter the channels of the processing system, then a trained two-level complexing scheme should be used. It is shown that the integration process increases the information content of the resulting image when using UAVs in comparison with the images obtained in individual channels of the system and provides significant qualitative and quantitative advantages in solving problems of detection, discrimination, recognition, tracking and target designation.

Highlights

Беспилотные летательные аппараты (БПЛА) в последнее время широко используются при решении разнообразных задач с целью наблюдения территорий и состояний объектов, выявления лесных пожаров, метеорологических наблюдений за состоянием окружающей среды и т.д. [1 – 3]
Предложено также при оценивании количества градаций яркости I принимать во внимание не все градации с ненулевым количеством пикселей, а только те, количество пикселей которых превышает некоторое заданное число l
Ivanov M., Sergiyenko O., Tyrsa V., Mercorelli P., Kartashov V., Hernandez W., Sheiko S., Kolendovska M

Summary

КОМПЛЕКСИРОВАНИЕ ИЗОБРАЖЕНИЙ ПРИ ОБНАРУЖЕНИИ БЕСПИЛОТНЫХ ЛЕТАТЕЛЬНЫХ АППАРАТОВ

Беспилотные летательные аппараты (БПЛА) в последнее время широко используются при решении разнообразных задач с целью наблюдения территорий и состояний объектов, выявления лесных пожаров, метеорологических наблюдений за состоянием окружающей среды и т.д. [1 – 3]. Наиболее перспективным направлением решения данной задачи является использование многоспектральной оптико-электронной системы (ОЭС) получения и комплексирования изображений разных диапазонов волн (рис.1) [2, 4, 5]. Значительное распространение в различных областях получили двухканальные оптикоэлектронные системы наблюдения в составе телевизионного ТВ канала видимого диапазона длин волн (380 – 760 нм) и одного из тепловизионных ТПВ каналов коротковолнового SWIR (ShortWaveInfrared, длина волны 0,9 – 1,7 мкм), средневолнового MWIR (MediumWaveInfrared, 3 – 5 мкм) или длинноволнового LWIR (LongWaveInfrared, 8 – 14 мкм) инфракрасных поддиапазонов, с объединением информации (комплексированием) обоих каналов. С другой стороны, практика показывает, что использование в процессе комплексирования трех и более изображений является избыточным. Поскольку различные условия работы системы создают различные сигналы на входе в систему, то возможность использовать один и тот же метод комплексирования в разных условиях не является очевидной. Цель статьи – анализ возможностей методов комплексирования разноспектральных изображений применительно к задаче обнаружения и наблюдения беспилотных летательных аппаратов

Этапы обработки изображений при использовании комплексирования

Оценка информативности изображений

Методы формирования и обработки результирующих изображений