Рассматривается задача объединения разноспектральных цифровых изображений, формируемых мультиспектральной видеосистемой для отображения на одном цветном дисплее при условии полного сохранения информации, содержащейся в видеоканалах. Предлагаемый способ комплексирования изображений основан на линейном отображении совокупного спектрального диапазона видеосистемы на видимый человеком диапазон, который кодируется в вычислительной системе линейным цветовым пространством. Указанный подход позволяет добиться высокой реалистичности восприятия получаемых изображений и удобства его визуальной и автоматической интерпретации. Показано, что для полного сохранения информации при комплексировании необходимо, чтобы мерность цветового пространства была не ниже числа видеоканалов. Полученные решения и алгоритмы внедрены в аппаратно-программное обеспечение трёхспектральной видеосистемы RT-700Combo разработки ООО «РАСТР ТЕХНОЛОДЖИ», которая прошла успешные лётные испытания во ФГУП «ГосНИИАС».
Consideration is given to a common task of digital images fusion formed by multispectral video system. The fusion result is the multispectral image displays on one color monitor with condition of saving full information from video channels. The proposed fusion method is based on linear transition of full video system spectral range to visual spectral range considered as RGB linear color space. This approach is able to get high realistic perception of fused images and convenience of visual and automatic interpretation. It is shown that color space dimension of multispectral image must be greater or equal than video channels number for saving full fused information from video channels. The decision of the task was integration into hardware and software of the RT-700Combo three-spectral enhanced vision system developed by Raster Technology Co. Ltd. The video system has successfully passed the flying tests in the State Research Institute of Aviation Systems “GosNIIAS”.
Идентификаторы и классификаторы
В работе представлена технология программного совмещения изображений от ряда независимых видеоканалов, которая закономерно может быть использована и легко реализуема для мультиспектральной видеосистемы реального времени с любым набором матричных фотоприёмных датчиков, при этом не сильно заботясь об их оптической юстировке, которую достаточно сделать грубо.
Получен и обоснован с помощью методов линейной алгебры и базовых принципов физиологии зрения человека класс методов комплексирования для мультиспектральных видеосистем реального времени, который позволяет в полной мере раскрыть их потенциал, заключающийся в одновременном различении полутонов всех составляющих мультиспектрального изображения. Это даёт новое свойство, а именно, возможность проведения визуального и автоматического спектрального анализа, а также неразрушающего контроля, что переводит такие мультиспектральные видеосистемы в класс измерительных оптико-электронных видеосистем.
Результаты работы внедрены в программное обеспечение видеосистемы RT-700Combo, которая является пока макетным образцом, т. е. демонстратором представленной технологии. В качестве дальнейшего развития видеосистемы возможны следующие направления, реализация которых зависит от области применения: повышение кадровой частоты видеоканалов с 25 до 100 Гц для повышения оперативности и плавности обновления видео; использование фотоприёмников более высокого разрешения и чувствительности; разработка и реализация планшетного бортового компьютера, например, на базе серийно выпускаемого вычислительного модуля COM Express [11] вместо использования персонального компьютера с интерфейсной платой управления RT-650CXP [2] и общего (автономного, бортового) источника питания, т. е. обеспечивая существенное уменьшение массы, габаритов, энергопотребления и помех видеосистемы; реализация временной аппаратной синхронизации между видеомодулями; доработка встроенной навигационной системы в части повышения надёжности и точности выдаваемых показаний для возможной интеграции с системой синтезированного зрения – сопоставление мультиспектральных изображений с проекциями трёхмерной модели местности; возможная интеграция в видеосистему лазерного лидара для измерения дальностей до объектов по наведению.
Список литературы
1. Мультиспектральная система улучшенного видения RT-700Combo. – М.: РАСТР ТЕХНОЛОДЖИ. URL: http://rastrr.net/product/special/onboad-vision.html .
2. Контроллер управления цифровыми камерами RT-650CXP. – М.: РАСТР ТЕХНОЛОДЖИ. URL: http://rastr.net/ product/digit-cam/controller/rt-650cxp.html
3. Ерош И. Л., Козлов А. А., Литвинов М. Ю., Сергеев М. Б., Соловьев Н. В., Филатов Г. П. Способ совмещения изображений, полученных с помощью различных фотодатчиков, и устройство для его реализации. Патент РФ № 2435221; заявлен 10.12.2007, опубликован 27.11.2011.
4. Бондаренко М. А., Бондаренко А. В. / Труды XXIV Международной научно-технической конференции по фотоэлектронике и приборам ночного видения – М.: АО «НПО «Орион». 2016. С. 232–237.
5. Ефимов А. И., Новиков А. И. // Компьютерная оптика. 2016. Т. 40. № 2. С. 258.
6. Богданов А. П., Костяшкин Л. Н., Морозов А. В., Павлов О. В., Романов Ю. Н., Рязанов А. В. Способ комплексирования цифровых полутоновых телевизионных и тепловизионных изображений. Патент РФ № 2451338; заявлен 23.12.2010; опубликован 20.05.2012.
7. Дрынкин В. Н., Фальков Э. Я., Царёва Т. И. // Техническое зрение. 2013. Вып. 1(1). С. 60.
8. Инсаров В. В., Тихонова С. В., Михайлов И. И. // Приложение к журналу «Информационные технологии». 2014. № 3. – М.: Новые технологии. 2014.
9. Рубис А. Ю., Визильтер Ю. В., Горбацевич В. С., Выголов О. В. / Сборник тезисов конференции «Техническое зрение в системах управления – 2015» – М.: ИКИ РАН. 2015.
С. 112–113. URL: http://tvcs2015.technicalvision.ru/docs/ Сборник_тезисов_ТЗСУ_2015.pdf
10. Болдасов В. С. Информатика. Часть 1: Учебное пособие. – М.: Изд-во МГУП. 2009.
11. Компьютерный модуль стандарта СOM Express Basic, Type 6, на базе процессоров x86. URL: www.fastwel.ru/products/vstraivaemye-sistemy/kompiuternyemoduli/emoduli/
568933.html
1. Multispectral enhanced vision system RT-700Combo. (Raster Technology, Moscow. URL: http://rastr.net/product/special/onboad-vision.html)
2. RT-650CXP controller for digital cameras. (Raster Technology, Moscow. URL: http://rastr.net/product/digitcam/controller/rt-650cxp.html)
3. I. L. Erosh, A. A. Kozlov, M. Yu. Litvinov, M. B. Sergeev, N. V. Solovev, and G. P. Filatov, Method of superimposing images obtained using different photosensors, and apparatus for realizing said method (RF Patent 2435221 C1, 2011).
4. M. A. Bondarenko and A. V. Bondarenko, in Proceedings of the XXIV International scientific and technical conference on photoelectronics and night vision devices (JSC “SPA “ORION”, Moscow. 2016), pp. 232–237.
5. A. I. Efimov and A. I. Novikov, Computer optics 40 (2), 258 (2016).
6. A. P. Bogdanov, L. N. Kostjashkin, A. V. Morozov, O. V. Pavlov, Yu. N. Romanov, and A. V. Rjazanov, Method of integrating digital grayscale television and thermal images (RF Patent 2451338 C1, 2012).
7. V. N. Drynkin, E. Ya. Falkov, and T. I. Tsareva, Tekhnicheskoe Zrenie, No. 1(1), 60 (2013).
8. V. V. Insarov, S. V. Tikhonova, I. I. Mikhaylov, Application of Information Technologies Journal, No. 3 (2014) (Novye tekhnologii, Moscow, 2014).
9. A. Yu. Rubis, Yu. V. Vizilter, A. Yu. Gorbatsevich, and O. V. Vygolov, in Proc. Scientific Technical Conference «TVCS ‘2015» (SRI RAS, Мoscow. 2015), pp. 112–113.
10. V. S. Boldasov, Informatics. Part 1 (MGUP publishing, Moscow. 2009) [in Russian].
11. Computer-on-module СOM Express Basic, Type 6, based on x86 platform. URL: https://www.kontron.com/products/boards-and-standard-form-factors/com-express
Выпуск
С О Д Е Р Ж А Н И Е
ФОТОЭЛЕКТРОНИКА
Дирочка А. И., Чепурнов Е. Л., Егоров А. В. Фотоэлектроника. Век XXI (Обзор материалов Юбилейной XXV Международной научно-технической конференции и школы по фотоэлектронике и приборам ночного видения) 275
Моисеев А. М., Новиков П. Е. Сигнальные и шумовые характеристики элементов МФПУ формата 640512 SWIR-диапазона 283
ФИЗИЧЕСКОЕ МАТЕРИАЛОВЕДЕНИЕ
Гончаров В. Е., Никонов А. В., Батмановская Н. С., Пашкеев Д. А., Кудряшов А. В. Физические пределы контроля электрофизических характеристик квантоворазмерных структур средствами электрохимического вольт-фарадного профилирования 290
Зиенко С. И. Определение происхождения алмазов по спектрам люминесценции 297
Неверов В. А. Особенности микро- и наноразмерных дефектов в кристаллах 4H-карбида кремния, выращенных методом высокотемпературной сублимации 307
Шабловский О. Н., Кроль Д. Г. Форма поверхности роста и предвестники ветвления дендрита в переохлажденном расплаве 316
ФИЗИЧЕСКАЯ АППАРАТУРА И ЕЁ ЭЛЕМЕНТЫ
Бондаренко М. А., Бондаренко А. В. Формирование изображений в мультиспектральных видеосистемах для визуального и автоматического неразрушающего контроля 325
Гавриш С. В., Логинов В. В., Пучнина С. В. Импульсные газоразрядные источники ИК-излучения для оптико-электронных систем (обзор) 333
Патрашин А. И., Козлов К. В., Ковшов В. С., Никонов А. В., Стрельцов В. А. Метод установки заданной облученности от модели чёрного тела 349
Лисицкий А. П., Ильков В. К., Савельев Ю. Н. Система-на-кристалле со встроенными антеннами V-диапазона на гетероструктурах нитрида галлия 361
ИНФОРМАЦИЯ
Правила для авторов 367
Уточнение от авторов 370
C O N T E N T S
PHOTOELECTRONICS
A. I. Dirochka, E. L. Chepurnov, and A. V. Egorov Photoelectronics. Century XXI (Review of the materials of the Jubilee 25th International Scientific and Technical Conference and schools on photoelectronics and night vision devices) 275
A. M. Moiseev and P. E. Novikov InGaAs 640512 SWIR camera pixels signal and noise characteristics 283
PHYSICAL SCIENCE OF MATERIALS
V. E. Goncharov, A. V. Nikonov, N. S. Batmanovskaya, D. A. Pashkeev, and A. V. Kudryashov Limitations of control of electrophysical characteristics of quantum-size structures by electrochemical capacitance-voltage profiling 290
S. I. Ziyenko Determination of the origin of diamonds from the luminescence spectra 297
V. A. Neverov Features of micro- and nanoscale defects in 4H-polytype silicon carbide crystals grown by high-temperature sublimation 307
O. N. Shablovsky and D. G. Kroll Shape of the growth surface and fore-runners of dendrite branching in undercooled melt 316
PHYSICAL EQUIPMENT AND ITS ELEMENTS
M. A. Bondarenko and A. V. Bondarenko Image forming in multispectral video systems for visual and automatic nondestructive testing 325
S. V. Gavrish, V. V. Loginov, and S. V. Puchnina Pulsed gas-discharge IR radiation sources for optical-electronic systems (a review) 333
A. I. Patrashin, K. V. Kozlov, V. S. Kovshov, A. V. Nikonov, and V. A. Streltsov The BB’s specified irradiation setting method 349
A. P. Lisitskii, V. K. Ilkov, and Yu. N. Saveliev GaN-based V-band system on crystal with integrated antennas 361
INFORMATION
Rules for authors 367
The message from authors 370
Другие статьи выпуска
В работе последовательно рассмотрены предпосылки создания импульсных цезий–ртуть– ксеноновых ИК-источников с двумя сапфировыми оболочками. При этом теоретически выявлены факторы, определяющие параметры излучения газоразрядной лампы, сформирована математическая модель и выполнен расчет температурных, плазменных и радиационных характеристик разряда, а также выполнен комплекс экспериментальных, конструкторских и технологических исследований. Полученные результаты расчетных и экспериментальных исследований позволили впервые создать новое поколение отечественных импульсных газоразрядных источников ИК-излучения с разрядом смеси паров цезия, ртути и ксенона, ограниченным системой из двух сапфировых оболочек.
Изучен рост свободного дендрита в однокомпонентном переохлажденном расплаве. Учтено, что по мере увеличения переохлаждения усиливается роль локально-неравновесного теплопереноса, повышается степень нестационарности процессов на фазовой границе. Предметом исследования являются морфологические свойства фронта кристаллизации и возникновение боковых ветвей дендрита. Рассмотрен класс поверхностей роста, скорость перемещения которых есть физически содержательная функция локального угла наклона поверхности к оси дендрита. Математическим аналогом такого подхода является задача отыскания формы тел, которые подвергаются аэродинамическому нагреву и уносу массы с обтекаемой поверхности. Изучены два (неособый и особый) автомодельных режима эволюции поверхности роста. В неособом случае по мере заострения вершины сохраняется вид первоначального контура поперечного сечения; например, впадина сужается в направлении роста. Особое автомодельное решение дает в начальном состоянии вершину, которая расщеплена на четыре самостоятельные ветви; в течение конечного промежутка времени наблюдается слияние этих ветвей в одну точку – вершину дендрита. Прикладные аспекты данной работы связаны с методами высокоскоростного затвердевания расплава и получением материалов с улучшенными эксплуатационными свойствами.
В процессе роста монокристаллов карбида кремния формируется развитая система раз-личного рода дефектов, негативно влияющих на свойства полупроводникового материала. В кристаллах 4H-SiC, полученных на оборудовании компании PVA TePla (Германия), обнаружены характерные для микроразмерных дефектов статистически самоподобные поверхности раздела «поры-твердое тело» с фрактальными размерностями 2,20–2,60. Рентгеновское малоугловое рассеяние позволило зафиксировать структурные неоднородности в виде пор и их кластеров наномасштабного уровня. Построены функции распределения частиц по радиусам инерции и показано, что основная доля пор приходится на маломасштабные образования с радиусами инерции 25–30 Å. Поры и их кластеры формируют изогнутые цепочки с фрактальными размерностями 1,26–1,84. Структурные неоднородности масштаба 40–110 Å рассеивают рентгеновское излучение как шероховатые поверхности с фрактальными размерностями 2,31–2,95.
Выполнено комплексное исследование бриллиантов различного происхождения при комнатной температуре. Для натуральных бриллиантов и бриллиантов, облученных потоком электронов, получено уравнение характеристической функции в аналитическом виде, которая монотонно спадает во времени. Синтетические и облагороженные бриллианты имеют характеристические функции, которые могут быть получены только численным методом. Они содержат пульсации, амплитуда которых случайным образом меняется во времени. Форма их заметно отличается от кривых натуральных бриллиантов, что позволяет определить их происхождения.
Проведена разработка методики контроля распределения концентрации носителей заряда по профилю многослойных гетероэпитаксиальных структур (ГЭС) с квантоворазмерной активной областью на основе гетеропары AlGaAs/GaAs, выращенных методом молекулярно-лучевой эпитаксии, средствами электрохимического вольт-фарадного профилирования (ECV). Разработана расчетная модель области пространственного заряда, формируемой на границе электролит–полупроводник. Проведен анализ ECV-профилей образцов гетеро-эпитаксиальных структур, выращенных на подложках GaAs <100>. Проведен расчет граничных значений глубины формируемой области пространственного заряда для различных концентраций носителей заряда в измеряемых слоях. Сделано заключение об ограниченности метода для контроля распределения концентрации носителей в квантоворазмерной области гетероэпитаксиальных структур.
Проведены сравнительные измерения нескольких однотипных матричных фотоприемных устройств (МФПУ) SWIR-диапазона при различных режимах работы для определения характеристик и их разброса (сигнальные и шумовые характеристики, эквивалентная мощность шума, количество дефектных пикселей) и для выбора режима работы МФПУ в камере. Необходимые для этого данные в описаниях на МФПУ не приводятся. Выявлено хорошее совпадение средних характеристик всех МФПУ и значительный разброс пороговой эквивалентной мощности шума от количества дефектных пикселей для разных МФПУ. Рассмотрены преимущества и недостатки режимов: «низкого» и «высокого усиления», «с фильтром» и «без фильтра», при разной температуре МФПУ (изменяемой током термоэлектрического модуля Пельтье). Выявлено отсутствие зависимости шумовых характеристик от температуры МФПУ, измерены зависимости количества дефектных пикселей и темновых токов от температуры МФПУ. Предложено информативное, но лаконичное представление параметров МФПУ и камер при выборе МФПУ (или камер) для разрабатываемой системы при оценке качества конкретной МФПУ (или камеры) для комплектации изделий.
24–26 мая 2018 года состоялась Юбилейная XXV Международная научно-техническая конференция по фотоэлектронике и приборам ночного видения. Приведен краткий обзор представленных докладов.
Издательство
- Издательство
- АО "НПО "ОРИОН"
- Регион
- Россия, Москва
- Почтовый адрес
- 111538, г Москва, р-н Вешняки, ул Косинская, д 9
- Юр. адрес
- 111538, г Москва, р-н Вешняки, ул Косинская, д 9
- ФИО
- Старцев Вадим Валерьевич (ГЕНЕРАЛЬНЫЙ ДИРЕКТОР)
- E-mail адрес
- orion@orion-ir.ru
- Контактный телефон
- +7 (499) 3749400