Проект: Исследование возможности детекции транспортных средств гражданского назначения при совместной обработке данных инфракрасного и видимого диапазонов

Результаты исследований применения известных моделей нейронных сетей для детекции транспортных средств гражданского назначения при совместной обработке данных из открытых источников.

В настоящее время представляет интерес совместная обработка изображений в инфракрасном и оптическом диапазоне. Совместная обработка позволяет частично компенсировать ограничения каждого из диапазонов. Применение мультиспектрального наблюдения имеет значение для поисково-спасательных работ, промышленной безопасности, мониторинга инфраструктуры, экологического надзора и охраны территорий, также могут использоваться для контроля производственных площадок, складских терминалов, месторождений, портовых зон, парков, водоохранных территорий и других объектов с большой площадью наблюдения. Другим направлением является круглосуточный дистанционный контроль протяженной инфраструктуры. К ней относятся нефтепроводы, газопроводы, линии электропередачи, железнодорожные пути, транспортные узлы и удаленные промышленные объекты. Мультиспектральная обработка может применяться при экологическом надзоре и лесоохране. Она позволяет обнаруживать тепловые аномалии, выявлять очаги возгорания на ранних стадиях, контролировать состояние лесных массивов и фиксировать признаки незаконной деятельности на охраняемых территориях. Потенциальными потребителями результатов проекта являются подразделения МЧС России, поисково-спасательные отряды, органы экологического надзора и лесоохраны, ПАО Газпром, организации железнодорожного транспорта, промышленные предприятия, частные охранные организации и службы безопасности крупных инфраструктурных объектов.

Предметом исследования является сравнительный анализ применения известных моделей нейронных сетей для детекции транспортных средств гражданского назначения при совместной обработке данных инфракрасного и видимого диапазона.

1. Аналитический обзор научно-технических достижений в области обнаружения транспортных средств гражданского назначения, мультимодального компьютерного зрения и нейросетевого комплексирования данных. 2. Проведение патентных исследований в области автоматического анализа мультиспектральных изображений и видеопотоков. 3. Поиск и сбор из открытых источников исходных данных синхронизированных изображений транспортных средств в оптическом и инфракрасном диапазонах; 4. Исследование методов совместной обработки раннего объединения данных оптического и инфракрасного каналов на уровне исходных изображений; 5. Исследование методов совместной обработки позднего объединения результатов детекции, полученных раздельно для оптического и инфракрасного каналов.

Новизна заключается в сравнительном анализе применения известных моделей нейронных сетей для детекции транспортных средств гражданского назначения при совместной обработке данных инфракрасного и видимого диапазона.

Проект ПИШ 2023 "Разработка моделей нейронных сетей для установки на микрокомпьютер с нейронным процессором"

Совместная обработка изображений в инфракрасном и оптическом диапазоне позволяет частично компенсировать ограничения каждого из диапазонов.