Научный журнал «Вестник науки»

Режим работы с 09:00 по 23:00

zhurnal@vestnik-nauki.com

Информационное письмо
  1. Главная
  2. Архив
  3. Вестник науки от 30 августа 2026 г.
  4. Научная статья № 21
Просмотры  10 просмотров

СИСТЕМА ВИЗУАЛЬНОГО СОПРОВОЖДЕНИЯ НАЗЕМНОГО ОБЪЕКТА БЕСПИЛОТНЫМ ЛЕТАТЕЛЬНЫМ АППАРАТОМ НА ОСНОВЕ КОМПЬЮТЕРНОГО ЗРЕНИЯ

Аннотация: разработана и исследована программная система визуального сопровождения наземного объекта беспилотным летательным аппаратом в среде AirSim. Система использует фронтальную RGB-камеру, модель YOLOv8n для обнаружения и сопровождения автомобиля и контур визуального сервоприводного управления по изображению (IBVS). В качестве сигналов обратной связи применяются положение центра ограничивающей рамки и её масштаб. Ошибки визуальных признаков преобразуются четырьмя ПИД-регуляторами в команды продольной, боковой и вертикальной скорости, а также скорости рысканья. Для снижения взаимного влияния каналов учитываются углы обзора камеры и текущая ориентация БПЛА. В симуляции реализованы сценарии сопровождения неподвижного и движущегося автомобиля, а также работа при кратковременных частичных окклюзиях.

Ключевые слова: БПЛА, визуальное слежение, компьютерное зрение, модель YOLOv8, симулятор AirSim, метод IBVS, ПИД-регулятор.

https://doi.org/10.24412/2712-8849-2026-8101-195-201

1. Введение. Беспилотные летательные аппараты (БПЛА) широко применяются для инспекций, картографирования, логистики и задач общественной безопасности. Во многих сценариях автономного полёта ключевую роль играет компьютерное зрение: бортовая камера обнаруживает и сопровождает цель, а система управления преобразует ошибки в пространстве изображения в команды движения, позволяя удерживать объект в поле зрения и поддерживать требуемую дистанцию. Одним из подходов к такой задаче является визуальное сервоприводное управление по изображению — Image-Based Visual Servoing (IBVS), при котором контур управления замыкается непосредственно по визуальным признакам, а не по координатам цели в мировой системе. Это позволяет строить сопровождение без обязательного использования точных глобальных координат цели. В классической постановке IBVS положение камеры корректируется так, чтобы измеренные признаки изображения стремились к заданным значениям [2]. Для разработки и проверки алгоритмов автономного управления использована среда AirSim, предоставляющая высокореалистичную визуальную сцену на базе Unreal Engine, модель мультикоптера, телеметрию и виртуальные камеры [1]. Целью работы является построение программной архитектуры визуального сопровождения автомобиля, объединяющей обнаружение и трекинг YOLOv8n, формирование визуальных ошибок, их развязание с учётом ориентации БПЛА и четырёхканальное ПИД-управление. 2. Общее описание системы. Симулятор и платформа. В AirSim используется модель мультикоптера с фронтальной RGB-камерой. При запуске системы считывается горизонтальный угол обзора камеры (HFOV), а вертикальный угол обзора (VFOV) определяется с учётом соотношения сторон изображения. Телеметрия ориентации применяется для компенсации визуальных смещений, возникающих при рысканье и тангаже БПЛА. Восприятие. Каждый кадр обрабатывается моделью YOLOv8n в режиме трекинга. Для обнаруженного автомобиля формируется ограничивающая рамка [x1, y1, x2, y2] и поддерживается идентификатор объекта между последовательными кадрами [3, 4]. Из рамки выбранной цели вычисляются нормированные координаты её центра ?? и ??, а также масштабный признак ??, связанный с видимым размером объекта. Управление и развязание. Четыре независимых ПИД-регулятора преобразуют ошибки визуальных признаков в команды в связанной с корпусом системе координат. Скорость рысканья используется для горизонтального центрирования цели, боковая скорость компенсирует остаточную горизонтальную ошибку, вертикальная скорость выравнивает цель по вертикали, а продольная скорость поддерживает требуемый визуальный масштаб и тем самым дистанцию до объекта. Поскольку камера жёстко закреплена на БПЛА, изменение тангажа и рысканья изменяет положение цели на изображении даже при неизменном взаимном расположении объектов. Поэтому перед подачей ошибок в регуляторы выполняется компенсация смещений с использованием HFOV, VFOV и текущих углов ориентации. Дополнительно поддерживается внутренняя опорная ориентация по рысканью, которая обновляется только при расхождении более примерно 25°, что уменьшает вероятность резких разворотов. Интерфейс оператора. Окно PyGame отображает аннотированный видеопоток и панель со списком обнаруженных идентификаторов. Оператор может выбрать цель кнопкой Follow, остановить автоматическое сопровождение кнопкой Stop, использовать ручные команды WASD/QE и стрелки для рысканья, а также выполнить посадку клавишей SPACE. Структурная схема. Реализованный контур включает последовательность «камера → YOLO → визуальные признаки и ошибки → развязание и масштабирование → четыре ПИД-канала → команды полётному контроллеру». На рис. 1 показана общая архитектура системы. Рис. 1. Архитектура визуального сопровождения объекта в AirSim: камера и ИНС участвуют в контуре управления, GPS и магнитометр показаны как дополнительные источники данных.3. Реализация в AirSim. 3.1. Структура кода и главный цикл. Программный модуль инициализирует AirSim MultirotorClient, включает API-управление и загружает модель YOLOv8n. Главный цикл объединяет получение изображения, трекинг, обработку интерфейса и формирование управляющих воздействий. На каждой итерации выполняются следующие операции: 1. получение свежего кадра с фронтальной камеры, 2. запуск трекинга YOLO для класса «автомобиль» и визуализация ограничивающих рамок с идентификаторами, 3. обновление графического интерфейса и обработка команд Follow/Stop, 4. при наличии выбранного идентификатора — вычисление признаков ??, ?? и ??, формирование ошибок относительно опорных значений 0,5, 0,5 и ?? ???, а также их развязание с использованием HFOV/VFOV и текущих углов рысканья и тангажа, 5. передача ошибок на четыре ПИД-регулятора и формирование единого набора скоростей в осях корпуса вместе со скоростью рысканья, 6. при отсутствии выбранной или видимой цели — сохранение доступности ручного управления и интерфейса оператора. 3.2. Признаки, опорные значения и масштабирование. Опорный масштабный признак ?? ???задаёт требуемую дистанцию до цели. В реализации его значение определяется из параметров камеры и ожидаемого размера объекта A_exp. Для согласования визуальных ошибок с физическими управляющими воздействиями используются фокусные расстояния в пикселях, вычисленные через углы обзора камеры. Это позволяет масштабировать сигналы в осмысленные значения продольной, боковой и вертикальной скорости, а также скорости рысканья. 3.3. Развязание и внутренняя опора по рысканью. Перед подачей ошибок на регуляторы применяются две основные поправки. Горизонтальная ошибка корректируется с учётом разности между текущим углом рысканья ψ и внутренней опорой ????, нормированной на горизонтальный угол обзора. Вертикальная ошибка корректируется с учётом текущего тангажа θ и вертикального угла обзора. Тем самым уменьшается ложное изменение положения цели на изображении, вызванное только поворотом камеры. Опорное значение ????обновляется, когда модуль расхождения |ψ − ????| превышает приблизительно 25°. Такая эвристика обеспечивает более плавное поведение в длительных прогонах. В результате контроллер по признакам «центроид + масштаб» обеспечивает основные функции сопровождения: центрирование цели, поддержание дистанции и плавное движение БПЛА. 4. Экспериментальное использование в AirSim. Для качественной проверки системы использованы три типа сценариев: подлёт к неподвижному автомобилю с последующим удержанием дистанции, сопровождение медленно движущегося автомобиля в том же направлении, работа в сценах с отвлекающими объектами и кратковременными частичными окклюзиями. В проведённых симуляционных прогонах БПЛА устойчиво центрировал выбранный автомобиль и сохранял сопровождение при плавном движении цели. Компенсация ориентации заметно уменьшала связь между изменением тангажа и видимой вертикальной ошибкой. При резких ускорениях вертикальный канал сохранял чувствительность к тангажу, что указывает на необходимость дальнейшей настройки развязания и ограничений управляющих сигналов. При этом структура системы позволяла сохранять ручное управление при отсутствии выбранной цели. 5. Заключение. Разработана и протестирована в AirSim система визуального сопровождения автомобиля беспилотным летательным аппаратом. Обнаружение и поддержание идентификатора цели выполняются на основе YOLOv8n, а управление строится по принципу IBVS с использованием положения центра и масштаба ограничивающей рамки. Четыре ПИД-канала формируют продольную, боковую и вертикальную скорость, а также скорость рысканья. Для уменьшения перекрёстного влияния каналов учитываются углы обзора камеры и текущая ориентация БПЛА. Полученная архитектура обеспечивает базовое поведение автономного сопровождения в симуляции: центрирование объекта, поддержание дистанции и плавное следование. Дальнейшее развитие системы целесообразно связать с использованием порога доверия трекера, автоматическим переходом в режим кратковременного зависания при потере цели и процедурой восстановления сопровождения после её повторного обнаружения.


Полная версия статьи PDF

Номер журнала «Вестник науки» № 8 (101) том 5


Ссылка для цитирования:

Ахмад Яра СИСТЕМА ВИЗУАЛЬНОГО СОПРОВОЖДЕНИЯ НАЗЕМНОГО ОБЪЕКТА БЕСПИЛОТНЫМ ЛЕТАТЕЛЬНЫМ АППАРАТОМ НА ОСНОВЕ КОМПЬЮТЕРНОГО ЗРЕНИЯ // Журнал «Вестник науки» от 30 августа 2026 г. № 8 (101) том 5. С. 195 - 201. 2026 г. ISSN 2712-8849 // Электронный ресурс: https://www.вестник-науки.рф/article/32885 (дата обращения: 18.11.2026 г.)


Альтернативная ссылка латинскими символами: vestnik-nauki.com/article/32885



Нашли грубую ошибку (плагиат, фальсифицированные данные или иные нарушения научно-издательской этики) ?
- напишите письмо в редакцию журнала: zhurnal@vestnik-nauki.com


Вестник науки © 2026.    16+




* В выпусках журнала могут упоминаться организации (Meta, Facebook, Instagram) в отношении которых судом принято вступившее в законную силу решение о ликвидации или запрете деятельности по основаниям, предусмотренным Федеральным законом от 25 июля 2002 года № 114-ФЗ «О противодействии экстремистской деятельности» (далее - Федеральный закон «О противодействии экстремистской деятельности»), или об организации, включенной в опубликованный единый федеральный список организаций, в том числе иностранных и международных организаций, признанных в соответствии с законодательством Российской Федерации террористическими, без указания на то, что соответствующее общественное объединение или иная организация ликвидированы или их деятельность запрещена.