О проекте
Демонстрация
Участники
Благодарность
Стажировка по проекту
Компания: ООО «дрон солюшнс»
обнаружение людей, акул и нефтяных пятен с квадрокоптера
Суть проекта
Задача
Для чего
Вводные данные
Выходные данные
Требуется разработать систему распознавания объектов на воде (при помощи беспилотных летательных аппаратов), которая работает в режиме онлайн и реализует следующие задачи:
  • Детекция нефтяных пятен;
  • Детекция людей;
  • Детекция водных заграждений (буйков);
  • Детекция плавательных средств (лодки, корабли и прочая водная техника);
  • Детекция акул
Потенциальное использование системы планируется для безопасности людей и окружающей среды
Список данных от заказчика:
  • 100 тыс. синтетических изображений (люди, лодки);
  • 3800 изображений снятых с дрона (люди, лодки);
  • не менее 250 изображений с разливом нефтяных пятен;
  • не менее 20 изображений снятых с дрона (акулы);
  • синтетические снимки с буйками (объём обсуждаемый);
  • синтетические снимки с разливами нефти (объём обсуждаемый)
Так как система работает в режиме онлайн, то выходными данными являются координаты распознанных объектов на каждом кадре в формате YOLO
Участники команды проекта
  • Хабаров Иван
    Тимлид проекта
    Иван - руководитель группы разработчиков, отвечал за полную разработку проекта
  • Варфоломеева Ольга
    Менеджер по работе с клиентами
    • Очистка данных;
    • Корректировка разметки;
    • Оценка скорости работы разных моделей yolo;
    • Эксперименты с детекцией маленьких объектов;
    • Поиск дополнительных данных для класса «буйки»
  • Павлов Роман
    Руководитель направления ИТ-бюджетирования в государственной компании
    • Очистка данных;
    • Корректировка разметки;
    • Оценка скорости работы разных моделей yolo;
    • Эксперименты с детекцией маленьких объектов
  • Носова Светлана
    Сотрудник банка по работе с юридическими лицами
    • Очистка данных;
    • Корректировка разметки;
    • Обучение модели классификации нефти;
    • Инференс модели классификации нефти
  • Аликберов Андрей
    Оказывает услуги управления ИТ-подразделениями и ИТ-проектами в области кинопоказа, фитнес-индустрии, строительства и др.
    • Очистка данных;
    • Корректировка разметки;
    • Оценка скорости работы разных моделей yolo;
    • Эксперименты с детекцией маленьких объектов
  • Лисин Роман
    Системный администратор вычислительного кластера HPC
    • Очистка данных;
    • Корректировка разметки;
    • Оценка скорости работы разных моделей yolo;
    • Эксперименты с детекцией маленьких объектов;
    • Эксперименты с добавлением нефти отдельным классом в yolo;
    • Обучение модели yolo на всех данных;
    • Конвертация моделей в формат engine и onnx
  • Кобызев Юрий
    Начальник отдела информационных систем ООО СТЭККОМ
    (специалист по биллинговым системам операторов связи)
    • Очистка данных;
    • Корректировка разметки;
    • Интеграция моделей yolo на jetson nano;
    • Запуск разных моделей на jetson nano;
    • Модуль инференса для запуска моделей из коробки
  • Шахлин Виталий
    Программист, более 10+ лет опыта в коммерческой разработке, в основном занимается Enterprice решениями на java и C#
    • Очистка данных;
    • Корректировка разметки;
    • Оценка скорости работы разных моделей yolo;
    • Эксперименты с детекцией маленьких объектов;
    • Генерация дополнительной выборки нефти
Демонстрация проекта
Тестовое видео классификации нефти
Тестовое видео детекции объектов
Благодарность университетУ