VK Retargeting

Промышленное техническое зрение

Разработанный комплекс «Техническое зрение КБ 78» представляет собой полный программно-аппаратный стек, созданный для решения высокоточных задач сборки электроники и механообработки.

Он обеспечивает определение координат и угла поворота мелких объектов и изделий для последующей передачи данных манипулятору.

Программа предназначена для использования в связке с роботизированными системами и включает в себя модули сегментации, нейросетевого определения угла поворота, подготовки синтетических данных и дообучения модели угла.

Система функционирует по двухуровневому принципу: «сервер — веб-интерфейс», что позволяет оператору управлять процессом распознавания удалённо с ПК, а контроллеру робота — запрашивать координаты по API.

Система технического зрения «КБ 78» действует как автономный измерительный комплекс. Промышленная камера фиксирует изображение рабочей зоны (паллеты или конвейера), после чего программное обеспечение выделяет на снимке каждую деталь, отсеивая посторонние объекты и артефакты. Главная задача на этом этапе — не просто обнаружить изделие, но и определить их точное расположение в пространстве.

Далее в дело вступает нейросетевой модуль, обученный распознавать ориентацию объекта. Он вычисляет угол поворота каждой детали относительно заданной системы координат, даже если на ней отсутствуют специальные метки. Полученные значения — координаты X, Y и угол — автоматически переводятся из пикселей в реальные миллиметры с учётом предварительной калибровки.

Финальный результат передаётся на контроллер манипулятора по Ethernet через простой API-запрос. Робот получает готовые числа, которые говорят ему, куда подъехать и на какой градус развернуть захват. Вся цепочка — от снимка до команды роботу — не требует значительных временных затрат, что позволяет работать в реальном времени.

Характеристики

  1. Метрологическая точность:

    • Масштабирование: раздельная калибровка по осям X и Y (мм/пиксель);

    • Диапазон углов: генерация синтетических данных на 720 поворотов (шаг 0.5°) для обучения;

  2. Производительность:

    • Высокоскоростные пресеты: 100 Гц (100 кадров в секунду) при уменьшении маски сегментации до 64px;

    • Вычисления на GPU;

  3. Адаптивность:

    • Автоматическая регулировка экспозиции, усиления (Gain) и FPS камеры;

    • Динамическое изменение ROI (области сканирования);

  4. Интеграционные протоколы:

    • Экспорт результатов в JSON (сырые данные) и CSV (для Excel).

Преимущества

  1. Робастность к сложным объектам: специальная нейросеть определяет угол не только по меткам, но и по текстурным и геометрическим особенностям изделий (выступы, отверстия);

  2. Визуальный контроль качества: функция отрисовки координатной сетки и наложения рамок на превью позволяет оператору в реальном времени видеть, как система определяет различные особенности конструкции рассматриваемого объекта;

  3. Промышленная сетевая безопасность: интерфейс имеет разделение на режим «Просмотр» (доступен всем) и «Вход для администратора», что исключает случайное изменение калибровки оператором линии.

Применение

  • Определение центра, координат и угла поворота изделий для захвата их манипулятором;

  • Контроль качества серийной и массовой продукцит;

  • Система через Ethernet подаёт на контроллер робота не просто координаты X, Y, а рассчитанный угол захвата, компенсируя произвольную раскладку деталей на паллете или конвейере.


← Назад в раздел