КАРТОЧКА ПРОЕКТА ФУНДАМЕНТАЛЬНЫХ И ПОИСКОВЫХ НАУЧНЫХ ИССЛЕДОВАНИЙ,
ПОДДЕРЖАННОГО РОССИЙСКИМ НАУЧНЫМ ФОНДОМ

Информация подготовлена на основании данных из Информационно-аналитической системы РНФ, содержательная часть представлена в авторской редакции. Все права принадлежат авторам, использование или перепечатка материалов допустима только с предварительного согласия авторов.

 

ОБЩИЕ СВЕДЕНИЯ


Номер проекта 23-79-10213

НазваниеРазработка методов интеллектуального управления робототехнической системой в условиях меняющейся внешней среды для автоматической сборки

Руководитель Кульминский Данил Дмитриевич, Кандидат физико-математических наук

Организация финансирования, регион Автономная некоммерческая образовательная организация высшего образования "Научно-технологический Университет "СИРИУС" , Краснодарский край

Конкурс №85 - Конкурс 2023 года «Проведение исследований научными группами под руководством молодых ученых» Президентской программы исследовательских проектов, реализуемых ведущими учеными, в том числе молодыми учеными

Область знания, основной код классификатора 09 - Инженерные науки; 09-604 - Проблемы теории управления техническими системами

Ключевые слова Робототехника, промышленные роботы, интеллектуальные системы, компьютерное зрение, динамическая среда, силомоментный датчик, оптимальное управление.

Код ГРНТИ55.30.31, 28.15.00


 

ИНФОРМАЦИЯ ИЗ ЗАЯВКИ


Аннотация
Проект направлен на решение задачи интеллектуального управления в условиях постоянно меняющейся внешней среды, как отдельным роботом-манипулятором, так и сложной робототехнической системой для автоматической сборки. Отличительной чертой проект является практическая направленность исследований для создания прототипа робототехнической ячейки для динамического манипулирования. Как правило, такие системы подразумевают взаимодействие робота со средой при неудерживающем контакте, а разработка таких систем требует либо построения математической модели, либо специальных средств измерений. Ожидаемые результаты будут иметь высокую степень научной новизны. При выполнении проекта планируется решение следующих научных задач: - Разработка методов калибровки промышленного манипулятора и развитие предложенного метода калибровки на основе вариации методов параметризации. - Развитие методов интеллектуального управления в условиях постоянно меняющейся внешней среды, как с использованием методов компьютерного зрения, так и при силомоментном взаимодействии. - Создание модели контакта при динамическом взаимодействии инструмента робота и среды. - Разработка и создание прототипа роботизированного комплекса, оснащенного интеллектуальной системой управления для экспериментальной апробации предлагаемых технических и алгоритмических решений. Решение поставленных задач требует использования комплексного подхода, сочетающего в себе методы теории автоматического управления, машинного зрения, а также обработки сигналов от измерительных устройств. В рамках такого подхода планируется проведение комплексных фундаментальных научных исследований по разработке статистических методов калибровки, распознавания объектов для динамического манипулирования по изображению, создания и совершенствования на основе полученных фундаментальных знаний математических моделей исследуемых объектов, а также построение на основе разработанных методов интеллектуальной системы управления для работы в изменяющейся среде.


 

ОТЧЁТНЫЕ МАТЕРИАЛЫ


 

Аннотация результатов, полученных в 2025 году
Решены задачи аналитического преобразования параметров для кинематических моделей (соглашение Денавита-Хартенберга (DH), метод, основанный на произведении экспонент (POE), преобразование Hayati и полную и параметрически непрерывную (CPC) модель) последовательных многозвенных механизмов. В ходе работы на основе вышеуказанных преобразований разработан алгоритм для калибровки, где необходимо преобразовать модель DH в модель POE для идентификации, а затем обратно в модель DH, так DH параметризация является классической и ее параметры используются для решения задач планирования и стабилизации траектории. Установлена точность предложенных преобразований на примере известной модели PUMA 560 путем моделирования прямой кинематики. Предложенная методика, использующая переходы от различных параметризаций, проверена при калибровке манипулятора ABB IRB 1600. Проведена проверка абсолютной точности манипулятора с калиброванными наборами параметров с помощью API Radian Laser Tracker. Установлено, что средняя ошибка по позиции инструмента при нелинейной оптимизации для DH соглашения 0.0928 мм, Hayati 0.0926 мм, CPC 0.0766 мм и POE 0.0853 мм при номинальных параметрах в 0.26 мм, стандартное отклонение 0.0395 мм, 0.0394 мм, 0.0304 мм, 0.0374 мм при номинальных 0.11 мм, соответственно. Максимальная ошибка 0.1816 мм 0.1810 мм, 0.1318мм, 0.1798 мм, при номинальных 0.57 мм, соответственно. Разработаны алгоритмы управления, обеспечивающие выполнение резьбового соединения при любой ориентации детали и с множеством резьбовых соединений. Разработанные алгоритмы, обеспечивают выполнение резьбового соединения при любой ориентации детали, чтобы добиться полного цикла сборки изделия с множеством резьбовых соединений. Методы интеллектуального управления адаптированы для работы в условиях меняющейся внешней среды, используя методы на основе компьютерного зрения, так и разработаный силомоментный регулятор обеспечивающий контакт роботы со средой взаимодействия. Предложен способ бесконтактного управления роботом-манипулятором на основе дальностного изображения кисти руки, полученного с камеры глубины. На основании облака точек строится трехмерная модель кисти руки, вычисляются трехмерные координаты точек модели скелета кисти руки, определяются расстояние между рабочими пальцами схвата и его ориентация. Полученные параметры передаются в систему управления роботом-манипулятором. Далее способ предполагает обучение алгоритма распознавания жестов и сохранение в памяти системы управления жестов, соответствующих активации и деактивации режима обучения движениям, а также включению режима автономной работы робота-манипулятора. Предложен общий подход к построению управления на скользящем режиме для линейных систем с периодическими коэффициентами. Предлагается использовать линейный стабилизирующий регулятор для определения скользящей переменной в нелинейном законе управления. Доказаны теорема об условиях возникновения скользящего режима в системах с периодическими коэффициентами и теорема об условиях, предъявляемых к исходному линейному регулятору, при которых нелинейная система с замкнутым контуром асимптотически устойчива при наличии ограниченных согласующих возмущений. Проведено моделирование замкнутой системы с линейными и нелинейными регуляторами, подтверждающее теоретические выводы и иллюстрирующее преимущество регуляторов скользящего режима при наличии ограниченных случайных возмущений в канале управления. Разработана стратегия синтеза внешнего контура управления для управления положением манипулятора. Для компенсации не идеальности системы был выбран Супер-Твистинг Алгоритм (СТА), способный компенсировать липшицевы возмущения, путем реализации непрерывного скользящего режима второго порядка, обеспечивая сходимость за конечное время как положения, так и скорости. Из-за значительной временной задержки возникают высокочастотные колебания выхода (чаттеринг), поэтому для минимизации амплитуды чаттеринга предложена процедура настройки коэффициента СТА. Предложенные коэффициенты СТА, минимизирующие амплитуду чаттеринга, были проверены в моделировании и подтверждены в ходе эксперимента на промышленном манипуляторе ABB IRB 1600. Реализация СТА с предложенной процедурой выбора коэффициента продемонстрировала частичную компенсацию возмущений и несовершенств системы, улучшив точность отслеживания траектории по сравнению с линейно-квадратичным регулятором/предиктором, а также со встроенной системой управления. Предложена математическая модель контакта инструмента робота с нелинейным упругим телом. Использован регулятор, разработанный на первом году проекта и обеспечивающий контакт руки робота с поверхностью при заданной силе давления. Проведено моделирование, в котором уравнения движения инструмента манипулятора представлены в виде интегрирующих звеньев с запаздыванием. Доказана устойчивость такой системы с предложенным регулятором. Для доказательства использована модель вязкоупругого тела Кельвина-Фойгта.

 

Публикации

1. Медведева Т.Н. , Суменков О.Ю. , Фридман Л.М. Step-test based procedure for Super-Twisting Algorithm gains adjustment 2024 17th International Workshop on Variable Structure Systems (VSS), pp. 158-163 (год публикации - 2024)
10.1109/VSS61690.2024.10753407

2. Иван М. Тарабукин, Сергей В. Гусев An Approach to Sliding Mode Control of Linear Systems with Periodic Coefficients 2024 17th International Workshop on Variable Structure Systems (VSS) (год публикации - 2024)
10.1109/VSS61690.2024.10753403

3. Суменков О.Ю., Медведева Т.Н., Гусев С.В., Фридман Л.М. Super-Twisting Algorithm Gain Adjustment Strategy for Manipulator Position Control Lecture Notes in Computer Science, In: Ronzhin, A., Savage, J., Meshcheryakov, R. (eds) Interactive Collaborative Robotics. ICR 2024. Lecture Notes in Computer Science vol 14898. pp. 15–29 (год публикации - 2024)
https://doi.org/10.1007/978-3-031-71360-6_2

4. Соколов В.С., Кульминский Д.Д. Робототехническая система для трехмерной ультразвуковой реконструкции на основе силомоментного управления Информационно-управляющие системы, № 1, С. 51-59. (год публикации - 2025)
https://doi.org/10.31799/1684-8853-2025-1-51-59


Аннотация результатов, полученных в 2026 году
В ходе реализации заключительного этапа проекта разработан прототип роботизированного комплекса для автоматизированной сборки резьбовых соединений, интегрирующий техническое зрение, силомоментное управление промышленным манипулятором ABB IRB 1600 через разработанный на первом году выполнения проекта низкоуровневый интерфейс. Экспериментальные исследования подтвердили эффективность предложенных решений и позволили сформулировать следующие основные результаты: -Разработано программное обеспечение на языке высокого уровня C++ для управления манипулятором и обработки визуальных данных, обеспечивающее работу в реальном времени с частотой обработки до 250 Гц через протокол EGM. - Реализован в виде программного обеспечения алгоритм определения позиции и ориентации платформы на основе PnP-метода как с использованием маркерного паттерна, так и с помощью триангуляционного лазерного датчика. -Интегрирована система силомоментного управления с двухэтапной фильтрацией сигнала. -Разработан трехэтапный алгоритм закручивания с компенсацией несоосности, обеспечивающий снижение паразитных боковых усилий на 60% по сравнению с подходом, предложенным на первом году выполнения проекта. -Экспериментально доказана работоспособность системы при углах наклона платформы от 0° до 90° с сохранением стабильности процесса сборки и контроля момента затяжки. Серия экспериментов по сборке болтовых соединений с разными диаметрами отверстий при автоматическом выборе соответствующего размера болта демонстрируют перспективность интеграции указанных выше технологий для матричного производства, имеющего возможность быстро перестраивать технологические процессы (сборка, сварка, штамповка). А эксперименты с подвижной платформой, где задействован второй робот, расширяют линейку производственных технологий и сложность выполнения для поддержания высокой производительности. Разработанный прототип оснащен методикой калибровки, учитывающей рабочую область робота для точного позиционирования при сборочных операциях. Методика объединяет три широко используемые кинематические модели: Денавита-Хартенберга (DH), произведение экспоненциальных функций (POE) и модель полной параметрической непрерывности (CPC). Фокус сделан на определении оптимальных конфигураций для измерений в локальном, пространственно узком рабочем пространстве, что является распространенным сценарием работы в промышленных роботизированных приложениях. Для достижения высокой эффективности калибровки использовалась модель линейной аппроксимации, а конфигурации измерений выбирались с использованием критерия D-оптимальности для максимизации идентифицируемости параметров. Результаты демонстрируют существенное повышение точности калибровки. В частности, применение процедуры идентификации на основе POE в узкой рабочей области уменьшило среднюю ошибку в положении центральной точки инструмента (ЦТИ) в 22 раза по сравнению с некалиброванными номинальными параметрами, при этом средняя ошибка уменьшилась с 2.852 мм до 0.13 мм. Кроме того, анализ повторяемости показал, что стандартное отклонение ошибок положения ЦТИ при повторных измерениях не превышало 0.007 мм. После калибровки на основе данных получена оценка ковариации оценок идентифицируемых параметров. Оценённая ковариационная матрица описывает не только разброс отдельных компонент измерений, но и их взаимные корреляции. Анализ диагональных элементов ковариационной матрицы показывает, что среди позиционных компонент наибольший разброс наблюдается по оси z, а наименьший — по оси x: σz > σy > σx. Следовательно, в рассматриваемых экспериментальных данных вертикальная компонента измерения является наиболее шумной. Среди угловых компонент наибольшее стандартное отклонение соответствует rx, а наименьшее — rz: σrx > σry > σrz . Таким образом, наиболее стабильной угловой компонентой является поворот вокруг оси z. Из матрицы коэффициентов корреляции видно, что наиболее заметная корреляция среди позиционных компонент наблюдается между ошибками по осям x и z: rxz ≈ −0.43. Это соответствует умеренной отрицательной связи: увеличение ошибки по одной из этих координат сопровождается тенденцией к уменьшению ошибки по другой. Связь между x и y также отрицательна, но выражена слабее: rxy ≈ −0.24. Корреляция между y и z мала: ryz ≈ −0.12. Следовательно, позиционные ошибки нельзя считать полностью независимыми, однако сильная зависимость наблюдается только для пары (x, z). Для угловых компонент все внедиагональные коэффициенты корреляции по модулю не превышают значений порядка 0.1–0.11: rrxry ≈ 0.10, rrxrz ≈ −0.11, rryrz ≈ −0.06. Это позволяет сделать вывод, что угловые ошибки слабо коррелированы между собой. Анализ смешанных корреляций между позиционными и угловыми компонентами показывает, что они в целом также невелики. Наиболее заметные из них: rzry ≈ −0.15, ryrx ≈ −0.11, rzrz ≈ 0.10. Следовательно, статистическая связь между линейными и угловыми ошибками присутствует, но имеет слабый или, в отдельных случаях, слабый–умеренный характер. В ходе проекта предложен алгоритм восстановления отверстий на основе лазерного триангуляционного датчика. Разработан паттерн сканирования роботом для восстановления по облаку точек ориентации платформы и определения позиций отверстий в ней для планирования траекторий. Установлен оптимальный алгоритм с учетом точности триангуляционного датчика. Робот должен двигаться прямолинейно с постоянной скоростью в 100мм/с., в таком случае, удается восстановить позицию и ориентацию платформы с точностью до 0.5 мм. Далее на основе полученного облака точек планируется траектория робота-манипулятора с учетом шероховатости платформы для поддержания заданного расстояния от платформы для шлифовки или сварки. В случае сборочных операций прийти к нужному резьбовому отверстию на заданном расстоянии в 0.5-1 мм для переключения на силомоментное регулирование. Исследована модель контакта робота и среды на основе анализа остатков модели векторной авторегрессии для многомерного временного ряда показаний датчика силы. Общая схема предложенного подхода состоит в следующем. Сначала данные с датчика силы предобрабатываются для получения непрерывного распределения для построения модели векторной авторегрессии. Далее производится линейное преобразование остатков модели, которое преобразует набор признаков так, что их ковариационная матрица становится единичной (Whitening transform). Далее считается кумулятивная сумма для обнаружения небольших, устойчивых изменений остатков модели. Установлены оптимальные параметры модели кумулятивной суммы. Параметр mu=0.5, который стабилизирует дисперсию. И пороговое значение h =15, при котором преобразованные остатки модели с ограниченной дисперсией соответствуют ситуации, в которой зафиксирован геометрический контакт. Установлено, что при частоте дискретизации в 4 мс, задержка детекции контакта составляет 48 мс.

 

Публикации

1. Суменков О. Practical Aspects of Automated Manipulator Calibration With Plane Constraint 2025 International Conference on Industrial Engineering, Applications and Manufacturing (ICIEAM), С. 924-929 (год публикации - 2025)
10.1109/ICIEAM65163.2025.11028316 (https://doi.org/10.1109/ICIEAM65163.2025.11028316)

2. Суменков О.Ю. Analytical Parameter Conversion of CPC and POE Models IEEE Robotics and Automation Letters , Vol. 11, N. 2, С. 1306 - 1313 (год публикации - 2026)
10.1109/LRA.2025.3641122

3. Cуменков О.Ю., Тарабукин И.М., Фридман Л.М., Гусев С.В. Lyapunov Redesign based SMC design for a class of perturbed periodic LTV systems 2025 IEEE 64th Conference on Decision and Control (CDC), pp. 7001-7006 (год публикации - 2025)
10.1109/CDC57313.2025.11312512

4. Кульминский Д.Д., Шипатов Е.А., Сотников А.В., Шипатов А.В. Способ бесконтактного управления роботом-манипулятором на основе активного отслеживания и адаптивного распознавания жестов Известия высших учебных заведений. Электроника., Т. 31, № 2, С. 199–211. (год публикации - 2026)
10.24151/1561-5405-2026-31-2-199-211


Возможность практического использования результатов
Результаты проекта могут быть использованы для автоматизации производственных процессов как на крупных предприятиях, так и для небольших технологических компаний, занимающихся интеграцией робототехнических комплексов в промышленность. Отличительной чертой разработанных решений является достаточно большая автономность. Так как сегодняшний производитель воспринимает робота, как оборудование, которое запустил, и оно производит. Зачастую, это не так и требует специалистов не только разбирающихся в робототехнике, но и глубоко понимающих предметную область автоматизации.