Раздел 6 / 6

Машинное зрение и экстремальная робототехника

Вопрос 17 программы

Машинное зрение в робототехнике

Применение машинного зрения, типы изображений, гистограммы, таблицы соответствия (LUT), сегментация, распознавание контура, контроль цветности и измерение габаритных размеров — весь конвейер от пикселя до решения «годен / брак».

Зачем роботу зрение: шесть областей применения

Машинное зрение (Computer Vision) — совокупность методов, которыми робот заменяет человеческое зрение для автоматизации задач: от навигации до контроля качества.
  • Навигация и локализация. Определение положения робота в пространстве — задача SLAM (Simultaneous Localization and Mapping, одновременная локализация и построение карты) с помощью камер, лидаров и стереозрения.
  • Обнаружение и позиционирование объектов. Захват деталей с конвейера (pick-and-place); в задаче bin picking робот находит объект в корзине с навалом, определяет его ориентацию и координаты для захвата.
  • Контроль качества. Проверка целостности упаковки, наличия всех компонентов на плате, обнаружение царапин, сколов и дефектов окраски.
  • Измерения и калибровка (метрология). Высокоточное измерение геометрических размеров деталей и взаимного расположения компонентов.
  • Считывание маркировки. Распознавание штрих-кодов, QR-кодов, серийных номеров и текста (OCR) для логистики и прослеживаемости продукции.
  • Коллаборативная безопасность. Обнаружение присутствия человека в рабочей зоне для безопасного взаимодействия кобота и оператора.

Любая задача машинного зрения проходит один и тот же конвейер: камера захватывает кадр → яркости «причёсываются» (LUT, фильтры) → изображение разрезается на объект и фон (сегментация) → у объекта вычисляются признаки (контур, площадь, цвет, размеры) → принимается решение: где деталь, годна ли она, куда тянуться манипулятору. Все дальнейшие подтемы билета — это ступени этого конвейера.

Захват камера · оптика · свет Предобработка LUT · гамма · фильтры Сегментация порог · Оцу · K-means Признаки контур · моменты · цвет Решение годен / брак · X,Y,θ пиксели RGB / глубина Output = LUT[Input] бинарная маска объектов цепной код · Hu-моменты команда роботу данные сжимаются: мегабайты пикселей → десятки чисел → один бит решения
Конвейер обработки изображения: каждый следующий этап работает с всё более компактным описанием сцены.

Типы изображений

Изображения классифицируются по способу кодирования информации о цвете и пространстве. Выбор типа — компромисс между информативностью и скоростью обработки.

ТипГлубина цветаЧто хранит пиксельТиповое применение
Бинарное (монохромное)1 бит0 — чёрный, 1 — белыйанализ контуров, подсчёт объектов — там, где не нужна текстура
Полутоновое (grayscale)8 бит256 градаций серого (0–255)стандарт для измерения размеров и поиска дефектов: проще цветного, но сохраняет яркость
Цветное (RGB)24 битатри канала: красный, зелёный, синий (True Color); палитровые варианты экономят память таблицей цветовсортировка по цвету, контроль цветности; палитровые — чаще для визуализации, чем для анализа
Мультиспектральное / гиперспектральноемного каналовяркости за пределами видимого спектра (УФ, ИК)сортировка полимеров, определение спелости фруктов — структуры, невидимые глазу
Карта глубины (depth map, 2.5D)—не цвет, а расстояние до камерызахват объектов в 3D; получают стереокамерами, ToF-сенсорами, структурированным светом

Хороший ответ строится от простого к сложному: «1 бит → 8 бит → 24 бита → за пределы видимого → третье измерение». И добавьте практическое правило: для измерений берут grayscale (быстро и достаточно), для bin picking — карту глубины (без неё робот не знает, насколько далеко деталь).

Гистограммы при анализе изображений

Гистограмма изображения — график распределения интенсивности пикселей: по горизонтали яркость 0–255, по вертикали — сколько пикселей имеют такую яркость.
  • Оценка экспозиции и контраста. Гистограмма, смещённая влево, — недосвет; вправо — пересвет; узкий пик — низкий контраст. Робот может автоматически отбраковывать такие снимки или перенастраивать камеру и освещение.
  • Бинаризация (пороговая обработка). Если на гистограмме два чётких пика (объект и фон), впадина между ними — оптимальный порог. Метод Оцу автоматизирует выбор: перебирает все пороги и берёт тот, что максимизирует межклассовую дисперсию.
  • Сегментация по цвету. В пространстве HSV строят гистограмму тона (Hue); пик на ней позволяет найти объект конкретного цвета, даже если он частично в тени.
  • Сопоставление с эталоном. Сравнение гистограмм эталона и проверяемой детали — быстрая оценка соответствия цветовой гаммы покрытия.

Метод Оцу «мысленно» разрезает гистограмму на два класса каждым из 256 возможных порогов и спрашивает: при каком разрезе классы «фон» и «объект» дальше всего разъехались по средней яркости (с учётом веса каждого класса)? Эта мера — межклассовая дисперсия σ²b(t) = w₀·w₁·(μ₀ − μ₁)². Где она максимальна — там порог. Никакой магии: 256 умножений — и порог найден без участия человека.

демоГистограмма и бинаризация: порог вручную и по Оцу
Слева — синтетический кадр «детали на конвейере» и его бинаризация, справа — гистограмма. Двигайте порог: детали «тонут» в фоне или фон «прилипает» к деталям. Кнопка Оцу ставит порог в максимум межклассовой дисперсии — обычно точно во впадину между пиками.

Таблицы соответствия (LUT)

Look-Up Table (LUT) — массив из 256 ячеек, где каждому входному значению пикселя заранее сопоставлено выходное. Преобразование всего кадра — просто чтение из массива: Output = LUT[Input].
Output = LUT[Input] — одна операция на пиксель вместо вычисления функции гамма-коррекция: LUT[i] = 255·(i/255)^(1/γ)
  • Гамма-коррекция и улучшение контраста. Нелинейное преобразование яркости: высветлить тёмные участки, чтобы увидеть дефекты внутри тени от детали.
  • Цветокоррекция. Быстрый перевод между цветовыми пространствами, инверсия, сепия — без сложных вычислений для каждого пикселя.
  • Бинаризация с гистерезисом. Мгновенное отнесение пикселей к классам «объект», «фон», «пограничная зона».
  • Выравнивание гистограммы (эквализация). Специальная LUT, построенная по накопленной гистограмме, «растягивает» её на весь диапазон 0–255 — локальный контраст резко растёт, края становятся заметнее.

Зачем таблица, если можно посчитать формулу? Затем, что кадр — это миллионы пикселей, а различных значений яркости всего 256. Считать степень (i/255)^(1/γ) миллион раз — расточительно; посчитать её 256 раз, записать в массив и потом миллион раз просто «подсмотреть ответ» — почти бесплатно. Это классический приём «предвычисли и кэшируй».

демоLUT и гамма-коррекция: кривая преобразования
Слева кадр «до», в центре «после», справа график LUT (вход → выход). γ > 1 высветляет тени, γ < 1 притемняет; негатив — LUT-прямая наоборот; эквализация строит LUT по накопленной гистограмме и растягивает контраст.

Сегментация изображений

Сегментация — разделение изображения на области, однородные по какому-либо признаку (яркость, цвет, класс объекта): прежде всего — «объект» и «фон».
  • Пороговая (thresholding). Самая быстрая: пиксели выше порога — объект, ниже — фон. Адаптивная пороговая обработка меняет порог локально, если освещение неравномерное.
  • По цвету. Перевод в HSV/LAB и выделение пикселей в заданном диапазоне тона и насыщенности («всё красное»).
  • Наращивание областей (region growing). Из стартового пикселя (seed) область «прорастает», присоединяя соседей, пока разница в яркости/цвете меньше допуска.
  • Кластеризация (K-means). Автоматическая группировка всех пикселей на K классов; удобна, когда число классов известно заранее (деталь, тень, фон).
  • Семантическая сегментация (нейросети). Каждому пикселю присваивается метка класса (архитектуры U-Net, Mask R-CNN). Вершина современного подхода: робот отличает «болт» от «ключа», даже если они лежат внахлёст.

После бинаризации сцену ещё нужно превратить в список объектов: соседние пиксели «объекта» объединяются в связные компоненты (заливкой flood fill или двухпроходным алгоритмом с таблицей эквивалентностей). У каждой компоненты считается площадь в пикселях — и компоненты меньше порога площади отбрасываются как шум. Именно так «один кадр» превращается в «на конвейере 4 детали, площади такие-то».

демоСегментация и подсчёт объектов
Кадр бинаризуется порогом Оцу, затем выделяются связные компоненты (заливка, 8-связность) и каждая красится своим цветом. Слайдер отсекает компоненты меньше заданной площади — мелкие шумовые пятна исчезают, а счётчик объектов «успокаивается».

Распознавание контура

После сегментации бинарное изображение содержит пятна; контур — это граница пятна. Дальше работают уже не с пикселями, а с описанием границы:

  • Цепной код Фримана. Контур описывается последовательностью направлений перехода к следующему граничному пикселю — цифрами 0–7 (8 направлений «розы»). Вместо координат каждой точки хранится строка цифр — данные сжимаются.
  • Аппроксимация Ramer–Douglas–Peucker. Упрощение контура: ломаная сводится к базовым точкам без потери формы. Критично для быстродействия.
  • Геометрические признаки. По контуру вычисляются площадь, периметр, компактность, моменты (центр масс, ориентация оси), эксцентриситет.
  • Сопоставление контуров (shape matching). Найденный контур сравнивается с библиотекой эталонов по Hu-моментам — инвариантным к повороту и масштабу. Деталь опознаётся независимо от того, как она лежит.

Цепной код — это «маршрут муравья», ползущего вдоль границы: «шаг на восток (0), шаг на северо-восток (1), шаг на север (2)…». Сама фигура из кода восстанавливается с точностью до положения — а значит, код (и его производные) описывает форму, отбрасывая ненужное для распознавания место.

демоЦепной код Фримана: обход контура по шагам
Слева — увеличенный объект из того же кадра; кнопка «Шаг» ведёт обход границы: текущий пиксель и направление подсвечены, рядом — роза направлений 0–7, внизу копится строка цепного кода.

Контроль цветности

В робототехнике цвет — не эстетика, а физический параметр материала:

  • Идентификация и сортировка: цвет провода (красный/чёрный) при монтаже, сортировка крышек для бутылок по цвету.
  • Проверка химического состава: цвет обжарки кофейных зёрен, степень прожарки хлеба — робот корректирует время выпечки по анализу RGB-кривой.
  • Контроль индикаторов: распознавание свечения светодиодов (зелёный/красный) при автоматизированном тестировании электроники.
Пространство CIE L*a*b* и ΔE — для строгого контроля цвет переводят в CIE L*a*b* и считают цветовое различие ΔE между эталоном и образцом. Если ΔE превышает допуск (обычно > 3) — деталь бракуется. Пространство L*a*b* хорошо соответствует человеческому восприятию оттенков, поэтому «браковка по числу» совпадает с «браковкой на глаз».

Измерение габаритных размеров

Прецизионная задача машинного зрения (метрология). Точность здесь зависит исключительно от калибровки:

  • Калибровка (мм/пиксель). По калибровочной шкале (эталону с точной сеткой) вычисляется коэффициент пересчёта пикселей в миллиметры; для высокоточных задач обязательно исправление дисторсии объектива.
  • Измерение расстояний. Поиск двух краевых точек (edge detection) по профилю интенсивности с субпиксельной точностью — 1/10 или даже 1/50 пикселя — и вычисление расстояния между ними.
  • Диаметр и округлость. В точки контура методом наименьших квадратов вписывается окружность; отклонение реальных точек от идеальной окружности — показатель некруглости.
  • Зазоры и перекосы. Ширина зазора между дверью и крылом автомобиля, перпендикулярность сторон микросхемы.
  • Телецентрические объективы. Специальная оптика без перспективных искажений: детали на разной высоте имеют одинаковый масштаб — незаменимо для измерения высоких объектов.

Козырь в ответе про метрологию — субпиксельность: край детали в кадре не «ступенька», а плавный переход яркости на 2–3 пикселя; аппроксимировав этот профиль, положение края находят в 10–50 раз точнее шага пикселя. Отсюда и парадокс: камерой с пикселем 0,1 мм измеряют с точностью в микроны.

Вопросы к собеседованию

Назовите основные области применения машинного зрения в робототехнике.

Шесть областей: навигация и локализация (SLAM по камерам, лидарам, стереозрению); обнаружение и позиционирование объектов (pick-and-place, bin picking — поиск детали в навале, её ориентация и координаты); контроль качества (целостность упаковки, компоненты на плате, царапины и дефекты окраски); измерения и калибровка (метрология); считывание маркировки (штрих- и QR-коды, OCR); коллаборативная безопасность — обнаружение человека в рабочей зоне кобота.

Какие типы изображений используются в машинном зрении и чем они отличаются?

Бинарные (1 бит: 0/1) — контуры и подсчёт объектов; полутоновые (8 бит, 256 градаций серого) — стандарт для измерений и поиска дефектов; цветные RGB (24 бита, три канала; палитровые экономят память таблицей цветов); мультиспектральные и гиперспектральные (УФ/ИК — сортировка полимеров, спелость фруктов); карты глубины (2.5D: пиксель хранит расстояние до камеры; стереокамеры, ToF, структурированный свет — критичны для захвата в 3D).

Что такое метод Оцу?

Автоматический выбор порога бинаризации по гистограмме. Каждый возможный порог t делит пиксели на два класса — «фон» и «объект»; метод Оцу перебирает все t и выбирает тот, при котором максимальна межклассовая дисперсия σ²b(t) = w₀·w₁·(μ₀ − μ₁)², где w — доли классов, μ — их средние яркости. Для двухпиковой гистограммы найденный порог попадает во впадину между пиками «объект» и «фон» — то есть метод формализует ручное правило «ставь порог в провал гистограммы».

Что такое LUT и зачем нужна гамма-коррекция?

LUT (Look-Up Table, таблица соответствия) — массив, где каждому входному значению пикселя заранее сопоставлено выходное; преобразование кадра — просто Output = LUT[Input], одна выборка из массива на пиксель вместо вычисления функции. Применения: гамма-коррекция и улучшение контраста, цветокоррекция (инверсия, сепия, перевод между пространствами), бинаризация с гистерезисом, эквализация гистограммы. Гамма-коррекция — нелинейное преобразование яркости, которое высветляет тёмные участки: позволяет увидеть дефекты внутри тени от детали, не пересвечивая остальной кадр.

Какие методы сегментации изображений существуют?

Пороговая — самая быстрая (выше порога объект, ниже фон; адаптивный вариант меняет порог локально при неравномерном освещении); по цвету — выделение диапазона тона/насыщенности в HSV или LAB; наращивание областей (region growing) — область «прорастает» из seed-пикселя, пока соседи похожи; кластеризация K-means — автоматическая группировка пикселей на K классов; семантическая сегментация нейросетями (U-Net, Mask R-CNN) — метка класса каждому пикселю, различает объекты даже внахлёст.

Что такое цепной код Фримана и как ещё описывают контур?

Цепной код Фримана — описание контура последовательностью направлений перехода между соседними граничными пикселями (цифры 0–7, восемь направлений), что сжимает данные: вместо координат точек хранится строка цифр, описывающая форму независимо от положения. Дополняют его: аппроксимация Ramer–Douglas–Peucker (сведение ломаной к базовым точкам без потери формы — ради быстродействия), геометрические признаки (площадь, периметр, компактность, моменты, эксцентриситет) и сопоставление с эталонами по Hu-моментам, инвариантным к повороту и масштабу.

Как контролируют цветность и измеряют габариты детали по изображению?

Цветность: цвет — физический параметр (сортировка, контроль прожарки, светодиодные индикаторы); для строгого контроля цвет переводят в CIE L*a*b* и считают различие ΔE с эталоном; ΔE > 3 (типовой допуск) — брак; пространство соответствует человеческому восприятию. Габариты: калибровка мм/пиксель по эталонной шкале с исправлением дисторсии; поиск краёв по профилю интенсивности с субпиксельной точностью 1/10–1/50 пикселя; диаметр — вписывание окружности в контур методом наименьших квадратов (отклонения дают некруглость); телецентрические объективы устраняют перспективные искажения.

Вопрос 7 программы

Экстремальная робототехника

Пять сред, где робот заменяет человека: промышленность, космос, глубины океана, поле боя и микромир. Общий знаменатель — принцип «3D»: Dull, Dirty, Dangerous.

Экстремальная робототехника — системы, работающие в условиях, где человек либо не может находиться долго, либо рискует жизнью: высокие температуры, радиация, химическая агрессия, взрывоопасность, вакуум, давление, обстрел.
Принцип «3D» Dull · Dirty · Dangerous скучная · грязная · опасная работа Космос вакуум · −150…+150 °C · радиация Canadarm2, ERA · Perseverance Ingenuity → Dragonfly · задержка 2–20 мин Промышленность металлургия >1000 °C · радиация АЭС взрывоопасные атмосферы (ATEX) Brokk · инспекция трубопроводов Под водой +1 атм на каждые 10 м · нет радиосвязи ROV с кабелем — до 11 000 м · AUV «чёрные курильщики» +400 °C Военная РЭБ · пули и осколки сапёр PackBot · Spot, Vision 60 оптоволоконные катушки против РЭБ Микромир Ван-дер-Ваальс сильнее гравитации МЭМС · kilobots (рой) капсульные эндоскопы
Пять сред экстремальной робототехники сходятся к принципу «3D»: роботу отдают работу скучную, грязную и опасную.

Промышленность: жар, радиация, взрывоопасность

  • Металлургия и литейное производство. Температуры свыше 1000 °C: роботам нужны термозащита и жаропрочная гидравлика.
  • Атомная промышленность. Высочайший уровень радиации выводит из строя стандартную электронику — применяются радиационно-стойкие камеры и материалы. Для декомиссии АЭС используют манипуляторы Brokk, крушащие бетон и режущие металл там, где человек получил бы летальную дозу за секунды.
  • Шахты и нефтегазовый сектор. Взрывоопасные атмосферы: конструкция должна исключать искрообразование (сертификация ATEX), электроника — во взрывонепроницаемых оболочках под избыточным давлением. Автономные «ползающие» роботы инспектируют трубопроводы, выдерживая давление на глубине и детектируя коррозию.

Космическая робототехника

Условия: вакуум, перепады температур от −150 до +150 °C, космическая радиация, микрогравитация.

  • Орбитальные манипуляторы — Canadarm2 и европейский ERA на МКС: захват кораблей, перемещение астронавтов, монтаж оборудования. Требуется точность движений в невесомости без инерционных ударов.
  • Планетоходы. Главная проблема — задержка сигнала от 2 до 20 минут: телеуправление в реальном времени невозможно, нужна автономная навигация. Perseverance (NASA) самостоятельно выбирает безопасный маршрут.
  • Внеземные дроны. Ingenuity доказал возможность полёта в марсианской атмосфере плотностью 1 % от земной; в перспективе — Dragonfly на Титане, где плотная атмосфера и низкая гравитация.

Почему задержка сигнала — главный враг? Пока радиокоманда летит до Марса и обратно (от 4 до 40 минут туда-обратно), ровер, едущий «вслепую», успел бы свалиться в первый же кратер. Поэтому оператор задаёт цель, а маршрут по камням машина прокладывает сама — космос стал первым заказчиком настоящей автономности.

Подводные роботы: ROV и AUV

Главный вызов — колоссальное давление (плюс 1 атмосфера на каждые 10 метров глубины) и полное отсутствие радиосвязи: GPS и Wi-Fi под водой бесполезны.

  • ROV (телеуправляемые). Связаны с судном кабелем-«пуповиной», по которому идут питание и видеосигнал. Работают на глубинах до 11 000 м (Марианская впадина).
  • AUV (автономные). Полностью отвязанные аппараты, следующие по программе: ориентируются по гидролокаторам, инерциальным системам и магнитометрам, всплывают для передачи данных.
  • Специфика работ. Шельфовая добыча — установка нефтяного оборудования гидравлическими манипуляторами с обратной тактильной связью; исследование гидротермальных источников — «чёрных курильщиков» с водой +400 °C (не закипающей из-за давления) и кислотной средой.

Военная робототехника

Наиболее быстрорастущий сектор; условия — радиоэлектронная борьба (РЭБ), пули и осколки.

  • Сапёры и разминирование — самый зрелый класс: роботы типа PackBot с манипуляторами для разведки и подрыва СВУ, защита от ударов и огня.
  • Логистика — четвероногие роботы (Spot, Vision 60) и колёсные платформы несут снаряжение отделения по пересечённой местности.
  • Боевые беспилотные системы — наземные дроны с дистанционно-управляемыми боевыми модулями. Ключевой вызов — стабильная связь: переходят на оптоволоконные катушки (как у российских «Курьер» и «Скорпион»), полностью исключающие воздействие РЭБ на канал управления.

Микроробототехника

На малых масштабах физика меняется: силы Ван-дер-Ваальса и электростатика становятся важнее гравитации. Роботы часто собираются из МЭМС — микроэлектромеханических систем.

  • Микро-БПЛА. Роботы типа «муха» или «стрекоза» весом менее 10 г; пропеллеры — MEMS-крылья, машущие с резонансной частотой. Проблема — крайне малое время полёта из-за ёмкости аккумуляторов.
  • Микромедицина. Капсульные эндоскопы с активным движением (плавники или винты), способные брать биопсию; футуристичнее — микроботы в кровотоке под внешним магнитным полем.
  • Роевой интеллект. Kilobots (Гарвард) — простейшие вибророботы размером с монету, коллективно собирающиеся в сложные фигуры без центрального управления. Цель — армия дешёвых микроботов для мониторинга загрязнений и разведки, где потеря одного юнита не критична.

Физические ограничения микромира: для микроробота турбулентность жидкости ощущается как бетон, а источника энергии, сравнимого по плотности с живой мышечной тканью, пока не существует. Поэтому реальные микроботы либо пассивны (капсула движется перистальтикой кишечника), либо питаются извне (магнитное поле).

Свяжите пять сред выводом конспекта: все направления сходятся в материаловедении и ИИ-алгоритмах, а общая цель — робот, который без прямого управления принимает решения по неполным сенсорным данным в среде категории «3D»: Dull, Dirty, Dangerous. Этот принцип — идеальная первая или последняя фраза ответа.

Вопросы к собеседованию

Что означает принцип «3D» в робототехнике?

Dull, Dirty, Dangerous — «скучная, грязная, опасная»: категория работ, которые в первую очередь отдают роботам. Все пять направлений экстремальной робототехники (промышленность, космос, подводная, военная, микро) сходятся к общей цели — создать робота, не требующего прямого управления и способного принимать решения на основе неполных сенсорных данных именно в таких средах; технологически они сходятся в материаловедении и ИИ-алгоритмах.

Какие вызовы стоят перед экстремальной робототехникой в промышленности?

Три ключевые среды: металлургия и литейное производство — температуры свыше 1000 °C, нужны термозащита и жаропрочная гидравлика; атомная промышленность — радиация выводит из строя стандартную электронику, применяются радиационно-стойкие камеры и материалы (пример — манипуляторы Brokk для декомиссии АЭС: крушат бетон и режут металл там, где человек получил бы летальную дозу за секунды); шахты и нефтегаз — взрывоопасные атмосферы, исключение искрообразования (сертификация ATEX), электроника во взрывонепроницаемых оболочках; плюс ползающие роботы-инспекторы трубопроводов, детектирующие коррозию.

Расскажите о космической робототехнике: условия, типы, примеры.

Условия: вакуум, перепады от −150 до +150 °C, радиация, микрогравитация. Три типа: орбитальные манипуляторы (Canadarm2 и ERA на МКС — захват кораблей, перемещение астронавтов, монтаж без инерционных ударов); планетоходы — из-за задержки сигнала 2–20 минут нужна автономная навигация, Perseverance сам выбирает безопасный маршрут; внеземные дроны — Ingenuity доказал полёт в атмосфере плотностью 1 % земной, перспектива — Dragonfly на Титане (плотная атмосфера, низкая гравитация).

Чем ROV отличается от AUV?

ROV — телеуправляемый аппарат, связанный с судном кабелем-«пуповиной» (питание + видеосигнал), работает на глубинах до 11 000 м; AUV — автономный, без кабеля, идёт по программе, ориентируясь по гидролокаторам, инерциальным системам и магнитометрам, и всплывает для передачи данных. Общие вызовы: давление +1 атмосфера на каждые 10 м и отсутствие радиосвязи (GPS/Wi-Fi бесполезны). Задачи: шельфовая добыча с тактильными манипуляторами, исследование «чёрных курильщиков» (+400 °C, кислотная среда).

Как военные роботы защищаются от РЭБ и почему у микророботов «другая физика»?

Военная робототехника: зрелый класс — сапёры (PackBot) для разведки и подрыва СВУ; логистика — четвероногие Spot и Vision 60; боевые наземные дроны. Против РЭБ переходят на оптоволоконные катушки (российские «Курьер», «Скорпион») — кабель полностью исключает воздействие помех на канал управления. Микроробототехника: на малых масштабах силы Ван-дер-Ваальса и электростатика важнее гравитации; роботы собираются из МЭМС. Примеры: микро-БПЛА легче 10 г с машущими MEMS-крыльями, капсульные эндоскопы с биопсией, рой kilobots, собирающийся в фигуры без центрального управления. Ограничения: турбулентность «как бетон», нет источника энергии с плотностью мышечной ткани.

Вопрос 10 программы

Роботизация, охрана среды и катастрофы

Роботы сначала предотвращают беду (экомониторинг), затем работают там, где случилась техногенная авария или стихийное бедствие, — исключая человека из «петли риска».

Превентивный экомониторинг

  • Мониторинг воздуха и воды. Дроны с газоанализаторами летают над промзонами и полигонами ТБО, выявляя утечки метана, сероводорода и других вредных веществ; автономные подводные аппараты (AUV) патрулируют акватории портов и рек, измеряя pH, мутность и наличие нефтяных плёнок; биомиметические роботы-рыбы внедряются в косяки и берут пробы в труднодоступных местах, не распугивая фауну.
  • Мониторинг флоры и фауны. Дроны с мультиспектральными камерами отслеживают незаконную вырубку лесов и состояние сельхозугодий (засухи, болезни растений) — точечная обработка снижает применение пестицидов; подводные дроны исследуют коралловые рифы, не повреждая их, в отличие от погружений человека.
  • Борьба с загрязнениями. Роботы-сортировщики с машинным зрением на мусороперерабатывающих заводах сортируют отходы в десятки раз быстрее человека, повышая процент переработки; плавающие роботы-скиммеры («пожиратели нефти») собирают нефтяную плёнку с поверхности воды.

Обратите внимание на мостик к вопросу 17: и сортировщик мусора, и дрон над полем работают благодаря машинному зрению — мультиспектральная камера видит «болезнь растения» как аномалию в невидимых глазу каналах, ровно как в главе про типы изображений.

Техногенные катастрофы

Их отличает химический, радиационный или взрывной поражающий фактор — критически важна дистанционная работа.

Кейс: авария на АЭС Фукусима-1 (Япония). Человек получает смертельную дозу за минуты — робот может работать часами. В разрушенные реакторы входили гусеничные роботы-разведчики PackBot и Quince: измеряли уровень радиации и делали снимки. Позже роботы-манипуляторы расчищали завалы и брали пробы расплавленного ядерного топлива. Главное требование — радиационная стойкость: электроника «сгорает» при сильном облучении, поэтому обычные серийные роботы в реакторе быстро выходили из строя.

  • Роботы-сапёры на химических производствах — обезвреживание и эвакуация нестабильных ёмкостей с реагентами при угрозе взрыва.
  • Разливы нефти и химикатов. При разрыве подводных трубопроводов ROV опускаются на глубины, недоступные водолазам (свыше 300–400 м): перерезают повреждённые трубы, закрывают задвижки, ставят заплаты под управлением оператора с поверхности.
  • Тушение пожаров. Роботизированные лафетные стволы («пожарные танки») заходят в эпицентр горящего нефтехранилища или химзавода — туда, где высокая температура и риск взрыва, — и подают мощные струи воды или пены.

Стихийные бедствия

Акцент смещается на поиск выживших, доставку помощи и быструю оценку ущерба в условиях хаоса.

  • Землетрясения: роботы USAR (Urban Search & Rescue). Змееподобные роботы — узкие и гибкие — пробираются сквозь щели в завалах с камерой и микрофоном; миниатюрные «роботы-тараканы» быстро бегают по битому кирпичу. Задача — передать пострадавшему медикаменты, воду или переговорное устройство до того, как его откопают.
  • Наводнения и цунами. Надводные дроны доставляют спасательные жилеты: сбросить плот или круг тонущему дрон успевает быстрее, чем доплывёт спасатель. Подводная разведка обследует опоры мостов и затопленные тоннели, чтобы предотвратить обрушение при отходе воды.
  • Лесные пожары. Тяжёлые дроны-вертолёты сбрасывают воду на кромку огня ночью и в задымлении, когда пилотируемая авиация не летает; дроны с тепловизорами сканируют подстилку после фронта огня, выявляя скрытые очаги тления; для встречного пала дроны сбрасывают капсулы с химическим составом, поджигая полосу леса перед фронтом пожара и создавая выжженную преграду.

Четыре технологических вызова

  1. Связь. В подвалах разрушенных зданий и под водой радиосигнал гаснет; решения — прокладка кабеля (оптоволоконная катушка, разматывающаяся за роботом) и акустические модемы под водой.
  2. Энергоавтономность. Спасательная операция может длиться сутками; разрабатываются гибридные системы и роботы, передающие энергию друг другу по цепочке.
  3. ИИ в дыму и пыли. Обычное зрение в тумане, пыли и дыму не работает — робот должен сам отличать человека от обломка стены по термоснимкам и данным лидаров.
  4. Морфология движителей. Колёса вязнут в грязи, гусеницы рвутся на арматуре; ведутся разработки шагающих и роторно-винтовых шасси.

Сильное завершение ответа — формула «исключить человека из петли риска»: робот становится расходным инструментом, который принимает на себя радиацию, ядовитые газы, падение балок и кипяток, давая шанс на спасение и пострадавшим, и спасателям. И перспектива: роевой интеллект — сотни мелких дронов, самостоятельно координирующихся при поиске выжившего под завалами без оператора.

Вопросы к собеседованию

Как роботы помогают охранять окружающую среду до катастроф?

Три направления превентивной работы: мониторинг воздуха и воды — дроны с газоанализаторами над промзонами и полигонами ТБО (утечки метана, сероводорода), AUV в акваториях (pH, мутность, нефтяные плёнки), биомиметические роботы-рыбы для проб внутри косяков; мониторинг флоры и фауны — мультиспектральная съёмка вырубок и сельхозугодий (точечная обработка снижает пестициды), щадящее обследование коралловых рифов; борьба с загрязнениями — роботы-сортировщики отходов с машинным зрением (в десятки раз быстрее человека) и роботы-скиммеры, собирающие нефтяную плёнку с воды.

Какие роботы работали на Фукусиме и почему обычные не справились?

В разрушенные реакторы Фукусимы-1 входили гусеничные роботы-разведчики PackBot и Quince — измеряли радиацию и делали снимки; позже роботы-манипуляторы расчищали завалы и брали пробы расплавленного ядерного топлива. Обычные роботы не справлялись, потому что электроника «сгорает» при сильном облучении — требуется специальная радиационно-стойкая элементная база. Сама логика применения: человек получает смертельную дозу за минуты, а робот может работать часами.

Как применяются роботы при стихийных бедствиях?

Землетрясения — роботы USAR: змееподобные пробираются в щели завалов с камерой и микрофоном, «роботы-тараканы» бегают по битому кирпичу; задача — доставить пострадавшему воду, медикаменты, связь до окончания раскопок. Наводнения — надводные дроны сбрасывают спасательные жилеты и плоты быстрее пловца; подводные аппараты проверяют опоры мостов и тоннели. Лесные пожары — тяжёлые дроны-вертолёты тушат кромку ночью и в дыму, тепловизоры ищут скрытые очаги тления, а капсулы с химсоставом поджигают встречный пал — выжженную преграду перед фронтом огня.

Назовите главные технологические вызовы «роботов-спасателей».

Четыре вызова: связь — радиосигнал гаснет в завалах и под водой (решения: оптоволоконная катушка за роботом, акустические модемы); энергоавтономность — операции длятся сутками (гибридные системы, передача энергии по цепочке роботов); искусственный интеллект — в дыму и пыли обычное зрение не работает, распознавание человека ведётся по термоснимкам и лидарам; морфология движителей — колёса вязнут в грязи, гусеницы рвутся на арматуре, перспективны шагающие и роторно-винтовые шасси. Итог применения — исключение человека из «петли риска».