Искусственный интеллект на страже качества: Команда ZeBrains создала систему автоматического поиска дефектов ноутбуков

в 6:33, , рубрики: python, ИИ, хакатон

Рассказываем, как мы, " or ""=" [ZeBrains] заняли призовое место в кейсе от компании "Сила", и решили задачу по созданию ИИ-модели для автоматического обнаружения и классификации дефектов на изображениях ноутбуков.

В мире разработки программного обеспечения часто говорят, что лучшие решения рождаются из реальных проблем. За ограниченное время удалось не просто создать работающий прототип системы обнаружения дефектов ноутбуков, но и разработать полноценное решение, готовое к промышленному внедрению. Давайте разберем, как это удалось, и какие технические решения мы использовали.

От проблемы к решению: почему автоматизация контроля качества так важна

Представьте себе современное производство ноутбуков. Тысячи устройств ежедневно проходят через руки специалистов по контролю качества. Каждый ноутбук нужно тщательно осмотреть, проверить на наличие царапин, сколов, битых пикселей и других дефектов. На первый взгляд задача кажется простой, но давайте копнем глубже.

Существующие проблемы контроля качества

Текущий процесс ручной проверки сталкивается с целым рядом серьезных ограничений:

  • Человеческий фактор: даже самый внимательный специалист может пропустить дефект после нескольких часов монотонной работы

  • Временные затраты: тщательный осмотр одного устройства занимает значительное время

  • Масштабирование: увеличение производства требует пропорционального увеличения штата специалистов

  • Удаленная работа: проверка качества в разных локациях требует дополнительных логистических затрат

  • Документирование: ручное создание отчетов о дефектах отнимает много времени

Именно эти проблемы легли в основу задачи, поставленной компанией "Сила". Требовалось создать систему, которая могла бы автоматически находить и классифицировать дефекты на изображениях ноутбуков.

Архитектурные решения: почему каскадный подход оказался оптимальным

Первым серьезным решением команды стал выбор архитектуры системы. Вместо создания единой нейронной сети, пытающейся решить все задачи одновременно, мы пошли по пути специализации. Создали каскад независимых нейронных сетей, каждая из которых отвечает за свой тип дефектов.

Почему это важно?

Представьте, что вы пытаетесь научить одного человека одновременно быть экспертом по живописи, автомехаником и нейрохирургом. Звучит нереалистично, правда? Точно так же одной нейронной сети сложно одинаково хорошо находить и битые пиксели, и царапины, и проблемы с винтами. Каждый тип дефекта имеет свои особенности и требует специфического подхода к обнаружению.

Компоненты системы в деталях

1. Сеть сегментации: первый уровень анализа

Эта нейронная сеть работает как опытный координатор, определяя на изображении ключевые зоны:

  • Общие границы ноутбука

  • Область экрана

  • Зону клавиатуры

Точная сегментация критически важна, так как она определяет, какие специализированные детекторы будут применяться к каждой области изображения.

2. Специализированные детекторы: эксперты по конкретным дефектам

Модель обнаружения битых пикселей Этот детектор работает исключительно с областью экрана и специализируется на поиске характерных паттернов битых пикселей. 

Модель детекции царапин и сколов Этот компонент анализирует поверхности ноутбука.

Модель проверки винтов Специализированный детектор для контроля крепежных элементов выявляет отсутствие, наличие или неправильную установку винта.

Технические детали реализации

Создание эффективной системы компьютерного зрения требует тщательного выбора инструментов и технологий. Команда остановилась на следующем стеке:

Основной технологический стек

python

Каждый компонент системы тщательно продуман и оптимизирован для своей задачи. Python был выбран как основной язык разработки благодаря богатой экосистеме библиотек для машинного обучения и обработки изображений. YOLO11 обеспечивает высокую скорость и точность детекции объектов, а Gradio позволяет быстро создавать интуитивно понятные веб-интерфейсы.

Интерфейс: больше чем просто красивая оболочка

При разработке интерфейса команда руководствовалась принципом "простота не должна означать ограниченность". Результатом стал функциональный веб-интерфейс, который предоставляет все необходимые инструменты для работы с системой.

Модуль загрузки и анализа

Этот компонент позволяет:

  • Загружать множество изображений одновременно

  • Запускать параллельную обработку нескольких изображений

  • Получать предварительные результаты в реальном времени

    Искусственный интеллект на страже качества: Команда ZeBrains создала систему автоматического поиска дефектов ноутбуков - 1

Модуль редактирования и валидации

Здесь пользователи могут:

  • Проверять результаты автоматического анализа

  • Вносить корректировки в обнаруженные дефекты

  • Формировать итоговые отчеты

Искусственный интеллект на страже качества: Команда ZeBrains создала систему автоматического поиска дефектов ноутбуков - 2
Искусственный интеллект на страже качества: Команда ZeBrains создала систему автоматического поиска дефектов ноутбуков - 3

Оценка качества работы системы

Для объективной оценки качества работы системы команда использовала метрику F1-score. Почему именно её? F1-score представляет собой гармоническое среднее между precision и recall, что делает её особенно полезной в случаях, когда важно одинаково хорошо минимизировать как ложные срабатывания, так и пропуски дефектов.

Искусственный интеллект на страже качества: Команда ZeBrains создала систему автоматического поиска дефектов ноутбуков - 4

Битые пиксели 0.63

Битые пиксели 0.63
Царапины и сколы 0.63

Царапины и сколы 0.63
Сегментация 0.78

Сегментация 0.78
Болты 0.89

Болты 0.89

Перспективы промышленного внедрения

Решение команды ZeBrains готово к масштабированию и промышленному использованию. Для максимальной эффективности рекомендуется:

  1. Установка стационарных камер в ключевых точках контроля качества

  2. Организация специального освещения для стабильных условий съемки

  3. Интеграция с существующими системами управления производством

  4. Настройка автоматического сбора и анализа статистики

Заключение: больше чем просто победа в хакатоне

История команды ZeBrains показывает, как важно правильно подойти к архитектуре проекта даже в условиях ограниченного времени хакатона. Решение не только победило в конкурсе, но и создало основу для реального промышленного продукта.

Ключевые факторы успеха:

  • Правильный выбор архитектуры

  • Фокус на модульности и масштабируемости

  • Тщательная проработка каждого компонента

  • Внимание к пользовательскому опыту

Проект демонстрирует, как современные технологии машинного обучения и компьютерного зрения могут решать реальные производственные задачи, принося ощутимую пользу бизнесу. И что особенно важно — это решение можно постоянно улучшать и адаптировать под новые задачи, что делает его по-настоящему перспективным для промышленного применения.

Автор: ZeBrains_team

Источник

* - обязательные к заполнению поля


https://ajax.googleapis.com/ajax/libs/jquery/3.4.1/jquery.min.js