Кейс 03 · CNC-RAG · промышленный холдинг
CNC-RAG — агент для поиска и ответов на любые вопросы по библиотеке технической документации
Поиск по мануалам станков с ЧПУ, включая чертежи, схемы и скриншоты, на локальных моделях.
Для промышленного холдинга мы разработали с нуля MVP агентской поисковой системы по технической документации станков с ЧПУ. Инженер задаёт вопрос по-русски, а система находит ответ в мануалах и подтверждает его ссылками на документ, страницу и рисунок.
Главная особенность в том, что поиск идёт и по картинкам. Значительная часть полезной информации в мануалах лежит не в тексте, а на чертежах, схемах соединений, скриншотах экранов ЧПУ и таблицах, вставленных как изображения. CNC-RAG находит ответы и там: какие модули на плате выделены заливкой, к какому клеммнику подключён датчик, в каком порядке стоят элементы на панели, какой размер указан на чертеже.
Когда приходит вопрос, агент ищет подходящие фрагменты, при необходимости открывает страницу или рисунок и отвечает по документам. Если ответа в документации нет, он так и говорит.
Систему можно разместить на локальных моделях, в закрытом контуре, и весь стек помещается на одной видеокарте. Интеграционные тесты пройдены: 94,7% точности на полном наборе из 375 вопросов.
Функционал системы
- Поиск по картинкам
- Ищет ответы не только в тексте, но и на чертежах, схемах соединений, скриншотах экранов и в таблицах, вставленных как картинки.
- Отвечает на вопросы про расположение элементов, соединения на схемах, выделения на чертежах и размеры.
- Понимает точные обозначения: номера алармов и параметров, разъёмы, артикулы.
- Поисковый агент
- Сам решает, что открыть: фрагмент текста, рисунок или страницу целиком.
- Отвечает по документам и прилагает ссылки на файл, страницу и рисунок.
- Сообщает, если ответа в документации нет.
- Вопрос по-русски, документация на английском или русском; поиск по одному мануалу, серии станков или всей базе.
- Интерфейс
- Веб-интерфейс с выбором документов, ответом, источниками и ходом работы агента по шагам.
- Ссылка из ответа открывает страницу мануала, так что ответ легко проверить.
- API для подключения других клиентов.
- Проверка качества
- Набор проверочных вопросов с эталонными ответами, часть из них решается только по картинкам.
- Автоматическая оценка результатов после каждого изменения системы.
Масштаб проекта
- Сотни мануалов, более 48 000 страниц и 48 000 рисунков.
- Ответ на вопрос за полминуты на одной видеокарте.
Результаты
- MVP разработан с нуля, интеграционные тесты пройдены
- 94,7% точности на полном наборе из 375 вопросов
- Размещается на локальных моделях в закрытом контуре, весь стек на одной видеокарте
Интерфейс проекта
LLM Technology
Нужен похожий продукт?
Разберём задачу и предложим реалистичный план первого этапа.