Multi-Agent Evaluation (eval nodes) — сценарий n8n +…

Автоматизация позволяет тестировать и улучшать логику ИИ-агентов, обрабатывающих запросы пользователей через чат или датасеты. Система использует несколько агентов и инструментов (поиск в базе знаний, веб-поиск, калькулятор), оценивает точность их действий и сохраняет метрики в Google Sheets. Подходит для команд, разрабатывающих многоэтапные LangChain-системы в n8n.

## Кому подойдёт
- Разработчики ИИ-агентов, тестирующие корректность вызова инструментов
- Инженеры MLOps, которым нужно оценивать производительность агентов
- Команды, строящие многоэтапные системы на основе LangChain в n8n
- Аналитики, сравнивающие результаты разных моделей через структурированные датасеты

## Что делает автоматизация
- Обрабатывает входящие запросы из чата или строк Google Sheets
- Запускает мультиагентную систему с использованием OpenRouter и LangChain
- Выполняет поиск в векторной базе (Qdrant), веб-поиск (Firecrawl), математические вычисления и суммаризацию
- Оценивает, правильно ли были выбраны и использованы инструменты, на основе эталонных данных из таблицы
- Сохраняет результаты выполнения, метрики и оценки обратно в Google Sheets

## Что входит в пакет
- Готовый workflow для n8n с поддержкой multi-agent orchestration
- Логика триггеров на сообщение в чате или новую строку в Google Sheets
- Интеграции с Qdrant, Firecrawl, Google Sheets API, OpenRouter и OpenAI
- Базовая текстовая инструкция по запуску и адаптации

## Что нужно для запуска
- Аккаунт n8n с доступом к HTTP API и управлению workflow
- Доступ к Google Sheets с правами на чтение и запись
- Аккаунты в Qdrant (для хранения эмбеддингов)
- Ключи OpenRouter (для LLM-выводов) и OpenAI (для эмбеддингов)
- API-ключ Firecrawl для веб-поиска

## Польза и эффекты
- Автоматическое тестирование логики агентов без ручного контроля
- Возможность сравнения эффективности разных моделей через единый датасет
- Прозрачная оценка использования инструментов (tool calling accuracy)
- Централизованное хранение результатов и метрик в Google Sheets
- Быстрая итерация и улучшение агентов на основе структурированных данных
- Поддержка сложных сценариев: комбинированный поиск, вычисления, анализ

## Важное о формате продукта и поддержке
**Важно:** вы приобретаете именно готовый шаблон сценария автоматизации. Разворот под вашу инфраструктуру, интеграция с конкретными аккаунтами и сервисами, индивидуальная помощь в настройке, доработки под нестандартные стеки и любая консультационная поддержка оказываются отдельно и оплачиваются по индивидуальному тарифу. Для обсуждения доработок и индивидуальной помощи вы можете связаться через Telegram: @gleb923.