К основному содержанию
NeFlows · шаблон n8n · Разработка

n8n: Сравнение ответов OpenAI, Anthropic и Google Gemini

Ответы OpenAI, Anthropic и Google Gemini проходят автоматическую оценку качества в workflow n8n; Chat Trigger принимает запрос, а результаты возвращаются в чат.

Оригинал на n8n.io: Compare GPT-4, Claude & Gemini Responses with Contextual AI's LMUnit Evaluation — Jinash Rouniyar

Открыть шаблон на n8n.io бесплатно
Сложность
средний11 видов узлов
Просмотров на n8n.io
9 635
Опубликован
Обновлён
Автор
Jinash Rouniyarпроверен n8n.io
Сверено

Что делает шаблон

Чат получает сводку с оценками по ясности и краткости ответов, результатами для каждой модели и общими средними значениями. Для сравнения модели получают один и тот же запрос. Contextual AI LMUnit оценивает ответы по шкале от 1 до 5, используя заданные критерии. В конфигурации тестов можно добавить проверку точности фактов, тона или полноты; также меняются пороги, логика агрегации и формат сводки для панелей, таблиц или JSON-экспорта.

Как работает workflow по шагам

  1. Chat Trigger запускает workflow и принимает запрос через чат.
  2. OpenAI, Anthropic и Google Gemini получают одинаковый запрос и формируют ответы.
  3. Merge объединяет ответы моделей и связывает их с соответствующими тестами.
  4. Contextual AI LMUnit оценивает ясность и краткость каждого ответа по шкале от 1 до 5.
  5. Code агрегирует оценки и формирует сводку с показателями моделей и общими средними.
  6. Respond To Chat возвращает сводку в чат.

Что нужно для запуска

  • Учётная запись Contextual AI и ключ CONTEXTUALAI_API_KEY.
  • API-ключ OpenAI.
  • API-ключ Anthropic.
  • API-ключ Gemini.

Как подключить OpenAI к n8n

Ключ CONTEXTUALAI_API_KEY получают в бесплатной учётной записи Contextual AI и добавляют в n8n как учётные данные Contextual AI. Для OpenAI нужен API-ключ с platform.openai.com/account/api-keys; ключ добавляют в учётные данные OpenAI.

Что изменить под себя

  • Добавляются критерии оценки в конфигурацию тестов LMUnit: точность фактов, тон или полнота.
  • Добавляются провайдеры LLM копированием узлов генерации ответов.
  • Меняются пороги и логика агрегации.
  • Настраивается формат итоговой сводки для панелей, таблиц или экспорта JSON.

Сервисы 4

Категории у источника: Разработка , ИИ-пересказ

Узлы workflow 11

  • Merge
  • Edit Fields (Set)
  • Loop Over Items (Split in Batches)
  • Wait
  • Sticky Note
  • Code
  • Chat Trigger
  • OpenAI
  • Google Gemini
  • Anthropic
  • Respond To Chat

Виды узлов, из которых собран сценарий, — как их перечисляет страница шаблона. Серым — служебные узлы n8n.

Автор и первоисточник

Сценарий «Compare GPT-4, Claude & Gemini Responses with Contextual AI's LMUnit Evaluation» опубликовал на n8n.io Jinash Rouniyar. Файл шаблона и авторское описание — на странице шаблона.

Русское описание написано языковой моделью по странице шаблона и прошло автоматическую проверку: в нём нет сервисов и чисел, которых нет у автора. Сценарий принадлежит автору; каталог его не хранит.

Похожие шаблоны n8n

AI-посты для автосервиса в Telegram и соцсетях Посты для автосервиса создаются с помощью ИИ и публикуются в Telegram, Facebook Graph API и X (Twitter); workflow в n8n связывает генерацию контента с соцсетями. Telegram · Facebook Graph API · X (Twitter) · LinkedIn +12 53 536просмотров Учёт токенов AI Agent в Google Sheets Учёт токенов AI Agent автоматизирован в n8n для Google Sheets: workflow собирает данные об использовании моделей Anthropic, OpenAI и Google Gemini и передаёт их в таблицу. Google Sheets · Anthropic · OpenAI · Google Gemini 25 110просмотров Публикации салона красоты в Telegram Контент для салона красоты создаётся в n8n и публикуется в Telegram: workflow связывает исследование темы, генерацию текста и изображения, а также отправку готового поста. Telegram · Google Drive · WordPress · Facebook Graph API +19 13 059просмотров Поиск Brave Search с ранжированием Google Gemini Поисковые запросы workflow n8n связывает с Google Gemini и Brave Search: модель уточняет формулировку, а система ранжирует найденные страницы по смыслу исходного вопроса. Anthropic · OpenAI · Google Gemini 5 230просмотров Анализ голосовых, фото и видео в Telegram Голосовые сообщения, фото, видео и текст обрабатываются в workflow n8n для Telegram: бот использует OpenAI и Google Gemini и отправляет ответ в чат. Telegram · Anthropic · OpenAI · Google Gemini 1 888просмотров AI-публикации из OpenAI в LinkedIn и соцсети Публикации для LinkedIn и других соцсетей создаются с помощью ИИ: workflow в n8n связывает LinkedIn, OpenAI и Telegram, а затем отправляет материалы на согласование. Telegram · Facebook Graph API · X (Twitter) · Gmail +4 445 412просмотров

Спонсоры проекта

Компании, которые помогают держать аналитику открытой