Получение содержимого веб-страниц для OpenAI — шаблон n8n
Веб-страницы загружаются по заданному адресу, очищаются и передаются OpenAI для ответа в Manual Chat. В n8n Manual Chat работает с агентом ReAct, который запрашивает содержимое через отдельный workflow.
Оригинал на n8n.io: AI agent that can scrape webpages — Eduard
Открыть шаблон на n8n.io бесплатно- Сложность
- средний10 видов узлов
- Просмотров на n8n.io
- 287 101
- Опубликован
- Обновлён
- Автор
- Eduardпроверен n8n.io
- Сверено
Что делает шаблон
Агент в чате получает содержимое страницы в формате Markdown с сохранением базовой структуры. Для запроса задаются адрес страницы и режим обработки: full или simplified; режим влияет на удаление внешних ссылок и адресов изображений. Параметр maxlimit ограничивает длину итогового текста: по умолчанию это 70000 символов в узле CONFIG. Если страница длиннее лимита, агент получает сообщение об ошибке. Шаблон — PoC, а не полноценный поисковик: он загружает страницу по адресу, заданному в запросе.
Как работает workflow по шагам
- Manual Chat Trigger запускает диалог с агентом ReAct.
- AI Agent получает запрос и обращается к инструменту Call n8n Workflow Tool за содержимым страницы.
- Execute Workflow Trigger запускает обработку параметров запроса.
- HTTP Request пытается загрузить страницу по переданному адресу.
- If проверяет, удалось ли получить содержимое; при успехе Edit Fields (Set) выделяет BODY и удаляет лишние теги.
- Markdown преобразует очищенный HTML в текст, который возвращается агенту, если он не превышает лимит.
Что нужно для запуска
- Доступ к OpenAI и Manual Chat.
- n8n версии 1.19.4 или новее.
Сервисы 2
- OpenAI811
- Manual Chat
Категории у источника: Разработка , ИИ-чат-боты
Узлы workflow 10
- HTTP Request
- If
- Edit Fields (Set)
- Markdown
- Sticky Note
- Execute Workflow Trigger
- AI Agent
- OpenAI Chat Model
- Call n8n Workflow Tool
- Manual Chat Trigger
Виды узлов, из которых собран сценарий, — как их перечисляет страница шаблона. Серым — служебные узлы n8n.
Автор и первоисточник
Сценарий «AI agent that can scrape webpages» опубликовал на n8n.io Eduard. Файл шаблона и авторское описание — на странице шаблона.
Русское описание написано языковой моделью по странице шаблона и прошло автоматическую проверку: в нём нет сервисов и чисел, которых нет у автора. Сценарий принадлежит автору; каталог его не хранит.