Извлечение данных с веб-страниц через OpenAI — шаблон n8n
Данные с веб-страниц workflow в n8n получает через Selenium и передаёт OpenAI для извлечения заданных сведений. Запрос отправляется на вебхук вместе с адресом страницы и перечнем нужных данных.
Оригинал на n8n.io: Ultimate scraper workflow for n8n — Pablo
Открыть шаблон на n8n.io бесплатно- Сложность
- сложный13 видов узлов
- Просмотров на n8n.io
- 56 185
- Опубликован
- Обновлён
- Автор
- Pablo
- Сверено
Что делает шаблон
Ответ вебхука содержит сведения, извлечённые со страницы по заданным названиям данных и их описаниям. Например, можно запросить число подписчиков страницы GitHub и общее число звёзд у репозиториев. Selenium получает информацию, отображаемую на целевой веб-странице; для входа на неё можно передать cookies сессии. Проект требует отдельной настройки по инструкциям репозитория. Версии workflow и проекта на GitHub могут различаться.
Как работает workflow по шагам
- Вебхук запускает workflow после POST-запроса с адресом страницы и целевыми данными.
- Узел HTTP Request получает страницу с помощью Selenium.
- Узел HTML обрабатывает содержимое страницы.
- Узел OpenAI извлекает сведения, соответствующие целевым данным.
- Узел Respond to Webhook возвращает ответ на запрос. Результат также проходит через узел Convert to File.
Что нужно для запуска
- Доступ к OpenAI.
- Развёрнутый проект с необходимыми зависимостями по инструкциям репозитория.
- Адрес целевой страницы и перечень данных для извлечения.
Что изменить под себя
- В теле запроса меняются тема и адрес страницы.
- В перечне Target data задаются названия нужных данных и их описания.
- В запрос можно добавить cookies сессии для входа на целевую страницу.
Сервисы 1
Категории у источника: Исследование рынка , ИИ-пересказ
Узлы workflow 13
- HTTP Request
- If
- Edit Fields (Set)
- Webhook
- Respond to Webhook
- Sticky Note
- Code
- HTML
- OpenAI Chat Model
- Convert to File
- Limit
- OpenAI
- Information Extractor
Виды узлов, из которых собран сценарий, — как их перечисляет страница шаблона. Серым — служебные узлы n8n.
Автор и первоисточник
Сценарий «Ultimate scraper workflow for n8n» опубликовал на n8n.io Pablo. Файл шаблона и авторское описание — на странице шаблона.
Русское описание написано языковой моделью по странице шаблона и прошло автоматическую проверку: в нём нет сервисов и чисел, которых нет у автора. Сценарий принадлежит автору; каталог его не хранит.