Сбор данных с сайтов через Scrappey — шаблон n8n
Данные с сайтов workflow n8n отправляет в Scrappey для сбора, а результат возвращается в workflow. Тестовые данные можно заменить производственными.
Оригинал на n8n.io: Scrape every URL on the web without getting blocked by Anti-Bot technologies with Scrappey — Bela
Открыть шаблон на n8n.io бесплатно- Сложность
- простой4 вида узлов
- Просмотров на n8n.io
- 28 199
- Опубликован
- Обновлён
- Автор
- Belaпроверен n8n.io
- Сверено
Что делает шаблон
Сведения с сайта возвращаются как результат вызова Scrappey. Сейчас для запроса используются тестовые данные; вместо них можно подключить производственный источник любого типа. Для работы требуется API-ключ Scrappey. Сервис предназначен для сбора данных с сайтов с обходом антибот-технологий.
Как работает workflow по шагам
- Schedule Trigger запускает workflow по расписанию.
- Edit Fields (Set) подготавливает тестовые данные для запроса.
- HTTP Request отправляет API-запрос в Scrappey.
- HTTP Request получает собранные данные сайта в ответе.
Что нужно для запуска
- Учётная запись Scrappey и API-ключ Scrappey
Как подключить сервисы к n8n
API-ключ Scrappey указывается в узле HTTP Request вместо YOUR_API_KEY.
Что изменить под себя
- Тестовые данные заменяются производственными; к workflow можно подключить источник данных любого типа.
Узлы workflow 4
- HTTP Request
- Edit Fields (Set)
- Sticky Note
- Schedule Trigger
Виды узлов, из которых собран сценарий, — как их перечисляет страница шаблона. Серым — служебные узлы n8n.
Автор и первоисточник
Сценарий «Scrape every URL on the web without getting blocked by Anti-Bot technologies with Scrappey» опубликовал на n8n.io Bela. Файл шаблона и авторское описание — на странице шаблона.
Русское описание написано языковой моделью по странице шаблона и прошло автоматическую проверку: в нём нет сервисов и чисел, которых нет у автора. Сценарий принадлежит автору; каталог его не хранит.