К основному содержанию
NeFlows · шаблон n8n · Исследование рынка

Страницы сайта в Google Drive — шаблон n8n

Страницы сайта собираются с карты сайта и сохраняются отдельными документами. В workflow n8n — Google Drive получает содержимое страниц в формате Markdown.

Оригинал на n8n.io: 💡🌐 Essential multipage website scraper with Jina.ai — Joseph LePage

Открыть шаблон на n8n.io бесплатно
Сложность
средний12 видов узлов
Просмотров на n8n.io
17 324
Опубликован
Обновлён
Автор
Joseph LePageпроверен n8n.io
Сверено

Что делает шаблон

Google Drive хранит отдельный документ для каждой обработанной страницы. В документ попадает содержимое веб-страницы в формате Markdown, а имя складывается из URL и заголовка страницы. Для сбора задаётся ссылка на карту сайта; фильтр позволяет выбрать темы или страницы, а узел ограничения регулирует размер пакета. По умолчанию он установлен на 20 страниц. Между запросами предусмотрена задержка, чтобы не перегружать серверы. Для Jina.ai API-ключ не требуется. Сбор следует вести с соблюдением местных правил и требований.

Как работает workflow по шагам

  1. Ручной триггер запускает workflow.
  2. HTTP Request получает карту сайта по заданному адресу, а узел XML извлекает ссылки на страницы.
  3. Узел Filter отбирает страницы по заданным темам или адресам.
  4. Узел Limit ограничивает количество страниц в пакете, а Split Out разделяет их для обработки.
  5. Цикл передаёт URL в HTTP Request для сбора содержимого через Jina.ai.
  6. Узлы Code и Edit Fields подготавливают содержимое и заголовок страницы.
  7. Wait задаёт паузу между запросами, после чего Google Drive сохраняет документ.

Что нужно для запуска

  • Ссылка на карту сайта целевого сайта
  • Учётная запись Google Drive

Как подключить Google Drive к n8n

Учётная запись Google Drive подключается в соответствующем узле. В workflow предусмотрено подключение аккаунта, но способ авторизации не задан.

Что изменить под себя

  • В узле Set Website URL заменить адрес карты сайта на адрес целевого сайта.
  • В узле Filter By Topics or Pages настроить отбор нужных тем или страниц.
  • В узле Limit изменить размер пакета; значение по умолчанию — 20 страниц.

Сервисы 1

Категории у источника: Исследование рынка , Мультимодальный ИИ

Узлы workflow 12

  • HTTP Request
  • Edit Fields (Set)
  • Loop Over Items (Split in Batches)
  • XML
  • Google Drive
  • Wait
  • Sticky Note
  • Code
  • Manual Trigger
  • Filter
  • Limit
  • Split Out

Виды узлов, из которых собран сценарий, — как их перечисляет страница шаблона. Серым — служебные узлы n8n.

Автор и первоисточник

Сценарий «💡🌐 Essential multipage website scraper with Jina.ai» опубликовал на n8n.io Joseph LePage. Файл шаблона и авторское описание — на странице шаблона.

Русское описание написано языковой моделью по странице шаблона и прошло автоматическую проверку: в нём нет сервисов и чисел, которых нет у автора. Сценарий принадлежит автору; каталог его не хранит.

Для ИИ-кодинга с теми же сервисами

Похожие шаблоны n8n

Видео из идей Google Sheets для соцсетей Идеи для коротких видео превращаются в ролики с озвучкой и описаниями для публикации на нескольких площадках. Готовый workflow n8n Google Sheets связывает с ИИ-сервисами, облачным хранилищем и каналом уведомлений. Google Sheets · Google Drive · Discord · OpenAI 407 984просмотра Ответы по документам Google Drive в Gemini Документы компании из Google Drive индексируются в Pinecone, а workflow n8n связывает их с чатом на Google Gemini. Сотрудники задают вопросы и получают ответы по содержимому файлов. Google Drive · Pinecone · Google Gemini 352 908просмотров Видео из Google Sheets в Google Drive и YouTube Видеозапросы из Google Sheets запускают создание роликов Google Veo3; в n8n workflow сохраняет готовый файл в Google Drive и публикует его на YouTube с заголовком от OpenAI. Google Sheets · Google Drive · OpenAI 280 839просмотров Ответы по PDF из Google Drive через OpenAI В n8n Manual Chat связывает Google Drive, Pinecone и OpenAI: вопросы к белой книге Bitcoin превращаются в ответы на основе её содержимого. Google Drive · Question and Answer Chain · Binary Input Loader · OpenAI +4 146 463просмотра Короткие видео из Google Sheets и AI-сервисов Идеи из Google Sheets превращаются в короткие видео для соцсетей: workflow n8n связывает OpenAI с генерацией изображений, озвучкой и монтажом, а о готовых роликах сообщает в Discord. Google Sheets · Google Drive · Discord · OpenAI 121 288просмотров Ответы по PDF с цитатами из Google Drive и Pinecone PDF-документ обрабатывается в n8n, где Pinecone хранит данные для поиска, а OpenAI формирует ответы с цитатами на использованные фрагменты. Вопросы задаются во встроенном чате. Google Drive · OpenAI · Pinecone 117 261просмотр

Спонсоры проекта

Компании, которые помогают держать аналитику открытой