Индексация транскриптов YouTube в Pinecone — шаблон n8n
Транскрипты YouTube проходят обработку в n8n с OpenAI и Pinecone: workflow собирает из них смысловые фрагменты и индексирует для поиска отдельным агентом.
Оригинал на n8n.io: 🚀 Process YouTube transcripts with Apify, OpenAI & Pinecone database — Adyl Itto
Открыть шаблон на n8n.io бесплатно- Сложность
- средний12 видов узлов
- Просмотров на n8n.io
- 1 167
- Опубликован
- Обновлён
- Автор
- Adyl Itto
- Сверено
Что делает шаблон
В Airtable сохраняются данные транскрипта и сведения о видео: название, описание, дата публикации и миниатюра. Для каждого смыслового фрагмента формируются начальная и конечная отметки времени, а также ссылка на соответствующий момент ролика. Текст делится на части по 500 символов с перекрытием в 50 символов; фрагменты объединяются, если промежуток между записями не превышает 3 секунды. Индексация создаёт векторы в Pinecone для последующего семантического поиска. Поиск выполняет отдельный агент: этот workflow обрабатывает и индексирует транскрипты, но не ищет по ним.
Как работает workflow по шагам
- Manual Trigger запускает workflow.
- Airtable получает записи с URL видео и метаданными, а Loop Over Items передаёт их по одной.
- HTTP Request запускает Apify для сбора транскрипта с отметками времени, Wait ожидает обработку, а следующий HTTP Request получает данные.
- Code форматирует JSON транскрипта, Edit Fields извлекает идентификатор видео, Airtable записывает транскрипт и идентификатор в запись.
- Airtable повторно получает записи с транскриптами, а Code разбирает их, переводит отметки времени в секунды и собирает фрагменты.
- Default Data Loader добавляет метаданные, Recursive Character Text Splitter делит текст, Embeddings OpenAI создаёт векторы, а Pinecone Vector Store индексирует их.
Что нужно для запуска
- Доступ к Airtable, OpenAI и Pinecone.
- Токен Apify для запуска сбора транскриптов.
- Записи Airtable с URL видео и метаданными.
Что изменить под себя
- В Airtable настраиваются база и поля записей, включая URL и метаданные видео.
- В HTTP Request указываются токен Apify и URL видео для сбора транскрипта.
- В Recursive Character Text Splitter задаются размер фрагмента и перекрытие.
Сервисы 3
- Airtable81
- OpenAI811
- Pinecone
Категории у источника: Извлечение данных из документов , RAG: ответы по своим документам
Узлы workflow 12
- Airtable
- HTTP Request
- Edit Fields (Set)
- Loop Over Items (Split in Batches)
- Wait
- Sticky Note
- Code
- Manual Trigger
- Embeddings OpenAI
- Recursive Character Text Splitter
- Pinecone Vector Store
- Default Data Loader
Виды узлов, из которых собран сценарий, — как их перечисляет страница шаблона. Серым — служебные узлы n8n.
Автор и первоисточник
Сценарий «🚀 Process YouTube transcripts with Apify, OpenAI & Pinecone database» опубликовал на n8n.io Adyl Itto. Файл шаблона и авторское описание — на странице шаблона.
Русское описание написано языковой моделью по странице шаблона и прошло автоматическую проверку: в нём нет сервисов и чисел, которых нет у автора. Сценарий принадлежит автору; каталог его не хранит.