Поиск по фото из Google Drive с OpenAI — шаблон n8n
Фотографии из Google Drive получают текстовые описания и векторные представления, чтобы искать изображения по смыслу. В n8n Google Drive связан с OpenAI для анализа снимков и подготовки данных к поиску.
Оригинал на n8n.io: Generating image embeddings via textual summarisation — Jimleuk
Открыть шаблон на n8n.io бесплатно- Сложность
- средний11 видов узлов
- Просмотров на n8n.io
- 9 890
- Опубликован
- Обновлён
- Автор
- Jimleukпроверен n8n.io
- Сверено
Что делает шаблон
Google Drive служит источником фотографий, а векторное хранилище содержит текстовые представления, связанные с изображениями. Для каждой фотографии в документ объединяются сведения о цветах, короткое описание с семантическими ключевыми словами и метаданные изображения. По этому документу можно запрашивать хранилище и получать ссылки или ссылки на соответствующие изображения. Текстовое суммирование — один из способов создать такие представления; при неудовлетворительных результатах можно использовать специализированные модели векторизации изображений, например мультимодальные модели Vertex AI.
Как работает workflow по шагам
- Manual Trigger запускает workflow вручную.
- Google Drive загружает фотографию в workflow.
- Edit Image извлекает из снимка сведения о цветах.
- OpenAI анализирует изображение и возвращает короткое описание с семантическими ключевыми словами.
- Merge объединяет описание и данные о цветах с метаданными снимка в документ.
- Default Data Loader и Recursive Character Text Splitter подготавливают документ, а Embeddings OpenAI создаёт векторное представление для In Memory Vector Store.
Что нужно для запуска
- Учётная запись Google для загрузки файлов изображений из Google Drive.
- Учётная запись OpenAI для модели анализа изображений и модели векторизации.
Что изменить под себя
- При неудовлетворительных результатах текстового суммирования можно заменить его специализированными моделями векторизации изображений, например мультимодальными моделями Vertex AI.
Кому подойдёт
Сценарий подходит для контекстного поиска по личной фототеке, подбора товаров и поиска по видеоматериалам.
Сервисы 2
Категории у источника: Разработка , RAG: ответы по своим документам
Узлы workflow 11
- Edit Image
- Merge
- Edit Fields (Set)
- Google Drive
- Sticky Note
- Manual Trigger
- Embeddings OpenAI
- Recursive Character Text Splitter
- In Memory Vector Store
- Default Data Loader
- OpenAI
Виды узлов, из которых собран сценарий, — как их перечисляет страница шаблона. Серым — служебные узлы n8n.
Автор и первоисточник
Сценарий «Generating image embeddings via textual summarisation» опубликовал на n8n.io Jimleuk. Файл шаблона и авторское описание — на странице шаблона.
Русское описание написано языковой моделью по странице шаблона и прошло автоматическую проверку: в нём нет сервисов и чисел, которых нет у автора. Сценарий принадлежит автору; каталог его не хранит.