n8n: Ответы на сообщения WhatsApp через OpenAI и Gemini
Входящие сообщения WhatsApp — текст, голосовые заметки, изображения и видео — обрабатываются в n8n, а отправителю уходит ответ через WhatsApp Business Cloud. OpenAI и Google Gemini разбирают медиа.
Оригинал на n8n.io: Answer WhatsApp text, voice, image and video messages with OpenAI and Gemini — Dr. Firas
Открыть шаблон на n8n.io бесплатно- Сложность
- сложный13 видов узлов
- Просмотров на n8n.io
- 341
- Опубликован
- Обновлён
- Автор
- Dr. Firasпроверен n8n.io
- Сверено
Что делает шаблон
В WhatsApp Business Cloud отправителю возвращается ответ на исходное сообщение. Текст поступает в агент напрямую, голосовая заметка превращается в расшифровку с помощью OpenAI, описание изображения создаёт OpenAI Vision, а видео анализирует Google Gemini. Агент может обращаться к Wikipedia и хранит память отдельно для каждого отправителя. В настройках меняются системная инструкция, идентификаторы моделей, запросы для анализа изображений и видео, окно памяти и максимальная длина ответа; отправка адресуется номеру телефона исходного отправителя.
Как работает workflow по шагам
- WhatsApp Trigger запускает workflow при получении нового сообщения.
- Split Out разделяет данные сообщения на отдельные части.
- Switch направляет текст, аудио, изображение или видео в соответствующую ветку.
- Для аудио узлы получают ссылку WhatsApp, скачивают файл и передают его OpenAI на транскрибацию; изображения анализирует OpenAI, видео — Google Gemini.
- Edit Fields (Set) собирает текст, расшифровку или описание вместе с подписью, если она есть.
- AI Agent формирует ответ с памятью отправителя и возможным поиском в Wikipedia, а WhatsApp Business Cloud отправляет его с учётом лимита длины.
Что нужно для запуска
- Учётные данные OAuth для WhatsApp Trigger и WhatsApp Business Cloud.
- Настроенный в Meta вебхук для входящих сообщений.
- Учётные данные API OpenAI для ответов, транскрибации аудио и анализа изображений.
- Учётные данные API Google Gemini (PaLM) для анализа видео.
- Идентификатор номера телефона WhatsApp Business.
Как подключить WhatsApp к n8n
WhatsApp Trigger подключается через OAuth, а WhatsApp Business Cloud — через учётные данные сервиса. В Meta настраивается вебхук, направляющий входящие сообщения в workflow. В шаге отправки указывается идентификатор номера WhatsApp Business, а ответ адресуется номеру отправителя.
Что изменить под себя
- Меняются системная инструкция и идентификаторы моделей в настройках.
- Редактируются запросы для анализа изображений и видео.
- Настраиваются окно памяти и максимальная длина ответа.
- В шаге отправки выбирается идентификатор номера WhatsApp Business.
Сервисы 4
- WhatsApp45
- OpenAI811
- Wikipedia
- Google Gemini251
Категории у источника: Боты поддержки , ИИ-чат-боты
Узлы workflow 13
- HTTP Request
- Edit Fields (Set)
- Switch
- Sticky Note
- WhatsApp Business Cloud
- AI Agent
- OpenAI Chat Model
- Simple Memory
- Wikipedia
- Split Out
- OpenAI
- Whatsapp Trigger
- Google Gemini
Виды узлов, из которых собран сценарий, — как их перечисляет страница шаблона. Серым — служебные узлы n8n.
Автор и первоисточник
Сценарий «Answer WhatsApp text, voice, image and video messages with OpenAI and Gemini» опубликовал на n8n.io Dr. Firas. Файл шаблона и авторское описание — на странице шаблона.
Русское описание написано языковой моделью по странице шаблона и прошло автоматическую проверку: в нём нет сервисов и чисел, которых нет у автора. Сценарий принадлежит автору; каталог его не хранит.