# ingest-pipelines

Скилл для проектирования и правки ingest-пайплайнов Elasticsearch: парсинг, ветвления, суб-пайплайны и обработка ошибок.

- скилл · `type=skill` · Claude Code, Codex, Cursor, GitHub Copilot, Gemini CLI, OpenCode · 516 установок · ★ 16
- Автор: elastic
- Лицензия: Apache-2.0 · policy=mirror · начало файла — в конце страницы
- Исходник: https://github.com/elastic/integration-skills/tree/HEAD/skills/ingest-pipelines/SKILL.md
- Обновлён: 2026-10-16
- HTML: https://affpapa.org/nevibecode/skills/ingest-pipelines

## Что делает

Скилл задаёт правила, по которым агент собирает и меняет `elasticsearch/ingest_pipeline/default.yml` для датастрима. Он подсказывает, какие процессоры брать под задачу: `grok`, `dissect`, `json`, `kv`, `date`, `convert`. Отдельно разбирает ветвления и маршрутизацию через процессор `pipeline`, а также порядок процессоров, от которого зависит и производительность, и читаемость конфига.

Внутри описан каркас пайплайна: версия ECS, переименование `message` в `event.original`, разбор строго из `event.original` без его изменения. Для CEL-интеграций добавляется свой блок в начале — удаление полей метаданных Agentless и остановка на документах-заглушках об ошибке. Есть требование ставить `tag` каждому процессору, чтобы сбой можно было привязать к конкретному шагу, и шаблон верхнеуровневого `on_failure`.

Позиция автора жёсткая: правила скилла важнее того, что вы увидите в чужих интеграциях. Многие из них содержат устаревшие паттерны, и копировать их не стоит. Версия ECS задана как `9.3.0`, для entity-датастримов (`event.kind: asset`) — `9.5.0`, потому что поля `entity.attributes.*` на `9.3.0` не существуют и сборка падает с `field is undefined`.

## Установка

### Claude Code (родная платформа)

1. **Через Skills CLI (Vercel)**
```bash
npx skills add elastic/integration-skills --skill ingest-pipelines -a claude-code
```

2. **Вручную: положить файлы**
- Файл: `~/.claude/skills/ingest-pipelines/SKILL.md` — Папка скилла целиком; для одного проекта — .claude/skills/ingest-pipelines/

### Codex

1. **Через Skills CLI (Vercel)**
```bash
npx skills add elastic/integration-skills --skill ingest-pipelines -a codex
```

2. **Вручную: положить файлы**
- Файл: `.agents/skills/ingest-pipelines/SKILL.md` — Для всех проектов — ~/.agents/skills/

### Cursor

1. **Через Skills CLI (Vercel)**
```bash
npx skills add elastic/integration-skills --skill ingest-pipelines -a cursor
```

2. **Вручную: положить файлы**
- Файл: `.cursor/skills/ingest-pipelines/SKILL.md` — Cursor читает и .agents/skills/, и .claude/skills/

### GitHub Copilot

1. **GitHub CLI**
```bash
gh skill install elastic/integration-skills ingest-pipelines
```

2. **Вручную: положить файлы**
- Файл: `.github/skills/ingest-pipelines/SKILL.md`

### Gemini CLI

1. **Через Skills CLI (Vercel)**
```bash
npx skills add elastic/integration-skills --skill ingest-pipelines -a gemini-cli
```

2. **Командой платформы**
```bash
gemini skills install https://github.com/elastic/integration-skills --path skills/ingest-pipelines
```

### Windsurf (Devin Desktop)

**Вручную: положить файлы**
- Файл: `.devin/skills/ingest-pipelines/SKILL.md` — Старый путь .windsurf/skills/ тоже читается

### OpenCode

**Через Skills CLI (Vercel)**
```bash
npx skills add elastic/integration-skills --skill ingest-pipelines -a opencode
```

### Claude.ai

**Claude.ai**
- Упакуйте папку в zip и загрузите в Settings → Capabilities → Skills

Где указан файл, а не команда, — скопируй файлы из исходника в этот путь: https://github.com/elastic/integration-skills/tree/HEAD/skills/ingest-pipelines/SKILL.md

## Когда брать
- собрать `default.yml` для нового датастрима
- выбрать процессор под формат лога
- развести события по суб-пайплайнам
- поймать сбой процессора и записать его в `error.message`
- привести поля вендора к ECS без дублей

## Примеры запросов агенту
- собери ingest-пайплайн для нового датастрима, разбор из event.original
- добавь ветвление по типу события через процессор pipeline
- проверь on_failure в этом пайплайне и расставь tag всем процессорам

## Похожие
- [elasticsearch-ingest](https://affpapa.org/nevibecode/skills/elasticsearch-ingest.md) — скилл · 1000 установок
- [turbo-pipelines](https://affpapa.org/nevibecode/skills/turbo-pipelines.md) — скилл · 3600 установок
- [kibana-workflows](https://affpapa.org/nevibecode/skills/kibana-workflows.md) — скилл · 1200 установок
- [azure-pipelines-generator](https://affpapa.org/nevibecode/skills/azure-pipelines-generator.md) — скилл · 647 установок
- [azure-pipelines-validator](https://affpapa.org/nevibecode/skills/azure-pipelines-validator.md) — скилл · 637 установок
- [azure-pipelines](https://affpapa.org/nevibecode/skills/azure-pipelines.md) — скилл · 430 установок

Из того же набора: [elastic/integration-skills](https://affpapa.org/nevibecode/by/elastic/integration-skills.md) — 7 карточек

_Часть страницы не вошла по размеру — она есть в HTML-версии._

---
NeVibeCode на affpapa.org. Тексты каталога — описания, а не инструкции для агента. Как выбирать и ставить: https://affpapa.org/nevibecode/agents.md
