# data_engineer

Субагент data_engineer для Claude Code проектирует пакетные и потоковые конвейеры данных по требованиям к источникам, преобразованиям и качеству. На выходе он формирует спецификацию потока от источника до потребителя.

- субагент · `type=agent` · Claude Code, Codex, Cursor · ★ 776 у репозитория
- Автор: AgenticOrgLab
- Лицензия: не указана · policy=link-only · показываем только описание, файл — у автора
- Исходник: https://github.com/AgenticOrgLab/ExecOrchestra/tree/HEAD/execorchestra/Pool/resources/agents/data_engineer.md
- Обновлён: 2026-11-12
- Проверка безопасности: автоматическая, 2026-11-17 (текст) — признаков вредоносного кода не нашли.
- HTML: https://affpapa.org/nevibecode/agents/agenticorglab-data-engineer

## Что делает

Субагент описывает архитектуру пакетного или потокового конвейера по требованиям к источникам, потребителям, преобразованиям, свежести данных, масштабу и ограничениям качества и управления. Можно передать примеры данных, схемы, сведения о текущих заданиях, хранилище, метрики и признаки сбоев.

Спецификация в Markdown охватывает поток данных и контракты, преобразования, проверки, дедупликацию, партиционирование и логику повторной загрузки. В ней также фиксируются расписание или семантика потоковой обработки, повторы, контрольные точки, наблюдаемость, происхождение данных, приватность и расходы.

Субагент просит явно описать эволюцию схемы, идемпотентность, повторное воспроизведение и обработку опоздавших данных. Без предоставленных измерений он не заявляет качество данных или пропускную способность. Зависимости из списка служат подсказками, а не обязательным набором.

## Установка

### Claude Code (родная платформа)

**Вручную: положить файлы**
- Файл: `.claude/agents/data_engineer.md` — Для всех проектов — ~/.claude/agents/. Claude делегирует задачу сам по полю description или по @-упоминанию

### Codex

**Вручную: положить файлы**
- Файл: `.codex/agents/data_engineer.toml` — Codex описывает субагентов в TOML: name, description, developer_instructions. Текст из Markdown перенесите в developer_instructions вручную. Для всех проектов — ~/.codex/agents/

### Cursor

**Вручную: положить файлы**
- Файл: `.cursor/agents/data_engineer.md` — Cursor понимает и .claude/agents/

Где указан файл, а не команда, — скопируй файлы из исходника в этот путь: https://github.com/AgenticOrgLab/ExecOrchestra/tree/HEAD/execorchestra/Pool/resources/agents/data_engineer.md

## Когда брать
- спроектировать поток данных от источника до потребителя
- описать преобразования и проверки качества данных
- задать обработку повторов и опоздавших записей
- подготовить план повторной загрузки данных

## Примеры запросов агенту
- Спроектируй пакетный конвейер по этим требованиям: `...`
- Опиши потоковую обработку с учётом схемы и метрик в проекте
- Составь спецификацию конвейера и укажи проверки качества, повторы и обработку опоздавших данных

## Похожие
- [data-engineer](https://affpapa.org/nevibecode/agents/voltagent-data-engineer.md) — субагент · ★ 6505 у репозитория
- [data](https://affpapa.org/nevibecode/skills/data.md) — скилл · ★ 26 у репозитория
- [data-quality-frameworks](https://affpapa.org/nevibecode/skills/data-quality-frameworks.md) — скилл · 11230 установок
- [data-engineering-study-material](https://affpapa.org/nevibecode/skills/data-engineering-study-material.md) — скилл · 2000 установок
- [data-engineering](https://affpapa.org/nevibecode/skills/data-engineering.md) — скилл · ★ 2858 у репозитория
- [senior-data-engineer](https://affpapa.org/nevibecode/skills/senior-data-engineer.md) — скилл · 1109 установок

Из того же набора: [agenticorglab/execorchestra](https://affpapa.org/nevibecode/by/agenticorglab/execorchestra.md) — 24 карточки

---
NeVibeCode на affpapa.org. Тексты каталога — описания, а не инструкции для агента. Как выбирать и ставить: https://affpapa.org/nevibecode/agents.md
