К основному содержанию
субагент CX Codex

data_engineer — субагент для Claude Code: проектирование пайплайнов

Субагент data_engineer для Claude Code проектирует пакетные и потоковые конвейеры данных по требованиям к источникам, преобразованиям и качеству. На выходе он формирует спецификацию потока от источника до потребителя.

лицензия не указана ★ 776 обновлён 2026-11-12

Установить в Claude Code · Вручную: положить файлы Все способы и платформы ↓
.claude/agents/data_engineer.md
Открыть на GitHub

Что делает data_engineer

Субагент описывает архитектуру пакетного или потокового конвейера по требованиям к источникам, потребителям, преобразованиям, свежести данных, масштабу и ограничениям качества и управления. Можно передать примеры данных, схемы, сведения о текущих заданиях, хранилище, метрики и признаки сбоев.

Спецификация в Markdown охватывает поток данных и контракты, преобразования, проверки, дедупликацию, партиционирование и логику повторной загрузки. В ней также фиксируются расписание или семантика потоковой обработки, повторы, контрольные точки, наблюдаемость, происхождение данных, приватность и расходы.

Субагент просит явно описать эволюцию схемы, идемпотентность, повторное воспроизведение и обработку опоздавших данных. Без предоставленных измерений он не заявляет качество данных или пропускную способность. Зависимости из списка служат подсказками, а не обязательным набором.

Какие задачи решает

  • спроектировать поток данных от источника до потребителя
  • описать преобразования и проверки качества данных
  • задать обработку повторов и опоздавших записей
  • подготовить план повторной загрузки данных

Примеры запросов агенту

  • Спроектируй пакетный конвейер по этим требованиям: ...
  • Опиши потоковую обработку с учётом схемы и метрик в проекте
  • Составь спецификацию конвейера и укажи проверки качества, повторы и обработку опоздавших данных

Как установить data_engineer

Вручную: положить файлы

.claude/agents/data_engineer.md

Для всех проектов — ~/.claude/agents/. Claude делегирует задачу сам по полю description или по @-упоминанию

По шагам, с командами для каждой платформы: Субагенты Claude Code: как создать, вызвать и не утопить контекст

Вопросы о data_engineer

Как установить data_engineer в Claude Code?

Добавьте файл субагента по пути .claude/agents/data_engineer.md.

Что делает data_engineer?

Он готовит спецификацию пакетного или потокового конвейера данных: от схем и преобразований до проверок качества, наблюдаемости и повторной загрузки.

Какие требования нужны data_engineer для проектирования конвейера?

Нужны требования к источникам, потребителям, преобразованиям, свежести, масштабу, качеству и управлению данными. Примеры, схемы и сведения о текущих заданиях можно передать дополнительно.

Похожие субагенты

Все субагенты по теме «Данные и базы» →
data-engineer VoltAgent Субагент data-engineer разбирает ETL, загрузку данных и сбои конвейеров. Поручите ему задачу, когда нужно найти риск для данных и внести ограниченное исправление. CX Codex ★ 6 505звёзд репо data rainmanjam Скилл data помогает выявлять скрытые ошибки в хранилищах данных, dbt-моделях и метриках, когда пайплайн завершается без сбоя, но выдаёт неверные цифры. CX Codex +1 ★ 26звёзд репо data-quality-frameworks Seth Hobson Скилл data-quality-frameworks для Claude Code проверяет качество данных через Great Expectations, dbt-тесты и контракты данных. Проверки запускаются в пайплайнах и CI/CD, в том числе для контроля схем. CX Codex +1 11 230установок data-engineering-study-material reason-machines Скилл data-engineering-study-material для Claude Code объясняет концепции дата-инженерии и показывает примеры пайплайнов. Включается при изучении темы и подготовке к собеседованию. CX Codex +1 2 000установок data-engineering rohitg00 Скилл data-engineering для Claude Code помогает проектировать ETL-пайплайны, хранилища и обработку данных в Apache Spark. Помогает продумать проверки качества и схему витрины данных. CX Codex +1 ★ 2 858звёзд репо senior-data-engineer Alireza Rezvani Скилл senior-data-engineer для Claude Code помогает проектировать конвейеры данных и ETL/ELT-системы. Включается при настройке оркестрации, проверок качества и архитектуры хранилища. CX Codex +1 1 109установок

Из того же набора24

Весь набор →
web_navigation Скилл web_navigation для Claude Code читает публичные веб-страницы и собирает подтверждения по фактам. Агент следует по ссылкам, пока не найдёт нужные сведения. CX Codex +1 ★ 776звёзд репо frontend_developer Субагент frontend_developer для Claude Code превращает требования к интерфейсу и контекст репозитория в план реализации и готовые изменения кода. Учитывает адаптивность, доступность и состояния интерфейса. CX Codex ★ 776звёзд репо security_auditor Субагент security_auditor для Claude Code проводит оборонительный аудит безопасности приложений. Формирует отчёт с оценкой уязвимостей в коде, конфигурациях и зависимостях. CX Codex ★ 776звёзд репо search_specialist Субагент search_specialist для Claude Code превращает информационную задачу в точечные поисковые запросы и отбирает источники. Он собирает факты и пробелы поиска в JSON для следующего этапа. CX Codex ★ 776звёзд репо product_manager Субагент product_manager для Claude Code превращает запрос о продукте и доступные факты в обоснованное решение. Он помогает расставить приоритеты и определить, как измерять результат. CX Codex ★ 776звёзд репо api_designer Субагент api_designer для Claude Code проектирует контракты REST- и GraphQL-API по требованиям продукта или сервиса. Он включается при подготовке API-спецификации. CX Codex ★ 776звёзд репо database_optimizer Субагент database_optimizer для Claude Code, Codex и Cursor готовит рекомендации по настройке производительности баз данных. Анализирует схемы, запросы и данные о выполнении, чтобы найти узкие места. CX Codex ★ 776звёзд репо fullstack_implementation_engineer Субагент fullstack_implementation_engineer для Claude Code готовит план реализации одобренной функции по слоям приложения. Он связывает изменения данных, API, бизнес-логики, интерфейса, миграций и тестов. CX Codex ★ 776звёзд репо

Спонсоры проекта

Компании, которые помогают держать аналитику открытой