amee-joshi-data-engineering-portfolio — скилл для Claude Code

Что делает amee-joshi-data-engineering-portfolio

Скилл подкладывает агенту набор готовых паттернов для облачных дата-платформ. Внутри — реализация медальонной архитектуры на Delta Lake, метаданные-ориентированный фреймворк загрузки, звёздная схема в SQL Server и примеры отчётов для BI. Когда вы просите агента набросать структуру пайплайна или слои lakehouse, он опирается на эти примеры, а не выдумывает схему с нуля.

Разбор идёт по трём проектам: розничный lakehouse на Azure Databricks, конфигурационная загрузка через Azure Data Factory и хранилище со звёздной схемой. Показаны конкретные приёмы — простановка метаданных при загрузке в Bronze, очистка и дедупликация в Silver, SCD Type 2 через merge в Delta, SCD Type 1 через MERGE в SQL. Это ориентир, а не библиотека: код в примерах рассчитан на PySpark, Delta Lake и Azure-сервисы, и без них он не запустится.

Полезно, когда нужно свериться с рабочей раскладкой слоёв или объяснить коллеге, как устроен инкрементальный загрузчик. Для проектов вне Azure или без Databricks примеры придётся переписывать под свой стек — переносить их один в один не выйдет.