К основному содержанию
скилл CX Codex

harvard-artifacts-collection-analytics-pipeline — скилл

Скилл собирает пайплайн от Harvard Art Museums API до дашборда: ETL, SQL-хранилище и визуализация на Streamlit.

Установить в Claude Code · Через Skills CLI (Vercel) Все способы и платформы ↓
npx skills add reason-machines/data-skills --skill harvard-artifacts-collection-analytics-pipeline -a claude-code
Открыть на GitHub

Что делает harvard-artifacts-collection-analytics-pipeline

Скилл ведёт проект по цепочке API → ETL → SQL → аналитика → визуализация. На входе — ключ Harvard Art Museums API, дальше агент пишет код извлечения объектов, преобразует JSON в таблицы метаданных, медиа и цветов и складывает их в MySQL или TiDB Cloud. Схема из трёх таблиц: artifactmetadata, artifactmedia, artifactcolors, связанные по artifact_id.

Внутри — готовые заготовки на Python: requests с паузой между страницами, чтобы не упереться в лимиты API, pandas для преобразования, mysql-connector-python для подключения, plotly и streamlit для дашборда. Запросы к API идут постранично, только объекты с изображениями.

Перед запуском нужен файл .env с HARVARD_API_KEY и параметрами базы: DB_HOST, DB_PORT, DB_USER, DB_PASSWORD, DB_NAME. Без рабочего подключения к MySQL или TiDB Cloud пайплайн останавливается на этапе загрузки — таблицы просто некуда писать. Зависимости ставятся из requirements.txt.

Какие задачи решает

  • выкачать метаданные объектов из Harvard Art Museums API постранично
  • разложить вложенный JSON на таблицы метаданных, медиа и цветов
  • залить преобразованные данные в MySQL или TiDB Cloud
  • написать аналитические SQL-запросы по коллекции
  • собрать интерактивный дашборд на Streamlit с графиками Plotly

Примеры запросов агенту

  • собери ETL-пайплайн для Harvard Art Museums API: извлечение, преобразование и загрузка в MySQL
  • добавь SQL-запросы для анализа коллекции по культуре и технике
  • сделай дашборд на Streamlit с визуализацией цветов и отделов коллекции

Как установить harvard-artifacts-collection-analytics-pipeline

1Через Skills CLI (Vercel)

npx skills add reason-machines/data-skills --skill harvard-artifacts-collection-analytics-pipeline -a claude-code

2Вручную: положить файлы

~/.claude/skills/harvard-artifacts-collection-analytics-pipeline/SKILL.md

Папка скилла целиком; для одного проекта — .claude/skills/harvard-artifacts-collection-analytics-pipeline/

По шагам, с командами для каждой платформы: Как установить скилл в Claude Code: пять способов

Вопросы о harvard-artifacts-collection-analytics-pipeline

Как установить harvard-artifacts-collection-analytics-pipeline в Claude?

Выполните npx skills add reason-machines/data-skills --skill harvard-artifacts-collection-analytics-pipeline -a claude-code. Скилл появится по пути ~/.claude/skills/harvard-artifacts-collection-analytics-pipeline/SKILL.md.

Что делает этот скилл?

Проводит агента через весь цикл работы с данными Harvard Art Museums: извлечение объектов из API, преобразование JSON в таблицы, загрузка в SQL-базу и построение дашборда на Streamlit.

Что нужно подготовить до запуска?

Ключ HARVARD_API_KEY и доступ к базе MySQL или TiDB Cloud — хост, порт, пользователь, пароль и имя базы в .env. Зависимости ставятся из requirements.txt.

Похожие скиллы

Все скиллы по теме «Данные и базы» →
polars K-Dense-AI Скилл подключает справочник по Polars — библиотеке DataFrame для Python с expression-based API, ленивыми запросами и агрегациями для ETL и миграции с pandas. CX Codex +1 2 000установок data-pipeline claude-office-skills Скилл для сборки ETL-конвейеров: извлечение из API и баз, преобразование, загрузка в хранилища и таблицы. Пригодится, когда нужно регулярно сводить данные из нескольких источников. CX Codex +1 4 900установок ETL Pipeline Claude Office Skills Скилл для проектирования и автоматизации ETL-пайплайнов: извлечение из баз и API, трансформации, загрузка в хранилища. Пригодится, когда нужно собрать регулярный поток данных. CX Codex +1 4 800установок sql-pro https://github.com/Jeffallan Оптимизирует медленные SQL-запросы, проектирует схемы баз данных и устраняет проблемы производительности. Пригодится при разборе планов EXPLAIN и миграции диалектов. CX Codex +1 6 400установок database-optimizer https://github.com/Jeffallan Скилл помогает находить узкие места в PostgreSQL и MySQL, разбирать планы выполнения через EXPLAIN ANALYZE и настраивать индексы без простоя таблиц. CX Codex +1 6 000установок mysql-patterns affaan-m Скилл с проверенными шаблонами для MySQL и MariaDB. Помогает проектировать схемы, настраивать индексы и ускорять медленные транзакции. CX Codex +1 4 700установок

Из того же набора22

data-engineering-study-material Скилл-справочник по дата-инженерии: объясняет концепции, показывает примеры пайплайнов и готовит к собеседованиям. CX Codex +1 2 000установок options-analytics-agent-langgraph Собирает агента на LangGraph для разбора опционов: данные Polygon.io, кэш в ChromaDB, память между сессиями. Пригодится, если нужен свой торговый ассистент, а не готовый сервис. CX Codex +1 2 000установок harvard-artifacts-collection-data-engineering Скилл собирает данные из Harvard Art Museums API в MySQL и показывает их в Streamlit. Пригодится, когда нужен рабочий пример ETL от API до дашборда. CX Codex +1 1 900установок harvard-artifacts-collection-etl-analytics Скилл для сборки ETL-пайплайна и аналитического дашборда на данных Harvard Art Museums API: Python, SQL и Streamlit. CX Codex +1 1 900установок iac-terraform-data-engineering Скилл для Claude и других ИИ-агентов: помогает описывать инфраструктуру AWS под данные в Terraform — бакеты S3, инстансы EC2, роли IAM. CX Codex +1 1 800установок iac-data-engineering-terraform Скилл с готовыми шаблонами Terraform для дата-инженерии: бакеты S3, инстансы EC2 и роли IAM. Пригодится, когда нужно поднять инфраструктуру под пайплайны декларативно. CX Codex +1 1 800установок terraform-data-engineering-infrastructure Скилл с шаблонами Terraform для дата-инженерии: S3 под дата-лейк, EC2 для обработки, IAM-роли. Пригодится, когда нужно поднять инфраструктуру на AWS без ручного клика по консоли. CX Codex +1 1 800установок harvard-artifacts-etl-pipeline Скилл для ИИ-агента: помогает собрать пайплайн от Harvard Art Museums API до графиков в Streamlit. CX Codex +1 1 700установок

Спонсоры проекта

Компании, которые помогают держать аналитику открытой