transformers — скилл для Claude Code: модели Hugging Face и обучение

Что делает transformers

Скилл даёт агенту справочник по библиотеке Transformers 5.18.0: загрузка чекпоинтов с Hub, быстрый инференс через pipeline, генерация текста с настройками декодирования, дообучение на своих данных через Trainer и TrainingArguments. Задачи — NLP, компьютерное зрение, аудио и мультимодальные модели.

Перед установкой проверьте окружение: нужны Python 3.10+, PyTorch 2.5+ и доступ к сети для скачивания моделей с Hub. Отдельный venv лучше не пропускать, потому что стек собирается из конкретных версий — transformers[torch]==5.18.0, torch==2.14.1, datasets==5.0.1, accelerate==1.15.0, peft==0.21.2. Если обновлять пакеты по одному, зависимости разъедутся и обучение не соберётся. Для аудио нужен librosa 1.0.0, а он требует Python 3.12+.

Закрытые и gated-модели требуют токена Hugging Face: hf auth login или переменная HF_TOKEN. Токен берите с минимальным скоупом — read для скачивания, write только для загрузки своих моделей. В v5 остался только бэкенд PyTorch, TensorFlow и JAX убрали, а часть pipeline-задач (например, summarization и question-answering) удалена — для них нужны прямые модели задач.