qdrant-model-migration — скилл для GitHub Copilot
Скилл помогает менять embedding-модель в Qdrant без остановки поиска. Он пригодится при смене провайдера, размерности векторов или переходе на hybrid search.
npx skills add github/awesome-copilot --skill qdrant-model-migrationЧто делает qdrant-model-migration
Скилл объясняет, почему векторы разных моделей нельзя смешивать в одном пространстве Qdrant. Для миграции нужно создать новую коллекцию: с нужными размерностями, метрикой расстояния и заранее заданными named vectors. Старую коллекцию можно оставить доступной через alias, пока данные переносятся и качество поиска проверяется.
Для миграции без простоя предлагается фоновая повторная генерация embedding-векторов, перенос payload и атомарная смена alias. Для A/B-тестов или совместной работы dense и sparse search новая коллекция создаётся сразу с обоими полями. Большие multi-вectors, включая ColBERT, лучше хранить на диске: совместное размещение с dense-векторами повышает задержку запросов.
Скилл также разбирает пакетную загрузку, update_mode: insert, отключение HNSW на время импорта и ограничения Qdrant. Для больших наборов данных перенос может занять дни, а для маленьких наборов до 25MB повторная индексация из исходных данных может оказаться проще. Ставьте его, если планируете менять embedding-модель или добавлять hybrid search; для обычного поиска без миграции он лишний.
Какие задачи решает
- перенести векторы в новую коллекцию Qdrant
- сменить embedding-модель без остановки поиска
- настроить A/B-тест двух моделей
- добавить sparse-векторы к dense search
- сохранить доступность приложения через alias
Примеры запросов агенту
- Подскажи план миграции embedding-модели в Qdrant без простоя.
- Как перенести данные в новую коллекцию и атомарно переключить alias?
- Сравни старую и новую модели через named vectors для A/B-теста.
Как установить qdrant-model-migration
1Через Skills CLI (Vercel)
npx skills add github/awesome-copilot --skill qdrant-model-migration2GitHub CLI
gh skill install github/awesome-copilot qdrant-model-migration3Вручную: положить файлы
.github/skills/qdrant-model-migration/SKILL.md1Через Skills CLI (Vercel)
npx skills add github/awesome-copilot --skill qdrant-model-migration -a claude-code2Вручную: положить файлы
~/.claude/skills/qdrant-model-migration/SKILL.mdПапка скилла целиком; для одного проекта — .claude/skills/qdrant-model-migration/
Вручную: положить файлы
.agents/skills/qdrant-model-migration/SKILL.mdДля всех проектов — ~/.agents/skills/
Вручную: положить файлы
.cursor/skills/qdrant-model-migration/SKILL.mdCursor читает и .agents/skills/, и .claude/skills/
Командой платформы
gemini skills install https://github.com/github/awesome-copilot --path skills/qdrant-model-migrationВручную: положить файлы
.devin/skills/qdrant-model-migration/SKILL.mdСтарый путь .windsurf/skills/ тоже читается
Claude.ai
Упакуйте папку в zip и загрузите в Settings → Capabilities → Skills
Из того же набора554
Весь набор →Похожие
Вопросы о qdrant-model-migration
Как установить qdrant-model-migration в GitHub Copilot?
Выполните npx skills add github/awesome-copilot --skill qdrant-model-migration. Файл скилла появится в .github/skills/qdrant-model-migration/SKILL.md.
Что делает qdrant-model-migration?
Он помогает спланировать миграцию embedding-векторов в Qdrant: создание новой коллекции, перенос данных, работу с alias и проверку качества поиска.
Можно ли обойтись без повторной генерации embedding-векторов?
Иногда да: для Matryoshka-моделей можно выбрать меньшую размерность через параметр dimensions, а при смене квантования Qdrant выполняет повторное квантование автоматически. При смене провайдера или архитектуры модели нужна повторная генерация.
Исходный текст
SKILL.md · MIT
--- name: qdrant-model-migration description: "Guides embedding model migration in Qdrant without downtime. Use when someone asks 'how to switch embedding models', 'how to migrate vectors', 'how to update to a new model', 'zero-downtime model change', 'how to re-embed my data', or 'can I use two models at once'. Also use when upgrading model dimensions, switching providers, or A/B testing models." --- # What to Do When Changing Embedding Models Vectors from different models are incompatible. You cannot mix old and new embeddings in the same vector space. You also cannot add new named vector fields to an existing collection. All named vectors must be defined at collection creation time. Both migration strategies below require creating a new collection. - Understand collection aliases before choosing a strategy [Collection aliases](https://search.qdrant.tech/md/documentation/manage-data/collections/?s=collection-aliases) ## Can I Avoid Re-embedding? Use when: looking for shortcuts before committing to full migration. You MUST re-embed if: changing model provider (OpenAI to Cohere), changing architecture (CLIP to BGE), incompatible dimension counts across different models, or adding sparse vectors to dense-only collection. You CAN avoid re-embedding if: using Matryoshka models (use `dimensions` parameter to output lower-dimensional embeddings, learn linear transformation from sample data, some recall loss, good for 100M+ datasets). Or changing quantization (binary to scalar): Qdrant re-quantizes automatically. [Quantization](https://search.qdrant.tech/md/documentation/manage-data/quantization/) ## Need Zero Downtime (Alias Swap) Use when: production must stay available. Recommended for model replacement at scale. - Create a new collection with the new model's dimensions and distance metric - Re-embed all data into the new collection in the background - Point your application at a collection alias instead of a direct collection name - Atomically swap the alias to the new collection [Switch collection](https://search.qdrant.tech/md/documentation/manage-data/collections/?s=switch-collection) - Verify search quality, then delete the old collection Careful, the alias swap only redirects queries. Payloads must be re-uploaded separately. ## Need Both Models Live (Side-by-Side) Use when: A/B testing models, multi-modal (dense + sparse), or evaluating a new model before committing. You cannot add a named vector to an existing collection. Create a new collection with both vector fields defined upfront: - Create new collection with old and new named vectors both defined [Collection with multiple vectors](https://search.qdrant.tech/md/documentation/manage-data/collections/?s=collection-with-multiple-vectors) - Migrate data from old collection, preserving existing vectors in the old named field - Backfill new model embeddings incrementally using `UpdateVectors` [Update vectors](https://search.qdrant.tech/md/documentation/manage-data/points/?s=update-vectors) - Compare quality by querying with `using: "old_model"` vs `using: "new_model"` - Swap alias to new collection once satisfied Co-locating large multi-vectors (especially ColBERT) with dense vectors degrades ALL queries, even those only using dense. At millions of points, users report 13s latency dropping to 2s after removing ColBERT. Put large vectors on disk during side-by-side migration. If you anticipate future model migrations, define both vector fields upfront at collection creation. ## Dense to Hybrid Search Migration Use when: adding sparse/BM25 vectors to an existing dense-only collection. Most common migration pattern. You cannot add sparse vectors to an existing dense-only collection. Must recreate: - Create new collection with both dense and sparse vector configs defined - Re-embed all data with both dense and sparse models - Migrate payloads, swap alias Sparse vectors at chunk level have different TF-IDF characteristics than document level. Test retrieval quality after migration, especially for non-English text without stop-word removal. ## Re-embedding Is Too Slow Use when: dataset is large and re-embedding is the bottleneck. - Use `update_mode: insert` (v1.17+) for safe idempotent migration [Update mode](https://search.qdrant.tech/md/documentation/manage-data/points/?s=update-mode) - Scroll the old collection with `with_vectors=False`, re-embed in batches, upsert into new collection - Upload in parallel batches (64-256 points per request, 2-4 parallel streams) [Bulk upload](https://search.qdrant.tech/md/documentation/tutorials-develop/bulk-upload/) - Disable HNSW during bulk load (set `indexing_threshold_kb` very high, restore after) - For Qdrant Cloud inference, switching models is a config change, not a pipeline change [Inference docs](https://search.qdrant.tech/md/documentation/inference/) For 400GB+ datasets, expect days. For small datasets (<25MB), re-indexing from source is faster than using the migration tool. ## What NOT to Do - Assume you can add named vectors to an existing collection (must be defined at creation time) - Delete the old collection before verifying the new one - Forget to update the query embedding model in your application code - Skip payload migration when using alias swap (aliases redirect queries, they do not copy data) - Keep ColBERT vectors co-located with dense vectors during a long migration (I/O cost degrades all queries) - Migrate to hybrid search without testing BM25 quality at chunk level
© github · MIT · github/awesome-copilot