phoenix — плагин для GitHub Copilot: что делает и как установить
Плагин добавляет в GitHub Copilot инструменты для отладки, трассировки и оценки приложений на базе LLM через Phoenix. Пригодится при настройке трейсинга OpenInference.
copilot plugin install phoenix@awesome-copilotЧто делает phoenix
В плагин входят три скилла: phoenix-cli, phoenix-evals и phoenix-tracing. Скилл phoenix-cli помогает выгружать трейсы и отправлять запросы к GraphQL API. Он же пригодится для просмотра датасетов и экспериментов.
Для проверки работы моделей скилл phoenix-evals позволяет собирать и запускать эвалюаторы. Инструмент phoenix-tracing отвечает за разметку кода и семантические конвенции OpenInference.
Ставить плагин стоит тем, кто уже использует Phoenix от Arize AI или внедряет OpenInference в проект. Без этих сервисов плагин бесполезен.
Какие задачи решает
- получать и анализировать трейсы выполнения LLM через Phoenix CLI
- создавать и запускать эвалюаторы для AI-приложений
- настраивать разметку кода по семантическим конвенциям OpenInference
- исследовать датасеты и результаты экспериментов через GraphQL API
Примеры запросов агенту
- Помоги настроить трассировку OpenInference в проекте через phoenix-tracing
- Запусти эвалюатор phoenix-evals для нашего промпта
- Получи последние трейсы с ошибками через phoenix-cli
Как установить phoenix
Команда из источника
copilot plugin install phoenix@awesome-copilotИз того же набора554
Весь набор →Похожие
Вопросы о phoenix
Как установить phoenix в GitHub Copilot?
Выполните в терминале команду copilot plugin install phoenix@awesome-copilot.
Что делает плагин phoenix?
Он подключает к агенту инструменты Phoenix от Arize AI для мониторинга LLM. С ним агент может отслеживать трейсы, оценивать качество ответов и находить сбои.
Какие скиллы входят в плагин phoenix?
В состав входят phoenix-cli для работы с CLI и GraphQL API, phoenix-evals для запуска тестов качества моделей и phoenix-tracing для разметки OpenInference.
Исходный текст
phoenix · MIT
# Phoenix Plugin Phoenix AI observability skills for LLM application debugging, evaluation, and tracing. Includes CLI debugging tools, LLM evaluation workflows, and OpenInference tracing instrumentation. ## Installation ```bash # Using Copilot CLI copilot plugin install phoenix@awesome-copilot ``` ## What's Included ### Skills | Skill | Description | |-------|-------------| | `phoenix-cli` | Debug LLM applications using the Phoenix CLI. Fetch traces, analyze errors, review experiments, inspect datasets, and query the GraphQL API. | | `phoenix-evals` | Build and run evaluators for AI/LLM applications using Phoenix. | | `phoenix-tracing` | OpenInference semantic conventions and instrumentation for Phoenix AI observability. |
© Arize AI · MIT · github/awesome-copilot
