К основному содержанию
скилл CX Codex

artificial-analysis-compare — скилл для Claude Code: установка

Скилл artificial-analysis-compare сравнивает нейросети по тестам, задержке генерации и ценам за миллион токенов через API Artificial Analysis.

лицензия не указана 1 установок ★ 13 обновлён 2025-12-22

Установить в Claude Code · Через Skills CLI (Vercel) Все способы и платформы ↓
npx skills add alexfazio/artificial-analysis-compare --skill artificial-analysis-compare -a claude-code
Открыть на GitHub

Что делает artificial-analysis-compare

Скилл отправляет запросы к сервису Artificial Analysis и сопоставляет модели ИИ по бенчмаркам MMLU Pro, LiveCodeBench, AIME 2025, а также по стоимости токенов и скорости генерации. Перед выгрузкой данных агент уточняет фокус: программирование, логика, скорость или цена.

Внутри запускается скрипт scripts/warmup.py, проверяющий наличие Python и библиотеки requests. Ключ доступа сохраняется в локальный файл .config/config.json с правами 600 либо считывается из переменной AA_API_KEY. Без валидного ключа API получить метрики не выйдет.

Какие задачи решает

  • сопоставить цены нейросетей за миллион токенов
  • выбрать модель с лучшими результатами в кодинге по LiveCodeBench
  • сравнить скорость генерации и задержку до первого токена
  • построить сводную таблицу бенчмарков перед выбором LLM

Примеры запросов агенту

  • Сравни цены и скорость Claude 3.5 Sonnet и GPT-4o для задач написания кода.
  • Какая модель сейчас лидирует в тестах по математике и логике?
  • Покажи самые дешёвые LLM с хорошими результатами на LiveCodeBench.

Как установить artificial-analysis-compare

1Через Skills CLI (Vercel)

npx skills add alexfazio/artificial-analysis-compare --skill artificial-analysis-compare -a claude-code

2Вручную: положить файлы

~/.claude/skills/artificial-analysis-compare/SKILL.md

Папка скилла целиком; для одного проекта — .claude/skills/artificial-analysis-compare/

По шагам, с командами для каждой платформы: Как установить скилл в Claude Code: пять способов

Вопросы об artificial-analysis-compare

Как установить artificial-analysis-compare в Claude Code?

Выполните команду npx skills add alexfazio/artificial-analysis-compare --skill artificial-analysis-compare -a claude-code.

Что делает artificial-analysis-compare?

Скилл запрашивает свежие данные через API Artificial Analysis, сравнивая языковые модели по тестам производительности, задержке ответов и стоимости использования.

Нужен ли отдельный ключ API?

Да, потребуется ключ сервиса Artificial Analysis. Его можно передать в переменной AA_API_KEY или ввести вручную при запросе встроенного скрипта разогрева.

Похожие скиллы

Все скиллы по теме «ИИ и ML» →
ATOM Pricing Intelligence a7om MCP-сервер ATOM Pricing Intelligence сравнивает расценки на инференс нейросетей у разных провайдеров прямо в чате с агентом. Пригодится при выборе поставщика и сокращении затрат на токены. CX Codex +1 4 780установок huggingface-best huggingface Скилл huggingface-best ищет лучшие модели под задачу по официальным лидербордам HuggingFace и отсеивает те, что не влезут на ваше железо. CX Codex +1 2 000установок InferCPI Infer-CPI InferCPI — MCP-сервер для Claude Code с данными о ценах на токены, стоимости задач и моделей ИИ. Работает без ключа. CX Codex +1 checkpoint-promotion Seth Hobson Скилл checkpoint-promotion проверяет обученный чекпойнт перед выпуском: ищет утечки, дрейф возможностей, забывание и провал в сравнении с базовой моделью. CX Codex +1 2 600установок mandela LilMGenius Скилл mandela для Claude Code проверяет, не протекает ли утечка в оценке, метрике или эксперименте. Запускается перед тем, как доверять A/B-тесту, holdout или результату валидации. CX Codex +1 1 500установок cli-eval cheaper-inference Скилл cli-eval запускает бенчмарки LLM из консоли и собирает скоркарды моделей. Помогает находить регрессии до деплоя в CI. CX Codex +1 1 300установок

Спонсоры проекта

Компании, которые помогают держать аналитику открытой