spider — скилл для Claude Code: обход сайтов и установка
Скилл spider для Claude Code обходит страницы, собирает ссылки и данные, анализирует содержимое и проверяет сайт на признаки проблем безопасности. Разбирает отдельные страницы и карты сайта.
лицензия не указана 209 установок ★ 28 обновлён 2025-12-19
npx skills add johnlindquist/claude --skill spider -a claude-codeЧто делает spider
Скилл использует curl для загрузки страниц и заголовков, поиска ссылок, извлечения текста и обхода нескольких URL. Он также описывает обработку sitemap, поиск API-адресов в JavaScript и отслеживание изменений страницы по контрольной сумме. Для простого сканирования достаточно команд оболочки.
Для анализа содержимого и проверки безопасности применяются запросы к Gemini через команду gemini. Нужны google-generativeai и переменная GEMINI_API_KEY; для более сложного разбора HTML перечислены puppeteer и beautifulsoup4. Без ключа Gemini эта часть анализа не запустится.
Проверка безопасности ищет проблемы в заголовках, формах, скриптах и настройках cookies, но результат зависит от переданного образца страницы. Перед обходом скилл советует учитывать robots.txt, ограничивать частоту запросов и проверять правила сайта.
Какие задачи решает
- собрать ссылки и заголовки со страницы
- обойти URL из sitemap и извлечь заголовки страниц
- найти API-адреса в JavaScript
- проверить образец страницы на проблемы безопасности
- отследить изменения содержимого по контрольной сумме
Примеры запросов агенту
- Просканируй страницу и собери заголовки, ссылки и подключённые скрипты.
- Разбери sitemap сайта и извлеки заголовки найденных страниц.
- Проверь HTML и заголовки сайта на проблемы безопасности.
Как установить spider
1Через Skills CLI (Vercel)
npx skills add johnlindquist/claude --skill spider -a claude-code2Вручную: положить файлы
~/.claude/skills/spider/SKILL.mdПапка скилла целиком; для одного проекта — .claude/skills/spider/
1Через Skills CLI (Vercel)
npx skills add johnlindquist/claude --skill spider -a codex2Вручную: положить файлы
.agents/skills/spider/SKILL.mdДля всех проектов — ~/.agents/skills/
1Через Skills CLI (Vercel)
npx skills add johnlindquist/claude --skill spider -a cursor2Вручную: положить файлы
.cursor/skills/spider/SKILL.mdCursor читает и .agents/skills/, и .claude/skills/
1GitHub CLI
gh skill install johnlindquist/claude skills/spider2Вручную: положить файлы
.github/skills/spider/SKILL.md1Через Skills CLI (Vercel)
npx skills add johnlindquist/claude --skill spider -a gemini-cli2Командой платформы
gemini skills install https://github.com/johnlindquist/claude --path skills/spiderВручную: положить файлы
.devin/skills/spider/SKILL.mdСтарый путь .windsurf/skills/ тоже читается
Через Skills CLI (Vercel)
npx skills add johnlindquist/claude --skill spider -a opencodeClaude.ai
Упакуйте папку в zip и загрузите в Settings → Capabilities → Skills
По шагам, с командами для каждой платформы: Как установить скилл в Claude Code: пять способов
Вопросы о spider
Как установить spider в Claude Code?
Выполните npx skills add johnlindquist/claude --skill spider -a claude-code. Файл скилла находится по пути ~/.claude/skills/spider/SKILL.md.
Что делает скилл spider?
Он помогает загружать и обходить веб-страницы, извлекать ссылки и данные, а также анализировать содержимое сайта и проверять его на проблемы безопасности.
Что нужно для анализа через Gemini?
Нужны команда gemini, пакет google-generativeai и переменная окружения GEMINI_API_KEY. Для разбора HTML также перечислены puppeteer и beautifulsoup4.