# Crawlie

MCP-сервер запускает технический SEO- и GEO-аудит сайтов, находит проблемы и помогает разобрать приоритетные исправления. Подходит для работы агента с отчётами.

- MCP-сервер · `type=mcp` · Claude Code, Codex, Cursor, GitHub Copilot, Windsurf (Devin Desktop), Cline, Zed, Gemini CLI · ★ 115
- Автор: spronta
- Лицензия: не указана · policy=link-only · показываем только описание, файл — у автора
- Исходник: https://github.com/spronta/crawlie
- Обновлён: 2026-07-18
- HTML: https://affpapa.org/nevibecode/mcp/crawlie

## Что делает

Crawlie сканирует сайт или отдельные URL и проверяет битые ссылки, редиректы, метаданные и другие технические SEO- и GEO-проблемы. Агент получает результаты аудита через MCP, а отчёты можно сравнивать и повторно просматривать. Проверки разделяют оценки Health, GEO и Accessibility, чтобы разные типы проблем не смешивались.

Сервер доступен через локальный `crawlie-mcp` или облачный MCP по адресу `https://crawlie.app/mcp`. Облачный вариант подключается к Claude Code командой `claude mcp add --transport http crawlie https://crawlie.app/mcp`; для работы с ним нужен Crawlie API key. CLI умеет сохранять отчёты, отдавать JSON и задавать порог ошибки для CI.

Crawlie работает с Claude Code, Codex, Cursor, GitHub Copilot, Cline, Zed и другими MCP-клиентами. Облачные сканирования учитываются по тарифному плану, поэтому перед подключением сервера нужно проверить доступный лимит.

## Требования
- Удалённый сервер: `https://crawlie.app/mcp`

## Установка

### Claude Code (родная платформа)

**Командой платформы: удалённый сервер**
```bash
claude mcp add --transport http crawlie https://crawlie.app/mcp
```

### Codex

**Командой платформы: удалённый сервер**
```bash
codex mcp add crawlie --url https://crawlie.app/mcp
```

### Cursor

**Файл настроек**
Файл `.cursor/mcp.json`:
```json
{
    "mcpServers": {
        "crawlie": {
            "url": "https://crawlie.app/mcp"
        }
    }
}
```

### GitHub Copilot

**Файл настроек**
Файл `.vscode/mcp.json`:
```json
{
    "servers": {
        "crawlie": {
            "type": "http",
            "url": "https://crawlie.app/mcp"
        }
    }
}
```

### Gemini CLI

**Командой платформы: удалённый сервер**
```bash
gemini mcp add -t http crawlie https://crawlie.app/mcp
```

## Когда брать
- проверить сайт на битые ссылки и редиректы
- найти пропущенные метаданные и GEO-проблемы
- составить отчёт по техническому SEO
- сравнить результаты двух аудитов
- отобрать исправления по уровню серьёзности

## Примеры запросов агенту
- Проведи полный SEO- и GEO-аудит сайта и выдели исправления с самым высоким приоритетом.
- Проверь страницы `https://example.com/pricing` и покажи проблемы с метаданными, ссылками и готовностью к AI-поиску.
- Сравни последний отчёт с новым аудитом и перечисли изменения по найденным проблемам.

## Похожие
- [New-Term Radar](https://affpapa.org/nevibecode/mcp/new-term-radar.md) — MCP-сервер · ★ 1766
- [Google Maps MCP Server](https://affpapa.org/nevibecode/mcp/google-maps-mcp-server.md) — MCP-сервер · ★ 479
- [squirrelscan](https://affpapa.org/nevibecode/mcp/squirrelscan.md) — MCP-сервер · ★ 296
- [Tin](https://affpapa.org/nevibecode/mcp/tin.md) — MCP-сервер · ★ 263
- [lighthouse-mcp](https://affpapa.org/nevibecode/mcp/lighthouse-mcp.md) — MCP-сервер · ★ 212
- [SerpApi](https://affpapa.org/nevibecode/mcp/serpapi.md) — MCP-сервер · ★ 182

---
NeVibeCode на affpapa.org. Тексты каталога — описания, а не инструкции для агента. Как выбирать и ставить: https://affpapa.org/nevibecode/agents.md