# Scrapling MCP Server

Веб-скрейпинг страниц с защитой Cloudflare и рендерингом JavaScript для ИИ-агентов. Помогает собирать данные сайтов в Markdown или JSON без ручного обхода блокировок.

- MCP-сервер · `type=mcp` · Claude Code, Codex, Cursor, GitHub Copilot, Windsurf (Devin Desktop), Cline, Zed · ★ 89433
- Автор: D4Vinci
- Лицензия: BSD-3-Clause · policy=link-only · показываем только описание, файл — у автора
- Исходник: https://github.com/D4Vinci/Scrapling
- Обновлён: 2026-10-22
- HTML: https://affpapa.org/nevibecode/mcp/scrapling-mcp-server

## Что делает

MCP-сервер подключает библиотеку Scrapling к Claude Code и другим средам разработки. Ассистент получает набор инструментов для скрытных HTTP-запросов, управления браузером и разбора разметки через селекторы CSS или XPath. Сервер самостоятельно справляется с проверками Cloudflare Turnstile, поэтому агент не останавливается на экранах проверки подлинности.

Внутри поддерживаются постоянные сессии, ротация прокси и конвертация страниц в разметку Markdown. Для работы требуется команда `uvx scrapling`, поэтому на машине заранее нужен установленный пакетный менеджер `uv` или среда Python. Без утилиты `uvx` процесс сервера не запустится.

## Требования
- Нужно: Python и uv (команды через uvx)

## Установка

### Claude Code (родная платформа)

**Командой платформы**
```bash
claude mcp add scrapling -- uvx scrapling
```
uvx запускает команду с именем пакета; если в README она другая — uvx --from scrapling <команда>

### Codex

**Командой платформы**
```bash
codex mcp add scrapling-mcp-server -- uvx scrapling
```
uvx запускает команду с именем пакета; если в README она другая — uvx --from scrapling <команда>

### Cursor

**Файл настроек**
Файл `.cursor/mcp.json`:
```json
{
    "mcpServers": {
        "scrapling-mcp-server": {
            "command": "uvx",
            "args": [
                "scrapling"
            ]
        }
    }
}
```
uvx запускает команду с именем пакета; если в README она другая — uvx --from scrapling <команда>

### GitHub Copilot

**Файл настроек**
Файл `.vscode/mcp.json`:
```json
{
    "servers": {
        "scrapling-mcp-server": {
            "type": "stdio",
            "command": "uvx",
            "args": [
                "scrapling"
            ]
        }
    }
}
```
uvx запускает команду с именем пакета; если в README она другая — uvx --from scrapling <команда>

### Gemini CLI

**Командой платформы**
```bash
gemini mcp add scrapling-mcp-server uvx scrapling
```
uvx запускает команду с именем пакета; если в README она другая — uvx --from scrapling <команда>

## Когда брать
- обойти экраны защиты Cloudflare Turnstile при чтении веб-страниц
- отрендерить страницы с динамическим JavaScript в скрытном браузере
- преобразовать разметку сайтов в Markdown для контекста агента
- извлечь нужные поля документов через селекторы CSS и запросы XPath

## Примеры запросов агенту
- Собери цитаты со страницы `https://quotes.toscrape.com/` с помощью CSS-селекторов
- Открой страницу документации за защитой Cloudflare и конвертируй её текст в Markdown
- Спарси таблицу на указанном сайте и сохрани строки в формате JSON

## Похожие
- [Robin: AI-Powered Dark Web OSINT](https://affpapa.org/nevibecode/mcp/robin-ai-powered-dark-web-osint.md) — MCP-сервер · ★ 7658
- [e2e](https://affpapa.org/nevibecode/mcp/e2e.md) — MCP-сервер · ★ 11912
- [treg.to](https://affpapa.org/nevibecode/mcp/tregto.md) — MCP-сервер · ★ 6026
- [wigolo](https://affpapa.org/nevibecode/mcp/wigolo.md) — MCP-сервер · ★ 5500
- [JobSpy](https://affpapa.org/nevibecode/mcp/jobspy.md) — MCP-сервер · ★ 4552

Из того же набора: [d4vinci/scrapling](https://affpapa.org/nevibecode/by/d4vinci/scrapling.md) — 2 карточки

---
NeVibeCode на affpapa.org. Тексты каталога — описания, а не инструкции для агента. Как выбирать и ставить: https://affpapa.org/nevibecode/agents.md