# scrape-agent-mcp

MCP-сервер scrape-agent-mcp извлекает текст, ссылки или разметку страниц с оплатой за каждый запрос через протокол x402. Работает без подписки и ключей API за 0.01 USDC в сети Base.

- MCP-сервер · `type=mcp` · Claude Code, Codex, Cursor, GitHub Copilot, Windsurf (Devin Desktop), Cline, Zed, Gemini CLI · 109 установок · ★ 1 у репозитория
- Автор: artespraticas
- Лицензия: MIT · policy=link-only · показываем только описание, файл — у автора
- Исходник: https://github.com/artespraticas/scrape-agent-mcp
- Обновлён: 2026-06-04
- Проверка безопасности: автоматическая, 2026-11-16 (текст) — признаков вредоносного кода не нашли.
- HTML: https://affpapa.org/nevibecode/mcp/scrape-agent-mcp

## Что делает

Сервер предоставляет инструмент `scrape_url`. Он забирает содержимое публичных веб-страниц и отдаёт его в виде очищенного текста, списка гиперссылок либо исходного HTML-кода. Решение рассчитано на автономных агентов, которым периодически нужны сетевые данные.

Авторизация через классические токены здесь не используется. Сервис опирается на протокол микроплатежей x402: каждый вызов стоит 0.01 USDC в блокчейне Base. Без заголовка `X-PAYMENT` эндпоинт возвращает код HTTP 402 с массивом допустимых вариантов расчёта `accepts[]`. Спецификация API доступна по пути `/openapi.json`.

## Требования
- Удалённый сервер: `https://scrape-agent-mcp--artespraticas.run.tools`

## Установка

### Claude Code (родная платформа)

**Командой платформы: удалённый сервер**
```bash
claude mcp add --transport http scrape-agent-mcp https://scrape-agent-mcp--artespraticas.run.tools
```

### Codex

**Командой платформы: удалённый сервер**
```bash
codex mcp add scrape-agent-mcp --url https://scrape-agent-mcp--artespraticas.run.tools
```

### Cursor

**Файл настроек**
Файл `.cursor/mcp.json`:
```json
{
    "mcpServers": {
        "scrape-agent-mcp": {
            "url": "https://scrape-agent-mcp--artespraticas.run.tools"
        }
    }
}
```

### GitHub Copilot

**Файл настроек**
Файл `.vscode/mcp.json`:
```json
{
    "servers": {
        "scrape-agent-mcp": {
            "type": "http",
            "url": "https://scrape-agent-mcp--artespraticas.run.tools"
        }
    }
}
```

### Gemini CLI

**Командой платформы: удалённый сервер**
```bash
gemini mcp add -t http scrape-agent-mcp https://scrape-agent-mcp--artespraticas.run.tools
```

## Когда брать
- выгрузить очищенный текст из публичной статьи по адресу `<url>`
- собрать список исходящих гиперссылок со страницы
- получить исходную HTML-разметку нужного адреса
- настроить парсинг для агента с поштучной оплатой без подписок

## Примеры запросов агенту
- Используй `scrape_url`, чтобы выгрузить чистый текст из `<url>`
- Собери все ссылки со страницы по адресу `<url>` через `scrape_url`
- Получи исходный HTML документа `<url>`

## Похожие
- [x402](https://affpapa.org/nevibecode/skills/x402.md) — скилл · 1500 установок
- [Popdot AI](https://affpapa.org/nevibecode/mcp/popdot-ai.md) — MCP-сервер
- [WebberSites x402 Data API](https://affpapa.org/nevibecode/mcp/webbersites-x402-data-api.md) — MCP-сервер · 832 установки
- [x402farm](https://affpapa.org/nevibecode/mcp/x402farm.md) — MCP-сервер · 137 установок
- [AgentNDX](https://affpapa.org/nevibecode/mcp/agentndx.md) — MCP-сервер · 4376 установок

---
NeVibeCode на affpapa.org. Тексты каталога — описания, а не инструкции для агента. Как выбирать и ставить: https://affpapa.org/nevibecode/agents.md
