# ScrapingBot

Даёт агенту доступ к сбору веб-страниц и публичным данным из Google, TikTok, Instagram и Amazon. Для работы нужен API-ключ ScrapingBot.

- MCP-сервер · `type=mcp` · Claude Code, Codex, Cursor, GitHub Copilot, Windsurf (Devin Desktop), Cline, Zed, Gemini CLI
- Автор: mike-scrapingbot
- Лицензия: MIT · policy=link-only · показываем только описание, файл — у автора
- Исходник: https://github.com/mike-scrapingbot/scrapingbot
- Обновлён: 2026-10-03
- HTML: https://affpapa.org/nevibecode/mcp/scrapingbot

## Что делает

ScrapingBot подключает к агенту инструменты для получения веб-страниц в HTML или Markdown, в том числе с выполнением JavaScript. Можно извлекать данные по запросу в JSON и запускать браузерные сценарии с кликами, вводом текста, прокруткой и ожиданием. Для Google, TikTok, Instagram и Amazon доступны отдельные инструменты поиска и получения данных.

Сервер размещён на стороне ScrapingBot и общается с клиентом по Streamable HTTP, поэтому устанавливать его локально не нужно. В Claude Code подключение добавляется командой `claude mcp add --transport http scrapingbot https://scrapingbot.io/api/mcp`; для запросов также требуется API-ключ в заголовке `x-api-key`. Без ключа сервер не сможет авторизовать запросы. Вызовы расходуют кредиты по тарифам соответствующих API.

## Требования
- Удалённый сервер: `https://scrapingbot.io/api/mcp`

## Установка

### Claude Code (родная платформа)

**Командой платформы: удалённый сервер**
```bash
claude mcp add --transport http scrapingbot https://scrapingbot.io/api/mcp
```

### Codex

**Командой платформы: удалённый сервер**
```bash
codex mcp add scrapingbot --url https://scrapingbot.io/api/mcp
```

### Cursor

**Файл настроек**
Файл `.cursor/mcp.json`:
```json
{
    "mcpServers": {
        "scrapingbot": {
            "url": "https://scrapingbot.io/api/mcp"
        }
    }
}
```

### GitHub Copilot

**Файл настроек**
Файл `.vscode/mcp.json`:
```json
{
    "servers": {
        "scrapingbot": {
            "type": "http",
            "url": "https://scrapingbot.io/api/mcp"
        }
    }
}
```

### Gemini CLI

**Командой платформы: удалённый сервер**
```bash
gemini mcp add -t http scrapingbot https://scrapingbot.io/api/mcp
```

## Когда брать
- получить HTML или Markdown веб-страницы
- собрать данные страницы в JSON по заданным полям
- найти публичные материалы в Google
- получить сведения о профиле или публикации в TikTok и Instagram
- выполнить браузерный сценарий с кликами и прокруткой

## Примеры запросов агенту
- Получи содержимое страницы `https://example.com` и верни его в Markdown.
- Извлеки из этой страницы название и цену товара в JSON.
- Найди в Google отзывы об этом месте и кратко изложи результат.

## Похожие
- [REA](https://affpapa.org/nevibecode/mcp/rea.md) — MCP-сервер · ★ 392262
- [GitHub](https://affpapa.org/nevibecode/mcp/github.md) — MCP-сервер · ★ 33989
- [Netdata](https://affpapa.org/nevibecode/mcp/netdata.md) — MCP-сервер · ★ 81163
- [browser-use](https://affpapa.org/nevibecode/mcp/browser-use.md) — MCP-сервер · ★ 119231
- [Codebase Memory](https://affpapa.org/nevibecode/mcp/codebase-memory.md) — MCP-сервер · ★ 47577
- [mcp-server](https://affpapa.org/nevibecode/mcp/mcp-server.md) — MCP-сервер · ★ 43902

---
NeVibeCode на affpapa.org. Тексты каталога — описания, а не инструкции для агента. Как выбирать и ставить: https://affpapa.org/nevibecode/agents.md