К основному содержанию
MCP-сервер CX Codex

Octocrawl — MCP-сервер для Claude Code: веб-данные и установка

MCP-сервер Octocrawl для Claude Code собирает содержимое веб-страниц в Markdown и структурированные данные. Он подключается к агенту, чтобы читать страницы, обходить сайты и извлекать данные из списков.

AGPL-3.0 ★ 7 обновлён 2026-11-16

Установить в Claude Code · Командой платформы: удалённый сервер Все способы и платформы ↓
claude mcp add --transport http octocrawl https://mcp.octocrawl.dev/mcp
Открыть на GitHub

Что делает Octocrawl

Octocrawl получает страницы по URL и возвращает их содержимое в Markdown, а также ссылки, метаданные и HTML. Сервер умеет находить адреса сайта, обходить разделы и обрабатывать пакет URL; результат для каждой страницы включает запись об источнике и состояние обработки.

Для таблиц и повторяющихся списков доступны JSON и CSV, а для извлечения полей можно передать JSON Schema. Динамические страницы требуют браузерного режима; для страниц, которые доступны только в браузере, нужен установленный Chromium через npx playwright install chromium. Для локального запуска требуется Node.js 22.13+ или 24+. Подключение к размещённому серверу начинается без ключа API, но такой режим ограничен 20 страницами в день по HTTP.

Какие задачи решает

  • получить Markdown-содержимое веб-страницы по URL
  • найти страницы сайта по карте сайта и ссылкам
  • собрать данные из таблиц и списков в JSON или CSV
  • обойти раздел сайта с ограничением глубины и числа страниц
  • сохранить результат обработки для каждого URL в пакете

Примеры запросов агенту

  • Прочитай эту страницу и верни содержимое в Markdown: https://example.com.
  • Найди страницы документации сайта по запросу «authentication» и собери их содержимое.
  • Извлеки названия и цены товаров с этой страницы в JSON.

Как установить Octocrawl

1Командой платформы: удалённый сервер

claude mcp add --transport http octocrawl https://mcp.octocrawl.dev/mcp

2Командой платформы

claude mcp add --env W2L_API_URL=<W2L_API_URL> --env W2L_API_TOKEN=<W2L_API_TOKEN> --env W2L_MCP_TOOLSETS=<W2L_MCP_TOOLSETS> --env W2L_MCP_READ_ONLY=<W2L_MCP_READ_ONLY> --transport stdio octocrawl -- npx -y @octocrawl/mcp

Вместо <…> подставьте свои значения

По шагам, с командами для каждой платформы: Как подключить MCP-сервер: Claude Code, Codex, Cursor, VS Code, Gemini CLI и другие

Вопросы об Octocrawl

Как установить Octocrawl в Claude Code?

Для подключения размещённого сервера выполни claude mcp add --transport http octocrawl https://mcp.octocrawl.dev/mcp. Для локального MCP-сервера выполни `claude mcp add --env W2L_API_URL=<W2L_API_URL> --env W2L_API_TOKEN=<W2L_API_TOKEN> --env W2L_MCP_TOOLSETS=<W2L_MCP_TOOLSETS> --env W2L_MCP_READ_ONLY=<W2L_MCP_READ_ONLY> --transport stdio octocrawl -- npx -y @octocrawl/mcp`.

Что делает Octocrawl?

Он читает веб-страницы и возвращает Markdown, структурированные данные и запись об источнике. Также сервер умеет находить URL сайта, обходить его разделы и обрабатывать набор адресов.

Что нужно для работы Octocrawl?

Для размещённого сервера ключ API не нужен при начальном подключении. Локальный запуск требует Node.js 22.13+ или 24+, а для страниц, доступных только в браузере, нужен Chromium, установленный командой npx playwright install chromium.

Похожие MCP-серверы

Все MCP-серверы по теме «Браузер и парсинг» →
firecrawl-company-directories firecrawl Скилл firecrawl-company-directories для Claude Code собирает списки компаний из каталогов в CSV, JSON или таблицу. Формирует данные для исследований портфелей, маркетплейсов, списков участников и спонсоров. CX Codex +1 31 600установок scrape brightdata Скилл помогает агенту собирать структурированные данные с сайтов и выбирать между готовым скрейпером, Scraper Studio и fetch. CX Codex +1 11 100установок Olostep MCP Server olostep MCP-сервер Olostep MCP Server, который даёт агенту живой поиск по вебу, парсинг и краулинг сайтов. Возвращает данные в HTML, Markdown, JSON или plain text. CX Codex +1 ★ 25звёзд репо reporting-pipelines Claude MPM Team Скилл reporting-pipelines задаёт единый порядок выгрузки отчётов: собрать данные, нормализовать, выгрузить CSV/JSON/Markdown с меткой времени и сохранить в reports/. CX Codex +1 371установок firecrawl-lead-research firecrawl Скилл firecrawl-lead-research достаёт должность, компанию и фирмографику по людям и доменам, которые вы уже назвали, и дозаполняет таблицы. Пригодится перед звонком или когда старый список лидов пора проверить. CX Codex +1 31 700установок just-scrape ScrapeGraphAI Скилл just-scrape для Claude Code ищет страницы, собирает данные с сайтов и отслеживает изменения. Он включается для веб-поиска, извлечения JSON и обхода разделов сайта. CX Codex +1 245 000установок

Спонсоры проекта

Компании, которые помогают держать аналитику открытой