К основному содержанию
MCP-сервер CX Codex

Atlas Web Compiler & Scraper — MCP-сервер для Claude Code: что делает

MCP-сервер для детерминированного разбора веб-страниц в чистый markdown, обхода сайтов и пакетной компиляции без участия LLM.

Установить в Claude Code · Командой платформы: удалённый сервер Все способы и платформы ↓
claude mcp add --transport http atlas https://api.atlas-compiler.com/mcp
Открыть на GitHub

Что делает Atlas Web Compiler & Scraper

Atlas Web Compiler & Scraper подключает ИИ-агента к конвейеру Atlas, который разбирает веб-страницы в структурированный markdown. Никаких пересказов от модели: контент парсит движок компилятора, поэтому в выдаче нет выдуманных фрагментов и пропусков. Для длинных страниц сервер сам строит оглавление, режет материал на секции и следит за бюджетом токенов, а при обрезке ставит явную пометку.

Работает двумя способами. Локально запускается stdio-мост через npx -y @atlascompiler/mcp, а для удалённых клиентов есть HTTP-эндпоинт на POST /mcp. Есть мастер настройки: npx -y @atlascompiler/mcp init проверяет ключ и аккуратно дописывает конфиг редактора, не вшивая токен в файлы проекта. Ключ хранится в ~/.atlas/credentials.json с правами 0600, а в CI ключ передают переменной ATLAS_API_KEY.

Флаги --api-key и -k CLI отклоняет с кодом выхода 1 — так ключ не утечёт через ps aux. Все исходящие запросы идут через atlas-egress, а ресурсы atlas:// изолированы по рабочему пространству. Для работы нужен ключ atlas_... из панели Atlas.

Какие задачи решает

  • вытащить текст статьи в markdown без пересказа от модели
  • собрать карту разделов сайта перед обходом
  • скомпилировать пачку страниц за один прогон
  • обрезать длинную страницу по бюджету токенов с пометкой
  • настроить MCP-сервер в редакторе, не вшивая ключ в конфиг

Примеры запросов агенту

  • Скомпилируй страницу https://atlas-compiler.com в markdown и покажи оглавление
  • Построй карту сайта и обойди раздел с документацией
  • Собери в один файл текст этих страниц, обрезая по бюджету токенов

Как установить Atlas Web Compiler & Scraper

1Командой платформы: удалённый сервер

claude mcp add --transport http atlas https://api.atlas-compiler.com/mcp

2Командой платформы

claude mcp add --env ATLAS_API_KEY=<ATLAS_API_KEY> --transport stdio mcp -- npx -y @atlascompiler/mcp

Вместо <…> подставьте свои значения

По шагам, с командами для каждой платформы: Как подключить MCP-сервер: Claude Code, Codex, Cursor, VS Code, Gemini CLI и другие

Вопросы о Atlas Web Compiler & Scraper

Как установить Atlas Web Compiler & Scraper в Claude Code?

Добавьте сервер командой claude mcp add --transport http atlas https://api.atlas-compiler.com/mcp. Для локального запуска через stdio используйте claude mcp add --env ATLAS_API_KEY=<ATLAS_API_KEY> --transport stdio mcp -- npx -y @atlascompiler/mcp.

Что делает Atlas Web Compiler & Scraper?

Разбирает веб-страницы в чистый markdown, строит карту сайта, обходит страницы в заданных границах и компилирует их пакетом. Разбор идёт движком Atlas, без генерации текста моделью.

Что нужно для работы сервера?

Ключ atlas_... из панели Atlas. Его сохраняет мастер init либо передают переменной ATLAS_API_KEY; флаги --api-key и -k CLI блокирует.

Похожие MCP-серверы

Все MCP-серверы по теме «Браузер и парсинг» →
CRW Web Scraper fastcrw Превращает страницы в markdown или JSON: скрейп, обход сайта, карта URL, поиск и извлечение полей. Ставится одной командой. CX Codex +1 ★ 1 181звёзд репо web-crawler Starchild-ai-agent Извлекает данные из соцсетей, расшифровки видео и веб-страниц с защитой от ботов. Помогает при сбоях базовой загрузки страниц и аудите неработающих ссылок. CX Codex +1 3 900установок tavily-crawl tavily-ai Скилл для обхода сайтов и выгрузки документации через CLI Tavily. Сохраняет страницы в Markdown или возвращает релевантные фрагменты для контекста модели. CX Codex +1 17 400установок doc-scraper Sriram-PR Собирает сайты документации в локальную базу Markdown, которую агент может искать и читать офлайн. Пригодится, когда нужно опираться на выбранные вами документы, а не на веб-поиск. CX Codex +1 ★ 107звёзд репо Browser Scraper eurafaeldecarvalho Управляет скрытным браузером через Chrome DevTools Protocol и отдаёт чистый Markdown. Помогает агенту обходить защиту от ботов и читать закрытый Shadow DOM. CX Codex +1 ★ 11звёзд репо Firecrawl MCP Server firecrawl Превращает веб-страницы в Markdown или JSON, ищет данные в сети и обходит сайты через API Firecrawl. Помогает агентам читать документацию и заполнять формы в браузере. CX Codex +1 ★ 7 695звёзд репо

Спонсоры проекта

Компании, которые помогают держать аналитику открытой