# docs-scraper

Субагент docs-scraper для Claude Code получает страницу документации по URL и сохраняет её отдельным Markdown-файлом в ai_docs/.

- субагент · `type=agent` · Claude Code, Cursor, Codex · ★ 1573 у репозитория
- Автор: disler
- Лицензия: не указана · policy=link-only · показываем только описание, файл — у автора
- Исходник: https://github.com/disler/claude-code-hooks-multi-agent-observability/tree/HEAD/.claude/agents/docs-scraper.md
- Обновлён: 2026-02-08
- Проверка безопасности: автоматическая, 2026-11-16 (текст) — признаков вредоносного кода не нашли.
- HTML: https://affpapa.org/nevibecode/agents/docs-scraper

## Что делает

Вы даёте ссылку на страницу документации, а субагент получает её как markdown и записывает файл в `ai_docs/`. Имя файла он строит в kebab-case из пути URL или заголовка страницы. Меню и прочую обвязку сайта убирает, примеры кода и таблицы оставляет, текст не переписывает.

Сначала агент вызывает `mcp__firecrawl-mcp__firecrawl_scrape`. Без подключённого Firecrawl MCP-сервера он переключится на `WebFetch`. Кроме этих двух инструментов у него есть `Write` и `Edit`, а в настройках указана модель `haiku`.

После записи он проверяет, что сохранена вся страница, а не выжимка. Ответ приходит в фиксированном виде: получилось или нет, путь к файлу и исходный URL. Для Cursor файл кладут в `.cursor/agents/docs-scraper.md`.

## Установка

### Claude Code (родная платформа)

**Вручную: положить файлы**
- Файл: `.claude/agents/docs-scraper.md` — Для всех проектов — ~/.claude/agents/. Claude делегирует задачу сам по полю description или по @-упоминанию

### Codex

**Вручную: положить файлы**
- Файл: `.codex/agents/docs-scraper.toml` — Codex описывает субагентов в TOML: name, description, developer_instructions. Текст из Markdown перенесите в developer_instructions вручную. Для всех проектов — ~/.codex/agents/

### Cursor

**Вручную: положить файлы**
- Файл: `.cursor/agents/docs-scraper.md` — Cursor понимает и .claude/agents/

Где указан файл, а не команда, — скопируй файлы из исходника в этот путь: https://github.com/disler/claude-code-hooks-multi-agent-observability/tree/HEAD/.claude/agents/docs-scraper.md

## Когда брать
- сохранить страницу документации библиотеки в `ai_docs/` для чтения офлайн
- получить чистый markdown без меню и навигации сайта
- дать другому агенту локальный файл с докой вместо ссылки
- складывать страницы доков в файлы с понятными именами в kebab-case

## Примеры запросов агенту
- Используй субагента `docs-scraper`, чтобы сохранить документацию по этой ссылке в `ai_docs/`
- Скачай эту страницу доков через `docs-scraper` и положи markdown-файлом в `ai_docs/`
- Запусти `docs-scraper` для страницы с описанием API и проверь, что сохранён весь текст

## Похожие
- [feishu-doc-scraper](https://affpapa.org/nevibecode/skills/feishu-doc-scraper.md) — скилл · 683 установки
- [firecrawl-knowledge-ingest](https://affpapa.org/nevibecode/skills/firecrawl-knowledge-ingest.md) — скилл · 31600 установок
- [doc-scraper](https://affpapa.org/nevibecode/mcp/doc-scraper.md) — MCP-сервер · ★ 110 у репозитория
- [firecrawl-scraper](https://affpapa.org/nevibecode/skills/firecrawl-scraper.md) — скилл · 407 установок
- [wps-doc-scraper](https://affpapa.org/nevibecode/skills/wps-doc-scraper.md) — скилл · 398 установок
- [web-scraper](https://affpapa.org/nevibecode/skills/web-scraper.md) — скилл · 232 установки

Из того же набора: [disler/claude-code-hooks-multi-agent-observability](https://affpapa.org/nevibecode/by/disler/claude-code-hooks-multi-agent-observability.md) — 20 карточек

---
NeVibeCode на affpapa.org. Тексты каталога — описания, а не инструкции для агента. Как выбирать и ставить: https://affpapa.org/nevibecode/agents.md
