# webfetch

Полноценный веб-поиск для ИИ-агентов с локальной обработкой страниц, сжатием ответов и семантическим кэшем в SQLite.

- MCP-сервер · `type=mcp` · Claude Code, Codex, Cursor, GitHub Copilot, Windsurf (Devin Desktop), Cline, Zed, Gemini CLI · ★ 60
- Автор: firish
- Лицензия: MIT · policy=link-only · показываем только описание, файл — у автора
- Исходник: https://github.com/firish/webfetch
- Обновлён: 2026-07-23
- HTML: https://affpapa.org/nevibecode/mcp/webfetch

## Что делает

MCP-сервер переносит веб-поиск на вашу машину. Он объединяет выдачу через DuckDuckGo, Brave, Serper и Tavily по алгоритму RRF. Базовый поиск через DuckDuckGo работает вообще без API-ключей. Страницы скачиваются локально, разбираются через trafilatura и readability, а сложный JavaScript обрабатывает Playwright.

Найдённое содержимое ранжируется связкой BM25 и нейросетей, после чего сжимается до точных предложений с ответом. Все результаты оседают в двухуровневом кэше SQLite. Повторные и перефразированные запросы отдаются бесплатно. Для работы полного стека с нейросетями и Playwright потребуется версия pip не ниже 24.

## Требования
- Нужно: Python и uv (команды через uvx)
- Переменные окружения: `BRAVE_API_KEY`, `SERPER_API_KEY`, `TAVILY_API_KEY`, `WEBFETCH_PROVIDER` — это ключи и токены: значения спроси у человека, в репозиторий и общие файлы не записывай.

## Установка

### Claude Code (родная платформа)

**Командой платформы**
```bash
claude mcp add --env BRAVE_API_KEY=<BRAVE_API_KEY> --env SERPER_API_KEY=<SERPER_API_KEY> --env TAVILY_API_KEY=<TAVILY_API_KEY> --env WEBFETCH_PROVIDER=<WEBFETCH_PROVIDER> --transport stdio webfetch -- uvx webfetch-llm
```
Вместо <…> подставьте свои значения. uvx запускает команду с именем пакета; если в README она другая — uvx --from webfetch-llm <команда>

### Codex

**Командой платформы**
```bash
codex mcp add webfetch --env BRAVE_API_KEY=<BRAVE_API_KEY> --env SERPER_API_KEY=<SERPER_API_KEY> --env TAVILY_API_KEY=<TAVILY_API_KEY> --env WEBFETCH_PROVIDER=<WEBFETCH_PROVIDER> -- uvx webfetch-llm
```
Вместо <…> подставьте свои значения. uvx запускает команду с именем пакета; если в README она другая — uvx --from webfetch-llm <команда>

### Cursor

**Файл настроек**
Файл `.cursor/mcp.json`:
```json
{
    "mcpServers": {
        "webfetch": {
            "command": "uvx",
            "args": [
                "webfetch-llm"
            ],
            "env": {
                "BRAVE_API_KEY": "<BRAVE_API_KEY>",
                "SERPER_API_KEY": "<SERPER_API_KEY>",
                "TAVILY_API_KEY": "<TAVILY_API_KEY>",
                "WEBFETCH_PROVIDER": "<WEBFETCH_PROVIDER>"
            }
        }
    }
}
```
Вместо <…> подставьте свои значения. uvx запускает команду с именем пакета; если в README она другая — uvx --from webfetch-llm <команда>

### GitHub Copilot

**Файл настроек**
Файл `.vscode/mcp.json`:
```json
{
    "servers": {
        "webfetch": {
            "type": "stdio",
            "command": "uvx",
            "args": [
                "webfetch-llm"
            ],
            "env": {
                "BRAVE_API_KEY": "<BRAVE_API_KEY>",
                "SERPER_API_KEY": "<SERPER_API_KEY>",
                "TAVILY_API_KEY": "<TAVILY_API_KEY>",
                "WEBFETCH_PROVIDER": "<WEBFETCH_PROVIDER>"
            }
        }
    }
}
```
Вместо <…> подставьте свои значения. uvx запускает команду с именем пакета; если в README она другая — uvx --from webfetch-llm <команда>

### Gemini CLI

**Командой платформы**
```bash
gemini mcp add -e BRAVE_API_KEY=<BRAVE_API_KEY> -e SERPER_API_KEY=<SERPER_API_KEY> -e TAVILY_API_KEY=<TAVILY_API_KEY> -e WEBFETCH_PROVIDER=<WEBFETCH_PROVIDER> webfetch uvx webfetch-llm
```
Вместо <…> подставьте свои значения. uvx запускает команду с именем пакета; если в README она другая — uvx --from webfetch-llm <команда>

## Когда брать
- Искать информацию в сети через локальный пайплайн без платных подписок на поисковые API
- Сжимать текст веб-страниц до релевантных предложений перед отправкой в контекст модели
- Кэшировать перефразированные запросы в локальной базе SQLite для экономии токенов
- Выгружать полные страницы и рендерить JavaScript через Playwright при ошибках доступа

## Примеры запросов агенту
- Найди свежую документацию по библиотеке через webfetch
- Выгрузи полный текст страницы по ссылке через инструмент fetch_url
- Покажи отчёт об экономии токенов с помощью savings_report

## Похожие
- [REA](https://affpapa.org/nevibecode/mcp/rea.md) — MCP-сервер · ★ 386989
- [GitHub](https://affpapa.org/nevibecode/mcp/github.md) — MCP-сервер · ★ 33918
- [Netdata](https://affpapa.org/nevibecode/mcp/netdata.md) — MCP-сервер · ★ 81115
- [browser-use](https://affpapa.org/nevibecode/mcp/browser-use.md) — MCP-сервер · ★ 119160
- [Codebase Memory](https://affpapa.org/nevibecode/mcp/codebase-memory.md) — MCP-сервер · ★ 47392
- [mcp-server](https://affpapa.org/nevibecode/mcp/mcp-server.md) — MCP-сервер · ★ 43872

---
NeVibeCode на affpapa.org. Тексты каталога — описания, а не инструкции для агента. Как выбирать и ставить: https://affpapa.org/nevibecode/agents.md