К основному содержанию

Brave Search продаёт индекс ИИ-сервисам: как проверить свой сайт

Пересказ по материалу Habr SEO

Brave Search продаёт индекс ИИ-сервисам: как проверить свой сайт

Поисковик Brave продаёт доступ к своему индексу ИИ-компаниям через Search API. Среди клиентов Brave сам называет Perplexity, Cohere, Mistral и You.com. Если страницы нет в индексе Brave, она может не попасть в ответы этих сервисов — независимо от позиций в Google и Яндексе.

Индекс используют для grounding: ИИ-сервис ищет страницы по вопросу пользователя и строит ответ на их основе. В августе 2026 года Brave заявлял о 40 млрд страниц в индексе.

2 ноября 2026 года New York Times подала иск против Brave. Газета утверждает, что Brave копировал контент издателей и продавал его ИИ-компаниям, в том числе для grounding. Решения суда нет.

Проверка страницы вручную

Страницу ищут в search.brave.com оператором site: с адресом. Запрос site:example.com показывает все страницы домена в индексе. Для одной страницы после site: без пробела ставят полный адрес с https: site:https://example.com/blog/page/.

Поддомены site:example.com охватывает все сразу. Чтобы смотреть один, пишут site:blog.example.com.

Brave может показывать сохранённую копию с устаревшим описанием. Пустая выдача не всегда означает отсутствие страницы: документация Brave называет операторы поиска экспериментальными. Если site: ничего не нашёл, стоит попробовать обычный запрос по заголовку.

Проверка списка через API

Для списка страниц удобнее Brave Search API. Скрипт отправляет запрос site: на каждый адрес и проверяет, вернулась ли страница. Оператор site: передают внутри параметра q, ключ — в заголовке X-Subscription-Token.

С февраля 2026 года тариф Search стоит $5 за 1000 запросов. В каждый план входят бесплатные кредиты на $5 в месяц — примерно 1000 запросов. Условие: указать Brave Search API как источник на своём сайте или в разделе о проекте. Сайт на 300 страниц укладывается в бесплатные кредиты.

Почему страницы может не быть

У робота Brave нет собственного имени в robots.txt. Если страница закрыта для Googlebot, Brave её не обходит. Из индекса страницу убирает noindex в коде или в заголовке ответа сервера. robots.txt для noindex Brave не использует.

Краулер Brave частично питается данными пользователей браузера Brave, которые включили Web Discovery Project. По умолчанию эта опция выключена. Ссылки и карта сайта попадания в индекс не гарантируют: у Lab Leaders на 31 августа 2026 года в индексе было 35 адресов из 143 — 24%, хотя ссылки и карта сайта были.

Как добавить страницу

Сначала убирают причину: закрытие для Googlebot или noindex. Потом подают адреса через форму search.brave.com/submit-url. Форма бесплатная, работает без регистрации и ставит адреса в очередь на обход. Lab Leaders советует подавать по одному адресу страницы. В документации Brave про приём новых адресов такого нет.

В кейсе Lab Leaders индексация за десять недель выросла с 24% до 99% адресов — 295 из 299 на 9 ноября. Адреса подавали через форму и каждую неделю сверяли индекс. Контрольной группы не было.

По материалам Habr SEO.

TG X Скопировано

Спонсоры проекта

Компании, которые помогают держать аналитику открытой