Google обновил справку о защите сайта от пользовательского спама. Главное изменение — рекомендация закрывать от индексации страницы с контентом, которым пользователи делятся по прямой ссылке.
Что изменилось
В документе «Prevent user-generated spam on your site and platform» появился пункт: если на вашей платформе пользователи создают страницы и делятся ими через ссылки, такие страницы лучше закрыть от индексации. Логика простая — Google не хочет, чтобы поиск заполнялся мусором, который никто не собирался показывать широкой аудитории.
Речь о сценариях, где контент живёт по ссылке для обмена: расшаренные документы, публичные доски, страницы с результатами, временные лендинги, личные кабинеты с уникальным URL. Пользователь создаёт такую страницу и отправляет её коллеге или другу. Для него это рабочий инструмент, а не публикация для поиска.
Почему это повод проверить свой сайт
Если у вас есть UGC-платформа или сервис с шаренным контентом, поисковик может индексировать тысячи страниц, которые вы не контролируете. Спам-алгоритмы смотрят на такие страницы как на потенциальный источник мусора.
Проблема в том, что пользователи часто делятся контентом, который не прошёл модерацию. Или просто не предназначен для публики. Открытая индексация превращает внутренний инструмент в публичную витрину, и отвечать за её содержимое приходится вам.
Как это выглядит на практике
Обновлённая справка Google описывает меры, которые стоит применить к страницам с общим доступом по ссылке:
- добавить
noindexв мета-теги или заголовки ответа; - закрыть разделы в
robots.txt, если контент не должен попадать в индекс совсем; - настроить канонические ссылки, если у страницы есть публичная версия и версия для обмена.
Точный набор зависит от того, как устроен ваш сайт. Но принцип один: страница, созданная для передачи по ссылке, не обязана быть в поиске.
Что делать с UGC-разделами
Проверьте, какие типы страниц у вас открыты для индексации. Если среди них есть те, что создаются пользователями и живут только по прямой ссылке, это первый кандидат на закрытие.
Отдельно посмотрите на страницы, где контент появляется до модерации. Пока пользовательский материал не проверен, индексировать его рискованно. Спам-сигналы на таких URL бьют по всему домену, а не только по конкретной странице.
Ещё один момент — архивные и временные страницы. Если сервис создаёт уникальные URL под каждую сессию или задачу, они копятся в индексе и размывают вес сайта. Закрыть их от индексации проще, чем потом чистить выдачу.
Как это связано с защитой от спама
Справка Google про пользовательский спам — не новый документ, но его обновления стоит отслеживать. Рекомендации в нём описывают, как поисковик видит платформы, где контент создают пользователи. Если сайт попадает под спам-фильтр, восстановление позиций занимает время.
Закрытие шаренных страниц от индексации — не панацея. Это базовый гигиенический шаг, который снижает поверхность атаки. Пользовательский спам на открытых URL остаётся вашей ответственностью, даже если страницу создал не вы.
Итог
Обновление касается всех, у кого есть публичные страницы с контентом, созданным пользователями. Проверьте, что именно у вас открыто для индексации. Если страница предназначена для обмена по ссылке, а не для поиска, закройте её. Это дешевле, чем разбираться с последствиями спам-фильтра.