Международный медиаресурс по криптовалютам потерял около 90% органического трафика после неудачной миграции домена — и причина оказалась не в релевантности контента или санкциях, а в технических сбоях, которые незаметно подорвали индексирование страниц и расходовали crawl budget.
Основные детали новости
В январе 2022 года бразильская локализация сайта перешла с домена xx.com.br на поддомен br.xx.com. До миграции старый домен получал по данным Google Search Console 15–25 тысяч кликов в день; после перехода трафик упал до 2–4 тысяч кликов и не восстановился в течение года. Сравнение декабря 2021 и декабря 2022 показало падение сессий и просмотров примерно на 90%.
Первичная диагностика выявила, что старый домен продолжал активно сканироваться Google, из‑за чего полномочия не консолидировались на новом поддомене. Проблемы с перенаправлениями и общей валидацией миграции привели к разделению ресурсов поиска между двумя доменами вместо их объединения.
После первого этапа исправлений в августе 2022 появилась крошечная реакция: пик в 12 кликов и 37 показов 29 августа 2022 года, что указало на частичное признание новым доменом со стороны поисковика.
Дополнительные факты
В процессе разбора ситуации выяснилось, что у сайта накопился массив проблем с индексированием по всей сети из 13 странных доменов:
- «Crawled – currently not indexed» в Бразилии: 513 369 страниц.
- Soft 404: 1 193 страницы в Бразилии на момент проверки (и экспоненциальный рост таких ошибок по другим доменам).
- Другие показатели: «alternate page with proper canonical tag» — 2 532 URL, «discovered – currently not indexed» — 524 URL.
Ключевой технический узел: Google задерживал индексацию новых статей примерно на 24 часа, тогда как сканирование занимало около 2 минут — для новостного сайта о криптовалютах такое отставание делает публикации практически невидимыми.
Разрастание автоматически генерируемых «конвертер‑страниц» (например, /usd-to-thor?amount=250) создало поток тонкого контента, который потреблял бюджет сканирования и снижал приоритет индексации ценных страниц.
Сообщенная масштабность soft 404 на других доменах была впечатляющей: основной сайт xx.com — ~90 400 страниц, es.xx.com — 17 700, kr.xx.com — 15 400, fr.xx.com — 15 100, de.xx.com — 8 010. Во Франции накопление soft 404 с октября 2022 привело к падению ежедневных запросов краулера с 60–70 тысяч до 20–30 тысяч.
Системные исправления и результаты
С 31 января 2023 команда приступила к плановой программе исправлений с тремя приоритетами:
- Срочно: устранение soft 404 и корректная отдача HTTP‑статусов (404/410) там, где страницы отсутствуют, и правка рендеринга страниц, где контент есть.
- Высокий приоритет: оптимизация crawl budget — удаление/noindex автогенерируемых страниц, управление URL‑параметрами, блокировка низкоценных паттернов в robots.txt, настройка каноникализации.
- Средний приоритет: улучшения Core Web Vitals, но вторая очередь после индексации.
Через несколько недель после внедрения мер эффект стал заметен:
- Бразилия: «Crawled – currently not indexed» сократился с 513 000 до 220 000 страниц (‑57%), soft 404 упали с 1 193 до 370 (‑69%), и началась траекторная прибавка трафика.
- Германия: индексированных страниц выросло примерно до 370 748, клики выросли с ~8 000/день до устойчивых 12–15 000/день; доля трафика из Google Discover увеличилась с 42% до 58%.
- Польша: индексированные страницы выросли с ~100 000 до 135 556; Discover‑доля поднялась с 15% до 86%.
- Испания: клики из Google Discover выросли с ~450 000 до 912 721, Discover теперь — 65% трафика.
- По всем доменам soft 404 снизились с ~120 000 до менее 20 000 страниц (‑83%) к концу апреля 2023.
Почему это важно для SEO
Из кейса вытекают конкретные уроки для специалистов:
- Индексирование важнее многих оптимизаций. Контент бесполезен, если Google его не индексирует.
- Soft 404 тихо подрывают crawl budget: они не сигнализируют об ошибке явно, но заставляют поисковик тратить ресурсы на пустышки.
- Миграции доменов требуют полного и многоступенчатого контроля: редиректы, верификация свойств в Search Console, мониторинг старого и нового доменов и отслеживание скорости индексации.
- Crawl budget реален для больших новостных сайтов — автоматические страницы и параметры URL могут быстро «съесть» ресурсы.
- Региональные различия значимы: улучшения Core Web Vitals не равномерно сработают в разных странах из‑за инфраструктуры и CDN, поэтому приоритизируйте то, что даст результат в конкретном регионе.
- Google Discover становится критичным каналом для новостников: улучшение индексации напрямую повышает шансы получения рекомендаций от Discover.
Основной практический вывод: технические долги накопляются и приводят к постепенной потере позиции в выдаче. Системная проверка индексации и строгая политика по статусам страниц — первоочередная задача для больших мультирегиональных проектов.