Материал
Яндекс не обходит страницы через IndexNow: что показал тест
Редакция Пиксель Вайб
Редакция Пиксель Вайб

Яндекс не обходит страницы через IndexNow: что показал тест

IndexNow обещает ускорить обнаружение новых страниц: вместо ожидания, пока поисковый робот сам найдёт URL, сайт отправляет поисковику уведомление. После октябрьской аварии Яндекса мы решили проверить, работает ли этот канал на практике.

Результат оказался однозначным только для нашего теста: за 14 суток подтверждённый YandexBot не посетил ни одну из 48 новых страниц. В 24 случаях URL отправляли через IndexNow и получили ответ «принято», ещё 24 страницы добавили только в sitemap. При этом Google за то же время нашёл через sitemap 23 из 24 страниц.

Главный вывод для владельцев сайтов: сейчас рассчитывать на IndexNow как на способ ускорить обход Яндексом новых страниц не стоит. Но важно понимать ограничения эксперимента: это один сайт, один запуск и всего одна точка во времени.

Что произошло после аварии Яндекса

В начале октября 2026 года масштабный сбой затронул сразу несколько сервисов Яндекса. В течение месяца их работа постепенно восстанавливалась. На 21 октября, согласно опубликованному обзору, Вебмастер, Метрика и Директ ещё работали с ограничениями.

Когда мы запускали эксперимент 23–24 октября, в Яндекс Вебмастере у нас отображался баннер «данные временно не обновляются». Инструмент «Файлы Sitemap» работал только на чтение: добавить sitemap через него было нельзя.

Для теста это было важно: мы хотели проверить не только сам IndexNow, но и то, как поисковый робот ведёт себя после аварии.

Схематичная иллюстрация работы уведомления поисковику: сайт отправляет URL, затем поисковый робот должен прийти и загрузить страницу; без текста, логотипов и реальных людей.

Как устроили эксперимент

Задача была простой: понять, приводит ли уведомление через IndexNow к визиту YandexBot и отличается ли результат от обычного обнаружения страниц через sitemap.

Мы подготовили 48 новых страниц глоссария на tools.seoxl.ru. На каждой был отдельный материал с нашими данными, логами и замерами. Внутренних ссылок на эти URL не было — поисковому роботу нельзя было случайно «подсказать» адрес через обычную навигацию сайта.

Страницы разделили на две группы по 24:

  • Группа A — URL отправили в IndexNow одной пачкой с помощью нашего бесплатного инструмента. В sitemap этих страниц не было.
  • Группа B — URL добавили в sitemap, но через IndexNow не отправляли.

Разбиение сделали случайным внутри тематических блоков, чтобы, например, все материалы про индексацию не оказались в одной группе.

Стартовали 24 октября 2026 года в 17:20 по Москве. Два канала включили с разницей всего в 8 секунд.

Основной метрикой было время от запуска до первого запроса настоящего YandexBot с кодом 200. Подлинность робота проверяли через обратный DNS, поэтому поддельные запросы в расчёт не попадали.

Само правило интерпретации результатов мы зафиксировали ещё до запуска и записали в хэш. Если робот не придёт ни в одну группу, выводом будет «данных нет», а не попытка объяснить нулевой результат задним числом.

Что показал тест

IndexNow действительно принял отправленные URL: и api.indexnow.org, и yandex.com ответили кодом 200. Но на этом всё закончилось.

За две недели YandexBot не зашёл ни на одну из 24 страниц группы A.

С sitemap ситуация оказалась не лучше. После старта эксперимента Яндекс ни разу не скачал sitemap.xml: последний такой запрос был 18 октября. При этом к остальной части сайта робот обращался 64 раза. То есть бот на сайте был, но до новых страниц не дошёл.

Схема эксперимента с двумя одинаковыми группами из 24 страниц: одна получает сигнал через IndexNow, другая — через sitemap; показать различие каналов обнаружения без текста и логотипов.

Для сравнения мы посмотрели на другие поисковики. Google нашёл страницы группы B именно через sitemap: первые визиты произошли через шесть суток, медианное время составило около 6,7 суток. К 7 ноября Google обнаружил 23 из 24 страниц этой группы.

Страницы группы A Google не посещал, поскольку для него у них не было отдельного канала обнаружения. Поэтому признаков утечки между группами в эксперименте не было.

Bing за время теста сделал 143 запроса к сайту, но ни на одну новую страницу из обеих групп не пришёл.

Что это значит на практике

В рамках этого запуска IndexNow не дал нам того эффекта, ради которого его используют: сообщение «URL принят» не привело к последующему обходу страниц Яндексом в течение 14 суток.

Поэтому сейчас мы бы не тратили время на массовую отправку URL в IndexNow в ожидании, что это само по себе ускорит обход.

Для важных новых страниц надёжнее использовать несколько обычных сигналов обнаружения:

  • ставить внутренние ссылки с уже известных и регулярно обходимых страниц;
  • поддерживать актуальный sitemap;
  • проверять, что sitemap и robots.txt настроены корректно;
  • если Вебмастер снова работает штатно, использовать ручной инструмент «Переобход страниц».

При этом говорить, что IndexNow «сломался навсегда», мы не можем. Наш эксперимент показывает только то, что на этом сайте в конце октября и начале ноября 2026 года отправка URL через IndexNow не привела к визиту YandexBot.

Абстрактная визуализация логов краулера: много запросов к обычным страницам сайта и отсутствие запросов к новым экспериментальным URL; без текста, логотипов и реальных людей.

Почему результат нельзя считать окончательным ответом

У эксперимента есть несколько важных ограничений.

  • Мы тестировали один сайт и один запуск, поэтому нельзя переносить результат на все сайты и все периоды.
  • Причину нулевого результата установить невозможно. На него могли повлиять авария, молодой сайт с небольшим уровнем доверия, отсутствие внутренних ссылок или сочетание этих факторов.
  • За 14 суток до старта подтверждённый YandexBot сделал 188 запросов к сайту, 56 из них — за один вечер. За 14 суток после старта было 64 запроса. Периоды неоднородны, поэтому такое сравнение само по себе ничего не доказывает.
  • Размер эффекта оценить нельзя: в эксперименте не произошло ни одного события в целевой метрике.
  • Мы проверяли именно приход поискового робота, а не попадание страниц в поисковую выдачу. Данные Вебмастера в момент теста были недоступны.
  • Эксперимент относится к конкретному периоду — концу октября и первой половине ноября 2026 года.
  • Обход YandexBot был низким и происходил волнами. На сайте с гораздо более плотным краулингом результат может отличаться.
  • Наша ежедневная проверка сайта сама обращалась к экспериментальным страницам: около 2 700 запросов, примерно поровну между группами. Сторонние сканеры приходили только в группу B. Для поисковых ботов это не меняет основной результат, но условие «не трогать страницы» выполнено не полностью, и это нужно учитывать.
  • Отсутствие внутренних ссылок было частью дизайна эксперимента, но одновременно лишило новые страницы одного из самых сильных сигналов обнаружения.

Именно поэтому уровень уверенности в общем выводе остаётся низким: один сайт, один запуск и ноль событий.

Схема итогового сравнения: IndexNow — 24 страницы и 0 визитов YandexBot; sitemap — 24 страницы, 23 найдены Google; без текста, логотипов и реальных людей.

Итог

Эксперимент дал полезный, хотя и отрицательный результат. Яндекс принял URL через IndexNow, но за 14 дней не пришёл ни на одну из 24 страниц этой группы. Sitemap в тот же период Яндекс также не забрал, хотя продолжал обращаться к другим страницам сайта.

Для владельцев сайтов практический вывод пока простой: не рассчитывать на один IndexNow, а обеспечивать обнаружение важных страниц сразу несколькими способами — через внутреннюю перелинковку, актуальный sitemap и доступные инструменты Вебмастера.

А сам результат стоит воспринимать именно как замер конкретного периода после крупной аварии, а не как окончательный вердикт протоколу.

Комментарии

Написать комментарийВойти