Какие страницы сайта не в индексе

Вставьте адрес сайта или его sitemap.xml. Возьмём 100 случайных страниц из карты, покажем, что они говорят поисковому роботу, а 30 из них проверим в индексе Яндекса и Google. Бесплатно и без регистрации.

Что проверяем

• Индекс Яндекса и Google — сколько из 30 случайных страниц карты поисковики не нашли, и сколько это на всю карту.
• Сами страницы — код ответа и редиректы, noindex, закрытие в robots.txt, canonical на другой адрес, «страница не найдена» с кодом 200.
• Ещё в индексе, но выпадут — сломанные страницы, которые поисковик пока показывает по старой памяти.
• Саму карту — адреса чужого домена и повторы.

Страницы берём случайно по всей карте, а не первые: в начале карты обычно главная и разделы — самые здоровые страницы сайта. Если указать только домен, адрес карты возьмём из robots.txt, а если его там нет — /sitemap.xml. Проверка идёт несколько минут; отчёт откроется по ссылке, её можно переслать.

Нужна одна страница — проверка страницы отвечает за полминуты.