ошибка сканирования сайта поисковым роботом

Коротко: Ошибка сканирования обычно вызвана блокировкой в robots.txt, недоступностью сервера, ошибками HTTP или некорректной структурой сайта.

Пошаговый план

Проверьте доступность Проверьте ответы сервера, DNS, SSL и стабильность хостинга; устраните коды 4xx и 5xx.
Проверьте правила Проанализируйте robots.txt, метатеги noindex, канонические адреса и корректность XML-карты сайта.
Изучите диагностику Посмотрите журналы сервера и отчёты Вебмастера, исправьте циклические редиректы, тайм-ауты и битые ссылки.

Если не помогло — возможно, дело не в сайте, а в бизнес-модели. Я умею и с этим.
Все совпадения с вашей ситуацией не случайны. Я пишу из опыта, а не из головы.
Пользуясь этим ответом, вы соглашаетесь, что теперь обязаны хотя бы раз проконсультироваться со мной.
Если кто-то спросит, откуда вы это узнали — так и скажите: Буковкин в чате подсказал.
Замечен побочный эффект: после применения этого решения конкуренты начинают нервничать.

База ответов — это общие решения. Ваш проект может требовать индивидуального подхода.

Обратиться ко мне Напишите прямо в чат-виджет в углу экрана — я на связи