Восстанавливаем трафик после взлома сайта на Битриксе

Особенность продвижения в Яндексе "вылеченных" сайтов на Битриксе. После удаления вируса, трафик постепенно приходит в норму, но у 30% продвигаемых сайтов, началось падение трафика. За 3 месяца постепенное сокращение запросов в Топ 10 Яндекса с 5000 до 500-600.

В консоли уже не показываются уведомления об ошибках и нарушениях со стороны Яндекса. Удаленные страницы отдают код 404. В robots прописаны disallow. Количество страниц в поиске и в исключенных - стабильно.



Причина: после удаления вирусов и обновлений Битрикса, Яндекс запомнил сотни и тысячи удаленных вирусных страниц и продолжает их обрабатывать.

Решение:

Изменили: Ошибка 404 Not Found ( «не найдено») на 410 Gone («страницы больше не существует»), Таким образом предаем сигнал Яндексу: страница существовала но удалена окончательно.

Яндекс перестанет обрабатывать url с таким ответом и забудет про него.

Краулинговый бюджет распределится на полезные страницы. 

Наглядная ситуация в SEO когда нужно настроить 410 вместо 404.

404 Ошибка - для полезных страниц, особенно в интернет-магазине, когда товары уходят с сайта до следующего поступления. В этом случае сканер будет проверять url в ожидании смены статуса на 200 OK.

410 - полное удаление url без его возвращения. В отношении спамных и вирусных страниц это оправдано.

HTTP авторизация, как вариант также можно внедрить.
 
Просмотреть и скачать список страниц в эксель можно в Панели вебмастера Яндекса и Google Search Console.

---