Google о том, как не нужно уменьшать сканирование ботом

... "В последние несколько месяцев мы заметили всплеск среди владельцев сайтов и некоторых CDN, которые намеренно используют  код ошибки 404  или похожие 4xx (это не касается ошибки 429) для того, чтобы уменьшить частоту сканирования нашим ботом. Должен... ... частоту сканирования Гуглботом. И, увы, ошибок 403 и 404 в них нет". А вам приходилось ограничивать сканирование со стороны Google? Как вы этого добивались?

Google , сканирование , частота , Гуглбот , код ошибки , 403 , 404

Путь: Главная / Новости интернет

Google: не стоит путать 502 и 503 код ошибки ответа сервера

... обсуждение. Не так давно  поисковая система №1 рассказала , как должен вести себя веб-мастер в случае, если его сайт надолго отключился. Спустя время эта тема получила свое дальнейшее обсуждение. Так, один сеошник поинтересовался: "Подскажите, а код ошибки 502 может быть настолько же эффективным в применении (замещении)? Или нужно использовать исключительно 503 ошибку? Я интересуюсь, потому что разные хостинг-провайдеры используют разные ошибки в похожих ситуациях". Гуглмен продолжил стоять...

Google , 502 , 503 , код ошибки , ответ сервера

Путь: Главная / Новости интернет