Как в robots.txt закрыть страницы /page от индексации, как правильно прописать? На сколько я знаю их нужно закрывать
#1
16 Мая 2016 06:13
Как в robots.txt закрыть страницы /page от индексации, как правильно прописать? На сколько я знаю их нужно закрывать
|
#2
16 Мая 2016 08:18
Сделайте лучше через тег роботс=ноуиндекс. Тк закрытые страницы в роботс.тхт все равно могут появляться в индексе гугла.
http://alaev.info/blog/post/3900 Там есть ваш пункт
Изменено:
Иван Севостьянов - 16 Мая 2016 08:18
|
#3
16 Мая 2016 11:49
|
#4
16 Мая 2016 12:04
Rich Dad, Вы вообще читать умеете? Вам дали ссылку где все подробно написано как и где это сделать
|
#5
16 Мая 2016 13:07
Disallow: /page/
Но нужно смотреть, как конкретно выглядят урлы. Мне вот так пришлось закрывать: Disallow: */page/* Disallow: /page* |
#6
16 Мая 2016 15:24
|
||||
03.12.2021 19:52 | Как в SMF форуме закрыть ссылки с сообщения в nofollow? |
16.03.2021 17:04 | Как закрыть такую страницу - https://сайт.com/2021/01/15/ |
19.01.2021 13:01 | фото как закрыть от индексации |
05.12.2020 10:26 | Как правильно закрыть категорию в robots.txt |
24.11.2019 18:31 | sitemap и robots.txt |