Стоит ли в robots.txt закрывать страницы /page/ ?

Rich Dad

Сообщений: 487 Регистрация: Окт 2011

1 Мая 2016 05:32

Стоит ли в robots.txt закрывать страницы /page/ от индексации ?

Иван Севостьянов

Сообщений: 2109 Регистрация: Окт 2011

1 Мая 2016 08:30

Конечно, а лучше тегом ноуидекс, так как закрытые в роботс они все равно вылазят в гугле.

Товарные тизеры - от 3 рублей/клик | Стабильный хостинг от 90 рублей

Rich Dad

Сообщений: 487 Регистрация: Окт 2011

1 Мая 2016 09:42

Цитата
Иван Севостьянов пишет: Конечно, а лучше тегом ноуидекс, так как закрытые в роботс они все равно вылазят в гугле.

Почему их так важно закрыть от индексации?

Иван Севостьянов Сообщений: 2109 Регистрация: Окт 2011	#4 1 Мая 2016 10:01 Потому что у этих страниц метатеги идентичны странице page/1. То есть возникает дублирование страниц. Хотя в заголовок сейчас вроде подставляется автоматом, например "страница 2" после заголовка, но все равно. Изменено: Иван Севостьянов - 1 Мая 2016 10:02

Новые темы	Объявления	Свободное общение
14:39 AviTool - мощный инструмент для автоматизации работы с Avito 11:36 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 00:53 Доработка сайта 00:49 Маркированный список выходит за пределы статьи 00:44 Модуль DLE 18:09 LGaming - экосистема и партнерская программа в gambling и betting вертикалях 16:11 Давайте начнем обмен отзывами Google maps	17:29 Ссылочное продвижение ваших сайтов статьями, профилями и комментариями, качественно и по доступным ценам!!! 16:39 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 12:32 Belurk — высокоскоростные анонимные прокси от 0,24 рублей 06:10 Продам обменник криптовалюты, а также новый обменник под ключ с обучением. Скидки на скрипты обменника 04:22 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 00:54 Переверстать готовый шаблон DLE 23:30 Coin Click.cc - Быстрый и надежный обмен электронных валют в два клика	22:20 Точные прогнозы на футбол 20:09 Сколько сейчас стоит наполнение ИМ? 12:43 Куплю проигрышные букмекерские аккаунты 04:33 Половина скидок на распродажах — фейк 07:53 НейроБабушка наказывает мошенников 19:59 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко 19:57 Пятница 13-ое: VK принял радикальное решение и закрыл доступ к порно контенту

Новые темы

Объявления

Свободное общение

14:39 AviTool - мощный инструмент для автоматизации работы с Avito
11:36 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика!
00:53 Доработка сайта
00:49 Маркированный список выходит за пределы статьи
00:44 Модуль DLE
18:09 LGaming - экосистема и партнерская программа в gambling и betting вертикалях
16:11 Давайте начнем обмен отзывами Google maps

17:29 Ссылочное продвижение ваших сайтов статьями, профилями и комментариями, качественно и по доступным ценам!!!
16:39 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств
12:32 Belurk — высокоскоростные анонимные прокси от 0,24 рублей
06:10 Продам обменник криптовалюты, а также новый обменник под ключ с обучением. Скидки на скрипты обменника
04:22 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка
00:54 Переверстать готовый шаблон DLE
23:30 Coin Click.cc - Быстрый и надежный обмен электронных валют в два клика

22:20 Точные прогнозы на футбол
20:09 Сколько сейчас стоит наполнение ИМ?
12:43 Куплю проигрышные букмекерские аккаунты
04:33 Половина скидок на распродажах — фейк
07:53 НейроБабушка наказывает мошенников
19:59 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко
19:57 Пятница 13-ое: VK принял радикальное решение и закрыл доступ к порно контенту

30.11.2022 10:08	Накрутка ПФ - сколько может стоить?
09.02.2021 10:57	Чего стоит ожидать после изменений процесса идентификации в Яндекс Дзен?
20.10.2018 20:14	Стоит ли выкладывать рекламу в яндекс ?
01.10.2018 16:57	Слетели позиции после изменения robots.txt
17.01.2018 14:13	Передается ли вес через robots.txt у Яндекса