robots на wp

Сообщений: 14 Регистрация: Мар 2013

4 Октября 2013 19:03

Добрый вечер, сколько делал robots , но постоянно что то ни так то страницы закроются от индексации, то дубли индексируются, дайте пожалуйста правильно настроенный robots. Спасибо.

Coder

Сообщений: 10438 Регистрация: Мар 2013

4 Октября 2013 21:51

Посмотрите:
_http://search.toolbars.alexa.com/?ver=alxf-2.18&src=bc&aid=ZUqHh1tRCs00yD&q=%D0%BF%D1%80%D0%B0%D0%B2%D0%B8%D0%BB%D1%8C%D0%BD%D1%8B%D0%B9+robots+%D0%B4%D0%BB%D1%8F+wordpress

_https://www.google.com.cy/search?q=%D0%BF%D1%80%D0%B0%D0%B2%D0%B8%D0%BB%D1%8C%D0%BD%D1%8B%D0%B9+robots+%D0%B4%D0%BB%D1%8F+wordpress&ie=utf-8&oe=utf-8&rls=org.mozilla:ru:official&client=firefox-a&channel=fflb&gws_rd=cr&ei=uf9OUp2RMuWp4ASy14Bw

_http://www.cy-pr.com/search/?tags=&q=robots+%D0%B4%D0%BB%D1%8F+Wordpress

✓ Проверенные скрипты и полезности для сайта

✓ Курсы

✓ Сервис временных ссылок

Академик

Сообщений: 2683 Регистрация: Июл 2012

4 Октября 2013 22:59

У меня с этим все нормально индексируется

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /tag

User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /tag
Host: сайт.ru
Sitemap: http://сайт/sitemap.xml.gz
Sitemap: http://сайт.ru/sitemap.xml

Дешевые рерайтеры тут

Александр

Сообщений: 14 Регистрация: Мар 2013

6 Октября 2013 07:17

Академик ( www.cy-pr.com/forum/f64/t57244/m623668?result=new#96942 ), спасибо попробую.

The Undertaker

Сообщений: 1526 Регистрация: Мар 2011

6 Октября 2013 08:37

У меня точно такой же, с яшки норм идут а с глугла ваще никого, как так то?

Уникальный контент выбирайте »тут« за недорого

darkneo

Сообщений: 396 Регистрация: Дек 2011

6 Октября 2013 12:51

о спасибо сайту 3 года решил проверить что у меня в роботсе написано)) а атм все открыто было))))) пустой роботс)))

pelikesha

Сообщений: 1634 Регистрация: Окт 2010

13 Октября 2013 20:43

Цитата
Академик пишет: У меня с этим все нормально индексируется

А странички комментариев не закрываете? Очень странно сначала определять правило для всех поисковиков, а потом для Яндекса - обычно делают наоборот (скорее всего Яндекс проигнорирует отведенную ему часть, т.к. уже вначале встретит *)

Ну и по 3 раза trackback в роботсе - шедеврально. Можно еще добавить Disallow: */*/*/*/*/*/trackback - на всякий случай. Аналогично с feed.

Новые темы	Объявления	Свободное общение
00:48 Как правильно покупать ссылки для поддомена? 23:34 2025 ВК запустит новую программу монетизации для авторов сообществ 15:28 LGaming - экосистема и партнерская программа в gambling и betting вертикалях 18:51 Роскомнадзор отказал в регистрации трети блогеров-десятитысячников 12:53 где много готовых фавиконок 22:59 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 12:32 «Хлебные крошки» в адресе сайтов исчезнут из результатов поиска Google	04:35 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 21:43 TrueMeds - Революционная Фарма Партнерка! Увеличь свой профит в x2 раза вместе с нами! 21:24 Sectormoney.com - быстрый и удобный обменник 20:33 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 18:54 USMobileSMSBot - 17:18 Продам обменник криптовалюты, а также новый обменник под ключ с обучением. Скидки на скрипты обменника 15:28 Прием платежей для HIGH RISK \| Прием платежей без сайта	08:12 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 07:48 США готовят закон для уничтожения пиратских сайтов во всех странах мира 02:50 Точные прогнозы на футбол 02:10 [Новая партнерка] Goldbet Partners — прямой рекламодатель одноименного казино Goldbet 21:19 С юмором по жизни! 18:15 Telegram уничтожил официальный канал легендарного российского торрент-трекера 18:19 Уникальный сервис SEO продвижения

Новые темы

Объявления

Свободное общение

00:48 Как правильно покупать ссылки для поддомена?
23:34 2025 ВК запустит новую программу монетизации для авторов сообществ
15:28 LGaming - экосистема и партнерская программа в gambling и betting вертикалях
18:51 Роскомнадзор отказал в регистрации трети блогеров-десятитысячников
12:53 где много готовых фавиконок
22:59 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу.
12:32 «Хлебные крошки» в адресе сайтов исчезнут из результатов поиска Google

04:35 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка
21:43 TrueMeds - Революционная Фарма Партнерка! Увеличь свой профит в x2 раза вместе с нами!
21:24 Sectormoney.com - быстрый и удобный обменник
20:33 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств
18:54 USMobileSMSBot -
17:18 Продам обменник криптовалюты, а также новый обменник под ключ с обучением. Скидки на скрипты обменника
15:28 Прием платежей для HIGH RISK | Прием платежей без сайта

08:12 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди
07:48 США готовят закон для уничтожения пиратских сайтов во всех странах мира
02:50 Точные прогнозы на футбол
02:10 [Новая партнерка] Goldbet Partners — прямой рекламодатель одноименного казино Goldbet
21:19 С юмором по жизни!
18:15 Telegram уничтожил официальный канал легендарного российского торрент-трекера
18:19 Уникальный сервис SEO продвижения

29.06.2024 18:53	Ссылки на главной WP
01.04.2024 14:28	Господа помогите со стилями
04.03.2024 12:20	Подскажите рабочий плагин импорта/экспорта контента WP
31.01.2024 20:42	Как закрыть от индексации некоторые блоки сайта
08.10.2023 11:09	Как узнать какая тема wordpress на сайте