В роботе запрет на индексацию категории как исправить?
Страницы: 1 2 След.
В роботе запрет на индексацию категории как исправить?, Если я правильно понял!
В роботе запрет на индексацию категории как исправить?

Вот мой робот

User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /feed/
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */comments
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
Disallow: /?s=

User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /feed/
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */comments
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
Disallow: /?s=
Host: blogo-master.ru
Sitemap: сайт/sitemap.xml.gz
Sitemap: сайт/sitemap.xml

Вроде правильный робот НО вот яндекс пишет Документ запрещен в файле робот тхт

вот скрин clip2net.com/s/3d6KDKp

Почему 2 катигории попали в это исключение? Как сделать что бы категории попали в ПС ?smile:)
а гугле индексируется? если да То пишите в саппорт яндекса о глюке.
Цитата
span4bob пишет:
а гугле индексируется? если да То пишите в саппорт яндекса о глюке.
И гугл нет, пишет:

Описание веб-страницы недоступно из-за ограничений в файле robots.txt

не пойму какое ограничение?
Это, думается: Disallow: /*?*
Это, думается: Disallow: /*?*

Нужно удалить Disallow: /*?*   ???
Цитата
Александр Клоос пишет:
Нужно удалить Disallow: /*?*
Подождите мнения WP водов. В общем-то - посмотрите категории, что не индексируются, и попробуйте сопоставить правило. Кроме того - может быть, у вас в мета запрет на эти категории стоит.

В общем - подождите мнения специалистов.
Удалил:
Disallow: /*?*
Disallow: /?s=
Disallow: */comments

Думаю может поможет!? А комменты нужно ли запрещать их для ПС ?
Цитата
Александр Клоос пишет:
А комменты нужно ли запрещать их для ПС
Посмотрите здесь и попробуйте _http://wpnew.ru/raskrutka-bloga/seo_optimizaciya/fajl-robots-txt-pravilnyj-primer-na-wordpress-dlya-yandeksa.html
Coder

Вернул все обратно вроде) У меня вот в плагине 
Заголовки и метаданные - Yoast WordPress SEO:

Стояла галочка на

Noindex для подстраниц и архивов
Если Вы не хотите дублировать в индексе страницы одной записи вида /page/2/ и архивы, отметьте этот пункт.
Я убрал галочку, как думаете я решил проблему?
Цитата
Александр Клоос пишет:
Я убрал галочку, как думаете я решил проблему?
Посмотрите по результату - зайдите в ВМ yandex и попробуйте добавить нужное в список URL _https://webmaster.yandex.ru/robots.xml
Цитата
Coder пишет:
Цитата
Александр Клоос пишет:
Я убрал галочку, как думаете я решил проблему?
Посмотрите по результату - зайдите в ВМ yandex и попробуйте добавить нужное в список URL _https://webmaster.yandex.ru/robots.xml
Что посмотреть не понял? Там просто робот проверяется! Он есть проверил и что? Как мне узнать будут категории теперь в ПС попадать или нет?smile:)
Цитата
Александр Клоос пишет:
Что посмотреть не понял?
Читайте внимательно) - заходите по адресу, что в посте выше.

Находите ниже строку "Список URL добавить"

Нажимаете на "добавить" и вводите интересующий вас адрес. И смотрите результат при нажатии кнопки внизу справа "проверить"
Coder

написано результат: разрешен

Вроде исправил спасибо!!!smile:) Если разрешен то точно будет индексироваться верно?smile:) www.cy-pr.com/forum/f64/t78535/m854689?result=new#118636
Пожалуйста)

Думается, что да.
Это хорошо! smile:)
Страницы: 1 2 След.
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
00:48 Как правильно покупать ссылки для поддомена? 
23:34 2025 ВК запустит новую программу монетизации для авторов сообществ 
15:28 LGaming - экосистема и партнерская программа в gambling и betting вертикалях 
18:51 Роскомнадзор отказал в регистрации трети блогеров-десятитысячников 
12:53 где много готовых фавиконок 
22:59 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 
12:32 «Хлебные крошки» в адресе сайтов исчезнут из результатов поиска Google 
04:35 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
21:43 TrueMeds - Революционная Фарма Партнерка! Увеличь свой профит в x2 раза вместе с нами! 
21:24 Sectormoney.com - быстрый и удобный обменник 
20:33 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 
18:54 USMobileSMSBot - 
17:18 Продам обменник криптовалюты, а также новый обменник под ключ с обучением. Скидки на скрипты обменника 
15:28 Прием платежей для HIGH RISK | Прием платежей без сайта 
08:12 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 
07:48 США готовят закон для уничтожения пиратских сайтов во всех странах мира 
02:50 Точные прогнозы на футбол 
02:10 [Новая партнерка] Goldbet Partners — прямой рекламодатель одноименного казино Goldbet 
21:19 С юмором по жизни! 
18:15 Telegram уничтожил официальный канал легендарного российского торрент-трекера 
18:19 Уникальный сервис SEO продвижения