Яндекс ввёл изменения в ROBOTS.TXT
Страницы: 1 2 След.
Яндекс ввёл изменения в ROBOTS.TXT
Привет всем , на днях пришло уведомление в панели вебмастера , я толком не понял что на что поменять нужно - помагите кто поймёт!

вот само уведомление:
Уведомляем вас об изменениях в обработке директивы 'Allow' файла robots.txt , с помощью которого вы можете разрешить или запретить индексирование сайта поисковым роботом Яндекса.
По новым правилам, если страница сайта попадает под действие нескольких директив 'Allow' и/или 'Disallow', то будет применяться директива с наибольшей длиной префикса URL. При определении длины префикса спецсимвол '*' не учитывается.
Если на вашем сайте в robots.txt совместно используются директивы 'Allow' и 'Disallow', пожалуйста, проверьте их на соответствие новым стандартам


вот мой robots.txt , что тут именно поменять?!

User-agent: Yandex
Allow: /wp-content/uploads/
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /author
Disallow: */trackback
Disallow: */feed
Disallow: /?s=
Host: kokshetay.ru

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /author
Disallow: */trackback
Disallow: */feed
Disallow: /?s=
Allow: /wp-content/uploads/
Изменено: 333cc333 - 14 Марта 2012 20:45
Цитата
333cc333 пишет:
что тут именно поменять?!
Ничего. Яндекс сделал просто менее жёсткие правила на ограничение индексации.
О сколько нам открытий чудных готовит продвиженья путь:
И Google, сын ошибок трудных, и Yandex, парадоксов друг :)
Дешёвый хостинг для новичков и про
Тогда ясненько) , а кто подскажет - вооЩпе нормальный у меня РОБОТС или нет)
Цитата
333cc333 пишет:
а кто подскажет - вооЩпе нормальный у меня РОБОТС или нет)
У вас сайт на Вордпресс, насколько я понял (это же не сайт из подписи).Тогда непонятно, почему в User-agent: * вы строчку Allow поставили в конец. Лучше её поставить в начало, ибо могут не индексироваться картинки (а вот как раз для яндекса после обновления это уже не важно).
Цитата
Yapy пишет:
У вас сайт на Вордпресс, насколько я понял (это же не сайт из подписи).Тогда непонятно, почему в User-agent: * вы строчку Allow поставили в конец. Лучше её поставить в начало, ибо могут не индексироваться картинки (а вот как раз для яндекса после обновления это уже не важно).
Огромное вам спасибо! да сайт из подписи , он  на Юкозе , это я так всё завуалировал)))
Изменено: 333cc333 - 15 Марта 2012 00:28
Цитата
333cc333 пишет:
да сайт из подписи , он на Юкозе
0_o Тогда почему у вас роботс для ВП? У вас же даже таких директорий нет.
я не в курсе с этим файлом что да как , вот и попросил помощи) А что нужно изменить для Укоза?
Обрезать везде wp?

было так Allow: /wp-content/uploads/
а сделать Allow: /content/uploads/  ?????????????

Друг сказал что вот самый правильный :

User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Host: ucozon.ru
Sitemap:http://адрес сайта/sitemap.xml
Sitemap:http://адрес сайта/sitemap-forum.xml  
Sitemap:http://адрес сайта/sitemap-shop.xml

так ли это? только непойму почему АЛЛОУ нету?
подскажите пожалуйста
Изменено: 333cc333 - 15 Марта 2012 12:46
В этом роботс тхт получается что все что не запрещено (Disallow) можно индексировать.
Цитата
333cc333 пишет:
я не в курсе с этим файлом что да как
Ну и прикол. Вы все это время сидели с робот для ВП, а сайт на юкозе smile:sarc:
и самое интересное всё индексировалось за секунды , только фильм добалю - он уже мне в этот день с ПС народ гонит на него
помоему Allow: уже как бы не пользуются:)
Цитата
bliking пишет:
помоему Allow: уже как бы не пользуются:)

Это как не используется? 0_O
Цитата
333cc333 пишет:
и самое интересное всё индексировалось за секунды , только фильм добалю - он уже мне в этот день с ПС народ гонит на него
Ну всё правильно: у вас были закрыты страницы, которых просто нет, так что эффект был такой же, что роботс просто нет.
Цитата
Yapy пишет:
Ну всё правильно: у вас были закрыты страницы, которых просто нет, так что эффект был такой же, что роботс просто нет.
Походу Юкоз автоматически свой впихивал стандартный . из за не соответствия моего , это я нарыл ковыряясь в форумах ))) я много чего знаю как вебмастер , а вот именно этот нюанс с РОБОТСом пропусти так сказать. Сейчас всё понял и исправил smile:mail:.
стыдобище я smile:(
Изменено: 333cc333 - 15 Марта 2012 23:52
Страницы: 1 2 След.
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
21:07 Взрывной рост роботности в Метрике 
18:33 Trafee.com – эффективная монетизация вашего дейтинг трафика 
15:41 Adtrafico - Правильная партнёрская сеть под бурж трафик 
22:12 Stixi.ru. и stixi.com 
20:30 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
16:45 Adfinity - Ваш надежный партнер в монетизации трафика 
15:05 Gambling Craft - гемблинг по белому 
22:12 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 
18:06 Coin Click.cc - Быстрый и надежный обмен электронных валют в два клика 
05:50 LunaProxy дешевый глобальный резидентный прокси $0,77/ГБ Ротирующийся прокси|Собственный IP|Безлимитный план 
16:11 Google Voice - OLD аккаунты "SMS и звонки" 
15:32 Sms.chekons.com - получения SMS на реальные номера USA, Sms.chekons.com - получения SMS на реальные номера USA 
15:26 TETChange-Обменник криптовалют 
12:30 Мобильные и Резидентные Прокси Для Соц Сетей | 3 Гб Бесплатно 
23:55 Точные прогнозы на футбол 
20:09 Сколько сейчас стоит наполнение ИМ? 
12:43 Куплю проигрышные букмекерские аккаунты 
04:33 Половина скидок на распродажах — фейк 
07:53 НейроБабушка наказывает мошенников 
19:59 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко 
19:57 Пятница 13-ое: VK принял радикальное решение и закрыл доступ к порно контенту