robotst.txt для zend framework
Страницы: 1
robotst.txt для zend framework
Здравствуйте уважаемые форумчане!

Есть личный проект на zend framework. Возник вопрос по удалению некоторых страниц из индексации (дублей).

Во-первых страницы типа мойсайт.ру/catalog/view/106/?cid=0

гугл умный, он страницы с  ?cid=0 сам блокирует по групповому признаку, а вот яндекс не дошел еще до этого.

По какому признаку убрать в роботсе страницы с ?cid=0 ?

Также интересует вопрос по страницам, которые характеризуют источник захода с соц. сетей типа:

мойсайт.ру/review/486/#.UTL43I4WOrI.facebook

По какому признаку и каким образом можно удалить из индекса эти страницы? Опять же, гугл их игнорирует, яндекс индексирует и бросает в выдачу.

На сайте яндекса нашел конечно объяснения по второму варианту, но применить по признаку в своём варианте не смог. Кто сможет помочь, искать источник по разделу Директива Crawl-delay, или был опыт в прошлом.

Может вы поймете как использовать эту функцию в моём случае.

Спасибо огромное за помощь.
Страницы: 1
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
20:13 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 
15:04 Adtrafico - Правильная партнёрская сеть под бурж трафик 
19:21 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
17:32 Новая жизнь, старого форума 
17:41 DreamCash.tl - заработок на онлайн-видео. До 95% отчислений, отличный конверт! 
17:46 Проверить сайт на уязвимость 
17:44 Adsense личный опыт 
23:21 Размещу ссылки/статьи на ваш сайт | Рост ИКС | XRumer 23.0.4 StrongAI 
21:04 Помогу закрыть кредиты и долги законно! 
20:27 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 
17:20 Sectormoney.com - быстрый и удобный обменник 
16:35 Sapfirex.com - Современный сервис обмена криптовалют 
14:56 Swapper.ws - Обмен криптовалют. Быстро, выгодно, круглосуточно. 
23:48 GoogleWalker - устранение конкурентов в Google Ads | Автоматизированная система склика | АНТИБАН 
00:54 Точные прогнозы на футбол 
12:43 Куплю проигрышные букмекерские аккаунты 
04:33 Половина скидок на распродажах — фейк 
07:53 НейроБабушка наказывает мошенников 
19:59 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко 
19:57 Пятница 13-ое: VK принял радикальное решение и закрыл доступ к порно контенту 
14:57 Конгресс США заявил о лабораторном происхождении коронавируса