Помогите составить robots.txt
Страницы: 1
Помогите составить robots.txt, Ребята помогите составить правильный robots.txt
[FONT=Tahoma, Arial, Helvetica, sans-serif]У меня вот такой robots.txt.[/FONT]
[FONT=Tahoma, Arial, Helvetica, sans-serif]User-agent: Yandex
Disallow: /engine/go.php
Disallow: /engine/download.php
Disallow: /user/
Disallow: /newposts/
Disallow: /statistics.html
Disallow: /*subaction=userinfo
Disallow: /*subaction=newposts
Disallow: /*do=lastcomments
Disallow: /*do=feedback
Disallow: /*do=register
Disallow: /*do=lostpassword
Disallow: /*do=addnews
Disallow: /*do=stats
Disallow: /*do=pm

Что посоветуйте убрать? 
Просто яндекс добавляет в исключенные страницы вот такое /engine/download.php=1? и т.д, это ничего страшного и не как не влияет на выдачу? 
[/FONT]
Цитата
Дмитрий Кизенко пишет:
Просто яндекс добавляет в исключенные страницы вот такое /engine/download.php=1?
У меня такая же фигня лезит





Это без разницы, он просто указыват на страницы, которые, благодаря директивам robots.txt не индексируется, однако он знает об их наличии.Это не ошибка.
Цитата
Дмитрий Кизенко пишет:
Просто яндекс добавляет в исключенные страницы вот такое /engine/download.php=1? и т.д, это ничего страшного и не как не влияет на выдачу?
Конечно ничего страшного - это убирает дубли страниц, и не дает этому мусору выйти в серп.
Если что пишите, помогу разобраться
Всем большое спасибо. Тему можно закрывать...
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
10:47 Бесплатные посещения 
20:17 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 
15:01 Adtrafico - Правильная партнёрская сеть под бурж трафик 
18:41 Продвижение заграницей 
22:36 Стоит ли добавлять сайт в Rambler топ 100? 
16:34 Работает ли ссылочное продвижение 2019 – 2020? 
16:22 Adsense личный опыт 
10:34 Ссылочное продвижение ваших сайтов статьями, профилями и комментариями, качественно и по доступным ценам!!! 
05:30 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
19:14 Продам аккаунты Gmail USA IP | Gmail MIX IP | Outlook Old 
16:42 Sectormoney.com - быстрый и удобный обменник 
14:34 CoinCapital  
12:59 Чек номеров на наличие Telegram/ Filter (checking) numbers Telegram 
01:09 лиды, Forex, криптовалюта, гэмблинг, чарджбэк, лидогенерация 
05:42 Точные прогнозы на футбол 
21:04 Есть ли альтернатива Адсенсу и РСЯ? 
22:39 Кому выплата РСЯ пришла и какого числа? 
12:12 Linux - это максимальная свобода 
20:09 Сколько сейчас стоит наполнение ИМ? 
12:43 Куплю проигрышные букмекерские аккаунты 
04:33 Половина скидок на распродажах — фейк