Я vebmaster24.ru]тут попробовал незнаю как повлияет:confused:
Robots.txt
Robots.txt, Нужно ли это в Robots.txt
|
#16
4 Ноября 2012 17:03
|
|
#17
9 Ноября 2012 06:09
кто скажет это нормально или нет
User-agent: * Disallow: /engine/go.php Disallow: /engine/download.php Disallow: /user/ Disallow: /newposts/ Disallow: /statistics.html Disallow: /*subaction=userinfo Disallow: /*subaction=newposts Disallow: /*do=lastcomments Disallow: /*do=feedback Disallow: /*do=register Disallow: /*do=lostpassword Disallow: /*do=addnews Disallow: /*do=stats Disallow: /*do=pm |
|
#18
9 Ноября 2012 11:37
Disallow: /page/ Disallow: */page/* Disallow: /page/*/ Disallow: /*/page/* Disallow: /*/*/page/* Disallow: /tags/ Disallow: /tags/*/ |
|
#19
16 Ноября 2012 23:28
Александр Семенов, если не править двиг, Ваш robots.txt слегка подправить можно:
User-agent: * Disallow: /engine/go.php Disallow: /engine/download.php Disallow: /tags/ Disallow: /user/ Disallow: /favorites/ Disallow: /lastnews/ Disallow: /newposts/ Disallow: /*?* Disallow: /statistics.html Disallow: /rules.html Disallow: /dle-rules-page.html Sitemap: site.ru/sitemap.xml Host: site.ru Все, что в Google-панели лишнего вылезает можно плавно в роботс добавлять... У Алаева эта тема действительно очень хорошо разжевана. |
|
#20
17 Ноября 2012 00:55
|
|
#21
17 Ноября 2012 15:26
|
|
#22
20 Ноября 2012 16:02
User-agent: *
Disallow: /*print Disallow: /*userinfo Disallow: /2012/ Disallow: /index.php?subaction=userinfo Disallow: /backupurl.php Disallow: /admin.php Disallow: /language/ Disallow: /templates/ Disallow: /tags/ Disallow: /newposts/ Disallow: /upgrade/ Disallow: /backup/ Disallow: /engine/ Disallow: /user/ Disallow: /favorites/ Disallow: /index.php?do=register Disallow: /?do=lastcomments Disallow: /statistics.html Disallow: /index.php?do=addnews Disallow: /index.php?do=feedback Disallow: /index.php?do=lostpassword Disallow: /index.php?do=pm Disallow: /index.php?do=stats Disallow: /index.php?do=search Disallow: /index.php?subaction=newposts Disallow: /index.php?do=rules Sitemap: serials-tv.com/sitemap.xml User-agent: Yandex Disallow: /*print Disallow: /*userinfo Disallow: /2012/ Disallow: /index.php?subaction=userinfo Disallow: /backupurl.php Disallow: /admin.php Disallow: /language/ Disallow: /templates/ Disallow: /tags/ Disallow: /newposts/ Disallow: /upgrade/ Disallow: /backup/ Disallow: /engine/ Disallow: /user/ Disallow: /favorites/ Disallow: /index.php?do=register Disallow: /?do=lastcomments Disallow: /statistics.html Disallow: /index.php?do=addnews Disallow: /index.php?do=feedback Disallow: /index.php?do=lostpassword Disallow: /index.php?do=pm Disallow: /index.php?do=stats Disallow: /index.php?do=search Disallow: /index.php?subaction=newposts Disallow: /index.php?do=rules Host: serials-tv.com/ Sitemap: serials-tv.com/sitemap.xml User-agent: MediaPartners-Google Allow: / User-agent: YandexDirect Allow: / теперь так сделал |
|
#23
20 Ноября 2012 18:45
Вот что бы не мучатся с этим Robots почитайте статью alaev.info/blog/post/3900 - Правильный robots.txt для DLE – какой он?
|
|
#24
20 Ноября 2012 20:05
я к примеру сделал так: Disallow: /index.php* и искренее верю, что вот так делать не прийдётся в роботсе:
Disallow: /index.php?do=addnews Disallow: /index.php?do=feedback Disallow: /index.php?do=lostpassword Disallow: /index.php?do=pm Disallow: /index.php?do=stats Disallow: /index.php?do=search |
|
#25
20 Ноября 2012 23:35
Disallow: /index* После этого исчезли также страницы вида site/index/razdel/stranica.html Остались site/razdel/stranica.html |
|
#26
20 Ноября 2012 23:40
User-agent: *
Disallow: /a/ Disallow: /stat/ Disallow: /index/1 Disallow: /index/2 Disallow: /index/3 Disallow: /index/5 Disallow: /index/7 Disallow: /index/8 Disallow: /index/9 Disallow: /panel/ Disallow: /admin/ Disallow: /secure/ Disallow: /informer/ Disallow: /mchat Disallow: /search Disallow: /shop/order/ Sitemap: http://sp-torrent.ru/sitemap.xml Sitemap: http://sp-torrent.ru/sitemap-forum.xml Sitemap: http://sp-torrent.ru/sitemap-shop.xml у меня вот такой робот,нормальный?  |
|
#27
24 Ноября 2012 22:22
А у тебя вообще то ucoz а не dle
|
||||
Похожие темы:
| 28.12.2024 00:49 | Маркированный список выходит за пределы статьи |
| 28.12.2024 00:44 | Модуль DLE |
| 11.12.2024 17:41 | Цифровые часы - модуль DigitalWatch |
| 16.10.2024 14:50 | Плагин Telegram posting |
| 10.03.2024 22:41 | Как сделать 301 редирект на https |
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Апдейты
- Яндекс ИКС
23.11.2023 (448 дней назад) - Яндекс выдача
05.09.2024 (161 день назад)
Доска объявлений
Купить / Продать
Работа / Услуги
Интересные темы
Интернет новости
Инструменты