|
#1
27 Января 2013 20:43
И вопрос, будет такого плана, а вот robots.txt с версии 9.0 может пойти на версию движка 9.7 ...?
Надеюсь есть форумчане, которые с этим движком работают, может кто с подобным сталкивался.
Изменено:
SergeS - 27 Января 2013 20:44
|
|
#2
28 Января 2013 18:02
Вот правильный robots.txt для dle 9.7. Индексируются только категории и новости.
User-agent: * Allow: /uploads/posts/ Disallow: /engine/go.php Disallow: /user/ Disallow: /newposts/ Disallow: /statistics.html Disallow: /*subaction=userinfo Disallow: /*subaction=newposts Disallow: /*do=lastcomments Disallow: /*do=feedback Disallow: /*do=register Disallow: /*do=lostpassword Disallow: /*do=addnews Disallow: /*do=stats Disallow: /*do=pm Disallow: /favorites/ Disallow: /cache/ Disallow: /cgi-bin/ Disallow: /page/ Disallow: */page/* Disallow: /tags/ Disallow: /2012/ Disallow: /2013/ Disallow: /engine/ Disallow: /engine/download.php Disallow: /language/ Disallow: /templates/ Disallow: /uploads/ Disallow: /backup/ Disallow: /lastnews/ Disallow: /catalog/ Disallow: /autobackup.php Disallow: /admin.php Disallow: /banners/ Disallow: /*action=mobile$ Disallow: /do=* Disallow: /*do=* Disallow: /?* Sitemap: http://site.ru/sitemap.xml User-agent: Yandex Allow: /uploads/posts/ Disallow: /engine/go.php Disallow: /user/ Disallow: /newposts/ Disallow: /statistics.html Disallow: /*subaction=userinfo Disallow: /*subaction=newposts Disallow: /*do=lastcomments Disallow: /*do=feedback Disallow: /*do=register Disallow: /*do=lostpassword Disallow: /*do=addnews Disallow: /*do=stats Disallow: /*do=pm Disallow: /favorites/ Disallow: /cache/ Disallow: /cgi-bin/ Disallow: /page/ Disallow: */page/* Disallow: /tags/ Disallow: /2012/ Disallow: /2013/ Disallow: /engine/ Disallow: /engine/download.php Disallow: /language/ Disallow: /templates/ Disallow: /uploads/ Disallow: /backup/ Disallow: /lastnews/ Disallow: /catalog/ Disallow: /autobackup.php Disallow: /admin.php Disallow: /banners/ Disallow: /*action=mobile$ Disallow: /do=* Disallow: /*do=* Disallow: /?* Sitemap: http://site.ru/sitemap.xml Host: site.ru |
|
#3
28 Января 2013 18:36
Постеры с новостей в данном роботсе как я понимаю индексируются?
|
|
#4
30 Января 2013 19:46
Да индексируются.
|
|
#5
13 Марта 2013 15:25
Очень полезная статья по этому вопросу: _____http://alaev.info/blog/post/3900
|
|
#6
13 Марта 2013 15:29
и то же выставляется на показ в robots.txt?! |
||||
| 10.12.2020 17:57 | Вопрос по нехватке места на хостинге |
| 28.04.2020 15:30 | Вопрос про торрент |
| 12.03.2020 17:47 | [DLE Robots] Закрыть все кроме 4-х вещей |
| 04.04.2018 03:27 | Вопрос по AJAX |
| 09.07.2017 09:09 | Подскажите правильный ли Robots |
23.11.2023 (449 дней назад)
05.09.2024 (162 дня назад)
