Правильно ли составлен robots.txt

Сообщений: 161 Регистрация: Дек 2012

1 Мая 2013 12:20

Здравствуйте, правильно ли составлен роботс для всех поисковых систем.

User-agent: Googlebot

Disallow: /*print
Disallow: /*userinfo
Disallow: /index.php?subaction=userinfo
Disallow: /igro.php
Disallow: /language/
Disallow: /templates/
Disallow: /tags/
Disallow: /newposts/
Disallow: /upgrade/
Disallow: /backup/
Disallow: /engine/
Disallow: /user/
Disallow: /favorites/
Disallow: /index.php?do=register
Disallow: /?do=lastcomments
Disallow: /statistics.html
Disallow: /index.php?do=addnews
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?do=pm
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /index.php?subaction=newposts
Disallow: /index.php?do=rules
Disallow: /2013/

User-agent: Yandex
Disallow: /*print
Disallow: /*userinfo
Disallow: /index.php?subaction=userinfo
Disallow: /igro.php
Disallow: /language/
Disallow: /templates/
Disallow: /tags/
Disallow: /newposts/
Disallow: /upgrade/
Disallow: /backup/
Disallow: /engine/
Disallow: /user/
Disallow: /favorites/
Disallow: /index.php?do=register
Disallow: /?do=lastcomments
Disallow: /statistics.html
Disallow: /index.php?do=addnews
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?do=pm
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /index.php?subaction=newposts
Disallow: /index.php?do=rules
Disallow: /2013/
Host: www.site.ru
Sitemap: http://www.site.ru/sitemap.xml

repente

Сообщений: 270 Регистрация: Фев 2012

1 Мая 2013 12:26

User-agent: *
Allow: */uploads
Disallow: /cgi-bin
Disallow: /wp-
Disallow: *?s=
Disallow: *?attachment_id=
Disallow: */feed
Disallow: /xmlrpc.php
Sitemap: http://www.site.ru/sitemap.xml
Host: www.site.ru

Вот такой юзай

http://goo.gl/6JBDP $500 за 1000 трафика

Цепляй Крепче

Сообщений: 74 Регистрация: Апр 2013

1 Мая 2013 13:00

Смотря для какой CMS/конструктора Роботс. Для uCoz совсем не то нужно, для Длешки тоже тяжеловатый будет, разве что на Дмуле попрет, но... слишком тяжкий Роботс, делайте попроще, совет выше поможет, но.. делайте не в точности также, а аналогично, эскпереминтируйте и все будет ровно smile;)

Цитата
Учатся на своих ошибках и недочетах

Coder

Сообщений: 10437 Регистрация: Мар 2013

1 Мая 2013 13:01

Посмотрите:

robotstxt.org.ru/robotsexclusion/guide

✓ Проверенные скрипты и полезности для сайта

✓ Курсы

✓ Сервис временных ссылок

Цепляй Крепче

Сообщений: 74 Регистрация: Апр 2013

1 Мая 2013 13:04

P.S. почитайте Даваку или Шакина, поможет, однозначно!

Ak Zhol

Сообщений: 161 Регистрация: Дек 2012

1 Мая 2013 13:08

Движок DLE

Алексей SP

Сообщений: 1464 Регистрация: Сен 2012

1 Мая 2013 15:34

Цитата
Ak Zhol пишет: правильно ли составлен роботс для всех поисковых систем

не правильно

Открой свой магазин за 5 минут, их товары, их обслуживание, с тебя только клиенты >>> РЕГИСТРАЦИЯ <<<
Скрин выплат по запросу.
Рефералам помощь.

Цепляй Крепче

Сообщений: 74 Регистрация: Апр 2013

1 Мая 2013 15:36

Цитата
Алексей SP пишет: не правильно

КЭП

Алексей SP

Сообщений: 1464 Регистрация: Сен 2012

1 Мая 2013 15:40

Цитата
Цепляй Крепче пишет: КЭП

ага

По теме: - где другие боты?

Новые темы	Объявления	Свободное общение
18:48 АП Яндекс ИКС 16.11.2023 18:42 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 15:41 Как раскрутить сайт? 14:21 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 13:46 Инструменты для массового постинга в WordPress 17:05 LGaming - экосистема и партнерская программа в gambling и betting вертикалях 18:33 SharkBoss - партнёрская программа для монетизации ЛЮБЫХ видов трафика (включая спам).	18:09 Блокировка сайтов, форумов, контента 13:08 Продам аккаунты Gmail USA IP \| Gmail MIX IP \| Outlook Old 12:21 Прием платежей для HIGH RISK \| Прием платежей без сайта 12:21 Услуги рассылки Вконтакте 12:18 Услуги рассылки Viber\|Whatsapp\|IMO. 12:06 Рассылка в TELEGRAM \|Большой опыт работы \| Любые тематики \| Лучшая конверсия 10:07 ProtonPlus.co - выгодный и быстрый обмен, работаем круглосуточно	01:32 Точные прогнозы на футбол 18:19 Уникальный сервис SEO продвижения 14:45 (затёр сайт) 19:39 Куплю проигрышные букмекерские аккаунты 21:04 Есть ли альтернатива Адсенсу и РСЯ? 22:39 Кому выплата РСЯ пришла и какого числа? 12:12 Linux - это максимальная свобода

Новые темы

Объявления

Свободное общение

18:48 АП Яндекс ИКС 16.11.2023
18:42 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options
15:41 Как раскрутить сайт?
14:21 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика!
13:46 Инструменты для массового постинга в WordPress
17:05 LGaming - экосистема и партнерская программа в gambling и betting вертикалях
18:33 SharkBoss - партнёрская программа для монетизации ЛЮБЫХ видов трафика (включая спам).

18:09 Блокировка сайтов, форумов, контента
13:08 Продам аккаунты Gmail USA IP | Gmail MIX IP | Outlook Old
12:21 Прием платежей для HIGH RISK | Прием платежей без сайта
12:21 Услуги рассылки Вконтакте
12:18 Услуги рассылки Viber|Whatsapp|IMO.
12:06 Рассылка в TELEGRAM |Большой опыт работы | Любые тематики | Лучшая конверсия
10:07 ProtonPlus.co - выгодный и быстрый обмен, работаем круглосуточно

01:32 Точные прогнозы на футбол
18:19 Уникальный сервис SEO продвижения
14:45 (затёр сайт)
19:39 Куплю проигрышные букмекерские аккаунты
21:04 Есть ли альтернатива Адсенсу и РСЯ?
22:39 Кому выплата РСЯ пришла и какого числа?
12:12 Linux - это максимальная свобода

21.05.2019 14:56	Поддомены сайта: как правильно настроить?
25.01.2018 14:07	Привет помогите пожалуйста проанализировать лендинг в структуре сайта с тчк зрения сео: правильно ли я сделал?
03.01.2018 16:45	почему яндекс не правильно выдает DESCRIPTION
17.12.2017 17:38	Как правильно продвигать сайт ссылками ?
06.11.2017 23:10	Кулинарный сайт - яндекс не видит микроразметку, хотя сделано все правильно