Подскажите правильный ли Robots

Сообщений: 20 Регистрация: Мар 2015

8 Июля 2017 22:02

Здравствуйте! Подскажите правильный ли robots

User-agent: *
Disallow: /engine/
Disallow: /*page/*
Host: сайт.ru
Sitemap: сайт/sitemap.xml

Спасибо

Принципал

Сообщений: 1305 Регистрация: Июл 2012

8 Июля 2017 22:42

Цитата
Андрей Рыбаков пишет: правильный ли robots

Идеально правильный
правда тут ошибка
вместо Sitemap: сайт/sitemap.xml нужно Sitemap: сайт.ru/sitemap.xml

Изменено: Принципал - 8 Июля 2017 22:44

WGN

Сообщений: 9887 Регистрация: Июн 2015

9 Июля 2017 06:40

Цитата
Андрей Рыбаков пишет: Здравствуйте! Подскажите правильный ли robots User-agent: * Disallow: /engine/ Disallow: /page/ Host: сайт.ru Sitemap: сайт/sitemap.xml Спасибо

Можно и побольше что то добавить

✔(НЕЙРОСЕТЬ) Качественные живые посетители на ваш сайт, блог, канал — Бесплатно!!!

♛ЛУЧШИЙ ПРОВЕРЕННЫЙ и САМЫЙ НЕДОРОГОЙ ХОСТИНГ: АКЦИИ!

Egor2014 Сообщений: 447 Регистрация: Дек 2015	#4 9 Июля 2017 09:09 Это DLE если я не ошибаюсь? В силу особенностей движка, там действительно можно еще добавить. Все зависит от того, что еще нужно спрятать. У меня был однажды в работе сайт на DLE, так там фильтры поиска приходилось еще скрывать. А вообще, чем меньше содержимое файла, тем проще для поисковика (где-то на серче вычитал).

Новые темы	Объявления	Свободное общение
12:53 где много готовых фавиконок 07:52 Роскомнадзор отказал в регистрации трети блогеров-десятитысячников 07:51 Как правильно покупать ссылки для поддомена? 22:59 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 12:32 «Хлебные крошки» в адресе сайтов исчезнут из результатов поиска Google 23:27 Adfinity - Ваш надежный партнер в монетизации трафика 16:55 Инструменты для массового постинга в WordPress	11:07 Мобильные и Резидентные Прокси Для Соц Сетей \| 3 Гб Бесплатно 11:01 Защитим твой ресурс от блокировки Роскомнадзора 10:09 BestChange – обменивать электронную валюту можно быстро и выгодно 06:50 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 03:42 A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc 22:23 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 21:54 Приватные мобильные прокси Украины безлимиты 4g UA Водафон Киевстар Лайф	07:48 США готовят закон для уничтожения пиратских сайтов во всех странах мира 02:50 Точные прогнозы на футбол 02:10 [Новая партнерка] Goldbet Partners — прямой рекламодатель одноименного казино Goldbet 21:19 С юмором по жизни! 18:15 Telegram уничтожил официальный канал легендарного российского торрент-трекера 18:19 Уникальный сервис SEO продвижения 14:45 (затёр сайт)

Новые темы

Объявления

Свободное общение

12:53 где много готовых фавиконок
07:52 Роскомнадзор отказал в регистрации трети блогеров-десятитысячников
07:51 Как правильно покупать ссылки для поддомена?
22:59 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу.
12:32 «Хлебные крошки» в адресе сайтов исчезнут из результатов поиска Google
23:27 Adfinity - Ваш надежный партнер в монетизации трафика
16:55 Инструменты для массового постинга в WordPress

11:07 Мобильные и Резидентные Прокси Для Соц Сетей | 3 Гб Бесплатно
11:01 Защитим твой ресурс от блокировки Роскомнадзора
10:09 BestChange – обменивать электронную валюту можно быстро и выгодно
06:50 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка
03:42 A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc
22:23 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств
21:54 Приватные мобильные прокси Украины безлимиты 4g UA Водафон Киевстар Лайф

07:48 США готовят закон для уничтожения пиратских сайтов во всех странах мира
02:50 Точные прогнозы на футбол
02:10 [Новая партнерка] Goldbet Partners — прямой рекламодатель одноименного казино Goldbet
21:19 С юмором по жизни!
18:15 Telegram уничтожил официальный канал легендарного российского торрент-трекера
18:19 Уникальный сервис SEO продвижения
14:45 (затёр сайт)

28.01.2018 18:19	Подскажите как исправить
26.12.2017 23:23	Подскажите как сделать так в DLE XFlist
02.04.2017 15:13	https на DLE - правильный редирект в файле .htaccess
21.05.2016 10:45	Какой {title} будет правильный в названии материала?
12.04.2016 15:16	Подскажите с установкой DLE