Робот ТХТ для юкоса
Страницы: 1
Робот ТХТ для юкоса
Посмотрите пожалуйста. Что не так в этом роботе?:
Цитата
Строка 1: {\rtf1\ansi\ansicpg1251\deff0\deflang1049{\fonttbl{\f0\fswiss\fcharset204{\*\fname Arial;}Arial CYR;}} Синтаксис не распознается
Строка 2: {\*\generator Msftedit 5.41.15.1507;}\viewkind4\uc1\pard\f0\fs20 User-agent: *\par Синтаксис не распознается
Строка 3: Disallow: /a/\par User-agent не указан
Строка 4: Disallow: /stat/\par User-agent не указан
Строка 5: Disallow: /index/1\par User-agent не указан
Строка 6: Disallow: /index/2\par User-agent не указан
Строка 7: Disallow: /index/3\par User-agent не указан
Строка 8: Disallow: /index/5\par User-agent не указан
Строка 9: Disallow: /index/7\par User-agent не указан
Строка 10: Disallow: /index/9\par User-agent не указан
Строка 11: Disallow: /panel/\par User-agent не указан
Строка 12: Disallow: /admin/\par User-agent не указан
Строка 13: Disallow: /secure/\par User-agent не указан
Строка 14: Disallow: /informer/\par User-agent не указан
Строка 15: Disallow: /mchat/\par User-agent не указан
Строка 16: Disallow: /search/\par User-agent не указан
Строка 17: Disallow: /board/\par User-agent не указан
Строка 18: Disallow: /blog/2011\par User-agent не указан
Строка 19: Disallow: /blog/2010\par User-agent не указан
Строка 20: Disallow: /blog/2011-8\par User-agent не указан
Строка 21: Disallow: /blog/2010-12\par User-agent не указан
Строка 22: Disallow: /blog/2011-9\par User-agent не указан
Строка 23: Disallow: /blog/2011-9-7\par User-agent не указан
Строка 24: Disallow: /blog/2010-12-09\par User-agent не указан
Строка 25: Disallow: /blog/2010-12-9\par User-agent не указан
Строка 26: Disallow: /blog/2010-12-13\par User-agent не указан
Строка 27: Disallow: /blog/2011-8-9\par User-agent не указан
Строка 28: Disallow: /blog/2011-8-18\par User-agent не указан
Строка 29: Disallow: /blog/2011-8-15\par User-agent не указан
Строка 30: Disallow: /blog/2011-7-31\par User-agent не указан
Строка 31: Disallow: /blog/2011-12-25\par User-agent не указан
Строка 32: Disallow: /blog/2011-08-15\par User-agent не указан
Строка 33: Disallow: /blog/2011-12-26\par User-agent не указан
Строка 34: Disallow: /blog/2011-09-30\par User-agent не указан
Строка 35: Disallow: /blog/2011-4-20 \par User-agent не указан
Строка 36: Disallow: /blog/2011-8-22\par User-agent не указан
Строка 37: Disallow: /blog/2011-08-09\par User-agent не указан
Строка 38: Disallow: /blog/2011-8-7\par User-agent не указан
Строка 39: Disallow: /blog/2011-11-26\par User-agent не указан
Строка 40: Disallow: /blog/2011-09-05\par User-agent не указан
Строка 41: Disallow: /blog/2011-8-17\par User-agent не указан
Строка 42: Disallow: /blog/2011-8-19\par User-agent не указан
Строка 43: Disallow: /blog/2011-08-20\par User-agent не указан
Строка 44: Disallow: /blog/2011-08-17\par User-agent не указан
Строка 45: Disallow: /blog/2010-11-28\par User-agent не указан
Строка 46: Disallow: /blog/2011-08-19\par User-agent не указан
Строка 47: Disallow: /blog/2011-08-22\par User-agent не указан
Строка 48: Disallow: /blog/2010-11\par User-agent не указан
Строка 49: Disallow: /blog/2011-7\par User-agent не указан
Строка 50: Disallow: /blog/2011-08-18\par User-agent не указан
Строка 51: Disallow: /blog/2010-12-07\par User-agent не указан
Строка 52: Disallow: /blog/2011-9-5\par User-agent не указан
Строка 53: Sitemap: http://stroyorlovsky.ru/sitemap.xml\par Обнаружены данные о действительном файле Sitemap
Строка 55: } Синтаксис не распознается
Вот так должно быть:

Код
User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat/
Disallow: /search/
Disallow: /board/
Disallow: /blog/2011
Disallow: /blog/2010
Disallow: /blog/2011-8
Disallow: /blog/2010-12
Disallow: /blog/2011-9
Disallow: /blog/2011-9-7
Disallow: /blog/2010-12-09
Disallow: /blog/2010-12-9
Disallow: /blog/2010-12-13
Disallow: /blog/2011-8-9
Disallow: /blog/2011-8-18
Disallow: /blog/2011-8-15
Disallow: /blog/2011-7-31
Disallow: /blog/2011-12-25
Disallow: /blog/2011-08-15
Disallow: /blog/2011-12-26
Disallow: /blog/2011-09-30
Disallow: /blog/2011-4-20 
Disallow: /blog/2011-8-22
Disallow: /blog/2011-08-09
Disallow: /blog/2011-8-7
Disallow: /blog/2011-11-26
Disallow: /blog/2011-09-05
Disallow: /blog/2011-8-17
Disallow: /blog/2011-8-19
Disallow: /blog/2011-08-20
Disallow: /blog/2011-08-17
Disallow: /blog/2010-11-28
Disallow: /blog/2011-08-19
Disallow: /blog/2011-08-22
Disallow: /blog/2010-11
Disallow: /blog/2011-7
Disallow: /blog/2011-08-18
Disallow: /blog/2010-12-07
Disallow: /blog/2011-9-5

Sitemap: http://stroyorlovsky.ru/sitemap.xml
Host: www.stroiteh.ucoz.ru
Да тут всё не так!
Во-первых, начинаться должен так
User-agent: *
Затем поубирайте со всех позиций \par
Алексей Жмуренко,

Код
User-agent: *
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Sitemap: http://stroyorlovsky.ru/sitemap.xml


вот и всё что нужно
Цитата
Explos1on пишет:
Алексей Жмуренко,
Код
 User-agent: *
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Sitemap: http://stroyorlovsky.ru/sitemap.xml 

вот и всё что нужно

А то что у меня темы в блогах повторяются сначало по названию, потом по датам это нормально?
Цитата
Алексей Жмуренко пишет:
нормально?

нет не нормально !
Алексей Жмуренко,
Цитата
Алексей Жмуренко пишет:
А то что у меня темы в блогах повторяются сначало по названию, потом по датам это нормально?

а роботс тут причем?
Цитата
Explos1on пишет:
Алексей Жмуренко,
Цитата
Алексей Жмуренко пишет:
А то что у меня темы в блогах повторяются сначало по названию, потом по датам это нормально?

а роботс тут причем?

Я имею ввиду вот так:
/blog/tekhnologija_kladki_sten/2010-12-07-11
/blog/2010-12-07-11
Это одна и та же страница и все страницы так дублируются в поиске гугла.
Не может ли из-за этого идти фильтр?
Цитата
Алексей Жмуренко пишет:
Это одна и та же страница и все страницы так дублируются в поиске гугла.
Не может ли из-за этого идти фильтр?
Помоему может, переделайте роботс, закройте ненужные дубли.
Качественный [url=bit.ly/1p1iAF5]рерайт/копирайт/перевод[/URL] | [url=http://bit.ly/1sB6rK0]Создание сайтов[/URL] за еду! Дёшево!
а если в веб мастере яндекс проверяешь роботс
Снизу показывает вот это
Строка

1-5 User-agent: *
Disallow: /panel/
...
Sitemap: http://сайт.ru/sitemap.xml
Это нормально?
User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/

Sitemap: sp-torrent.ru/sitemap.xml
Sitemap: sp-torrent.ru/sitemap-forum.xml
Sitemap: sp-torrent.ru/sitemap-shop.xml


а у меня так вот,это норм??
Цитата
Роман петров пишет:
User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/

Sitemap: sp-torrent.ru/sitemap.xml
Sitemap: sp-torrent.ru/sitemap-forum.xml
Sitemap: sp-torrent.ru/sitemap-shop.xml


а у меня так вот,это норм??

У вас нормальный Robots.txt
http://ucoz24.com

[URL=http://www.cy-pr.com/forum/f79/t56206/m612828]Продажа рекламных мест / Написание обзоров сайтов / Размещение ваших готовых статей[/URL]
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
23:14 Мошенники-копирайтеры 
22:47 Заработок на Биржах ссылок 2025 
22:02 Стоит ли добавлять сайт в Rambler топ 100? 
21:48 Индексация страниц 
12:34 YouTube усиливает борьбу с азартными играми: новые ограничения вступят в силу 19 марта 
12:29 Традиционные сайты на грани вымирания из-за ИИ-поисковиков 
22:10 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 
23:03 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 
22:12 Продам обменник криптовалюты, а также новый обменник под ключ с обучением. Скидки на скрипты обменника 
21:31 GoogleWalker - устранение конкурентов в Google Ads | Автоматизированная система склика | АНТИБАН 
20:49 North Capital - Выгодные курсы BTC, USDT, RUB 
17:28 Купить дедики Абузоустойчивые сервера Аренда сервера Купить dedic Дедик Дешево vps vds сервера дедики на SSD! 
13:13 BIGPROXY.SHOP - Резидентные Ротационные Backconnect Proxy USA EUROPA MIX [Безлимитный трафик] 
04:16 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
00:03 Точные прогнозы на футбол 
22:59 Блогер А4 на грани: компания Влада Бумаги объявляет о банкротстве 
22:54 Думскроллинг превращает нас в зомби. Как вернуть мозг к жизни? 
22:23 Telegram не смог провести различие между требованиями автократических режимов и законными демократическими запросами 
21:43 Потеря для пиратского интернета: основатель Pirate Bay погиб! 
12:22 Финансовая диета: самозапрет на покупки может стать реальностью 
13:15 С юмором по жизни!