Robots
Страницы: 1
Robots, Почти все странички заблокированы../
Привет!
У меня вопрос, вчера было около 500 страниц заблокированных через robots.txt
я создал новый (в вебмастере гугл) залил на сайт... сегодня 1580 заблокировано.. как так?
как сделать robots.txt что бы не было заблокированных страниц? smile:confused:
Нужно внятнее описывать. Не понятно совсем что ты хочешь.
Если тебе нужно чтоб ПС вообще не блокировали никакие страницы сайта, то снеси запреты в роботсе.
А если как ты говоришь, создал новый роботс, а он наблокировал ещё больше страниц, то значит роботс кривой.
Dymatize,

эмм.... smile:confused: я вроде бы и написал "...как сделать что бы не было заблокированных страниц..."

мой robots выглядит так

User-agent: *
Allow: /photo/
Allow: /stuff
Allow: /board
Allow: /index
Allow: /load
Allow: /dir
Allow: /search
Allow: /publ
Allow: /
Allow: /tests

User-agent: Mediapartners-Google
Allow: /photo/
Allow: /stuff
Allow: /board
Allow: /index
Allow: /load
Allow: /dir
Allow: /search
Allow: /publ
Allow: /
Allow: /tests

User-agent: Googlebot-Image
Allow: /photo/
Allow: /stuff
Allow: /board
Allow: /index
Allow: /load
Allow: /dir
Allow: /search
Allow: /publ
Allow: /
Allow: /tests


или я неправильно его сделал..? smile:ireful:
Зачем писать ботам какие именно категории открыты? они итак поймут. Если категория в роботсе не закрыта, то значит можно индексировать.
Ты лучше снеси этот бред, и просто напиши какие категории хочешь что Пс НЕ индексировали
А если хочешь что вообще всё подряд индексировали, то можешь вообще роботс снести smile:)
Изменено: Dymatize - 23 Января 2012 14:40
ааа.. ты я олень! smile:sarc:
я типо ботам помочь хотел, чтоб быстрее smile:wall: ))
я тогда удалю его нафиг)
Цитата
Dima Star пишет:
я типо ботам помочь хотел, чтоб быстрее


Бот, на то и бот, чтоб ходить самому, без помощи. Подтолкнуть его нельзя :-))) В роботсе можно только запретить что-то индексировать, но к ускорению, или замедлению это никак не относится.
А вот почему страницы блокируются гуглом, сам гугл описывает очень четко в своих Инструментах для веб-мастеров. Найдите и прочтите, очень полезно.
"ПисАть, как и пИсать, нужно, когда уже не можешь" М.М. Жванецкий.

Награды СССР
Юрий,

теперь я понял) smile:mail:
Спасибо!
блин! smile:ireful:
сегодня уже 2500 страниц заблокированы файлом роботс.тхт
но я же его удалил.. чё делать?
подождать, или?
Цитата
Dima Star пишет:
блин!
сегодня уже 2500 страниц заблокированы файлом роботс.тхт
но я же его удалил.. чё делать?
подождать, или?


удалил и не парься) жди когда повсплывают)
я нармальный, не маньяк, чесна.
пытаюсь поднять сайт о гороскопах csrtife.ru
Покажи примеры страниц, которые улетели
яндекс начал добавлять странички, после удаления "роботс" smile:help:
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
23:59 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 
13:04 DreamCash.tl - заработок на онлайн-видео. До 95% отчислений, отличный конверт! 
20:13 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 
15:04 Adtrafico - Правильная партнёрская сеть под бурж трафик 
19:21 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
17:32 Новая жизнь, старого форума 
17:46 Проверить сайт на уязвимость 
15:03 USMobileSMSBot - 
14:59 Expa24.com Обмен Криптовалют. Ввод/Вывод наличные Украина/Северный Кипр/Мир 
14:41 Продам скрипт МЛМ матрицы 
12:58 - Вечные ссылки с трастовых сайтов 2024 проверен FastTrust 
11:44 Majento SiteAnalyzer - бесплатная программа для аудита и анализа сайта 
10:01 Bitpapa.com - криптовалютный P2P-маркетплейс для безопасных сделок 
08:45 Продам 2 сайта 
22:56 Точные прогнозы на футбол 
20:09 Сколько сейчас стоит наполнение ИМ? 
12:43 Куплю проигрышные букмекерские аккаунты 
04:33 Половина скидок на распродажах — фейк 
07:53 НейроБабушка наказывает мошенников 
19:59 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко 
19:57 Пятница 13-ое: VK принял радикальное решение и закрыл доступ к порно контенту