Как запретить полную индексацию папки?

Сообщений: 25 Регистрация: Сен 2011

19 Августа 2013 03:08

В интернете много написано как запретить через робот.тхт:

Disallow: /.../

Но также пишет что поисковые системы на это не очень смотрят и все равно сканируют содержимое папок. Мне же нужно чтобы это не происходило. Как это можно правильно сделать?

Зарание благодарен за ответ!

Coder

Сообщений: 10438 Регистрация: Мар 2013

19 Августа 2013 13:36

Посмотрите:

_http://ivan.cheredov.com/%D0%B7%D0%B0%D0%BF%D1%80%D0%B5%D1%82-%D0%B8%D0%BD%D0%B4%D0%B5%D0%BA%D1%81%D0%B0%D1%86%D0%B8%D0%B8-robots-txt-htaccess/

✓ Проверенные скрипты и полезности для сайта

✓ Курсы

✓ Сервис временных ссылок

chebakka

Сообщений: 1 Регистрация: Янв 2014

17 Января 2014 15:59

Та ссылка не работает. ivan.cheredov.com/?p=23

Изменено: chebakka - 17 Января 2014 16:02

SovaBarmak85

Сообщений: 107 Регистрация: Июн 2010

17 Января 2014 19:04

можно попробовать в .htaccess по юзер агенту, а вообще ту папку кому то нада видеть из вэба? если нет то тупо поставьте права)

trustcombat

Сообщений: 95 Регистрация: Фев 2014

20 Февраля 2014 02:39

Google и Яндекс следуют правилам robots.txt. Про ошибки пишут те, кто неправильно оформил эти файлы или сменил их. Посел изменения robots.txt поисковики могут несколько месяцев не сканировать его и следовать старым правилам.

Прогоны по профилям без предоплаты trustcombat.com

Дмитрий Иванов

Сообщений: 45 Регистрация: Окт 2012

6 Марта 2014 12:02

Содержимое папок то они сканируют, но в основной индекс информация не попадает.

Мой блог о IT безопасности

Banned

Сообщений: 678 Регистрация: Мар 2014

6 Марта 2014 13:07

ЧЕрез роботс, правильно написали вроде)

продам подпись : 5$ / месяц

Александр Ковалёв Сообщений: 4 Регистрация: Апр 2014	#8 23 Апреля 2014 23:19 webmaster там есть запреты

Новые темы	Объявления	Свободное общение
21:49 Как правильно покупать ссылки для поддомена? 18:51 Роскомнадзор отказал в регистрации трети блогеров-десятитысячников 12:53 где много готовых фавиконок 22:59 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 12:32 «Хлебные крошки» в адресе сайтов исчезнут из результатов поиска Google 23:27 Adfinity - Ваш надежный партнер в монетизации трафика 16:55 Инструменты для массового постинга в WordPress	05:16 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 01:53 Европейский эквайринг 20:19 GoogleWalker - устранение конкурентов в Google Ads \| Автоматизированная система склика \| АНТИБАН 16:39 Продам аккаунты Gmail USA IP \| Gmail MIX IP \| Outlook Old 11:07 Мобильные и Резидентные Прокси Для Соц Сетей \| 3 Гб Бесплатно 11:01 Защитим твой ресурс от блокировки Роскомнадзора 10:09 BestChange – обменивать электронную валюту можно быстро и выгодно	23:52 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 07:48 США готовят закон для уничтожения пиратских сайтов во всех странах мира 02:50 Точные прогнозы на футбол 02:10 [Новая партнерка] Goldbet Partners — прямой рекламодатель одноименного казино Goldbet 21:19 С юмором по жизни! 18:15 Telegram уничтожил официальный канал легендарного российского торрент-трекера 18:19 Уникальный сервис SEO продвижения

Новые темы

Объявления

Свободное общение

21:49 Как правильно покупать ссылки для поддомена?
18:51 Роскомнадзор отказал в регистрации трети блогеров-десятитысячников
12:53 где много готовых фавиконок
22:59 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу.
12:32 «Хлебные крошки» в адресе сайтов исчезнут из результатов поиска Google
23:27 Adfinity - Ваш надежный партнер в монетизации трафика
16:55 Инструменты для массового постинга в WordPress

05:16 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка
01:53 Европейский эквайринг
20:19 GoogleWalker - устранение конкурентов в Google Ads | Автоматизированная система склика | АНТИБАН
16:39 Продам аккаунты Gmail USA IP | Gmail MIX IP | Outlook Old
11:07 Мобильные и Резидентные Прокси Для Соц Сетей | 3 Гб Бесплатно
11:01 Защитим твой ресурс от блокировки Роскомнадзора
10:09 BestChange – обменивать электронную валюту можно быстро и выгодно

23:52 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди
07:48 США готовят закон для уничтожения пиратских сайтов во всех странах мира
02:50 Точные прогнозы на футбол
02:10 [Новая партнерка] Goldbet Partners — прямой рекламодатель одноименного казино Goldbet
21:19 С юмором по жизни!
18:15 Telegram уничтожил официальный канал легендарного российского торрент-трекера
18:19 Уникальный сервис SEO продвижения