Цитата |
---|
Руслан Валиев пишет:
добавил вот эти вещи Disallow: /index.php/* Disallow: /index.php/component/search/* гуглу вообще пофиг на роботс, индексируется все подряд, хотя в панели он уже около 600 страниц исключил, PS в панели вебмастера я нашел на себя ссылки с сайта, который вообще запрещен к индексированию. так то. |
а разве при исключении index.php/* не исключается автоматом index.php/component/*?
ну и гугл вроде реагирует на роботс, у меня категории на вп через него заблочены, так в панельке отображаются "Ошибки сканирования - Заблокирован файлом robots.txt"