Такое дело подскажите кто может....провермил я на днях свою джумлу с виртуал мартом и нашёл кучу дублей страниц....мне они в принципе не надо и захотел я их убрать их поиска прописав в робот txt.
собсвено мне нужно имено удалить из поиска всего три вида страниц начинающихся:
1)сайт/katalog.html?
2)сайт/index.php?
3)сайт/component/

хочу полностью убрать их и з поиска...я не долго думая погуглил быстро и прописал в роботс ткст:
Disallow: /component/
Disallow: /katalog.html?
Disallow: /index.php?

потом полазил почитал ещё немного и пришёл в некотрое замешательсво в других местах уже советовали сделать так

Disallow: /component/*
Disallow: /katalog.html?*
Disallow: /index.php?*

то есть уже со звёздочкой на конце


полез я опять искать решение в гугле нашёл где советовали вообще писать без вопроса в конце:
Disallow: /component/*
Disallow: /katalog.html*
Disallow: /index.php*

давай я опять искать, а вдругом месте уже пишут что надо писатьи без вопроса и без звёздочки в конце

Disallow: /component/
Disallow: /katalog.html
Disallow: /index.php

Хочу обратить внимание что потратил я на изучение данного вопроса пару часов облазив не один десяток форумов и везде встречаличь разные советы, а юзеры между собой ругались и спорили называя друг друга дибилами котрые ничег не смыслят в роботс тхт

в итоге я записываю в роботс ткст следующее:

Disallow: /component/
Disallow: /katalog.html
Disallow: /index.php
Disallow: /component/*
Disallow: /katalog.html?*
Disallow: /index.php?*
Disallow: /component/*
Disallow: /katalog.html*
Disallow: /index.php
Disallow: /component/
Disallow: /katalog.html?
Disallow: /index.php?

то есть со всеми возможными вариантами что мне удалось в нете найти что бы наверняка не ошибится

вообщем я уже в конец отчаялся и решил всё же спросить тут как мне исключить из поиска все страницы начинающиеся с :

Disallow: /component/
Disallow: /katalog.html?
Disallow: /index.php?

хочу заметить что таких страниц которые так начинаются у меня пару сотен

подскажите кто чем может)

сейчас еще малость поискал и нашёл http://help.yandex.ru/webmaster/?id=996567#996572


вроде бы первый раз я правильно написал всё:

Disallow: /component/
Disallow: /katalog.html?
Disallow: /index.php?

звёздочка это и так по умолчанию стоит если её не указано.