robots.txt для сайта рф

Сообщений: 127 Регистрация: Янв 2012

4 Августа 2017 03:52

Всем привет, ну никак не могу я разобраться с этим файлом robots.txt для сайта на кирилице рф. Может кто предложит какой нибудь вариант файла robots.txt

masterrabot

Сообщений: 1752 Регистрация: Янв 2016

4 Августа 2017 06:24

А что, для сайта на кирилице рф. robots чем-то должен отличаться от обычного robots.txt для Wordrpess?

maratmd

Сообщений: 127 Регистрация: Янв 2012

4 Августа 2017 06:29

Ну я имею ввиду пуникод

Bibik

Сообщений: 268 Регистрация: Ноя 2011

4 Августа 2017 08:35

Переводите все адреса в пуникод конвертёром, потом в ВебМастере проверяйте доступна ли страница и sitemaps боту.

instaplus.by - продвижение вашего бизнеса в Instagram
твонлайн.бел - Архив телеканалов

Froloff161

Сообщений: 51 Регистрация: Сен 2016

4 Августа 2017 16:34

Цитата
maratmd пишет: Ну я имею ввиду пуникод

Куникод

maratmd

Сообщений: 127 Регистрация: Янв 2012

6 Августа 2017 22:18

Может кто пример robots написать для сайта https://xn--80aavwspm.xn--p1ai/ может кто предложит вариант на кириллице?

Принципал

Сообщений: 1305 Регистрация: Июл 2012

6 Августа 2017 23:07

Цитата
maratmd пишет: вариант на кириллице?

Может быть нужно вместо robots.txt писать роботс.ткст?

maratmd

Сообщений: 127 Регистрация: Янв 2012

7 Августа 2017 04:50

Цитата

Принципал пишет:

Цитата
maratmd пишет: вариант на кириллице?

Может быть нужно вместо robots.txt писать роботс.ткст?

Нужен вариант для сайта с доменом рф, с использованием Punycode. Это у меня первый сайт c доменом рф, и к тому же с woocomerce

Новые темы	Объявления	Свободное общение
21:49 Как правильно покупать ссылки для поддомена? 18:51 Роскомнадзор отказал в регистрации трети блогеров-десятитысячников 12:53 где много готовых фавиконок 22:59 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 12:32 «Хлебные крошки» в адресе сайтов исчезнут из результатов поиска Google 23:27 Adfinity - Ваш надежный партнер в монетизации трафика 16:55 Инструменты для массового постинга в WordPress	01:53 Европейский эквайринг 20:19 GoogleWalker - устранение конкурентов в Google Ads \| Автоматизированная система склика \| АНТИБАН 16:39 Продам аккаунты Gmail USA IP \| Gmail MIX IP \| Outlook Old 11:07 Мобильные и Резидентные Прокси Для Соц Сетей \| 3 Гб Бесплатно 11:01 Защитим твой ресурс от блокировки Роскомнадзора 10:09 BestChange – обменивать электронную валюту можно быстро и выгодно 06:50 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка	23:52 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 07:48 США готовят закон для уничтожения пиратских сайтов во всех странах мира 02:50 Точные прогнозы на футбол 02:10 [Новая партнерка] Goldbet Partners — прямой рекламодатель одноименного казино Goldbet 21:19 С юмором по жизни! 18:15 Telegram уничтожил официальный канал легендарного российского торрент-трекера 18:19 Уникальный сервис SEO продвижения

Новые темы

Объявления

Свободное общение

21:49 Как правильно покупать ссылки для поддомена?
18:51 Роскомнадзор отказал в регистрации трети блогеров-десятитысячников
12:53 где много готовых фавиконок
22:59 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу.
12:32 «Хлебные крошки» в адресе сайтов исчезнут из результатов поиска Google
23:27 Adfinity - Ваш надежный партнер в монетизации трафика
16:55 Инструменты для массового постинга в WordPress

01:53 Европейский эквайринг
20:19 GoogleWalker - устранение конкурентов в Google Ads | Автоматизированная система склика | АНТИБАН
16:39 Продам аккаунты Gmail USA IP | Gmail MIX IP | Outlook Old
11:07 Мобильные и Резидентные Прокси Для Соц Сетей | 3 Гб Бесплатно
11:01 Защитим твой ресурс от блокировки Роскомнадзора
10:09 BestChange – обменивать электронную валюту можно быстро и выгодно
06:50 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка

23:52 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди
07:48 США готовят закон для уничтожения пиратских сайтов во всех странах мира
02:50 Точные прогнозы на футбол
02:10 [Новая партнерка] Goldbet Partners — прямой рекламодатель одноименного казино Goldbet
21:19 С юмором по жизни!
18:15 Telegram уничтожил официальный канал легендарного российского торрент-трекера
18:19 Уникальный сервис SEO продвижения

31.01.2024 20:42	Как закрыть от индексации некоторые блоки сайта
28.12.2022 12:15	Посоветуйте Бесплатный плагин Интернационализации сайта для Вордпресс
15.08.2021 17:39	Как убрать смещение меню сайта
15.08.2020 20:48	SEO-оптимизация сайта на WordPress
28.07.2020 19:39	Как всунуть в фон сайта