9 Дек

Прописываем кириллический (IDN) домен в robots.txt ?

Автор: "СТРОГИЙ"

Статья краткая. Но возможно таки найдется народ кто не прошарил тему эту самостоятельно. А точнее КАК прописать в robots.txt кириллический (IDN) домен. Как правильно это сделать… К примеру как наш «строгий.net». Как указать в директиве «Host» и какой домен? Пуникодом, или рус. буквами? На самом деле ответ прост… в качестве вещ. доков можете сами проверить. Прописать IDN домен для директивы «Host» необходимо пуникодом… т.е. вида Host xn—c1akdrjfh.net где «xn—c1akdrjfh.net» имя Вашего домена в пуникоде. А проверить можете на странице «Анализа Robots.txt» в интерфейсе веб-мастера на яндексе. Загрузив сперва файл с Вашего сайта, а потом проверив на наличие ошибок. Если у Вас указано в роботсе Host вашсайт.net то яндекс укажет на ошибку. При загрузке и проверке файла с Host xn—c1akdrjfh.net ошибки не будет.

Comments are closed.