Вебмастер
Содержимое сайта и партнерские программы
Партнерские программы
Безопасность сайта

Кириллические URL

Кириллические доменные имена и адреса страниц индексируются нашим роботом наравне с остальными, но есть ряд случаев, когда необходимо использовать их в cконвертированном виде, так как этого могут требовать определенные стандарты:

  • Использование кириллицы запрещено в файлах robots.txt и http-заголовках сервера.

    Для указания имен доменов используется Punycode. Адреса страниц записываются в кодировке, соответствующей кодировке текущей структуры сайта.

    Пример файла robots.txt:

    #Неверно:
    User-agent: Yandex
    Disallow: /корзина
    Host: интернет-магазин.рф
    
    #Верно:
    User-agent: Yandex
    Disallow: /%D0%BA%D0%BE%D1%80%D0%B7%D0%B8%D0%BD%D0%B0
    Host: xn----8sbalhasbh9ahbi6a2ae.xn--p1ai
  • Рекомендуется использовать одинаковую кодировку для страниц сайта и кириллических адресов в его структуре, так как встретив ссылку href="/корзина" на странице с кодировкой, например, UTF-8 робот сохранит ее именно в этой кодировке, а значит она должна быть доступна по адресу "/%D0%BA%D0%BE%D1%80%D0%B7%D0%B8%D0%BD%D0%B0".

Оцените статью
Спасибо за ваш отзыв!