Если на странице есть сортировки и фильтрации (например, страница категории магазина или листинг агентства недвижимости), то ссылка в хлебной крошке позволяет быстро сбросить все фильтры... Читать далее
Все кириллические адреса нужно предварительно закодировать в sitemap. Например, с помощью punycode. В robots.txt и консоли указать ссылку на карту, опять же закодировав всю кириллицу... Читать далее
Дело не в сокращении ссылок как таковом, а в адекватности наличия ссылки в описании. Если ссылка не нужна и используется для чего-то, что противоречит правилам Ютуба, то тут не важно... Читать далее
Как таковой панацеи от ботов нет. Они были, есть и будут просачиваться на сайт постоянно. АнтиДДОС сервисы тоже не помогут вам в этом.
Вы можете сделать следующее:
1. Запретить... Читать далее
Вам понадобится специализированное ПО. Это умеет делать Ahrefs и Netpeak Spider. Если хочется бесплатно, то можно попробовать выделить контрольную группу из разных типов страниц, а в... Читать далее
Атрибута ссылки rel=nofollow будет достаточно. Если это ссылки, которые оставляют пользователи в комментариях а-ля ссылка в имени профиля, то можете дополнительно подключить редиректные... Читать далее