Блог Яндекса для вебмастеров

В Вебмастере появился приоритетный переобход Sitemap

Пост в архиве.

Поменяли структуру сайта или создали совсем новый проект — как сделать так, чтобы поиск быстрее узнал о новых страницах? Просто воспользоваться новой функциональностью Яндекс.Вебмастера — переобход Sitemap.

После получения этого сигнала мы постараемся переобойти вашу карту сайта как можно быстрее. Использовать эту функцию можно до 10 раз за месяц для одного сайта.

Всегда рады новым идеям по улучшению сервиса
Команда Яндекс.Вебмастера

181 комментарий
Хоть что-то полезное сделали...
steam-cheat,
и не говори.

В целом-то инструмент бесполезный, кому нужны эти диагностики.
seo-mentor,
Вы серьезны?
Иван Дестроев
14 сентября 2017, 15:00
Переобход это хорошо, а насколько быстро выбро в выдачу обновленной информации будет?
Елена Першина
Сотрудник Яндекса14 сентября 2017, 15:42
Иван Дестроев,
будем стараться обходить максимально быстро, но точное время пока гарантировать не можем. 
Иван Дестроев
14 сентября 2017, 15:55
Елена Першина,
Спасибо за скоростной ответ. Немного другой вопросик.
А насколько быстро обновляется в поисковике страница, которую обошел поисковый робот? - хотя бы примерно
Елена Першина,
а вы не могли бы сделать для начала стабильное обновление поисковой выдачи?
Елена Першина,
Вы можете сделать апдейты хотя бы через день???
Елена Першина,
поддерживаю !

когда будут стабильно обновлять выдачу?
Елена Першина,
какой смысл от этого всего если выдача не обновляется нормально и стабильно?
Принцип такой же как с "Переобходом страниц" где робот гарантировано обойдёт ?
Или просто напросто сигнал, а робот уже сам решит надо ему это или нет ?
Иван Дестроев
14 сентября 2017, 15:28
Кирилл,
Ну если сайт изначально робот воспринял не активно, наверняка только сигнал даст и все.
Елена Першина
Сотрудник Яндекса14 сентября 2017, 15:42
Кирилл,
Сигнал, но мы будем очень стараться переобходить такие карты сайтов максимально быстро. 
Сергей Ковалев
14 сентября 2017, 15:16
Отличная идея
Спасибо. Можете точнее рассказать, как будет работать этот инструмент? Это будет просто сигнал и не более или робот точно переобойдет все страницы, как в инструменте Переобход страниц?
Нужно ли добавлять страницы в Переобход страниц, если используется приоритетный переобход Sitemap?
Иван Дестроев
14 сентября 2017, 15:30
anton.shaban,
Переобход страниц робот делает в течении 1 суток. По крайней мере в моем случае переобход составлял от 15 минут до 3 часов.
Елена Першина
Сотрудник Яндекса14 сентября 2017, 15:44
anton.shaban,
Да, это не взаимозаменяемый инструменты. Да, это сигнал, но мы правда будем стараться обходить такие sitemap максимально быстро, как и ответила выше. 
Елена Першина,
у нас было 4 миллиона страниц полезного контента яндекс за целый 1 год эти страницы не обошел и карта сайта была валидная 
Osya,
4 миллиона я конечно утрирую но проект был очень большой и яндекс его не проиндексировал полностью
Елена Першина,
о каком переобходе карты сайта можно вести речь ??
Обновлено 14 сентября 2017, 16:33
Елена Першина
Сотрудник Яндекса14 сентября 2017, 19:33
Osya,
У нас есть в индексе много полезных сайтов подобного объема. Возможно, в вашем случае были вопросы к качеству сайта или проблемы к доступу для из индексирования. 
Павел Гречко
14 сентября 2017, 15:26
Молодцы хорошая функция

Обновлено 14 сентября 2017, 15:26
хоть что-то :)
Спасибо за новшество!
Иван Доброславин
14 сентября 2017, 15:38
Справа сверху в Вебмастере "Уведомления". Открыл одно, написано страницца такая-то
Старый статус: В поиске
Новый статус: Редирект

Означает ли, что теперь страница не в поиске? (изменял title страницы)
Елена Першина
Сотрудник Яндекса14 сентября 2017, 15:44
Иван Доброславин,
Теперь в поиске должны быть страница, на которую идёт редирект. Если редиректа нет - нужно разбираться. 
Вся информация указана вот здесь: https://yandex.ru/support/webmaster/indexing-options/sitemap.html#sitemap__update
Иван Доброславин
14 сентября 2017, 15:56
На форуме сёрчэнжин сказали, что Яндекс и другие ПС негативно относятся к частым изменениям контента на странице. Так ли это или это фантазии оптимизаторов?
Я часто после добавления новой статьи дополняю её, корректирую, какие-то ссылки удаляю, какие-то добавляю. (период - от 1 дня до недли-двух). Изменяю тайтл и дескрипшн. После изменений делаю переобход страниц. Стоит ли опасаться санкций от Яндекса?
Елена Першина
Сотрудник Яндекса14 сентября 2017, 16:22
Иван Доброславин,
Нет, не стоит. Было бы очень странно, если бы мы в нарушении давали что-то, связанное с частотой обновлений страниц. 
Елена Першина,
Буквально год назад я изменял страницы 10-и летней давности, где было по пару предложений. Перелопатил штук 100 и БАЦ, фильтр. В техподдержке сказали "генерируемый контент". Это не странно?
Елена Першина
Сотрудник Яндекса22 сентября 2017, 12:40
Проводник,
Это точно не за то, что вы их изменили, а за то, что на них появилось. Если вы стали туда вставлять спамный контент - это другая история, совершенно не связанная с нормальным обновлением страниц. 
Елена Першина,
Это именно из-за ваших алгоритмов, потому что вставлялась пояснительная записка из проекта целиком.
А, я забыл, что для вас технические тексты это спам, и ваши мегаинтелектуальные алгоритмы считают их текстом не для людей.
Проводник,
Больше того, я написал в техподдержку и бан сразу сняли. И вообще я никогда не заморачивался на количество слов и фраз в тексте, однако, судя по внедрению хваленого алгоритма, технические тексты вы распознавать НЕ УМЕЕТЕ. 
Все что вам надо это грамотно написанный рерайт школьников, пример тому fb.ru 
Елена Першина
Сотрудник Яндекса26 сентября 2017, 13:07
Проводник,
Укажите номер тикета, буду рада посмотреть, что там было на самом деле :) 
Елена Першина,
Я буду вам очень благодарен, если вы расскажете почему в июле у меня рухнула посещаемость 201006039006876, в ЯВ ничего не написано, только догадки и загадки
Елена Першина,
Прошу помочь, пожалуйста, что произошло с сайтом?
Елена Першина
Сотрудник Яндекса1 октября 2017, 13:46
Проводник,
Посмотрела, как и ожидалось, ничего подобного не было. Было низкое качество многих страниц,  о чем мои коллеги и написали. Это не нарушение, это просто страницы, которым тяжело конкурировать, из-за чего они могут выпадать из поиска. Но вы не переживайте, ели нарушение по какому-то признаку у вас будет обнаружено - обязательно сообщим об этом в Вебмастере. 
Елена Першина,
Где посмотреть на эти страницы? Какие именно и по каким урл, это на форуме или где? Может не правильные урл ваш бот схватил, которые уже закрыты к индексу. из 10 тыс страниц, вдруг появилось много некачественных, где они были 9 лет?
Елена Першина,
Была проблема с тем, что дубль сайта был доступен через неправильный урл без картинок, но почему не исчезла проблема, когда  я все убрал? Прошло 2 месяца!
Елена Першина,
Получается потеряв позиции, обратного эффекта нет, так у вас было кстати, всегда
Елена Першина
Сотрудник Яндекса2 октября 2017, 15:08
Проводник,
Чтобы восстановить позиции, нужно устранить проблему. Качество страниц - понятие достаточно относительное, в том числе связанное и с сайтами-аналогами. Если другие сайты могут на аналогичные вопросы теперь отвечать лучше, то нет смысла хранить те страницы в базе, которые по этому запросу показаны все равно не будут. Страницы, выпадающие из поиска из-за качества, можно найти в удаленных страницах (Страницы в поиске).
Елена Першина,
Проблема устранена еще 2 месяца назад. На сайте в 80% случаях (на форуме цитаты из нормативной документации) публикуются материалы, которые нет на других сайтах. Я говорю о том, что в вашей системе позиции никогда не восстанавливаются. НИКОГДА! Почитайте серч, узнаете много интересного.


По поводу страниц, все "недостаточно качественные" и дубли запрещены в роботс или стоит редирект. Почему посещаемость никак не может вернутся?
If
Игорь Шелякин
14 сентября 2017, 15:57
Супер, спасибо Вам ;) Мне сейчас очень это кстати !
Елена Першина
Сотрудник Яндекса14 сентября 2017, 16:35
Игорь Шелякин,
Стараемся! 
Сегодня же опробую.
Звучит как очень полезная штука.

Елена, подскажите. Какая мощность сейчас у этой функции, как быстро она может справиться с sitemap'ом из 35'000 ссылок? 

Пытаюсь понять, следует ли нам дробить sitemap еще сильнее, чтобы эффективно использовать новую функцию? Сейчас разделение sitimap на xml выстроены по бэк-энд принципу, модульному ; а не по структуре сайта. Простыми словами: у нас 100500 регионов с товарами. Но в sitemap есть xml не регионов (куда вошли бы товары и категории, услуги и т.п.), а отдельно xml с перечнем категорий регионов, отдельно с перечнем вообще всех товаров, вне зависимости от региона) и т.п.
Елена Першина
Сотрудник Яндекса14 сентября 2017, 16:36
Денис,
Про мощь не очень поняла, но 35000 ссылок это даже меньше лимита одного sitemap, так что проблем не вижу. 
Елена Першина,
Под мощностью подразумевал скорость обхода.


То есть сколько времени потребуется на обход страниц xml-файла, если в нем 35'000 урлов (при условии, что все они корректны и отдают 200). 
Елена Першина,
Елена ,добрый день.
Хотел спросить а если у меня есть страницы и на них не идут ссылки ни внутри сайта ни с других ресурсов. Будет достаточно чтобы они присутствовали в файле sitimap  ? или всеже желательно чтобы была ссылка внутри сайта?
Елена Першина
Сотрудник Яндекса18 сентября 2017, 22:31
yabooboodoo,
Для индексирования достаточно, чтобы они были в Sitemap. 
Интернет-агентство «Иллюминатор»
14 сентября 2017, 17:25
ну наконец-то!!!


может пора вернуть Внутренние ссылки (хотя бы, как был ранее при проверке статуса страницы)
Прекрасная новость, спасибо за обновление. Надеюсь скорость обновления выдачи также "будет получать сигнал" об ускорении. Прекрасная новость, спасибо
Анастасия К.
14 сентября 2017, 18:29
Такой вопрос - обходит только новые и непроиндексированные страницы в сайтмапе или все?
к примеру, если нет изменений в структуре, но есть контентные изменения на сайте можно ли использовать?
Яндекс исправляется в лучшую сторону? или это лишь первая попытка))) Мне кажется этой функции народ ждал 17 лет.
Обновлено 14 сентября 2017, 19:27
Большое спасибо, очень удобно, только вчера структуру поменял, теперь можно 2е недели не ждать!!
Отличная идея, главное чтобы страницы в выдачу в итоге попадали если они ок, иначе смысла нет
Добрый вечер!
В Вебмастере есть инструмент - "Страницы в поиске", их можно скачать в файле. Скажите насколько там актуальная информация? Просто на одном сайте больше месяца какие то страницы в robots закрыл, а в файле они до сих пор со статусом Searchable.


Еще такое предложение, можете объединять поддомены домена, как например зеркала http и https.Чтобы они не так много места занимали.
И можно сделать фильтр "Показывать по" 20, 40, 60 и тд. А то когда куча сайтов не удобно пролистывать.
Елена Першина
Сотрудник Яндекса14 сентября 2017, 22:06
Igor Z.,
Актуальная, мы ежедневно там обновления показываем. Нужно проверять, почему в поиске - напишите в поддержку Вебмастера, пожалуйста. 
За новый  инструмент огромное спасибо.

Скорей всего этот инструмент будет полезен только после смены структуры сайта или, как выше было анонсировано, для новых сайтов. 

Для сайтов, которые уже проиндексированы полностью, не плохо было бы заставить правильно работать  If-Modified-Since, чтобы робот не ходил по старым страницам.  А то бот Яндекса выдаёт Код статуса HTTP 304 Not Modified, но страницу всё равно переобходит. Зачем?
windows.bel,
А Вы поставьте чуть выше скрипт, чтобы показать раньше дату и время модификации страницы, и проверьте, чтобы размер страницы в вебмастере при проверке составлял 0 Б. В этом случаи, получив роботом от http ответ 304, не станет далее обращаться к странице, а вернется к странице тогда, когда получит ответ 200.
direct.tyom,
При проверке отдаёт код  304 но размер страницы НЕ 0 Б, однако робот всё равно сканирует все страницы. 

У меня это делает не скрипт, а плагин.
windows.bel,
Весь смысл моего предыдущего поста был в том, чтобы отдавать 0 Б. 
Ведь если ваш скрипт, плагин и т.п. не выполняется первым, то все-равно бот обращается к странице, и тут уже хочешь не хочешь обходит страницу, поскольку робот узнает о том что страница не изменялась слишком поздно...
direct.tyom,
Теперь смысл понятен, только пилить плагин только для Яндекса не хочется.  Хочется чтобы боты Яши также ,как и остальные боты это понимали.
windows.bel,
Если смысл понятен, то вы должны понимать, что во всех случаях, и со всеми ботами, которые учитывают последнюю модификацию, будет аналогичная ситуация...
Не совсем понятно, когда воспользоваться этой функцией.


-Когда в карте сайта добавилась новая страница?
-Или когда страницы, который в карте обновились?
Елена Першина
Сотрудник Яндекса18 сентября 2017, 11:36
direct.tyom,
Когда есть необходимость как можно быстрее переобойти Sitemap. Это может быть необходимо по разным причинам. 
Елена Першина,
Понял, спасибо большое за ответ )
Cервис временно недоступен. Обратитесь немного позже.

:)  переобходчики спать ушли? 
Обновлено 15 сентября 2017, 00:25
Упс. Не про то написал. Смотри комментарий выше. Просто одноимённая закладка у вас в меню. Сейчас всё заработало! :) 
Неплохое нововведение. Посмотрим, насколько быстро работает. Думаю не стоит быть столь критичными во мнениях. Люди работают для улучшения поисковой системы - это уже радует
FERMA — рекламное агентство
15 сентября 2017, 05:20
Новшество конечно не плохое, вот только если бы сам вебмастер работал. Что с ним случилось то? Почему не открывается??? 
У меня тоже не работает вебмастер
bentaks,
Да у меня тож не работает ток письмо пришло -10000 страниц из поиска
Вот это реально полезная веСчь, ура товариСчи !!!!
Удалённый пользователь
15 сентября 2017, 10:08
В панели Вебмастера для моих сайтов такой функции пока не появилось(. Кроме того, перехожу по ссылке из этой заметки - переобход Sitemap., там тоже вижу не то, что на скриншоте.
Елена Першина
Сотрудник Яндекса18 сентября 2017, 11:42
Оно для всех открыто. Если у вас по какой-то причине нет этой функциональности (что очень странно), то просто напишите нам в поддержку - будем разбираься. 
здравствуйте! можно как то запретить яндексу анализировать sitemap для google?
Чего нельзя было эту полезную мелочь внедрить лет эдак пару назад?:)
Александр,
Они делали новый дизайн к кинопоиску
У меня в яндекс вебмастере уже больше года структура  сайта с момента его создания, вообще не соответствует реальной структуре. Может хоть теперь станет всё на свои места, очень хотелось бы
Спасибо вам большое! Читаете мои мысли! 
Ненужно будет ждать несколько недель, а всего лишь около 3 дней Супер!!!
Антон Ануфриев
15 сентября 2017, 18:09
Молодцы ребятки, спасибо за новый инструмент!
В файле Sitemap появилось много ошибок, я не стал разбираться в причинах, а просто удалил его и удалил его из robots.txt назначил проверку в разделе диагностика сайта. Там написано - Проверьте файлы Sitemap и внесите необходимые исправления.  Проверяли уже 2 раза и пишете ответ - Проблема актуальна Проблема известна с 05.09.2017. Проверено: 12.09.2017.
Как может быть Проблема актуальна если файла нет?
Эта ваша новая функция окажется такой же бесполезной?
SM2026,
... продолжение, Сделал на этот файл  Sitemap приоритетный переобход Sitemap так он у меня в Используемые файлы Sitemap сейчас пишет Редирект на 404. 
Создаётся впечатление, что вы не улучшаете свою систему, а только создаёте нам проблемы. Не помню сколько времени прошло но помню что раньше удалив файл Sitemap с сайта  и удалив его из robots.txt то в Вебмастере он удалялся без проблем, а сейчас фиг удалишь, да ещё и ошибки пишет.
Обновлено 18 сентября 2017, 06:12
Елена Першина
Сотрудник Яндекса18 сентября 2017, 18:49
SM2026,
Возможно, проблема как раз в том, что его у вас просто нет. 
Елена Першина,
Так вот и ответьте почему я его удалил с сайта и из robots.txt, а удалить из Вебмастера не могу? Раньше таких проблем не было.
Елена Першина,
Так вот и ответьте почему я его удалил с сайта и из robots.txt, а удалить из Вебмастера не могу? В Используемые файлы Sitemap Источник и Найдены в robots.txt - файл который я удалил и из robots.txt и сайта. Раньше таких проблем не было.
Елена Першина,
так вы ответите или нет, почему не возможно удалить файл Sitemap из Вебмастера? Или вас мой вопрос как обычно бывает поставил в тупик?
Evgeny MAG77-RU Рации
17 сентября 2017, 03:45
Очень мало информации о недостатках сайтов. Или точнее, о сравнительных недостатках. Ведь в рекомендациях в разделе "Помощь" содержится намного больше рекомендаций, чем проверяет "сервис Вебмастер".  Это направление надо развивать. По анализу текстового наполнения вообще ничего нет. А с сентября Яндекс ощутимо ускорился, изменения видит и выдаёт в поиск уже в течении недели. Я подозреваю, что о изменениях сообщает скрипт метрики, который у всех установлен. Если он вдруг не делает этого, то он мог бы это делать автоматический.   
почему слово БИОКОИН яндекс игнорирует, а гугл нет? это разве улучшение? 
КАК здесь можно вообще что-либо искать?
Елена ,добрый день.
Хотел спросить а если у меня есть страницы и на них не идут ссылки ни внутри сайта ни с других ресурсов. Будет достаточно чтобы они присутствовали в файле sitimap ? или всеже желательно чтобы была ссылка внутри сайта?
yabooboodoo,
Меня не Елена зовут ) но интересно, будет достаточно для чего? Для индексации достаточно в sitemap
Елена Першина
Сотрудник Яндекса19 сентября 2017, 13:38
yabooboodoo,
Отвечала ранее на ваш аналогичный вопрос. Да, для индексирования достаточно Sitemap (и чтобы страницы были открыты для индексирования).
Подскажите пожалуйста а по нашему сайту http://cupis2.ru. Важный вопрос по карте сайта. Зашла недавно в "Страницы в поиске" в вебмастере и увидела что у меня стоит noindex на например эту страницу.  http://cupis2.ru/sitemap-pt-post-2017-06.html
Нормально ли это? 


Обновлено 18 сентября 2017, 14:37
stolnik7em,
Так а у вас и стоит noindex. http://joxi.ru/52ab3dOcGZYdxA Если вы хотите, чтобы страница была в поиске - это не нормально.
stolnik7em,


Если мета-теги не указаны, робот считает, что они имеют положительное значение (index, follow, archive). Если робот обнаруживает конфликт между тегами, выбирается именно положительное значение.


Поиск реально работает)
Елена Першина
Сотрудник Яндекса19 сентября 2017, 14:09
stolnik7em,
Нормально или нет - решать вам. Вообще, если обычная страница закрыта noindex, она в поиск не попадает. Но если речь идёт о карте сайта (внимательно посмотрите на пример), то закрытие файла sitemap с помощью "X-Robots-Tag: noindex" не повлияет на его обработку.  
Да, действительно, на заголовок не смотрел, там действительно есть: X-Robots-Tag: noindex


Мой ответ был относительно этой части кода:
<meta name="robots" content="noindex,follow"/><style type="text/css">
Круто, ещеб большой сайт сделать)
он предлагает отправить старую версию карты сайта: http://prntscr.com/gmxl72

хоть я и добавила новых страниц
Круизы&Путешествия
20 сентября 2017, 14:09
Ситуация: есть индексный файл sitemap, в нем указаны тома sitemap по 5000 url - как рекомендовано в спецификации. Индексный указан в robots.


При заходе в раздел "Переобход sitemap" показывает, что индексный последний раз забирался  16.09.2017, 15:08 а  "рабочие" - вообще не загружались (список есть, даты пустые). 19 числа первый раз использую инструмент - подаю "рабочие" в этом списке на переобход. 


Проходят сутки. 


Цифры в интерфейсе НЕ изменились.


Тот же сайтмап в Гугл работает, цифры индексации увеличиваются.


Что-то пошло не так, или приоритетная загрузка Сайтмапа  требует больше суток? Как оперативно после загрузки Сайтмапа адреса попадут в очередь индексации и будут ли отображаться здесь данные о обходе самих страниц?
Евгений Молдовану
20 сентября 2017, 18:18
Реально полезно. После перехода на https быстро переиндексировал сайт.
Круизы&Путешествия
20 сентября 2017, 20:08
Евгений Молдовану,
как быстро переобход сайтмапов произошел? 
Евгений Молдовану
23 сентября 2017, 03:44
Круизы&Путешествия,
2-3 дня
Должно очень пригодится!
Артём Сосновский
21 сентября 2017, 09:37
Добрый день!


Вами было заявлено переобход Сайтмапа в течение 3 дней, однако переобходит сайтмап https://anspb.ru/sitemap.xml уже четвертый. Отправлен на переобход 17.09.2017.
Сайтмап не забит под завязку, там всего 23589 страниц.
Цитирую из вебмастера:"Робот прочтет файл в течение 3 дней."
Обновлено 21 сентября 2017, 09:40
Круизы&Путешествия
21 сентября 2017, 10:06
Артём Сосновский,
а где это написано про "Робот прочтет файл в течение 3 дней."???
Артём Сосновский
21 сентября 2017, 11:59
Круизы&Путешествия,

Индексирование --> файлы sitemap
Источник (можно отправить на переобход еще Х)
Наведите на отправить на переобход и увидите всплывающее окно
Цитата:"Нажмите значок справа от URL источника, чтобы отправить файл Sitemap на переобход, не дожидаясь автоматической загрузки. Робот прочтет файл в течение 3 дней.
Использовать функцию можно до 10 раз в месяц для одного хоста."


Это же написано в https://yandex.ru/support/webmaster/indexing-options/sitemap.html#sitemap__update
leebaron1,
мои искренние поздравления! хотел бы я оказаться на твоем месте.
Не могу понять будет ли делаться переобход страницы, если корневой каталог установлен в отдельной папке www.site.ru/wp-folder/page.html?
И вообще будет ли индексироваться сайт, если robots.txt находиться в www.site.ru/robots.txt, а сам каталог сайта в www.site.ru/wp-folder/ ?
Или надо как то это прописывать в robots.txt, что бы делал обход каталога www.site.ru/wp-folder/ ?
Елена Першина
Сотрудник Яндекса26 сентября 2017, 13:25
Alexandr S,
Да, все нормально. 
Марина Шпехт
25 сентября 2017, 00:10
У меня не открывается сайт http//vk.com/narachivanie_volos_vrn
Елена Першина
Сотрудник Яндекса26 сентября 2017, 13:29
Марина Шпехт,
А он существует?
Марина Шпехт
30 сентября 2017, 15:49
Елена Першина,
да существовал больше 3-хлет а теперь пропал и не запрашивается в поисковике
У меня sitemap_index.xml а пишет в вебмастере - Обнаружены ошибки в файлах Sitemap  и пишет кучу ошибок на image. Скажите это нормально?
Елена Першина
Сотрудник Яндекса26 сентября 2017, 14:22
Ig Trifon,
Да, на ошибку image можно не обращать внимание. 
А как узнать, что робот обошел sitemap ?

Елена Першина
Сотрудник Яндекса26 сентября 2017, 14:37
kreslo.kem42,
Дата посещения файла роботом в разделе "файлы sitemap"обновится.
Полезная штука. Яндекс молодцы!
Чот вебмастер колбасит не по детски! реально уже недели две показывает типо на сайте http://maxtextures.ru не прописаны description, хотя они уже давно прописаны (сайту примерно месяц), все время отправляю на перепроверку а он все выдает ошибку типо на всех страницах нету мета описания! подскажите как мне быть???
Обновлено 4 октября 2017, 12:50
Как можно быстрее? У меня уже более суток не переобошол 
Отправил на переобход 2 файла Sitemap.txt и Sitemap.xml, переобходил 3 дня и то только файл  Sitemap.txt обновился.
В коде была ошибка и для многих страниц сайта неверно была указана каноническая страница. Переобход sitemap поможет заново обойти страницы и исправить статусы "неканоническая"?
Елена Першина
Сотрудник Яндекса9 октября 2017, 16:30
vbelbel,
Страницы то ведь не новые, тут скорее история про переобход страниц. Но там ограничение на количество.
Елена Першина,
В целом кол-во таких страниц около 100. Наверное, как вы и написали, за несколько дней можно попробовать исправить переобходом. Спасибо.
Неизвестный тег html
Указанный тег не должен встречаться в данном контексте
стр.поз.
2

html
У меня нет в коде данного тега!!!!!!!

первые две строчки скопировал

<?xml version="1.0" encoding="UTF-8"?>
<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">


Обратная связь с тех. поддержкой не работает.


Елена Першина
Сотрудник Яндекса24 октября 2017, 12:02
windows.bel,
1. Как вы пытаетесь связаться с поддержкой. 2. Можно ссылку на Sitemap, которая не проходит валидацию. Если не хотите присылать - то ответьте только на первый вопрос, далее будем общаться через поддержку. 
Елена Першина,
http://столы-стулья31.рф/sitemap
Елена Першина
Сотрудник Яндекса24 октября 2017, 14:15
windows.bel,
Вы пытаетесь отдавать Sitemap в html, а не в формате sitemap, в этом и проблема. 
Елена Першина,
Спасибо, сделал так  столы-стулья31.рф/sitemap.xml хотя раньше замечаний не было и по sitemap.html
Елена Першина
Сотрудник Яндекса24 октября 2017, 15:43
windows.bel,
Ну, тут  вопрос куда какой формат добавляете и как сайт его отдает. Но рада, что теперь все ок!
В Я.Вебмастере некорректно отрабатывает проверка Sitemap-а. Если в параметрах URL присутствует более 11 символов %2C (запятая), то URL признается некорректным и в панели вебмастера выводится ошибка. 
Пример: http://xn--80ae4ahbaold.xn--p1acf/sitemap.xml
Т.е. при наличии 11 запятых в сумме, в передаваемых параметрах - всё ОК, 12 и больше - в вебмастере получаем ошибку в сайтмапе: Неправильный адрес страницы. 
Хотя адрес рабочий и сайт по нему отвечает.


Как так-то?

Обновлено 2 ноября 2017, 06:21
Елена Першина
Сотрудник Яндекса2 ноября 2017, 15:48
motorsale,
а можно в поддержку Вебмастера пример напрямую прислать, чтобы мы все по конкретной ситуации проверили? Так мы сможем понять, что в момент проблемы было. 
Елена Першина,
а подскажите где я могу найти эту поддержку Вебмастера? По всем ссылкам на Поддержку в Вебмастере меня отсылает в вопросник и помощь. Обратной формы для отправки вопроса я не нашел.
Елена Першина
Сотрудник Яндекса3 ноября 2017, 17:07
motorsale,
Она там есть, но нужно пройти дерево вопрос-ответ до конца. Это сделано специально, что помочь сформулировать вопрос и хоть как-то локализовать проблему. 
Евгений Кумарыч
24 ноября 2017, 15:40
Что-то у меня переобход с ноября так и переобходит  хотя сайт не такой уж огромный по контенту
Елена Першина
Сотрудник Яндекса26 ноября 2017, 19:59
Евгений Кумарыч,
Скорее всего, проблема какая-то.  Можете в поддержку Вебмастера написать, проверим. Кстати, сейчас все еще ноябрь. 
Обновлено 26 ноября 2017, 20:00
Евгений Кумарыч
26 ноября 2017, 20:10
Кстати это уже напасть какая-то   переобход был с 5 ноября по 25 ноября  для небольшого по объёму сайта 20 суток его обходили и только на 21 день смог обойти робот Яндекса :)
Он видимо устал за сайты обходить :)
Большое спасибо! Вроде проблема решена .
А у меня это колёсико не активно. Жму - ни чего не происходит. И удалить крестика нету. Пробовал в хром и файрфоксе, думал в браузере дело. Последняя загрузка Sitemap была почти две недели назад.
Елена Першина
Сотрудник Яндекса29 ноября 2017, 23:12
bronewell,
А можете в поддержку вопрос продублировать - ссылка внизу страницы Вебмастера. Мы проверим, в чем причина. Сейчас инструмент работает, какой-либо массовой проблемы я с ним не вижу.
Елена Першина,
Колесико стало  активно, отправил файл на переобход. 
Крестик удаления есть у файлов добавленных вручную. У файлов найденых в robots.txt нет такого крестика. 
Ну и ладно, пока не хочу удалять.
Обновлено 30 ноября 2017, 13:27
отправил, 7 дней жду обхода! это нормально? 
Елена Першина
Сотрудник Яндекса17 апреля 2018, 21:18
Ольга,
если сама карта сайта за эти 7 дней не отображается как обработанная, то нет, ненормально. Если за эти 7 дней не все страницы попали в поиска - да, нормально. Если проблема первая, то в поддержку Вебмастера напишите через форму обратной связи - внизу страницы сервиса. Так сможем проверить, в чем проблема. 
Елена Першина,
Смотрите, я немного подчистил сайт, удалил часть страниц и решил ускорить обход. Отправил Sitemap 10.04.18  на перееобход и до сих пор  он не обработался, а уже 17.04.18 . Как тогда сформулировать проблему? Спасибо. 
Елена Першина
Сотрудник Яндекса18 апреля 2018, 16:35
Ольга,
Так и отправить сюда: https://yandex.ru/support/webmaster-troubleshooting/site-indexing/sitemap-not-processed.html
Сайт только не забудьте указать - и зайти под логином, под каким сайт подтверждён.
Елена Першина,
спасибо, уже написал. 
sitemap с 7 сентября не обновляется, мы удаляли файл и заливали снова, затем отправили его на переобход 3 октября (последние изменения). Статус обновления сайтмапа как был 7 сентября, так и остался, в чем может быть проблема? Как ее решить? Жизненно важный вопрос.
platon
Сотрудник Яндекса17 октября 2018, 12:56
talapai,
пожалуйста, напишите нам https://yandex.ru/support/webmaster-troubleshooting-info/site-indexing/sitemap-not-processed.html , разберемся.
platon,
спасибо за ссылку, я написала. Также до этого обращалась, но ответа не получила. Надеемся на помощь.
А если я поставил 301 редирект на перенос домена и поставил на перенаправленный сайт Sitemap, что тогда?
Елена Першина
Сотрудник Яндекса5 мая 2019, 23:00
free-person,
а за что именно опасаетесь, не вижу пока проблемы в вашем описании. Но на всякий случай вы всегда можете просто написать в поддержку Вебмастера и спросить, все ли ок по настройке сайта по этому вопросу. Так можно снять все опасения. 
Спасибо.. :))
Елена Першина
Сотрудник Яндекса5 мая 2019, 23:00
WotCheats.ru,
любим радовать  ) 
Если это просто сигнал, тогда в среднем - за какое время примерно обновляются обычные sitemap'ы без этой функции?
Обновлено 6 мая 2019, 23:05
Елена Першина
Сотрудник Яндекса7 мая 2019, 11:25
DarkStack,
1 раз в две недели. Как правило быстрее, но в целом придерживаемся того, что файл обрабатывается не реже одного раза в две недели.
Ленинградец
12 мая 2019, 09:55
На кой ляд показывать  "В Вебмастере появился приоритетный переобход Sitemap" то, чему более 2х лет. Или это новый баг-фича-спам?
platon
Сотрудник Яндекса13 мая 2019, 11:50
Ленинградец,
где показывать?
Елена Першина
Сотрудник Яндекса14 мая 2019, 14:14
Ленинградец,
мы по всем разделам хотели показать те функциональности, которые вы еще не использовали. Поэтому такая табличка и появилась. 
Ленинградец
14 мая 2019, 14:35
Елена Першина,
Елена, спасибо! Я об это уже лет 20 знаю (с момента как Илья С. начал парсить при помощи мапы ).
Ленинградец
12 мая 2019, 09:58
И по статистике, гугл съедает не по кнопке обновить|отправить|и тд, а по дате изменения файла и размеру. - эти данные ваш яндекс бот должен вместе с запросом robots.txt делать, но видимо ресурсы слабоваты или не актуальна свежесть рунета!
platon
Сотрудник Яндекса13 мая 2019, 11:51
Ленинградец,
можете поподробнее сказать, что именно не так и где?
Ленинградец
14 мая 2019, 14:22
platon,
Платон, добрый час!
При входе в вебмастер показывает строку вверху о новом в блоге. Так вместо нового (было 12.05.2019) показывет на блог 2017 года. 


Касаемо самого "сервиса" отправки карты сайта на переобход - согласитесь, нелепый элемент в вебмастере и лишний код для Яндекса (проверка скриптом - кликнул-не кликнул, постановка в очередь, подсчет количества отправки и т.д., при этом сам файл может оставаться неизменным.) Эту информацию можно и ДОЛЖНО получать ботом и исходя из правил(алгоритм очереди: достоверности данных (ссылок, ластмода, експарес , ченжа и т.д) по истории предыдущих парсов. 


Сам бот естественно это делает(может быть!), но на практике вижу, что обращение к файлу идёт не соответственно правилам(или точнее рекомендованным Яндексом передаваемым данным) и в итоге в самой мапе можно оставлять только голую ссылку без доп инфы, что естественно будет требовать больших ресурсов на своевременный парс рунета или делать поиск.Яндекс отстающим от даже китайских ботов.

platon
Сотрудник Яндекса15 мая 2019, 07:43
Ленинградец,
файлы sitemap обновляются нашим роботом и без использования кнопки переобхода: как правило, каждый файл обрабатывается один раз в две недели.
Наши роботы при обходе сайта учитывают данные из тегов в файле sitemap, включая данные из тегов <lastmod>, <priority> и пр., однако обход страниц планируется в соответствии с очень большим числом факторов, поэтому гарантировать, что обход страниц будет происходить только в соответствии с указаниями в файле sitemap, мы не можем.
Из-за сообщения о возможной ошибке отправил файл sitemap на переобход 2 июня, сегодня 17-е и файл не переобойден, отправил его на переобход повторно.
Если же добавлять файл sitemap через инструмент переобход страниц, то робот переобходит его за несколько часов, но сообщение по поводу возможной ошибки, которой инструмент проверки  sitemap не находит, остается в прежнем виде.
Обновлено 17 июня 2019, 09:55
Елена Першина
Сотрудник Яндекса17 июня 2019, 11:17
MIL,
можете нам в поддержку написать, проверим. 
Толи сани не едут, то ли Яндекс себя не узнает...
В вебмастере висит ругательство, что карта сайта с ошибками. Начинаю искать - что не так.
Вроде все правильно, а валидатор красным цветом матюкается. Начинаю всяко на сервисах генерить и валидатору показывать, а он знай свое - красным цветом показывает. Тут я не вытерпел и скормил валидатору то, чего сам хочет:
<?xml version="1.0" encoding="UTF-8"?>
<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
<url>
<loc>http://www.example.com/page1.html</loc>
<lastmod>2005-01-01</lastmod>
<changefreq>monthly</changefreq>
<priority>0.8</priority>
</url>
...
</urlset>
А он мне: - я не я и это не мое.
В общем, пример карты сайта из вебмастера валидатором признается не корректным.
Как жить-то дальше?
platon
Сотрудник Яндекса18 февраля 2020, 08:23
Валерий,
пожалуйста, напишите моим коллегам в поддержку https://yandex.ru/support/webmaster-troubleshooting/site-indexing/sitemap-not-processed.html , все подскажут
У меня такая проблема в лимите у меня 6 обходов ест но не работает 4 исползовал написанно что 6 раз еше можно обходит но не работает чем проблем ?
platon
Сотрудник Яндекса6 апреля 2020, 11:21
Jalol97.saidow,
пожалуйста, напишите моим коллегам в поддержку: https://yandex.ru/support/webmaster/error-dictionary/sitemap.html , посмотрят, в чем дело.
Александр
27 мая 2020, 13:12
Подскажите пожалуйста YandexBot/3.0 теперь не отправляет If-Modified-Since ?
Всегда ответ  200, хотя  тут https://webmaster.yandex.ru/tools/server-response/   с If-Modified-Since  ответ 304 Not Modified 

platon
Сотрудник Яндекса28 мая 2020, 05:03
Александр,
инструмент проверки работает корректно, в его работе изменений не было. Стоит проверить, возможно, на сайте действительно не настроен http-код ответа 304.
Если же вы уверены, что такой код настроен корректно, пожалуйста, напишите заявку в службу поддержки. Отправить заявку можно через раздел: https://yandex.ru/support/webmaster/troubleshooting/site-indexing.html#site-indexing
Александр
28 мая 2020, 09:57
platon,
Спасибо написал, да я уверен что  304 Not Modified работает корректно, другие роботы получают 304 , через https://webmaster.yandex.ru/tools/server-response/  тоже все корректно   304 Not Modified отдает 0 байт. 
Александр
28 мая 2020, 13:30
Александр,
Отвелили:
К сожалению, поддержка данного заголовка у нашего робота сейчас отключена, поэтому вы можете видеть такие результаты проверки. В любом случае, как-либо негативно повлиять на индексирование страниц этот заголовок не должен.
Здравствуйте, скажите, почему -то в Вебмастере у меня два файла sitemap, хотя я не загружал дополнительный, уточните, является ли это ошибкой?
platon
Сотрудник Яндекса21 января 2022, 14:40
Centeres124,
по этому вопросу напишите, пожалуйста, в службу поддержки через форму обратной связи, мои коллеги проверят, в чем может быть дело: https://yandex.ru/support/webmaster/troubleshooting.html
--
Пожалуйста, оцените наш ответ
 ну да ! google 470000 страниц  и yandex  647 страниц   к 2025 году яндекс уйдет в некуда