Блог Яндекса для вебмастеров

Яндекс.Поиск для сайта: новая технология индексирования

28 мая 2015, 15:25

Яндекс.Поиск для сайта переходит на новую технологию - SaaS-поиск, которая будет обеспечивать максимальную полноту и повышенную скорость индексирования для подтвержденных сайтов.

Как вы могли заметить, последние полгода мы не очень часто радовали вас значительными обновлениями нашего Поиска для сайта. Дело в том, что все силы нашей команды были направлены на одно, но очень важное изменение: переход сервиса на SaaS-технологию.

Изначально наш сервис был основан на поисковых технологиях большого Яндекса. И наряду со всеми его достоинствами (учетом разных форм слов, исправлением ошибок, опечаток, неправильной раскладки и распознаванием разных вариантов написания слов) у него были и свои недостатки. К таковым можно было отнести не всегда высокую полноту и скорость индексирования, которые были унаследованы от большого поиска. Ведь для большого поиска задержка с индексированием в несколько часов не всегда является критичной. Однако важно, чтобы в поиск для сайта страница попадала сразу после появления. Поэтому действительно хороший поиск для сайта – это не просто поиск с учетом разных форм слов, но и со 100% полнотой и высокой скоростью индексирования.

Именно таким теперь стал наш поиск, теперь мы можем максимально быстро добавить все известные нам страницы сайта в поиск. Пока, правда, только для тех сайтов, которые подтверждены в Яндекс.Вебмастере под тем же аккаунтом, под каким и создан поиск для этого сайта на сервисе Яндекс.Поиск для сайта. Мы рекомендуем всем владельцам сайтов подтвердить на них права, так как дальнейшие улучшения сервиса в значительной мере будут направлены именно на развитие новых возможностей поиска по подтвержденным сайтам. Изменить поисковую технологию можно в настройках, в разделе «Область поиска»:


Индексируем еще больше, еще быстрее
Команда Поиска для сайта

42 комментария
Подписаться на комментарии к посту
Евгений
28 мая 2015, 22:17

Это хорошо, давно пора было обновить поиск для сайта.

Хочется верить, что с релевантностью тут будет еще лучше.

firstlena.pershina
28 мая 2015, 22:40

Спасибо, над релевантностью работаем. Думаю, скоро будет, чем тут еще больше порадовать. 

Если сайт будет индексироваться быстрей, то все новые изменения будут быстрей появлятся в самом поиске Яндекса? Или это совершенно отделный продукт? 

Корнев Евгений
29 мая 2015, 00:32

Присоединяюсь к вопросу.

Будет ли какой то профит от SaaS поиска непосредственно поисковой выдаче "большому" Яндексу?

Ускорит ли это хоть как то скорость индексации сайтов в основном поиске?

Захотели :-D )))

firstlena.pershina
29 мая 2015, 07:52

Мы стараемся делать так, чтобы использование какого-либо нашего сервиса напрямую не влияло на скорость индексирования или ранжирования в поиске. Этот принцип для нас был важен и в старой технологии, и при переходе на SaaS. Мы просто стараемся делать хорошие сервисы, которые полезны для пользователей и сами по себе.

Корнев Евгений
29 мая 2015, 11:16

А какой смысл вам копить отдельные базы данных и отдельные алгоритмы? Не проще ли строить сервис на базе уже существующего решения? Плодить клоны решений не есть гуд, вроде как.

firstlena.pershina
29 мая 2015, 17:05

Наша задача – создать полезный продукт. Наилучшим путем в данном случае оказалась SaaS-технология.  

Логвиненко Сергей
28 мая 2015, 23:48

Молодцы! Так держать! Теперь заменю поиск от гугла Вашим!

не торопись...

firstlena.pershina
29 мая 2015, 07:52

А вас что смущает?

Код нужно переустанавливать или достаточно просто выбрать SaaS-поиск и сохранить ? 

firstlena.pershina
29 мая 2015, 15:35

Нет, код обновлять не нужно. Достаточно просто переключить и подождать, пока сайт проиндексируется при помощи новой технологии.

Александр Эрлих
29 мая 2015, 09:49

Здравствуйте.

1)Значит ли это, что механизм "Указать URL с помощью HTTP запроса" теперь стал неактуальным? 

2)Значит ли это, что ускорится также и удаление из индекса ненужных страниц - у меня в проекте с этим проблема гораздо больше, чем с добавлением новых. 

Спасибо.

firstlena.pershina
29 мая 2015, 15:43

1)    1) Он стал менее актуален, но если вдруг и новой скорости недостаточно (хотя она выросла в разы), то инструмент пингов по-прежнему работает.

2)     2) Для Поиска для сайта – да.

Проиндексировано: 0% от общего объема

Как бысто проиндексируется сайт объемом 200 000 страниц?

Яндекс такими массивами не оперирует :)

firstlena.pershina
29 мая 2015, 17:26

Была задержка с изменением статуса, но не с самим индексированием. Проверьте сам поиск, пожалуйста, все должно работать.

Александр Эрлих
30 мая 2015, 14:26

Странные результаты в этом варианте поиска.

Во-первых, вообще субъективно результатов стало меньше.

Во-вторых, проблемы на конкретных примерах. Например, есть два поиска (searchid 2193180 и 2201119). Первый - по всему сайту, второй - по части страниц. В итоге по одному и тому же запросу первый (по всему сайту) выдаёт меньше результатов, чем второй (по части страниц). Все поиски полностью проиндексированы.

firstlena.pershina
30 мая 2015, 19:03

Можно пример запроса для обоих поисков? Такого быть не должно. Сейчас же проверю.

erlikh@zelenograd.ru
1 июня 2015, 16:54

Сейчас ситуация изменилась. Теперь просто нет никаких результатов или они единичны.

Сравните 

Большой поиск - http://yandex.ru/search/?text=эдельвейс&lr=213&site=www.zelenograd.ru (71 ответ)

 

SaaS - https://www.zelenograd.ru/search/yandex/result.php?searchid=2193180&text=эдельвейс&web=0 (1 ответ)

 

 

firstlena.pershina
1 июня 2015, 21:41

Спасибо! Сейчас проверю, в чем дело.

Александр Эрлих
1 июня 2015, 16:57

или вот ещё пример (переключил поиск по части страниц на стандартный)

https://www.zelenograd.ru/search/yandex/result-news.php?searchid=2201110&text=эдельвейс&web=0 (21 ответ)


А вот по всем страницам SaaS https://www.zelenograd.ru/search/yandex/result.php?searchid=2193180&text=эдельвейс&web=0 (1 ответ) 

 

firstlena.pershina
2 июня 2015, 12:49

Проверила, это происходит из-за ваших настроек раздела исключения. То есть по понятным причинам на большой поиск настройки вашего раздела при поиске через оператор site не учитываются. Удалите исключения, если их тоже нужно учитывать в поиске.

firstlena.pershina
2 июня 2015, 13:26

И еще, у вас большая часть индекса в поиске для сайта - вида http://www.zelenograd.ru/catalog/realty_result.php* - это страницы поиска, они не нужны в индексе, их надо закрывать в robots.txt. В итоге обход полезного контента существенно замедляется. В большом поиске URL такого вида тоже есть - их меньше, но все равно.

 

Вы все это можете увидеть в Яндекс.Вебмастере - на странице "структура сайта", там более N00 000 загруженных страниц - которые, по сути бесполезны.

Александр Эрлих
2 июня 2015, 14:49

Елена, спасибо. В robots.txt действительно пропуск был. Сейчас ещё раз поэкспериментируем. Радует, что проблема на нашей стороне:)

Здравствуйте!

На моем сайте установлен Яндекс-поиск по сайту. Так как у данного сайта после индексации роботом Яндекса в поиск попала только одна главная страница, то только по этой странице и идет поиск по сайту. Форма яндекс-поиска по сайту ищет только на одной странице.

Подскажите, пожалуйста, можно ли настроить яндекс-поиск по сайту так, чтобы он искал по всем страницам сайта, не смотря на то, попала ли страница в страницы поиска после индексации сайта роботом.

firstlena.pershina
10 июля 2015, 13:57

Добрый день!

Да, конечно ,как раз для этого и запустили функциональность SaaS-технология, просто создайте поиск для сайта под тем же аккаунтом, под каким ваш сайт подтвержден в Яндекс.Вебмастере, и включите SaaS-поиск в настройках «Область поиска» или «Первый шаг». Поиск для сайта начнет работать по всему сайту.

Спасибо! Да, теперь поиск заработал.

Шторы на заказ и пошив штор
17 августа 2015, 22:24

Добрый вечер ! Подскажите почему не индексируется мой сайт http://www.gladpro.company/ ? И в выдочи по шторам на заказ на 5 странице? :-|

Вы сейчас про Поиск для сайта спрашиваете или про большой поиск Яндекса? 

Шторы на заказ и пошив штор
1 сентября 2015, 15:44

про большой поиск

 

Тогда с этим вопросом лучше всего обратиться в службу поддержки Яндекс.Вебмастера, ссылка на обратную связь внизу страницы сервиса с общей информацией о сайте.   

Здравствуйте, есть ли возможность подключить Яндекс-поиск к закрытому (служебному под паролем) сайту. Для большого Яндекса сайт недоступен и не должен быть доступен. Заранее спасибо.

Добрый день! 

Сейчас такой возможности нет, но мы думаем об этом.

В какие сроки ждать?

К сожалению, не могу тут пока сказать что-либо определенное. 

Подскажите в плагине для Джумлы 3.Yandex Site Search Pinger

нужно указать Ключ, Логин и Айди поиска. 

С последним понятно а вот где брать ключ и какой именно логин?

firstlena.pershina
16 ноября 2015, 22:14

В разделе «Индексирование» в настройках вашего поиска. 

alexander.gomzyakov
23 апреля 2016, 12:46
Добрый день, Елена.


Позавчера добавили SaaS-поиск на один из проектов который, в настоящее время, находится в стадии "перманентной" разработки на shared-хостинге. После этого хостинг-провайдер начал заваливать сообщениями о превышении квот по базе данных и процессорному времени.


Очевидно, это связано с первичной индексацией сайта, но возникает вопрос: за счет чего SaaS-поиск Яндекса шустрее индексирует сайты? Просто оперативно перебирая страницы сайта или есть способ сообщить SaaS-боту о появлении нового (изменении старого) контента?
Проиндексировано: 0% от общего объема. Висит целый день. Что можно сделать?
firstlena.pershina
5 марта, 19:55
porohovo6,
Напишите, пожалуйста, в нашу поддержку: https://yandex.ru/support/site/troubleshooting/feedback.xml Мы обязательно проверим, в чем дело.