Клуб Яндекс.Метрики

Новый мониторинг

razuvaev-michael
1 декабря 2010, 19:45
Мы запустили новую систему мониторинга доступности сайта.
Новый мониторинг работает еще надежнее, так как мы полностью обновили систему. Кроме того, мы увеличили и частоту проверок доступности сайта. Уведомления о доступности сайта тоже выглядят по новому: теперь они отправляются от имени Метрики.

Ждем ваших отзывов! Если вы заметите какие-либо странности в работе новой системы, сообщите, пожалуйста, в службу поддержки.
68 комментариев
Подписаться на комментарии к посту
1. С какой частотой вы теперь опрашиваете сайт?
2. Вы гарантируете, что она не будет «плыть» во времени?

Пользовались  host-tracker, потом перешли на свою собственную.
1. Частота опроса зависит от многих факторов, в том числе от времени ответа сайта, посмотрите в своем acess.log для своего сайта.
2. Нет, возможно даже наоборот в будущем уменьшение числа проверок за счет собираемой с сайта информации.
в access.log какого робота искать?
useragent - Mozilla/5.0 (compatible; YandexMetrika/2.0; +http://yandex.com/bots)
Как то странно работает , с сайтом все окей а сообщения что он недоступен приходят
очень важно, это вчера было или сегодня тоже?
вчера такое действительно могло быть из-за наших проблем с сетью
еще домен пожалуйста
Согласно данным мониторинга, обнаружены проблемы с доступностью сайта:
amkfish.com (03 декабря в 13:40).

Все это время сидел в админке и все работало

Согласно данным мониторинга, начал работать в нормальном режиме сайт:
amkfish.com (03 декабря в 16:07).
Это было сегодня
причем несколько сайтов на одном хостинге(на одном физическом сервере) , а Метрика ругалась только на один сайт.
Если были бы проблемы вне доступа должны были бы и эти сайты.
мы прислали вам всего 2 письма:
1-е когда сайт умер ~13.40
ответ сайта был 500 -я ошибка Internal Server Error
(письмо было отправлено после 2 неудачных попыток проверки:
13:38:11 500 Internal Server Error
13:40:16 500 Internal Server Error)
2-е когда сайт ожил

вы могли посмотреть сайт в момент когда сайт уже ожил, но мы еще об этом не знали.

Сообщите пожалуйста, если вы получили больше описанных 2-х писем.

может пригодится вам для поиска времени проблем на сервере


Согласно данным мониторинга, обнаружены проблемы с доступностью сайта:
www.lingvo.ru (08 декабря в 02:34).


Согласно данным мониторинга, обнаружены проблемы с доступностью сайта:
studio.aramaki.ru (06 декабря в 10:16).


Согласно данным мониторинга, обнаружены проблемы с доступностью сайта:
kimsie.ru (02 декабря в 12:40).



Согласно данным мониторинга, обнаружены проблемы с доступностью сайта:
lingling.ru (01 декабря в 18:09).


Согласно данным мониторинга, обнаружены проблемы с доступностью сайта:
forum.lingvo.ru (01 декабря в 14:59).



хотя за lingling.ru не отвечаю, что все было ок. по остальным проблем замечено не было, открывались нормально
спасибо
Вот мой сайт
С 1 по 14 декабря получено 31 письмо с темой:
"Яндекс.Метрика/ проблемы с доступностью сайта"
и такое-же количество писем с разницей часа в два с темой:
"Яндекс.Метрика/ сайт снова доступен"

Не смотря на эти сообщения сайт все время оставался и остается доступен, а сообщения с яндекс-метрики продолжают приходить.

Последствия себя не заставили долго ждать, сайт начал терять свои позиции в поисковой выдаче и это естественно, ведь не стабильность в доступности сайта снижает доверие яндекса к ресурсу (из политики "правил" Яндекса).

Пожалуйста, напишите что делать???
1. Ваш шайт действительно не отвечает - не грузится и все, проверил из браузера (время ожидания истекло).
2. Мониторинг сайта в Метрике, вообще к позициям в поисковой выдаче никакого отношения не имеет, это я вам абсолютно точно говорю.

Возможно(скорее всего) у Поиска есть свой список сайтов, которые не удалось обойти роботом или какие-то другие алгоритмы.
через сколько дней после отсутствия на нём ни одной живой души сайт удаляется? 
откуда удаляется? мне кажется сейчас вообще никто не удаляет сайты
У меня почти каждый день приходят такие сообщения: Согласно данным мониторинга, обнаружены проблемы с доступностью сайта:www.maliarka.ru (10 января в 07:15).
Согласно данным мониторинга, начал работать в нормальном режиме сайт:
www.maliarka.ru (10 января в 07:22).
От Метрики и от Директа. Хостер говорит, что все в порядке, админ. сайта тоже.
Это побочный эффект новой системы мониторинга или что-то действительно не в порядке? Если не в порядке, то где концы искать?
+1
я тоже уже хотел жаловаться, потому что эти утренние SMS с разницей в минуту уже надоели.
сайт http://www.zrmet.ru/
Да! Как я вас понимаю, у меня сайт в тематике где 30-50 посетителей в день это ТОП10 и мне эти 10 минут простоя как издевка!!!
Есть сервис, так почему не сделать к ниму настройки, мне, как и большинству, плевать работал ли сайт с 3 часов ночи до 3.05
удобно, пинать хостера стал чаще, как итог перехожу на другова
Через две минуты как пришло сообщение о проблемах сайта, решил проверить что с ним: сайт работает без проблем! И по страницам перемещался и через другой браузер заходил - никаких с ним проблем! А сообщение что сайт снова стал доступен пришло через полтора часа! Раньше, когда увидел, что число писем увеличилось с уведомлениями о проблемах сайтов написал хостеру. Он сказал, что с сайтами все в порядке и они могут иметь проблемы, только тогда когда запросов в один момент времени достигает пятнадцати! Я просмотрел в метрике: максимум было 6 посетителей в минуту. Поэтому считаю, что новый мониторинг недоработан и выдает ошибочную информацию, чем вводит в заблуждение вебмастеров! Иначе как объяснить что сайты работают нормально, а метрика сообщает что они в ауте?:-@
напишите пожалуйста нам в саппорт, только сайт укажите пожалуйста
у меня сегодня опять было по счетчику 1036899
 
 проблемы с доступностью сайта:
www.universbar.ru (19 января в 13:56).


однако сайт работал нормально 
начал работать в нормальном режиме сайт:
www.universbar.ru (19 января в 14:13).

мониторинг работает примерно так:
- проверяем сайт, если любые проблемы - проверяем почти сразу еще раз
- проблема подтвердилась второй проверкой - отсылаем вам уведомление
- когда в следующую проверку будет все ок, то присылаем sms, что все ок

при этом между 1 и 2 проверкой происходит маленькая задержка, а между 2 и 3 проверкой может пройти достаточное время, но на самом деле в это время сайт уже мог быть доступен, просто мы еще не успели это проверить. По этому, когда если сайт мигнул, то мониторинг может это заметить, а вы нет.

Посмотрим на это новшество с точки зрения Директа.
Сайт мигнул и пару минут не ответил, хотя глобального "лежания" не было.
Активация кампаний в Директе занимает от получаса, а учитывая, что надо сперва отключать, а потом включать, то общее время простоя кампании в Директе из-за минутного "мигания" - от часа и более.
Думается, что для рекламодателя проще потерять один переход на свой сайт из Директа из-за минутного не_ответа сервера, чем на полтора часа остаться полностью без рекламы.

Метрика, кто придумал такую логику?

Подпись: Рекламодатель Директа, уставший почти ежедневно получать подобные SMS-уведомления "сайт упал - сайт встал" с интервалом в пару минут.

не получается уловить причины падения сайта, т.к. я его не вижу :(

1. может быть сделать настраиваемый параметр недоступности сайта?
2. как часто метрика пингует сайт? он может от этого упасть?
1. может быть сделать настраиваемый параметр недоступности сайта?

Сделаем.
2. как часто метрика пингует сайт? он может от этого упасть?

Не чаще, чем раз в несколько минут. Сайт от этого упасть не может, если только он не падает от одного запроса.

все еще ждем :)

razuvaev-michael
26 июля 2011, 15:57

пока у задачи низкий приоритет, в очереди она есть

будем ждать :( хорошо хоть не забыли

еще собираемся выводить информацию мониторинга в виде отчета, все проверки и все ответы, чтобы было видно когда и сколько, это должно облегчить жизнь всем, не надо будет писать на support чтобы это узнать
Часто бывает, что сайт падает не полностью, а работает нестабильно. В это время, при некоторых запросах возникают таймауты, а также разнообразные ошибки. Метрика определяет факт нестабильной работы сайта, а для того, чтобы диагностировать проблему, вам необходимо изучить логи своих серверов самостоятельно (если они доступны). Проблема может быть связана как с хостингом, так и с кодом вашего сайта.
Готов биться челом об пол, но эта функция всовокупности с метрикой вообще понижает позиции сайтов!!!
Наш сайт выпал из каталога, спустя всего неделю как метрику поставили.
Написали в саппорт, там ответили что сайт переоптимизирован!
Да какого хрена он переоптимизированный стоял целыми годами и не мешал в каталоге яндекса никому!!??? Как метрику поставили из платного каталога выкинули сразу же.... 
Это беспредел. Сделали хорошую статистику, которой нельзя пользоваться большим сайтам... 
Постоянно по нескольким сайтам ежедневно приходит смс, что сайты не были доступны.
Написал хостерам, все проверили-перепроверили. Работали сайты. А метрика продолжает отправлять уведомления и проблемах.
Кому верить?)
Я лично верю метрике и ее смс. Проверял не один раз все верно оповещает. спасибо разработчикам!
здесь где-то писал,
постараемся в ближайшее время сделать отчеты по мониторингу, там будет все видно и легко будет разобраться.
Здорово!
Метрика крутая штука. Удобная.

Мне больше специализированные сервисы нравятся, особенно вот этот:  http://webpinger.ru/

Не слышал про такой сервис, сам пользуюсь Ping-Admin'ом. У WebPinger частота бесплатной проверки 30 минут. Чтобы сократить время нужно платить целых 10 USD.

А Ping-Admin изначально платный, зато всего за 20 рублей в месяц можно мониторить сайт раз в 10 минут. Если возникнет проблема - отправляется уведомление на почту/ICQ/в виде SMS/в виде голосовой почты. Но последние 2 пункта платные.

Зато у WebPinger за 10$ можно подключить неограниченное число сайтов. Кроме того, этот сервис берет деньги только за платный аккаунт и СМС-ки, у других же сервисов мониторинга на примере Ping-Admin каждая услуга стоит по-отдельности

Оповещения Метрики работают как часы, в чем, к сожалению, приходится убеждаться довольно часто.

Интересно:
приходит сообщение о недоступности сайта с 500 Internal Server Error в
определённое время. Но при этом в логах (куда вполне себе прекрасно
пишутся 500-е коды) этих запросов просто нет. Как такое возможно?

Сервер и сайты на нём в это время прекрасно отвечают.

razuvaev-michael
28 июля 2011, 16:25

это баг (буде исправлен)

Примерно туда же: был DDoS, некоторые сайты отдавали 502.

Мониторинг добросовестно эти события обрабатывал. Но после прекращения DDoS мониторинг продолжает считать, что сервер не отвечает с 500-м кодом возврата. При этом в логах сервера прекраснно видны заходы яндекс-бота, сайты открываются браузером, проверяются host-tracker`ом.

киньте номер счетчика пожалуйста

У меня проблема аналогичная - начиная с лета 2011 года Метрика регулярно, несколько раз в вдень выдает СМС и оповещения на почту, что мой сайт не доступен, а причиной озвучивает якобы ошибку 500.

Хостер предоставил логирование, по логам не вижу, чтобы были какие-либо проблемы - всешда возвращается код 200, что все ок.

Из-за этих "скачек" постоянно тормозится реклама на Директе, поскольку стоят настройки "не показывать при неработающем сайте".

Самое интересное другое: у меня на одном сервере хостится несколько сайтов, на всех установлена Метрика. Вот только у одного сайта все ок, аптайм 100%, у другого - постоянные  проблемы и аптайм всего 67% за месяц. Как один сайт может постоянно умирать, а другой живет? На них нет никаких скриптов, сложных форм, даже CMS не стоит, потому что они статичные.

Номер счетчика 5260687.

переслал проблему разработчику, но лучше с такими вещами в саппорт обращаться

Спасибо, надеюсь, что проблема будет решена. Вы не подскажете, о результатах рассмотрения проблемы мне сообщат на эл.почту?

Тажа хрень, сайт podolsk.pro, метрика ругается что ошибка 500, хотя хост-трекер говорит, что все ок. Сайт вообще на сваем серваке, админ всю ночь читал логи да ковырял апач, сказал что все в норме, в логах действительно на все запросы яндекс-бота - 200, яндекс-метрики - 200. Судя по времени когда он якобы нашел internal server error, в наших логах он вообще незначится.

есть проблема, думаю, скоро решим

Здравствуйте уважаемые.

Вы не подскажите почему в метрике, раздел мониторинг сайта counter-strike-off.com. Уже 12 дней как пишет отказался от соединения? Я уже и код метрики обновил, но результатов ни каких, все так же. Сайт находится на хостинге uCoz, работает без проблем на мой взгляд. Письма не правда не приходят, что мол сайт умер. Ребята с хостинга говорят все тип топ. В чем может быть причина, может вы что-нибудь обновили и это маленький баг?

Жду ответа с нетерпением.

Здравствуйте, напишите пожалуйста в саппорт(через форму обратной связи в Метрике), сотрудники техподдержки попробуют разобраться и если не смогут самотстоятельно проблему передадут разработке и если проблема на стороне Метрики разработчики исправят ошибку. Но боюсь, что если какая-то серьезная проблема, требующая багфикса, то до 9 января никто не сможет исправить.

Ага у меня тоже аналогичная беда! Писал в тех. поддержку сказали типа это у меня проблемы были. Решать вопрос никак не хотят, хотя метрика показывала, что сайты не доступны, а при проверке роботом яндекса выдавала ответ 200 Ок. И к тому же из-за этих апптаймов у меня падает сайт. На одном серваке 7 сайтов, и что самое удивительное без проблем яндекс метрика почему-то показывает в разнобойном порядке, что сначало не доступен 1 сайт, потом второй и т.д.! вот счетчики

710816
8094010
8093692
1259361

надеемся, что все исправится, как исправим

Здравствуйте. У нас такая же проблема. Была дос атака на хостинг, прходили сообщения от метрики о недоступности, хостеры перенесли наши сайты на другой сервер, но сообщения продолжают приходить, при этом в момент прихода сообщениясайты доступны. Для эксперимента перенесли один из сайтов на другой хостинг, проблема осталась. При этом в сообщении информация об одновременной недоступности двух сайтов, расположенных на разных хостингах. Т е в одно и то же время не доступны сайты на разных серверах. В связи с этим можно сделать вывод что проблема в мониторинге. Как можно это исправить?

Сайты на одном хостинге:

gorodavto.ru

ford-kmv.ru

fiat-kmv.ru

ssangyong-kmv.ru

rent.gorodavto.ru

Сайт перенесенный на другой хостинг:

audi-minvody.com

 

Спасибо, обращение передано в службу поддержки, с проблемой уже разбираемся, как только решим, вам напишет служба поддержки.

Глючит ваш монитринг! Метрика показывает что уже третьи сутки сайт лежит и не встает, хотя сайт прекрасно работает и быстро открывает странички! И никаких блокировок юзерагента нет, по логам видим что боты яндекса приходят и беспроблемно ходят по сайту.
Кто поможет мне?:-(

№ 23365108

 

Напишите пожалуйста в саппорт, так вы обязательно получите реакцию в виде решения или объяснения, иначе мне придется как посреднику между вами и саппортом письма пересылать.

Спасибо за отклик. Сюда http://feedback2.yandex.ru/ я уже написал, сказали что скорее сервер блокирует по юзерагенту. Мы проверили, ничего не блокируется и боты яндекса ходят по сайту. Ответил им еще вчера, ответа пока никакого. Сайт уже почти вылетел из поисковой выдачи(
И я не один такой, у знакомого аналогичная проблема, только началась на сутки раньше. Мой и его сервер расположены в Германии.
Буду очень благодарен, если вы ускорите процесс.

переслал разработчикам

Огромное спасибо! :-)

Артур Суилин (Яндекс)
14 февраля 2014, 15:46

Отмечу, что нахождение сайта в поисковом индексе никак не связано с мониторингом сайта в Метрике. Если сайт пропадает из индекса, значит для этого есть какая то другая объективная причина.

Т.е. если у человека сайт падает каждые пять минут и долго грузится, то яндекс его будет считать офигенным и не опустит с поисковой выдачи?)

Пытался добавить сайт в я.директ и увидел что сайт не доступен, я посмотрел сайт работает, начал сканировать через ваш сервис там пишет в ответе 500ю ошибку я вновь посмотрел все работает, в .htaccess все впорядке. что делать?
Добрый день!

за последние двое суток у меня пришло больше десятка уведомлений о недоступности моих сайтов,
уведомления вида:
1. Описание проблемы: Для доступа к запрашиваемому ресурсу требуется аутентификация
HTTP код: 401
Возможные причины проблемы: Некорректно настроены права доступа к сайту

2. Описание проблемы: Неизвестный IP адрес
Возможные причины проблемы: Неверно настроен DNS адрес вашего сайта

3. Описание проблемы: Истекло время подключения к серверу
Возможные причины проблемы: Сервер, на котором размещен сайт, перегружен, или на нем неверно сконфигурирован файрвол

Это при том что сайты находятся на разных серверах и реально на самом деле они доступны.

В чем может быть проблема?
Похоже какие-то глюки на вашей стороне?

Спасибо!
на мой телефон, который подключил месяц назад приходят сообщения от яндекс что какая то метрика доступна. Понятия не имею что это и для чего это нужно. Как отключить?