я вроде не про поисковых ботов хотел сказать... Хрумер вроде не человек, а сообщения постит ;)

и кто он?

По моей "религии" любой посетитель не человек - это робот. Роботы бывают поисковыми (хорошими), а бывают и плохими (ссылочныйн спам, поиск уязвимостей, регистрации, спам в форумах и т.п.).

XRumer умеет отрабатывать скрипты на страницах? Это я к тому, что сообщения постить, CAPTCHA подбирать и регистрироваться на сайтах можно без столь сложного анализа страниц.

ну мы наверно в разных конфессиях состоим :)

С удивлением узнал, что планируются поисковые роботы, исполняющие JavaScript.

Пример SWEBot. Сегодня залез ко мне на сайт.

Такая информация есть в Метрике только в Вебвизоре. Вебвизор отправляет данные на сервер пачками. Не успел отправить - вот и нулевая длина.

Видели в этих мультиках странные переходы между страницами? Когда не было видно, что выбрана ссылка, а переход есть.

Бывает так, что это просто перелеты между закладками браузера. А когда такое еще невозможно (например, это всего-лишь второй запрос в визите), то речь о том, что перемещение и выбор ссылке просто не записались.

Кто такие логи есть в "энциклопии" :)

Да, в мультиках есть странности при переходах. Клик мыши на полноэкранный режим плейера в плейере метрики почему-то приводит к переходу на другую страницу. Но набранных воспроизводимых в плейере посещений пока маловато для анализа. Много посещений вообще без возможности воспроизведения.

И непонятно, синхронизированы ли  в  воспроизвении плейера Вебвизора загрузка и воспроизведение видео на странице с поведением посетителя: движениями мыши и пр. И показавает ли плейер страницу в размерах разрешения монитора посетителя.

Я тоже заметил, что долгие визиты остаются без записи (их даже нет в списке визитов). Это мне непонятно совсем.

А насчет разрешения .. Старается плеер его воспроизводить. Само собой, он не воспроизводит название браузера. Т.е. если сайт по названию браузера сам определяет каким устройством человек смотрит сайт и на этом основании подсовывает мобильный или ПК-шный дизайн, то в мультиках этого не будет вообще (вы будете видеть тот дизайн, который выдается браузеру из которого смотрите мультик).

Плюс к тому, если вы постоянно редактируете сайт, то имейте в виду, что мультики не содержат содержимого посещенных страниц (только ссылку). Если после записанного визита добавился новый абзац, картинка, то мультик теряет смысл. Их нужно смотреть практически сразу после записи.

Насчет синхронизации я не видел пока воспроизведения мультимедиа у себя. Но подозреваю, что в общем случае нет. Если пользователь при просмотре не набирал текст, не дергался мышкой, то включается режим ускоренного воспроизведения мультика. Тогда мультик идет однозначно быстрее воспроизведения видео. Это где-то отключается, не пробовал.

Насчет вопросов общественности ... Ясно, что вы не можете на них ответить. Вы часть из них просто не поняли (например, о юзер-агенте). В таких случаях проще делать снимки экранов. В данном случае снимок с информацией о визите (там где Вы нашли хост посетителя).

Ну, ко мне с фейсбука зашел один с мультяшкой на 06:54:30. В первом часу ночи. Секунд 20 кликал мышью туда, куда не надо, потом, видать, его сморило.

Отключение ускоренного воспроизведения - часы в нижней панели рядом со шкалой времени.

Если синхронизации нет, это вещь намного бесполезней, чем предполагалось. Когда видно, что посетитель не дождался загрузки и ушёл, это понятно, когда во время воспроизведения он шерстит мышью по экрану, это какая-то паранойя. Может, вынести вопрос в отдельную тему или задать вопрос поддержке?

Страницы я делаю на века.
С юзверь-агентами я как раз сейчас борюсь. Поборюсь ещё чуток и чего-нибудь отвечу:-D

Когда речь идет о реферере, на это можно только надеяться - его можно устанавливать как вздумается.

Судя по тому, что Вы нашли в логе - да, приходит по поиску. Это не прямой заход все-таки (источник трафика - поисковая система).

Сомнение вызывает очень древний браузер. С ним борется уже сама Microsoft. У меня таких 3,5% всего. И я заметил, что под него скрываются всякие гады. Именно с этой версией гуляют роботы-сканеры, реферальные спамеры.

Это конечно, не Ваш случай - он все-таки исполнил код счетчика. Так обычно делают люди. Но это может быть и умный бот. Типок все-таки сомнительный ...

Если это чел, зачем он будет регулярно писать один итот же запрос в поиск, заходить на одну страницу, меняя при этом разрешение монитора? Плюс по тому же хосту посещения из другого города.
Если это гадский робот, зачем он долбит страницу html и как он поведёт себя, если эту страницу на несколько дней удалить? 

Я этих типов не понимаю. У самого есть такие ситуации, когда запрашивают одну и туже страницу (при этом я точно знаю, что посетитель один и тот же). Человек или нет точно не знаю.

Одно время думал, что некто использует программки для отслеживания изменения на странице. Такие существуют. Тогда это не плохо - просто человек ждет, когда что-то изменится. Если думать так, то нужно что-то на странице изменить и ждать когда этот тип вернется.

А насчет Вашего - да не факт, что это один и тот же. Имя хоста (такое как у Вашего) не значит ничего. Один и тот же запрос (если он соответствует теме сайта) - тоже ничего. Сейчас Яндекс предлагает наиболее употребительные поисковые фразы. И люди этим пользуются.

А удалять не нужно. Лучше попробовать ее прятать для определенных условий - браузер, поисковая фраза. А лучше - запишите посетителю этой страницы какую-нибудь куки и сравнивайте ее. Тогда точно будете знать тот самый или нет. Если при всем том, что происходит, куки будут отключены, то это робот.

Про Кука не понял. Его же вроде съели:-(

На странице пара слов и гугловская карта и боле ничего,  там менять нечего.

Вобщем, надеюсь, для html страницы эти гады безопасны. 

А лишний пробел, запятая, точка? :-)

Не хотите - просто переименуйте и измените ссылки на нее на сайте. Робот не знает, что адрес изменился и будет совать нос по старому. А реакция - в зависимости от робота. Может и дальше будет мучить сайт, а может отвалится (автоматически или с участием человека).

Только как Вы в Метрике узнаете, что некто лезет на несуществующую страницу? Я этим не занимался, не знаю. Плюс к этому, видел в клубе вопросы на эту тему. Это Вам придется лог проверять.

Насчет спокойствия по поводу html-страницы ... На безопасность это конечно влияет (динамическая страница - потенциальная дыра). Но Вы же не видите никаких вводов форм, например. Страница у Вас только показывает и ничего не принимает от пользователя (ни явно через формы, ни скрыто через параметры URL, куки, реферера и прочие заголовки HTTP-запроса).

Ну и к слову ... Расширение html не гарантирует, что в самом файле нет PHP, например, и он не исполняется. WEB-сервер можно настроить и так. Вы ведь не пишете на чем сделали сайт.

Изменить ссылку и адрес страницы - это гениально!
Добавил копию страницы с доп. пробелом в имени файла, изменил title  оригинальной страницы, сылку на оригинальную страницу заменил ссылкой на страницу-клон,  изменил якорь ссылки. Будем посмотреть.  

Весь сайт - чистый html. Так спокойней. Предыдущий был на каком-то движке, какие-то странные визитёры ходили по 10 раз в минуту на одну страницу... а потом всё рухнуло. Поэтому я и  озаботился этими странниками 

Которые, как я о них написал, сразу попрятались, уже 2 дня не заходят.
У бота есть суббота?)

У роботов, управляемых людьми бывают :-)

Да. И это серьезно. Особенно в зависании загрузки.

Люди стараются дизайн делать так, чтобы сначала грузилось основное содержимое, а потом все остальное. А тут ...

Да, только заход с другой стороны. Но тема действительно таже.

Есть смысл присоединиться. Только там нужно соответствовать формату - провести анализ логов.

Яневформате;-)