Алгоритм Автопарсинга и подключение

Внимание. Автопарсинг Турбо-страниц работает в бета-режиме и доступен не для всех сайтов, добавленных в Яндекс.Вебмастер. Если в интерфейсе Вебмастера на странице Источники нет блока Автопарсинг, то включить его для вашего сайта не получится.
Обучающее видео. Автопарсинг Турбо-страницы: тонкости настройки.
Посмотреть видео

00:00 Введение

01:25 Что такое Турбо-страницы

06:27 Что такое Автопарсинг

07:50 Как подключить

09:20 Подключение рекламы

14:16 Подключение веб-аналитики

15:47 Настройка логотипа

16:59 Настройка меню

17:12 Настройка CSS

18:35 Что такое автоматическая лента рекомендаций

19:55 Турбо на десктопе

20:40 Настройка главной страницы

21:41 Включение Турбо-страниц

23:12 Вопросы и ответы

23:15 Есть ли разница между RSS и автопарсингом

24:17 Сколько рекламных блоков можно расположить на Турбо-странице

25:55 Можно ли отключить Турбо-страницы и ввернуться к текущему режиму работы

28:00 Откуда загружается контент

29:06 Влияют ли Турбо-страницы на ранжирование в поисковой выдаче

29:57 Как подключить рекламу Google AdSense

31:33 Можно ли подключить отдельный RSS для десктопных Турбо-страниц

32:24 Автопарсинг отобразил блок фильтров. Как избавиться

34:27 Какой URL у подключенных Турбо-страниц

35:55 Как формировать автоматическую ленту рекомендаций вручную

37:25 Зачем мне использовать Турбо-страницы, если я оптимизирую скорость загрузки сайта

38:41 Потеряет ли мой сайт позиции, если я подключу Турбо-страницы и отключу их через некоторое время

42:28 Как подключиться к Автопарсингу

Турбо-страницы формируются для сайтов, которые уже участвуют в результатах поиска Яндекса.

Алгоритм Автопарсинга

Создание Турбо-страницы происходит в несколько этапов:
  1. Сбор и обработка контента сайта.

    Информация о содержимом сайта собирается с помощью основного индексирующего робота Яндекса. Робот обходит страницы сайта с некоторой частотой и загружает данные в свою базу. Затем эти данные обрабатываются специальным алгоритмом.

  2. Проверка данных для формирования Турбо-страницы.

    Обработанная информация проходит проверку на соответствие стандартам качества Яндекса. В частности, модераторы проверяют, что основное содержимое страницы-источника присутствует на ее Турбо-версии. Таким образом, Турбо-страницы могут сформироваться не для всех страниц вашего сайта.

Когда Турбо-страницы сформируются, в Яндекс.Вебмастере появится блок Автопарсинг на странице Турбо-страницы → Источники.

Подключение

Ниже описаны основные этапы подключения:

Шаг 1. Проверка примеров сформированных Турбо-страниц

  1. Перейдите на страницу Турбо-страницы → Источники.
  2. В блоке Автопарсинг нажмите кнопку Примеры. Откроется окно с примерами нескольких Турбо-страниц, сформированных для вашего сайта.

Вы можете изменить отображение шапки страницы, отредактировать CSS-стили, а также добавить дополнительные элементы. Подробнее см. в разделе Дополнительные настройки.

Примечание.

Если вы уже передаете RSS-канал для формирования Турбо-страниц, Автопарсинг может сформировать недостающие страницы автоматически.

Если для одной страницы сайта есть две Турбо-версии (из RSS-канала и автоматическая), то приоритет отдается RSS-каналу.

Шаг 2. Установка счетчика веб-аналитики

Чтобы установить счетчик веб-аналитики:
  1. В интерфейсе Яндекс.Вебмастера перейдите на страницу Турбо-страницы → Настройки.
  2. В разделе Счетчики добавьте нужную систему веб-аналитики и укажите идентификатор счетчика.
Поддерживаемые системы веб-аналитики
Яндекс.Метрика

Номер счетчика (например, 123456). Как просматривать статистику по Турбо-страницам см. в Помощи Яндекс.Метрики.

Для удобной работы со статистикой используйте один счетчик на сайте и на его Турбо-страницах.

LiveInternet

Если счетчик установлен на одном сайте, не заполняйте поле. Если один счетчик установлен на несколько сайтов, в поле укажите название именованного счетчика (например, example-host).

Google Analytics Идентификатор отслеживания (например, UA-12340005-6).
Рейтинг Mail.Ru Числовой идентификатор счетчика (например, 123456).
Rambler Топ-100
Mediascope (TNS) Идентификатор проекта tmsec с окончанием «-turbo». Например, если для обычных страниц сайта установлен счетчик example_total, то для Турбо-страниц указывается example_total-turbo.
Другое

Если ваша система веб-аналитики поддерживает установку в виде изображения (пикселя), вы можете подключить ее к Турбо-странице.

Также вы можете добавить в URL дополнительные параметры, которые хотите передавать в систему веб-аналитики:
  • {referrer} — реферер;
  • {referrerStarsEscaped} — реферер для Mediascope (с экранированным символом *), если вы хотите подключить эту систему, не указывая идентификатор;
  • {pageTitle} — заголовок страницы;
  • {originalURL} — URL местоположения оригинальной страницы;
  • {screenWidth} — ширина экрана;
  • {screenHeight} — высота экрана;
  • {random} — псевдослучайное число (на каждое вхождение в строке генерируется новое значение);
  • {requestId} — идентификатор запроса (одинаковый в рамках страницы);
  • {clientId} — идентификатор клиента (одинаковый для браузера пользователя).

Пример:

http://some.doma.in/{screenWidth}*{clientId}/{random}/{originalURL}?title={pageTitle} 

Шаг 4. Включение показа

  1. Перейдите на страницу Турбо-страницы → Источники.
  2. В блоке Автопарсинг установите переключатель в положение Вкл. Изменения вступят в силу в течение дня.

Если вы публикуетесь в Яндекс.Дзене и для вашего сайта сформировались Турбо-страницы, то они могут появиться в ленте Яндекс.Дзена вместо предыдущих версий страниц сайта.

Если вы добавили в Яндекс.Вебмастер основной домен и поддомен сайта, то есть несколько сценариев подключения:

Показ Турбо-страниц включен для основного домена
В этом случае опция автоматически включается и для поддомена, если для него сформированы Турбо-страницы.
Показ Турбо-страниц включен только для поддомена
В этом случае опция действует только для поддомена.

Когда на вашем сайте появятся новые страницы, и робот Яндекса узнает об этих изменениях, для новых страниц также смогут сформироваться Турбо-версии.