Блог рекламных технологий

Группы объявлений стали удобнее для ваших экспериментов

adv
30 апреля 2014, 11:40

Примерно полгода назад мы предложили вам протестировать группы объявлений — инструмент, который позволяет разместить по общим ключевым словам сразу несколько баннеров и автоматически выбрать из них самый кликабельный.

Группы все еще находятся в режиме открытого тестирования, сейчас их уже больше полутора миллионов. Мы внимательно анализируем работу инструмента и совершенствуем его, а ещё периодически добавляем в интерфейс полезные мелочи.

Хотим поделиться апдейтом функциональности групп и проиллюстрировать принцип их работы на свежем примере.

Что нового

  • Статистика по группам в «Мастере отчетов» — чтобы вы могли получать различные срезы данных как суммарно по группе, так и по каждому объявлению в ней.
  • Архивация неэффективных объявлений через интерфейс — если вы уже определились с результатами эксперимента и хотите избавиться от лишнего. Кроме того, теперь из группы можно удалять те объявления, по которым еще не было показов.
  • Фильтр по названиям групп — для быстрого поиска на странице кампании.


Как могут работать группы

Поговорим о принципе показов группы объявлений.
Вот пример изменения CTR и доли показов у двух объявлений в группе, которая в течение календарного месяца показывалась в спецразмещении. На графиках видно, как более кликабельное объявление постепенно начинает показываться чаще, а вместе с этим растет общий CTR группы.

 

 


Этот пример хорошо иллюстрирует то, как работают группы объявлений, но не является единственным вариантом развития эксперимента. Каждый случай индивидуален, и на результаты любого тестирования влияет много факторов.

Мы продолжаем дорабатывать алгоритмы показа групп объявлений, ориентируясь на сложные случаи. В этой работе нам важны ваши отзывы — удачные варианты А/Б-тестов, нетипичные выводы, вопросы и предложения.

Обратную связь с номерами кампаний и описанием экспериментов вы всегда можете передать через специалистов службы поддержки или своего менеджера в Яндексе. А можете просто поделиться ею в комментариях.

16 комментариев
Подписаться на комментарии к посту

подскажите путь, как построить такой отчёт

Илья Ильин
13 мая 2014, 12:45

Присоединяюсь к вопросу.

 

Как посмотреть сатистику по группам?

Функция полезная и интересная, если бы работала... Еще в ноябре провели ряд экспериментов с группами объявлений, в разных комбинациях и с разными "исходными" и получили очень "странные" результаты -  фактически, говоря коротко, в большинстве случаев один из баннеров в группе сразу получал преимущество и "перевешивал" остальные. Т.е. фактически мы не получили ситуации полноценного сплит-тестрования, когда система сначала должна "собрать данные", в равных долях, а только потом "делать выводы" (оптимизацию). Плюс, похоже, в РСЯ это вообще не работает. Все данные по полученным нами результатам передавались менеджеру, но внятного ответа мы не получили.

Будем рады, если найдется сотрудник, который заинтересован получить эти данные и это поможет настроить систему. Также было бы очень интересно провести подобный сплит-тест именно в РСЯ - для этого нужно ваше подтверждение того, что там это должно работать. Спасибо!

Добрый день! Есть мысль, что собирать данные можно в разных долях - важно только то, у какого объявление больше ctr. Понятное дело, что в разных блоках ctr будет разный, следует это учитывать и делать соответствующий отчет в мастере отчетов статистики директа. 

Речь о том, что ctr на объеме 10 показов, и на объеме 100 показов некорректно сравнивать между собой (при этом 100 и, допустим, 130 уже можно - тут нет вопросов). "Статистические методы" - это про "большие числа".

делать группы на мелких выборках и не нужно, наверное. предположим, есть слова "купить авто" и весь хвост из этого запроса. 

 

Возьмем основную фразу "купить авто" и еще несколько СЧ фраз из хвоста, "купить авто недорого", "купить авто москва". На эти 3 фразы ставим аб-тест с несколькими объявлениями. Получаем результат и транслируем его дальше на НЧ запросы. 

Речь не идет о "частоте запроса" - речь идет о том, какой объем показов успевают набрать "тестируемые" объявления из группы, прежде чем явно будет выделен "лидер".

Илья, попробуйте провести эксперимент на своих объявлениях (в том числе, в разных частотных группах - СЧ, ВЧ). Будет очень интересно узнать о тех результатах, которые получите вы, можно и в "личку" :)

Пробовал в рся http://joxi.ru/-yhlUxjKTJDMfRl1cag

7000/19000/24000 показов показалось не такой уж и маленькой выборкой. 

по поводу ВЧ и СЧ - предположение, сам собираюсь сделать. А вы уже пробовали так? Можете показать скрин?

Поддерживаю. Групповые объявлеия работают а бы как. Замечал, что даже более эффевные объявления не крутятся уже на следующий день. Есть еще Конверссии и очень часто с самых кликабельных их меньше чем с менее кликабельных объявлений, неплохо бы иметь было стратегии работы с групповыми объявлениями а не только такое название, по сути как такового инструмента так и не сделали!

Здравствуйте.

Спасибо за предоставленную обратную связь!

Нам бы хотелось разобраться подробнее в возникшей у Вас ситуации, буду признательна, если укажете номера кампаний. Мы посмотрим и обязательно Вам ответим.

mup-butstroj.2002
1 мая 2014, 13:43

Я попытался в адресе набрать несколько получателей моего письма , а выходит, что это невозможно сделать - письма можно посылать только одному адресату?

Илья Ильин
13 мая 2014, 12:52

В отчёте Я.Метрики "Директ-Сводка" логически не хватает уровня по группам объявлений.

Полностью поддерживаю тех, кто говорит, что аб тест работает абы как! Надо сделать опцию как в гугле - первые 90 дней равномерный показ и сбор статистики, а потом выбор победителя  автоматически. Вот тогда это будет стоящий инструмент. Сейчас это сырая фигня, вручную надо решения принимать и отключать слабые объявления.

Другой вариант бага - у меня есть группа, в которой 3 вара, 2 имеют по 1000 показов, при этом стр у одной 7,5% а 3 другой 2,5%. Можно было уже эвристически догадаться, кто лучше и отстрелить слабого.

 

Идея хорошая, очень ждем нормальной реализации.