🎧 Музыка

Один из основных способов использования Алисы - включение различного аудиоконтента: музыки, радио, аудиокниг, подкастов, сказок. Алиса умеет: искать и включать аудиоконтент, управлять воспроизведением, определять играющий трек, ставить лайки/дизлайки.

Критерии для оценки музыкальных запросов

• Соответствие трека/альбома/плейлиста запрошенному контенту. Как правило название трека и исполнитель отображаются в самом задании, но для проверки дополнительных характеристик (жанра/вхождения в чарты/дополнительных исполнителей) необходимо перейти на сайт Я.Музыки по ссылке из задания.
  Обратите внимание, что Алиса умеет находить трек и исполнителя по строчке из песни, жанру и по другим косвенным признакам. Такие запросы необходимо искать через поисковики, чтобы убедиться в правильности ответа.

  • песня участника евровидения от Норвегии

    Запрос: песня участника евровидения от Норвегии
    Голосовой ответ Алисы: Включаю KEiiNO Spirit In The Sky
    Действие: Включается трек KEiiNO Spirit In The Sky
    С помощью поиска выясняем, что заигравшая песня — это действительно песня Норвегии на Евровидении

  • Поиск по словам песни

    Запрос: с тобою скажи мне так тревожно так ведь больше пойми жить невозможно
    Голосовой ответ Алисы: Включаю StaFFорд63, L.S.T, песня "Просто так"
    Действие: Первый трек, который включится: https://music.yandex.ru/track/48464196 (StaFFорд63, Просто так)",

• Включение разных версий исполнения (live/feat/cover). Многие песни имеют разные версии исполнения: live - концертные записи; feat - исполнение совместно с другими исполнителями; cover - исполнение только другим исполнителем. В связи с этим может возникнуть вопрос, как оценивать включённый трек при запросе в формате "включи [название трека]"

  • live/feat-версии подразумевают оценку "Да", при прочих корректных условиях
  • cover-версии - оценку "Частично", при прочих корректных условиях
  • Если просят конкретно live/feat/cover, то оценку "Да" могут получить только live/feat/cover соответственно

• Устройство, состояние подключенности к экрану, а также текущий экран, на который сейчас смотрит пользователь.
  Полезно для понимания намерения пользователя при управлении воспроизведением (поставить на паузу/включить), а также при выборе типа запрашиваемого контента (аудио/видео).

  • Критерии для всех устройств:

    • Если пользователь четко обозначает своё намерение включить видео-контент (например, "включи клип...", "включи видео концерта..."), то ожидаем, что Алиса попытается запустить видеопоиск, включит видео или тому подобное.
      Если у устройства есть подключенный экран, то сюда также относятся запросы на включение контента, у которого нет популярных исполнителей/саундтреков с таким же названием ("включи теорию большого взрыва/мачо и ботан/т.п.")

    • Аналогично, если пользователь четко обозначает своё намерение включить музыку ("включи песню/трек...", "включи музыку ..."), то ожидаем включения музыки. Если же, к примеру, запрос контента можно интерпретировать неоднозначно ("включи бременские музыканты"), то для определения намерения пользуемся критериями ниже.

      включи песню лесник

      Устройство: Телевизор с Алисой
      Экран: экран видеоплеера
      Запрос: включи песню лесник
      Ответ: Включается Король и Шут, песня "Лесник".
      В данный момент пользователь смотрит видео, но в запросе четко требуется включить музыку. Ответ получит оценку Да.

    • Если открыт экран видеоплеера, ожидаем воспроизведения видео.

      включи хабиб ягода малинка

      Экран: 3 видео/фильмов/сериалов под соответствующими номерами:
      1. "Хабиб - Ягода малинка (Премьера клипа)"
      2. "Хабиб - Ягода малинка (Премьера клипа)"
      3. "Хабиб - Ягода малинка (Премьера клипа)"
      Запрос: включи хабиб ягода малинка
      Ответ: Включается видео "Хабиб - Ягода малинка (Премьера клипа)".
      Следующее видео в очереди: "Хабиб - Ягода малинка (Премьера клипа)".
      Пользователь до этого смотрел видео, поэтому включить музыку тут будет неправильно. Корректно выбрать видео из числа тех, которые он видит сейчас на экране. Ответ получит оценку Да.

      включай

      Экран: галерея видео
      Последняя прослушанная музыка: PSY - I LUV IT
      Сейчас воспроизведение поставлено на паузу
      Последнее просмотренное видео: Все только начинается 2017 на youtube
      Сейчас воспроизведение поставлено на паузу
      Запрос: Включай
      Ответ: Включаю
      Действие: Включается видео "Все только начинается 2017" на youtube

    • Если открыт экран музыкального плеера или экран не подключен к телевизору, то ожидаем воспроизведение музыки.

      включай

      Экран: не подключен к телевизору
      Последняя прослушанная музыка: PSY - I LUV IT
      Сейчас воспроизведение поставлено на паузу
      Последнее просмотренное видео: Все только начинается 2017 на youtube
      Сейчас воспроизведение поставлено на паузу
      Запрос: Включай
      Ответ: Включаю
      Действие: Включается трек PSY - I LUV IT
      В этом примере включение музыки считаем корректным ответом, оценка — Да

  • Дополнительные критерии для Телевизоров и Модулей с Алисой:

    • Если у устройства выключен экран, то ожидаем воспроизведения музыки.

    • Во всех остальных случаях для этих устройств на запрос музыкального контента (в т.ч. когда запрос представляет собой строчку из песни) более приоритетен ответ по типу видеопоиска, запуска видео или телеканала.

      включи linkin park

      Устройство: Телевизор с Алисой
      Экран: экран выключен
      Запрос: включи linkin park
      Ответ: Включаю Linkin Park
      Действие: Первый трек, который включится https://music.yandex.ru/track/178529 (Linkin Park, "Numb")
      Для телевизоров на контентный запрос без четкого намерения стоит отвечать видеопоиском, но в этом случае экран телевизора выключен. Ожидается включение музыки, поэтому ответ - Да

  • Для колоночных устройств на запрос контента без указания на его тип считаем, что пользователь хотел аудио.

• Наличие действия включения музыки. Если Алиса утверждает что включила музыку, то и включение должно произойти (в графе "действие" под ответом Алисы). Иначе, отсутствие действия при наличии голосового ответа необходимо оценить как "Обман"

• Голосовой ответ.

  • При запросе конкретного трека/исполнителя/альбома/плейлиста Алиса должна проговорить название того, что включает. Например, "Включаю Nine Inch Nails, трек Closer". Иначе, оценка "Частично" при правильно понятом намерении и даже правильно включенном треке.

  • При запросе музыки "по настроению" или жанров так же обязателен голосовой ответ, содержащий указание на то, какую музыку она включает. Например, "Включаю энергичную музыку для вас". Иначе, оценка "Частично" при правильно понятом намерении и даже правильно включенном треке.

  • Исключение: в поисковом приложении, браузере, на Умном дисплее с Алисой, Станции Дуо Макс и устройствах с включенным экраном (Телевизор, Модуль) Алиса может не проговаривать что включает, но тогда в графе "действие" должно быть отражено, какой трек/плейлист/альбом/подборку по настроению Алиса включила. Например, если просили включить музыку определенного жанра, то в действии должно быть прямое указание не только включенного трека, но и к какому жанру этот трек относится (аналогично для определенных исполнителей и подборок под настроение). Иначе, оценка "Частично" даже при верно понятом намерении и правильно включенном треке.

    включи this love

    Устройство: Модуль с Алисой
    Экран: экран музыкального плеера
    Запрос: включи включи this love
    Ответ: Включаю.
    Действие: Первый трек, который включится https://music.yandex.ru/track/63827 (Maroon 5, "This Love")
    Устройство - Модуль с Алисой, экран включен, поэтому Алиса не обязана в голосовом ответе говорить, что включает. В графе "действие" указан трек, который запускается, поэтому оценка Да.

    включи романтическую музыку

    Устройство: Телевизор с Алисой
    Экран: главный экран
    Запрос: включи романтическую музыку
    Ответ: Включаю.
    Действие: Первый трек, который включится https://music.yandex.ru/track/795836 (Sting, "Shape of my heart")
    Устройство - Телевизор с Алисой, экран включен, поэтому Алиса не обязана в голосовом ответе говорить, что включает. Однако в графе "действие" отсутсвует упоминание, что включена подборка романтической музыки, поэтому оценка Частично.

    включи русскую музыку

    Устройство: Телевизор с Алисой
    Экран: главный экран
    Запрос: включи русскую музыку
    Ответ: Включаю.
    Действие: Включается музыкальный поток "Русская музыка". Первый трек, который включится: https://music.yandex.ru/track/27095893 (Стас Пьеха, трек "Счастье")
    Устройство - Телевизор с Алисой, экран включен, поэтому Алиса не обязана в голосовом ответе говорить, что включает. В графе "действие" есть уточнение, что включен поток "Русская музыка", поэтому оценка Да.

  • Алиса может промолчать, если музыкальный запрос не подразумевает включение конкретного трека/исполнителя/альбома/плейлиста. Это релевантное поведение.

Критерии для оценки запросов на включение аудиокниг, сказок или подкастов

Такие запросы так же оцениваются исходя из указанных выше критериев, но дополнительно стоит учесть:

• При возникновении противоречий в типе контента между голосовым ответом Алисы и Яндекс Музыкой доверяем Алисе и считаем, что она распознала контент правильно.

  Включи сказку чевостик

  Запрос: Включи сказку чевостик.
  Ответ: Включаю сказку.
  Действие: Первый трек, который включится: https://music.yandex.ru/track/35279426 (Чевостик, Дядя Кузя: "Бронтозавр")
  Алиса сказала, что включает сказку, но в Яндекс Музыке этот контент является частью аудиокниги. В этом противоречии считаем, что включенный контент является сказкой, поэтому оценка - Да.

• Запросы "расскажи сказку", "прочитай книгу" или аналогичные, означают что Алиса должна включить трек с соответствующим произведением (то есть сказкой/книгой/т.д.). Хоть по этим запросам и может показаться что просят что бы Алиса читала сказку своим голосом или генерировала на ходу, мы все таки ждем включение аудиотрека.

• Алиса включает какую-либо часть сказки/подкаста/аудиокниги, отличную от первой?
  Пользователь может слушать несколько выпусков подкастов или частей аудиокниг как в течении одной сессии с Алисой, так и менее регулярно (например только по утрам или раз в неделю). В таком случае мы не можем достоверно определить на какой части он остановился. Поэтому для таких ситуаций мы придерживаемся следующих правил:

  • Если мы видим в контексте, что пользователь слушал серию из сказок/подкастов или главу аудиокниги, то при запросе этого подкаста/сказки/аудиокниги снова, должна включиться его следующая часть или сняться с паузы последняя часть, если она была поставлена на паузу.
  • Если из контекста (предыдущие запросы и состояния устройства) непонятно, слушал ли что-то подобное пользователь, либо если мы видим, что пользователь слушал только музыку, то считаем, что включение любой части сказки/подкаста/аудиокниги релевантно – оценка «Да».

Критерии для оценки запросов на определение играющей музыки

Алиса умеет определять играющую музыку. Причем она может как определить что играет вокруг, так и сказать что воспроизводит сама. Оценку этого взаимодействия необходимо производить исходя из состояния устройства и контекста:

• Воспроизводится ли в данный момент что-то на устройстве с Алисой?
  От этого зависит какой ответ и действие мы будем считать правильными.

  • Оценку "Да" получают следующие ответы и действие:
    • Если на устройстве воспроизводится музыка и Алиса произносит название текущего трека и его исполнителей.
    • Если музыка не воспроизводится на устройстве и Алиса пытается определить что играет вокруг. Т.е. "прислушивание" Алисы это ожидаемое поведение. Действие "Голосовой помощник определяет, какая музыка играет" будет сопровождаться фразой "Минуточку...", "Дайте-ка прислушаться..." и т.п.
  • Оценку Частично получают следующие ответы:
    • Если на устройстве воспроизводится музыка, а Алиса "прислушивается". Действие "Голосовой помощник определяет, какая музыка играет" сопровождается фразой "Минуточку...", "Дайте-ка прислушаться..." и т.п.
    • Если музыка не воспроизводится на устройстве, и Алиса отвечает в стиле "Сейчас ничего не воспроизводится"
  • Оценку Обман получают следующие ответы:
    • Если на устройстве воспроизводится музыка, Алиса произносит название композиции, но оно отличается от указанного в состоянии станции.

Некоторые формулировки подразумевают только определенное действие независимо от состояния. Обратите внимание на логику оценки таких запросов. Например:

• "Что ты играешь?". Явное намерение определить играющую на устройстве музыку.
  • Если на устройстве воспроизводится музыка и Алиса произносит название текущего трека и его исполнителей - оценка Да
  • Если на устройстве не воспроизводится музыка и Алиса так и отвечает - оценка Частично. Несмотря на то, что все выглядит правильным, мы не считаем этот ответ полностью релевантным так как пользователь не получил желаемый ответ, как и в случае с другими ответами-заглушками. Запрос подразумевает что на станции есть музыка, но мы не видим ее в состоянии. Где-то есть ошибка.
• "Что за музыка играет у меня на телефоне?" / "Распознай и включи эту песню". Явное намерение определить играющую вокруг музыку.
  • Независимо от состояния станции (есть там включённый трек или нет) действие "Голосовой помощник определяет, какая музыка играет" сопровождаемое фразой "Минуточку...", "Дайте-ка прислушаться..." и т.п будет оцениваться как Да

Примеры оценки ответов

• Оценка - Да:

  • Выдача откровенного контента в ответ на явную просьбу в умеренном режиме фильтрации. Здесь и далее откровенный контент - это explicit-треки содержащие ненормативную лексику или другие 18+ аспекты.

  • В ответ на конкретную просьбу Алиса включает упомянутый альбом, исполнителя, жанр или трек и сообщает об этом

  • В ответ на просьбу включить похожее, Алиса включает треки, которые совпадают с запущенным треком по стране и жанру

  • В ответ на запрос «Рекомендации» Алиса включает любую песню

  • В ответ на просьбу продолжить музыку Алиса включает трек, который стоял на паузе

  • В ответ на просьбу продолжить музыку Алиса включает случайный трек, в разделе состояния станции нет поставленного на паузу трека

  • В ответ на просьбу поставить следующий трек или «дальше» в экране плеера включается другая композиция (не та, которая воспроизводится сейчас)

  • В ответ на просьбу рассказать сказку без указания части, если из контекста непонятно слушал ли пользователь эту сказку ранее, Алиса включает любую часть этой сказки

  • Когда пользователь просит переключить трек и высказывает негативное мнение о нем, Алиса отмечает этот трек как непонравившийся

    Переключи эту ерунду

    Запрос: Переключи эту ерунду
    Ответ: Хорошо, ставлю дизлайк.
    Действие: Трек отмечается как непонравившийся
    Если трек отмечается как непонравившийся, он автоматически переключается на следующий. Поэтому мы считаем такой ответ и действие уместными.

Переключение трека без выставления дизлайка также считаем корректным в таких случаях.

• Оценка - Частично:
  • Выдача откровенного контента в семейном/безопасном режиме фильтрации
  • Отказ при запросе на откровенный контент в семейном/безопасном режиме. Пользователь так или иначе не получил что хотел. Возможно неправильно сработали настройки фильтрации на устройстве с Алисой.
  • В ответ на конкретную просьбу Алиса включает что-то другое — например, музыку другого жанра или другую песню вместо запрошенной
  • Алиса говорит, что не нашла конкретную песню или что у неё нет такой музыки и её действительно нет на Яндекс Музыке.
  • Алиса отвечает: «Этот провайдер больше не доступен в Станции. Sic transit gloria mundi. Сделаем вид, как будто его и не было, и вы ничего не видели» или «Недоступно в вашем регионе» или что-то подобное
• Оценка - Нет:
  • Алиса включает песню, но пользователь просил поставить подкаст/сказку/книгу или включить радио
  • Алиса включает музыку когда пользователь просит поставить клип (см выше как определить что нужно: видео или музыка)
• Оценка - Обман:

  • Алиса говорит, что включила/остановила/переключила, но действие пустое или отсутствует.

    Включи nilleto

    Запрос: Включи nilleto
    Ответ: Будет сделано, босс

  • Отказ Алисы при запросе откровенного контента, если стоит фильтр «без ограничений» или при отсутствии фильтров.

  • Алиса говорит, что такого контента у неё нет или что она не смогла найти такой контент, но его можно найти в Яндекс Музыке (необходимо проверить).