IBC 2020 synopsis: Latent behavioral identification of viewers

Existing approaches to personalization of viewer experience on the “big screen” do not consider potential existence of multiple consumers in the households. The problem is that no existing method can perform identification automatically and/or quickly enough to personalize the TV or set-top box in accordance with the expectations of the person who is holding the remote control. This paper will present a novel method of latent behavioral identification of viewers by analyzing of how remote control is operated.

Behavioral biometrics works in the background to build up profiles based on a user’s unique actions — how do they click buttons and how do they move remote control. The set of profiles is dynamically converted to the algorithm that distinguishes the people in the household from each other in a matter of seconds.

Further development of this method is related to the study of the possibility of correlating the behavior of spectators with their psychophysical, sociological, ethnic, geographical and other characteristics. If possible, this creates an opportunity for the development of targeting algorithms that do not require the transmission of any sensitive personal information to back-end systems.
So far only limited set of tests has been performed to prove applicability of behavioral identification to personalize viewer experience. However, financial industry applies similar methods for advanced fraud protection for several years and it opens options for knowledge and algorithm transfer.

Maxim Samsonov is Deputy Director General of GS Labs where he manages R&D activities for GS Group – Russian investment multisectoral holding company. Prior to GS Labs he served as a CTO for Tricolor, one of the largest pay-tv operators in the world; СTO and COO for Nexign, a leading global BSS provider; and held various management and engineering positions in Russian, American and British technology companies. He received MSc in Computer Science from St. Petersburg State Technical University.

Латентная поведенческая идентификация телезрителей

Абонентский терминал (set-top box, STB) – устройство, посредством которого один или более абонентов получает доступ к услугам цифрового телевидения. Абонентский терминал управляется с помощью кнопок на нем и на пульте дистанционного управления (ПДУ), либо c помощью внешних приложений, например, на мобильных устройствах
Абонент (телезритель) – физическое лицо, пользующееся услугами цифрового телевидения. Считаем, что каждый абонент по своим социо-демографическим и\или потребительским характеристикам может быть отнесен к одному из сегментов Si
Системное событие – управляющее воздействие на STB, возникающее в результате нажатия кнопки ПДУ либо кнопки на STB.
Прикладное событие – изменение состояния приложения STB, происходящее как следствие системного события, либо при получении команды от внешнего приложения.
Фокус группа — набор абонентов, для каждого из которых известен его сегмент Sj и поток прикладных событий Fj . Для фокус-группы данные о событиях сохраняются на передающей стороне для всего периода сбора статистики. Это несколько лет измерений.

Мы предполагаем, что для решения задачи, сформулированной ниже, более эффективным будет использование прикладных событий. В то же время ничто не препятствует использованию системных событий в качестве альтернативы.

Целью является создание алгоритма, который по сегментации и измерениям для фокус-группы (Sj  , Fj), строит алгоритм сегментации на произвольном STB на основании потока прикладных событий на нем

C: ((Sj  , Fj)) → f, f: (Fk) → s, s ∈ {Sk}

причём 

  • Абонент, использующий целевой STB может меняться. Как следствие глубина использования потока событий на целевом STB не может быть “большой”
  • Алгоритм сегментации должен быть реализуем на “ограниченных” ресурсах, доступных на типичном STB
  • Алгоритм сегментации должен позволять реализацию на C++ c возможностью изменения его параметров в “широком” диапазоне без перекомпиляции, а путём обновления параметров модели на устройстве.