Ключевые цифры. Как заработать больше, используя данные, которые у вас уже есть

Сетка показывает, какие тесты были обсуждены, исполнены, отложены или завершены. В колонках указаны основные выявленные нами зоны для обучения или места, для анализа которых нам нужны были дополнительные знания.

Реализация

Последняя и, возможно, самая существенная часть цикла «от анализа к действию» – это реализация. Именно на этом этапе особенно поможет работа, правильно проведенная на предыдущих четырех стадиях. Все они направлены на то, чтобы сделать жизнь лучше и повысить осведомленность о тестах и связанных с ними улучшениях.

В основе этого процесса лежит простая мысль: вы можете провести все нужные анализы и тестирование и затем обменяться информацией, – но все это не приведет к улучшению того, что вы делаете на практике, и ваша работа потеряет всякий смысл. В итоге все будет зависеть от человека, который занимается реализацией программы, и от того, чему он смог научиться.

Большинство рекомендаций, основанных на модели «от анализа к действию», носят тактический характер и могут показаться незначительными. Однако когда эти постепенные улучшения применяются в целом ряде программ, они могут сложиться в нечто важное. К примеру, наш клиент рассчитал, что совокупный эффект от внедрения всех идей модели «от анализа к действию» приведет к росту доходов на 100 миллионов долларов в год. Для этого компании потребовалось «всего лишь» улучшить десятки небольших операций – например, оптимизировать содержание поля «тема» в электронных сообщениях, что может заставить больше респондентов открывать письма, а это, в свою очередь, ведет к росту продаж. Небольшие изменения приводят к огромной отдаче.

Покончив с основами модели «от анализа к действию», поговорим теперь более детально о стадиях анализа и тестирования. В ходе этого процесса я поделюсь с вами несколькими примерами, как мы помогли компаниям оптимизировать их коммуникацию. Давайте для начала посмотрим на то, каким образом данные улучшат творческий продукт, затем изучим несколько продвинутых способов тестирования в цифровом мире, а закончим наш рассказ примером компании TD Ameritrade (нашего клиента, которому удалось добиться невероятных результатов после оптимизации деятельности своих кампаний).

Творческий характер обратной связи

Убедить людей в том, что аналитика может быть катализатором свободного творческого процесса, не так-то просто. Я достаточно долго занимался аналитикой в «творческой» среде коммуникационного агентства и знаю, что союз аналитиков и творческих сотрудников, вынужденных работать вместе, не всегда бывает удачным.

Творческие сотрудники часто воспринимают работу аналитиков с предубеждением. Их считают «бездушными» и думающими исключительно в терминах вроде «прибыль на инвестиции». Считается, что они оценивают качество новых идей, не видя перспективы, а глядя в прошлое – тем самым они защищают сложившийся порядок вещей и встают на пути инновации. Аналитики, с их бесконечными фокус-группами и исследованиями рынка, способны (по мнению других) задушить любую творческую мысль. Из-за этого аналитика часто воспринимается как препятствие для новых идей и враг «истинной» творческой инициативы.

Я соглашусь, что тестирование (или любой другой дизайн формы данных) может оказаться совершенно непродуктивным, но только если вы не учитесь на уроках прошлого. Да, чрезмерное, навязчивое тестирование может замедлить творческий процесс. Но основные принципы дизайна и коммуникаций уже используются компаниями довольно долго, и они не требуют проведения одного теста за другим. Экспертам в соответствующих областях должно быть предоставлено право вето по отношению к идеям слишком рьяных аналитиков. Здесь вам может помочь система управления тестированием, обычно включающая в себя несколько основных компонентов.

– История тестирования. Результаты предыдущих тестов должны быть тщательно и последовательно задокументированы, после чего необходимо обеспечить их хранение. Как минимум это может быть простая электронная таблица, в которой перечислены все тесты, проведенные в течение последних лет, их цели, основные гипотезы и результаты. Вряд ли вы захотите вновь изобретать колесо.

– Документация тестирования. Каждому тесту должен соответствовать специальный документ – спецификация, в которой перечислены все основные гипотезы, формат теста, сроки проведения, ожидаемые выгоды, расходы, показатель прибыли от капиталовложений и имя сотрудника, ответственного за проведение. Этот детальный документ позволяет стандартизировать все входные параметры, необходимые для создания истории тестирования.

– Воронка тестирования. Воронка тестирования позволяет отслеживать все настоящие и запланированные тесты. В зависимости от количества проводимых вами тестов и сложности вашей организации это может быть и простая электронная таблица с указанием всех запланированных тестов с коротким описанием, указанием сроков и текущего статуса, и сложные платформы, управляющие масштабными рекламными кампаниями.

– Руководства к действию. Недостаточно просто собрать результаты прошлых тестов в едином хранилище идей. Все полученные выводы должны быть сгруппированы в виде руководств к действию, которые затем нужно довести до всей организации. И еще раз отметим, что проведенные и протестированные принципы не требуют повторной или многократной проверки.

– Приоритеты для тестирования. Для каждого нового теста желательно установить приоритет на основании нескольких параметров: 1) истории тестирования; 2) руководств к действию; 3) текущего содержания воронки тестирования; 4) размера потенциального показателя прибыли от капиталовложений. Установление приоритетов позволит вам избежать лишних проверок.

Я знаю всего несколько компаний, в которых проводились бы соответствующие и правильные испытания. Обычно справедливо обратное. Творческие решения большинства компаний не выживают под натиском данных – ведь все эти решения основаны на крайне субъективных мнениях специалистов или, хуже того, на том, что эксперт в области веб-аналитики Авинаш Кошик называет HiPPO (акроним от Highest in Payment Person’s Opinion – «мнение лица с самой высокой зарплатой»).

Это означает, что компании склонны терять миллионы долларов. Они не тестируют новые идеи и не способны четко понять, насколько та или иная идея эффективна. Системы управления тестированием предназначены помогать и таким компаниям. Они способны выявить отсутствие нужных данных и зоны, требующие обязательного тестирования. Помимо этого, они помогают сделать тестирование неотъемлемой частью творческого процесса. Из всех аналитических инструментов, способных питать творческую работу, с тестированием не может сравниться ничто другое.

Тестирование в цифровом мире

Мы вкратце продемонстрировали принципы тестирования на примере компании IBM. Однако подход «от анализа к действию» может применяться повсюду, особенно в цифровых каналах, где возможности для тестирования кажутся почти безграничными. Приведу пример. Мы пытались улучшить домашнюю страницу интернет-магазина Kodak при помощи нескольких тестов. Ниже вы увидите первоначальный вариант страницы, который мы хотели оптимизировать. Однако сотрудники Kodak не видели никакой проблемы, а просто хотели знать, можно ли слегка улучшить внешний вид.

Для оценки мы создали шесть различных страниц. Иными словами, испытания класса A и B превратились в испытания A, B, C, D, E, F. Приведенный ниже вариант оказался лучше остальных и привел к 11,3 % роста дохода – всего лишь за счет изменения расположения элементов.

У этого подхода был весомый недостаток. Мы знали, какой из вариантов страницы показал наилучшие результаты, но никак не могли выделить тот отдельный элемент, который отвечал за различие в результатах. Чуть позже я покажу вам несколько методов, помогающих в точности выявить, что вызывает различия. Однако перед этим позвольте мне сказать одну важную вещь.

Тестирование позволяет исключить субъективизм и мнения отдельных людей в процессе принятия решений. Вам может нравиться один дизайн страницы Kodak, а мне – другой, однако лишь тестирование скажет, кто из нас прав. Вместо того чтобы обсуждать различные версии, основываясь на собственном вкусе, опыте или аналогиях, мы можем просто