А/б тест емейл-рассылки: как повысить основные метрики

Litmus – сервис для анализа и тестирования писем

Самый популярный онлайн-сервис для проверки писем – Литмус. И это не только благодаря функционалу их сервиса, а ещё и благодаря их экспертному блогу и видеоконтенту. Компания изучает особенности всех почтовиков, описывает обновления, изучает рынок. Поэтому по праву можно их считать одними из главных экспертов в области емейл-маркетинга.

Litmus содержит в себе набор продуктов, но основным и самым популярным для емейл-маркетологов считается тестирование письма в разных браузерах.

Что такое тестирование вёрстки в Litmus и как это работает?

Этот сервис проверит ваш шаблон письма на 70+ почтовых клиентах и ​​устройствах в считанные секунды:

• Подсветит неработающие ссылки
• Найдёт изображения без альт-текста
• Покажет как отображается письмо в разных браузерах и т.д.

Как работает Литмус-тест?

• Вы отправляете тестовое письмо.
• Сервис открывает письмо в разных почтовых клиентах. Стоит сказать, что для тестов используются не эмуляторы, а реальные устройства.
• Litmus за считанные секунды делает скриншоты того, как ваша рассылка выглядит на разных почтовых клиентах и ​​устройствах.
• В личном кабинете вы можете просмотреть результаты и, при необходимости, поделиться ссылкой на тест.

Согласитесь, чтобы запустить такой тест без помощи сторонних программ придется потратить кучу времени, запастись сотней устройств и учётных записей. А так всё готово за считанные минуты.

Из явных недостатков то, что тестировщик иногда привирает что с письмом всё прекрасно, хотя при просмотре на реальном устройстве видны проблемы с вёрсткой.

Как работает Litmus Builder?

В редакторе писем вы можете:

• верстать письма с нуля,
• загрузить готовый код через zip или просто скопировав
• выбрать готовые шаблоны для редактирования.

Работа с письмом ведётся только в HTML и CSS .

Так же встроена проверка темы письма, о которой стоит сказать отдельно.

Subject Line Checker

Проверяет вашу тему и показывает предварительный просмотр в режиме реального времени более чем в 15 популярных почтовых клиентах. Чтобы получить доступ к инструменту, нажмите в меню «View» и выберите «Subject Line Checker».

Subject Line Checker автоматически заполнит поле «From» исходя из вашего адреса учетной записи Litmus и строки темы с заголовком документа Builder и подсветит всякого рода ошибки. Пока поддерживается только проверка на английском языке.

Где найти Spam test?

Как утверждает главная страница – вы больше не будете тратить время на создание кампаний, которые ваши подписчики никогда не увидят. Спам-тест поможет быстро выявить потенциальные проблемы и даст полезные советы как попасть во «Входящие».

Согласитесь, перспективы использования сервиса довольно радужные, но и цена кусается.

Цена вопроса: от $99 для 1 пользователя только за превью писем. От 199$ за полный пакет услуг.

Бесплатный тестовый период: доступен в течение семи дней.

4 из 5. Очевидные минусы за то, что не всегда можно выявить проблемы с письмами и при этом довольно высокая цена. Даже в платных годовых тарифах есть ограничения на отправку писем.

Оценка по пятибалльной шкале: ★ ★ ★ ★ ☆

Какой инструмент рассылки выбрали

Мы остановились на MailChimp. То, что это подходящий для нас инструмент, мы поняли только после его сравнения с другими платформами. Первые впечатления от использования были положительными. Сервис включает в себя все необходимые нам возможности: стабильную доставку писем, инструменты аналитики, оперативную техподдержку, триггерные рассылки, a/b тестирование. Мы были готовы выбрать англоязычный сервис и отсутствие русского языка не пугало нас.

В первый день работы с ним поняли, что интерфейс удобный и достаточно простой. Кампании, данные о подписчиках и отчеты — все находится на видном месте.

Кроме платных тарифов MailChimp содержит и бесплатный тариф с основными базовыми функциями и рассылкой на 2 тыс. адресов. Мы выбрали Premium на 20 тыс. контактов за $399. По стоимости нас полностью устраивает.

Сервис позволяет создать письмо для рассылки с нуля или на основе готовых шаблонов:

Письмо с нуля собирается в визуальном редакторе из готовых элементов:

И конечно же, можно протестировать письмо в эмуляторе почтовых клиентов:

MailChimp также отлично интегрирован с Litmus, что позволяет более тесно использовать эти два сервиса. Протестировав отображения письма в Litmus, его можно сразу же отправить в MailChimp, чтобы начать рассылку.

Помимо обычных рассылок MailChimp позволяет создавать цепочки триггерных писем на определенные действия пользователей.

Допустим, можно задать приветственное письмо, которое будет отправляться каждому новому подписчику.

Более гибким способом взаимодействия оказалось API и специальные события, с помощью которых настроили автоматическую рассылку триггерных писем с нашим конструктором. Например, когда пользователи оплачивают тарифы или у них заканчивается количество ответов с формы.

Что важно учитывать перед проведением a/b тестирования?

1. Тестируйте один элемент в одном письме. Или заголовок, или цвет кнопок, или призыв к действию, или количество ссылок. При тесте нескольких элементов вы не поймете, какой именно элемент сработал хорошо, а сочетание элементов может вообще не дать результата, если, например, цвет кнопки сработал хорошо, а текст — наоборот. 
2. Учитывайте контекст. На открываемость и кликабельность писем могут влиять крупные политические и мировые события, а также государственные праздники и выходные дни.
3. Используйте похожие сегменты. Не используйте тест на разных возрастных категориях, а также одновременно на новых подписчиках и тех, кто давно вас знает. Помните о сегментации и примерном равенстве тех сегментов, на которых вы проводите тест.
4. Используйте креатив. Любые креативные и неожиданные для аудитории решения лучше тестировать. Креативы, использованные на полной аудитории, могут не получить отклика или вызвать волну отписок, что навредит репутации отправителя.
5. Не используйте тестирование на очень большой базе. Если ваша база подписчиков насчитывает более 30000 контактов, мы рекомендуем разбить ее на несколько частей и провести несколько тестов.
6. Не используйте тестирование на очень маленькой базе. Если вы будете проводить сплит-тест на небольшой аудитории, будет большая вероятность случайных совпадений и ошибок.

Если вы не знаете, что такое А/Б тест

А/Б тест — это способ проверить, какой из вариантов сообщения более эффективный и, соответственно, какой лучше выбрать. Эффективный — значит улучшающий метрики. В Carrot quest можно тестировать разные автосообщения и даже сравнивать форматы между собой, но сегодня мы посмотрим, как провести А/Б тест рассылки.

Для А/Б теста берётся база, делится в случайном порядке пополам и разным половинам отправляется одно и то же письмо, но с разными элементами. Тестировать можно всё, что влияет на действия пользователей: тему письма, имя отправителя, вёрстку, картинки в письме, цвет кнопок, призывы к действию и т.п. Далее вы смотрите по статистике, какое из писем сработало лучше, и отключаете менее эффективный вариант письма.

Вот пара статей по теме:

• Статья с основами: что такое А/Б-тест, что можно тестировать и как его проводить.
• Статья для продвинутых: на какие метрики надо смотреть при проведении А/Б-теста.
• Мини-кейс с А/Б-тестом поп-апа (чтобы посмотреть, как еще это бывает).

Какие элементы можно тестировать?

Вы можете тестировать любой элемент письма. Вы можете изменить открываемость на 5-15% исключительно за счет изменения одного элемента. Это могут быть такие элементы, как:

1. Имя отправителя

Чаще всего используют три типа имен: имя личного бренда, название компании и сочетание имени и компании. От имени отправителя зависит ваша узнаваемость, поэтому если вы не знаете, что сработает лучше — название бренда или ваше имя, мы рекомендуем провести тест. Также на некоторых аудиториях хорошо работают креативные названия вроде «Ваши друзья из…».

2. Заголовки и прехедеры

Можно провести много экспериментов с заголовками писем. Например, вы можете протестировать, как влияет на показатели:
— добавление эмодзи и специальных символов, Юникода;
— добавление персонализации (использование в заголовке имени получателя);
— использование утвердительных предложений вместо вопросительных и наоборот;
— использование психологических приемов (любопытство, страх, ограничение по времени и др.).

Прехедер тоже влияет на открываемость писем. Вы можете делать разные варианты прехедера и выявлять его влияние на свою целевую аудиторию. Кроме того, прехедеры раскрывают основной заголовок.

3. Время отправки

Показатели эффективности рассылки могут сильно разниться. Одни подписчики могут активнее читать письма по дороге на работу около 9 утра, другие — по вечерам после работы. Тестируйте время отправки, чтобы знать, когда читатели готовы открывать ваши письма и воспринимать информацию из них.

5. Визуальные элементы

Разные аудитории по-разному реагируют на использование визуальных элементов. Вы можете использовать в теле письма такие элементы, как:
— gif-анимации;
— таймер (например, до окончания акции);
— видео из youtube;
— баннеры с кнопками и без.

Визуальные составляющие могут как привлекать внимание, так и напротив отталкивать пользователей. Покажите их небольшому количеству читателей и посмотрите на отклик, прежде чем показывать всей аудитории

6. Количество и внешний вид ссылок

Иногда от количества повторений ссылок на целевую страницу заметно увеличивается конверсия, однако это может понравиться не всякой аудитории. Проверьте, как количество ссылок и их внешний вид (например, выделение цветом или невыделение) влияет на вашу аудиторию. 

7. Призыв к действию

Призыв к действию или call-to-action, CTA, особенно актуален для продающего контента. Эффективный CTA повышает кликабельность писем и их конверсию. Вариантов для тестирования много, поэтому выбирайте тот, который подойдет вашей целевой аудитории. Вы можете тестировать разные CTA. Например, сравните реакцию на два из следующих призывов к действию:
— кликабельная картинка;
— кнопка с надписью;
— кликабельная фраза (ссылка).

В свою очередь вы можете тестировать варианты цвета кнопок и формулировок CTA.

9. Обращение к аудитории

Проанализируйте, как реагируют пользователи на официальный и неформальный тон, на обращения «на ты» и «на Вы». Путём тестов вы узнаете, какой тон общения в рассылке получит больше отклика от ваших подписчиков.

Этап 5. A/B тестирование для писем

После того как письма опробованы на себе, не стоит сразу рассылать их всей базе (всему выбранному сегменту). Ваше впечатление – субъективное, а более объективную оценку дает реакция контрольной группы.

При A/B тестировании выбираются две группы (по 20% от базы), каждой из них отправляется свой вариант письма. Можно задать альтернативы по:

• длине и формулировке заголовка и прехедера;
• имени отправителя;
• степени персонализации и тону обращения;
• формату контента (текст или картинки с текстом);
• формату ссылок;
• формулировке CTA;
• времени отправки.

Задаете, что вас больше интересует – открытия или переходы по ссылкам. Какой вариант собирает большее их количество по истечению выбранного промежутка времени, тот и будет разослан остальной части подписчиков.

Так за пять этапов вы доводите свою рассылку до идеала. Специалист шаг за шагом исправляет возможные недочеты и тем самым повышает качество писем. Подписчики непременно оценят такую щепетильность.

API возвращает JSON строку, например:

Copy all

{"data":{"127.0.0.1":{"network_type":"unknown","country":"","appears":0,"frequency":0,"sha256":"12ca17b49af2289436f303e0166030a21e525d266e209267433801a8fd4071a0"},"stop_email@example.com":{"frequency":1001,"updated":"2021-02-22 12:06:14","spam_rate":0,"exists":1,"frequency_time_10m":0,"frequency_time_1h":0,"frequency_time_24h":0,"appears":1,"disposable_email":1,"sha256":"6d42ca0235d72b01a2b086ad53b5cfac24b5a444847fad70250e042d7ca8bf59"}}}

Copy all

{"data":{"email_08c2495014d7f072fbe0bc10a909fa9dca83c17f2452b93afbfef6fe7c663631":{"frequency":4,"updated":"2018-10-31 00:07:21","spam_rate":1,"exists":1,"frequency_time_10m":0,"frequency_time_1h":0,"frequency_time_24h":0,"appears":0,"disposable_email":1}}}

Для хэша адреса IP v4:

Copy all

{"data":{"ip4_f46604ded89bbd0e8e478172a9a650f4825a763053ad2e3582c8286864ec4074":{"frequency":13626,"updated":"2019-05-15 05:01:23","spam_rate":1,"network_type":"hosting","country":"GB","frequency_time_10m":0,"frequency_time_1h":0,"frequency_time_24h":0,"appears":1}}}

Расшифровка ответа:

data — обычно массив проверенных записей представлен в следующем формате: «record»: {массив проверенных результатов}. Иногда ответ «data» возвращает строку «In progress», это означает, что параллельный PHP-процесс работает с точно такими же параметрами — auth_key, method_name и records.

Важно! Ответ «In progress» является значимым его следует учитывать, так как если вызов API содержит большое количество элементов, то они могут быть проверены частично и выдастся ответ «In progress». Только при повторном вызове будут проверены все оставшиеся элементы

Массив с проверенными записями содержит следующие поля:

• appears — флаг присутствия в черных списках (показывает блокировку на настоящий момент),

• sha256 — хэш sha256 адреса
• network_type — принадлежность к определенному типу сети (возможно в дальнейшем добавятся новые типы):

• spam_rate — спам-рейтинг от 0 до 100%. 100 означает точно спам (отношение спам запросов к общему количеству запросов),
• country — буквенный код страны, которой принадлежит IP адрес, в формате ISO 3166-1 alpha-2
• exists — существует ли данный email (0 — не существует, 1 — существует, null — пустой статус, адрес не находится в списках в данный момент),
• disposable_email — является ли данный email временным (0 — обычный, 1 — временный, null — пустой статус, адрес не находится в списках в данный момент),
• frequency — количество сайтов отметивших запись как спам. Может быть от 0 до 9999 (показывает всю активность с самого начала обнаружения адреса),
• frequency_time_10m — активность за 10 минут (показывает сколько попыток спама было зафиксировано),
• frequency_time_1h — активность за 1 час (показывает сколько попыток спама было зафиксировано),
• frequency_time_24h — активность за 24 часа (показывает сколько попыток спама было зафиксировано),
• in_antispam — IP адрес найден в чёрном списке антиспама,
• in_security — IP адрес найден в чёрном списке безопасности (brute-force),
• domains_count — число доменов, найденных на IP адресе.

В случае указания параметра «date» данные ответа приводятся только на указанную дату. Посредством POST запроса можно за один раз отправить на проверку до 1000 записей.

Если не было активности с адреса в течение 14 дней, то запись удаляется из черных списков, но вся история остаётся.

Необязательные GET параметры:

• ip — ip адрес для проверки (IPv4 или IPv6 в стандартном текстовом виде виде)

• email — email адрес для проверки (Результат выдается за последние 6 месяцев)

• date — дата в формате YYYY-MM-DD, используется при необходимости указания конкретного дня, за который требуется подсчитать статистику (только для IP адресов.)
• email_<SHA256> — хэш SHA256 адреса email
• ip4_<SHA256>- хэш SHA256 адреса IPv4
• ip6_<SHA256>- хэш SHA256 адреса IPv6

Пример запроса c IP:

Copy all

https://api.cleantalk.org/?method_name=spam_check&auth_key=123456&email=stop_email@example.com&ip=127.0.0.1

Пример запроса c date:

Copy all

https://api.cleantalk.org/?method_name=spam_check&auth_key=123456&ip=127.0.0.1&date=2017-01-31

Copy all

https://api.cleantalk.org/?method_name=spam_check&auth_key=123456&email=email_08c2495014d7f072fbe0bc10a909fa9dca83c17f2452b93afbfef6fe7c663631

Пример с хэшем адреса IP v4:

Copy all

https://api.cleantalk.org/?method_name=spam_check&auth_key=12345&ip=ip4_f46604ded89bbd0e8e478172a9a650f4825a763053ad2e3582c8286864ec4074

Разъяснение ответа:

• • • stop_queue — прервать последовательность размещения комментария (комментарий почти 100% спам);
    • spam — комментарий — спам, возможна отправка на ручную модерацию если флаг stop_queue == 0;
    • js_disabled — выключен ли JavaScript;
    • comment — комментарий сервера относительно отправителя, для вывода пользователю;
    • codes — код ответа сервера; 
    • blacklisted — отправитель находится в черном списке;
    • fast_submit — слишком быстрая отправка;
    • account_status — включен ли аккаунт;
    • id — ID запроса (полезно знать при обращении в тех поддержку);
    • allow — разрешено ли сообщение (1) или нет (0);

Т.е. если allow = 1, то сообщение не спам. Если allow = 0 — сообщение не разрешено, это спам. Возможны варианты:

allow = 0 && stop_queue = 1 — точно спам.

allow = 0 && stop_queue = 0 — скорее всего спам. В этом случае также возможны варианты:

allow = 0 && stop_queue = 0 && spam = 0 — отправить на ручную модерацию.

allow = 0 && stop_queue = 0 && spam = 1 — поместить в папку Spam в WordPress.

Остальное — информационные флаги для вывода подходящих сообщений визитёрам сайта. 

Подробно коды ответа сервера вы можете изучить в конце этой статьи https://cleantalk.org/help/api-without. 

Доступные возможности:

• Персональные черные / белые списки помогают вам блокировать нежелательных пользователей или разрешать действия пользователей, которые были распознаны как спамеры.
• Опция «Стоп-Слова» позволяет вам блокировать комментарии и имена пользователей, которые содержат любое слово из вашего списка Стоп-Слов.
• позволяет блокировать все комментарии/регистрации пользователям из отмеченных вами стран.
• Универсальный антиспам плагин — этот плагин может быть установлен на любой веб сайт или CMS.

Примечание: Опции «Черный список стран»и «Стоп-Слова»доступны после покупки Расширенного Пакета. Подробности можно увидеть на странице обновления подписки.

WordPress

Настройки исключений находятся здесь: Панель Управления WordPress Вашего Вебсайта —> Настройки —> Anti-Spam by CleanTalk —> Продвинутые настройки —> Exclusions

Исключения страниц

Для исключения страниц добавьте адрес страницы в поле «URL exclusions». Вы можете добавить несколько страниц, разделив их запятыми.

Для более гибкой настройки исключений вы можете использовать регулярные выражения.

Пример 1: Если вам нужно исключить группу страниц из категории «some»:

• example.com/some/thing
• example.com/some/one
• example.com/some/body
• example.com/some2/test

включите опцию «Use Regular Expression in URL Exclusions» и введите в поле «URL exclusions» слово «some» — все страницы, в адресе которых встречается слово «some», будут исключены из проверки.

Пример 2: если надо исключать страницы из категории «some», но не из категории «some2», то можно использовать более точное регулярное выражение \/some\/.

 Исключения по полям форм

Для исключения полей добавьте имя поля вашей формы в поле «Field name exclusions». Вы можете добавить несколько полей, разделив их запятыми.

По аналогии с исключениями по страницам вы можете использовать регулярные выражения для более гибкой настройки исключений полей. Для этого включите опцию «Use Regular Expression in Field Exclusions»

Исключения по ролям

Для исключения по ролям выберите группу пользователей в списке. Для выбора нескольких групп пользователей удерживайте клавишу CTRL на вашей клавиатуре.

Что может Mailtrap: spam score, анализ HTML, интеграции

После регистрации пользователь получает доступ в личный кабинет. Здесь можно создавать проекты и тестовые папки «Входящие» (инбоксы). Над проектами можно работать совместно с другими пользователями. Эта функция доступна платным подписчикам.

Владельцу свободной подписки Mailtrap выделяет один инбокс размером 5 МБ. В нём можно хранить до 50 писем одновременно. В месяц владелец бесплатного ящика может получить до 500 писем.

Интерфейс личного кабинета

В инбоксе доступны данные для настройки SMTP и POP3. Они понадобятся для конфигурации тестовых рассылок.

Данные для настройки SMTP

Также в тестовой папке «Входящие» есть список интеграций. С помощью выпадающего меню можно выбрать подходящий вариант. Mailtrap интегрируется с Ruby on Rails, Django, Laravel, Yii2, Zend, WordPress и так далее.

На платном тарифе пользователю доступен тестовый электронный адрес

Платная подписка позволяет автоматически форвардить тестовые письма на реальные электронные адреса. Настройки доступны на вкладке Auto Forward. Сообщения можно пересылать на конкретные адреса или на все электронки выбранного домена, например, @hexlet.io.

Настройки автоматического форвардинга

На вкладке Manual Forward можно вручную пересылать тестовые письма на реальные адреса. На вкладке Team Members можно поделиться инбоксом с членами команды. Функции доступны после оформления платной подписки.

Чтобы проанализировать тестовое письмо, выберите его во входящих.

На вкладке HTML можно оценить внешний вид письма. Чтобы увидеть, как выглядит сообщение на девайсах разного типа, нажмите отмеченную на иллюстрации иконку.

Проверяем отображение письма

На открывшейся странице можно проверить адаптивность письма.

Проверяем отображение письма на экранах с разным разрешением

На вкладке HTML Source можно увидеть письмо в формате HTML.

На вкладке Raw доступны необработанные данные, полученные с SMTP.

Проверяем необработанные данные

На вкладке Analysis доступны сведения об индексе спамности письма, а также информация о включении рассылки в чёрные списки.

Изучаем spam score письма

Обратите внимание, на этой вкладке есть расшифровка рейтинга спамности: список правил и вклад каждого правила в spam score. Используйте эти данные, чтобы уменьшить вероятность фильтрации рассылки

На вкладке Check HTML доступны результаты автоматической проверки HTML и CSS сообщения. Информация представлена в формате «Строка с ошибкой — Название правила — Название клиента, для которого код невалидный».

Изучаем результаты автоматической проверки HTML и CSS

На вкладке SMTP Info есть список получателей рассылки. Функция доступна после оформления платной подписки.

Мы рассмотрели возможности Mailtrap. Переходим к практической части: настройке SMTP и рассылке тестовых писем.

Увеличить Open rate письма

Каждый человек ежедневно получает десяток или пару десятков емейлов ежедневно

Как привлечь внимание к себе? Что получатель видит в почте сразу? Имя отправителя и тему письма. Это то, что вызывает у него интерес и помогает понять: стоит ли читать дальше

Тема письма

Вот две темы одного и того же письма:

Вариант А1: зовёт в поход! Вы с нами? Ура, весна! Гуляем на свежем воздухе вместе с .

Вариант Б1: ?‍️ Все бегут! А вы? Ваша спортивная форма уже здесь

Какая тема вам нравится больше: какое письмо бы вы открыли? Читали ли вы о том, что эмодзи повышают конверсию? А может, вас напрягает, что название компании упоминается аж два раза и это отчётливо отдаёт рекламой?

Если вы уверенно кивали на предыдущие вопросы, то вы… ошибаетесь:) Извините, это была уловка. Мы сами на неё попали и сами думали точно также. Оба письма показали приблизительно одинаковый результат: Open rate был в районе 22%. Если быть совсем честными, то вариант Б1 оказался на полпроцента эффективнее:

Вариант А: 22,1%;

Вариант Б: 22,6%.

С другой стороны, так как база рассылки была большая, эти 0,5% превратились в пару сотен человек, что уже неплохо.

Какие на основе этого можно сделать выводы:

1. Не следуйте рекомендациям из кейсов слепо. Идеально, если все из них вы проверяете на практике. Но кейсы могут быть отличным ориентиром и давать идеи.
2. Даже незначительное изменение конверсии может приводить к большим результатам. Особенно на больших выборках. Не пренебрегайте этим.

Имя отправителя

Множество кейсов говорит о том, что письма, где в имени отправителя указано реальное имя человека, открываются чаще, чем те, где просто указано название компании. Они воспринимаются как более личные и менее рекламные. Мы провели тест.

Вариант А: Имя менеджера+название сайта

Вариант Б: Только название сайта

Вот результаты, которые мы получили:

Имя отправителя	Open rate	Пожаловались на спам
Имя менеджера+название сайта	18%	4%
Только название сайта	15%	1%

Конверсия в открытие письма с именем менеджера выше, чем без него

Но обратите внимание, что в этом случае также чаще жалуются на спам. Скорее всего, это связано с обманутыми ожиданиями людей: они ждут личного сообщения, а получают рекламное и расстраиваются

Можно попробовать добавить в письмо какой-то персонализации и посмотреть, как изменится ситуация.

Время отправки

Время отправки письма — это частая тема для споров емейл-маркетологов. Самый популярный совет — вечер четверга. Но ирония в том, что из-за популярности этого совета количество писем, отправляемых вечером в четверг, значительно увеличилось. К тому же мы всегда агитируем за тестирование, а не слепое следование советам других бизнесов.

Поэтому мы провели А/Б тест. Мы разделили базу емейлов пополам случайным образом и отправили одинаковое письмо в разное время.

Вариант А: пятница вечер;

Вариант Б: понедельник утро.

Вот, какие цифры open rate мы увидели :

Вариант А: 17%;

Вариант Б: 22,5%

Результат очевиден: пользователи лучше открывают письма утром в рабочий день, а не вечером перед выходными. Теперь мы точно знаем, что не стоит отправлять письма в пятницу вечером (вероятно, лучше это делать утром) и можно поэкспериментировать с днём недели: может оказаться, что понедельник — не максимально эффективный вариант.

Но не принимайте это как универсальный совет: лучше проведите аналогичный тест на своей аудитории. Разделите её на две части и отправьте одно и то же письмо в разное время.

Аналитика

10. Собирайте статистику

Следите за статистикой ваших рассылок. Посмотреть её можно в разделе Авто —> Статистика рассылок.

Поведение пользователей — лучший показатель качества рассылки. Если вы видите, что процент открытия, ответов и переходов по ссылкам большой, значит, вы делаете всё хорошо. Если письма не доходят (высокий Bounce Rate), пользователи отписываются или жалуются на спам. 

Если вы продолжите рассылать письмо с плохой статистикой, то рискуете навсегда погрязнуть в спам-фильтрах и не достучаться до пользователей.

11. Следите за Bounce Rate

Bounce Rate — показатель недоставленных писем. Высокий Bounce Rate вреден для репутации отправителя. У интернет-провайдеров обычно есть лимит Bounce Rate, и если отправитель его превышает, ему выносят предупреждение или вовсе блокируют.

Существует два вида Bounce Rate:

Soft Bounce (мягкие возвраты)

Случается, если у адресата переполнен почтовый ящик, письмо слишком большое или случились сбои на сервере получателя.

Если дело в переполненном ящике адресата, возможно, его стоит отписать — он явно давно не проверял почту.

Hard Bounce (жесткие возвраты)

Адреса, по которым получен Hard Bounce, лучше исключить из рассылки.

Почтовые службы строго следят за статистикой Hard Bounce, и если показатель превышает 5%, отправителя блокируют.

12. Следите за жалобами на спам

Почтовые сервисы строго следят за реакцией пользователей. Если слишком много пользователей отмечают ваши письма как спам — это плохой сигнал.

У главных почтовых служб есть допустимая норма жалоб, после после превышения которой вас ждут проблемы. Стоит следить, чтобы процент жалоб не превышал 0,5%.

Это меньше, чем у почтовых сервисов, — мы специально так сделали, чтобы уберечь пользователей от потерь. Если что-то пошло не так, можно решить проблему с нами до того, как почтовые службы заблокируют домен.

Посмотреть процент жалоб можно в статистике ручных рассылок и автосообщений.

Этап 1. Контент

Начинаем с содержания самих писем. Проверка стилистики и орфографии обязательна. Какое доверие может быть к фирме, где работают непрофессионалы?

Не стоит полностью полагаться на сервисы проверки. Они выявляют лишь вопиющие ошибки, но не учитывают контекст (например, не увидят разницу в написании «Ищете надежного поставщика?» и «Ищите лучше»).

Важно проверить и такие нюансы:

• Изображения. Они должны быть легкими и содержать alt-подписи.
• Стоп-слова. Их нужно убрать (особенно из темы и прехедера) во избежание попадания в спам.
• Длина заголовка и прехедера. Лучше придерживаться 5-7 слов.

В завершение убедитесь, что письма содержат приветствия и прощания. Это элементы этикета, которые влияют на общее восприятие предложения. Желательно также упомянуть, на какой адрес получатель может отправить ответ.

Subject line testing tools

16. SubjectLine

The SubjectLine tool is a great way to make a check of your subject line both for spam markers and for suggestions to increase your open rate. SubjectLine makes these determinations by looking at data collected from its many partners, so the benefit here is that you’re getting real-time, useful information on which to make some of your subject line-based decisions.

Sometimes the data you receive can be a little shallow, but it’s still a nice tool for evaluating subject lines in a general sense.

17. CoSchedule’s Headline Analyzer

Generally considered to be the single best headline testing tool out there, Headline Analyzer by CoSchedule is a great and handy resource to have in your back pocket. To be sure, a blog headline (of the sort Headline Analyzer was originally developed to test) and a subject line are a bit different, but they both incorporate many of the same features. That’s why Headline Analyzer is a great way to test your subject lines for grammar, structure, and length, among other things.

20. Send Check It

Send Check It is a simple yet fairly comprehensive subject line testing tool that looks for scannability, reading grade level, and character and word count. It also assesses the sentiment of your subject line, looks for spammy words, and checks punctuation.

This is a useful tool if you’re not sure why your subject lines aren’t doing so great and need some insight into where you might be going wrong.

• How to Write a Great Subject Line
• 11 Best Subject Line Styles to Increase Your Open Rates
• 12 of the Best Email Subject Lines We’ve Ever Seen

Bonus for WordPress users

• Log the emails that WordPress sends because it doesn’t by default.
• Check if WordPress can send emails thanks to a plugin.
• We have a checklist of email sending issues in WordPress that covers a few tools as well

А теперь тестируем

Тестируйте тему сообщений для увеличения показателя открытий писем. Но не забывайте — тема должна быть релевантной.

Как вы видите, в проведенном тесте явного фаворита выявить не удалось. И даже первый вариант темы не выглядел провокационным. Такое тоже бывает.

Проверяйте, какое содержание писем нравится вашим подписчикам больше. Изменяйте объем текста в письме, количество и содержание СТА (призыва к действию), наличие графических элементов, верстку письма — абсолютно любые элементы контента.

Чаще всего тестируют несколько вариантов писем: длинная портянка с большим количеством текста против одного лаконичного баннера с тем же предложением или просто 2 разных варианта исполнения дизайна/верстки.

Рассылка Royal Forest. A/B тест. 1 вариант
Рассылка Royal Forest. A/B тест. 2 вариант

Если речь заходит о сравнении различных комбинаций элементов, мы предлагаем действовать итерационно и тестировать все элементы по шагам.