Как работает инфраструктура почтовых рассылок

    Успешность доставки крупных массовых рассылок зависит, в первую очередь, от двух факторов: корректности содержимого сообщения (кода HTML, заголовков, приложений) и источника отправки сообщений. Причём, если первое лежит на плечах заказчика рассылки, то второе — наша ответственность.

    В рассылке наибольшую роль играет источник, откуда отправляются сообщения. Это, пожалуй, один из важнейших факторов — например, тот же Яндекс позволяет принимать всего 200 писем в сутки из неизвестных подсетей и подобные ограничения есть у 99% почтовых сервисов.



    Одной из главных, если, даже, не самой главной задачей работы UniSender является преодоление этого ограничения. Для этого мы используем следующие решения:

    Первое. Большой парк серверов (на данный момент — 15 штук), расположенных в разных уголках Европы: Нидерланды, Великобритания, Испания. Серверов в России мы не держим принципиально: помните историю с сервисами ifolder.ru и maillist.ru, владельцами которых является компания «Агава»? Проблемы с одним заблокировали и другой. Сервера, расположенные по всему миру, способствуют уменьшению количества блокированных сообщений.

    Второе. Широкий канал (не менее 100 Мбит/с) позволяет доставлять большие объёмы сообщений в единицу времени: в среднем, от 30 до 100 тысяч писем в час для одного сервера (многое зависит от отклика и размера сообщений), что соответствует 8 – 28 сообщениям в секунду. И это только для 1 сервера – не забываем, что их у нас сейчас уже пятнадцать.

    Третье. Прямые соглашения с крупнейшими почтовыми службами — такими как mail.ru, yahoo.com, ukr.net и другими. Соглашения подразумевают, что к сообщениям от нас не применяются столь же жёсткие требования относительно количества сообщений в единицу времени, как для остальных, а FBL-соглашения, заключаемые отдельно с провайдерами, предоставляющими эту услугу, дают возможность получать информацию о статистике отправки пользователями наших писем в спам.

    Легальные рассылки — это не спам, а любой процесс, требующий контакта с пользователем через его почтовый ящик. Например, отправка подтверждения о регистрации, уведомлений зарегистрированным пользователям и т.д. Главное отличие легальной рассылки от спама — она ожидаема или запрашиваема самим пользователем.


    Четвёртое. Автоматический анализ для предотвращения спам рассылок, которые недоброжелатель может захотеть отправить через наш сервер. Для этого мы запрещаем прикреплять к сообщениям всё то, что может нанести вред компьютеру или ОС: исполняемые файлы, фреймы. Кроме того, мы анализируем исходящий контент на предмет наличия стоп-слов и подозрительного, с нашей точки зрения, контента.

    Даже несмотря на эти меры, спам-блоки иногда всё же происходят, и гарантированной защиты от этого нет. Используйте наши простые советы как избегать попадания ваших писем в спам. Самое главное правило очень просто запомнить — не занимайтесь спамом. Письма от вас должны быть ожидаемы пользователем.

    А если всё-таки случилось так, что ваша почта всё равно проваливаются в «ад для спама», у нас есть сотрудник, который занимается решением таких недоразумений, общаясь непосредственно с представителями почтовых сервисов. И это тоже важная часть нашей инфраструктуры.

    P.S. Эта статья продолжает цикл наших материалов о емэйл-маркетинге. Предыдущие материалы читайте в нашем блоге. Об услугах Unisender.

    UniSender

    42,00

    Сервис Email- и SMS-рассылок

    Поделиться публикацией
    Комментарии 61
      +2
      Эээээ… Вы спамеры, да?
        –6
        А как называть людей, организующих массовые рассылки? Мне, например, неприятно, что несмотря на все убранные чекбоксы состояния рассылок в профиле сайта, мне от него начинет приходить реклама, от которой еще и нельзя отписаться т.к. не подписывался. И это тоже спам, хотя вы можете называть маркетингом.
          +3
          Вам уведомление об этом комментарии на почту пришло?

          То, чем занимается Unisender, называется легальными рассылками и я подчёркиваю это в каждом посте. Спамеры соглашения с почтовыми сервисами не заключают. И клиентам компании не позволяется делать ничего, что может быть похоже на спам — например, рассылать письма по купленным базам почтовых адресов — в их же интересах, кстати говоря.
            –2
            Нет, они у меня отключены. И было бы неприятно, если бы все-равно приходили.
              +2
              Полностью с вами согласен. Я тут недавно переругивался с одним модным стартапом, который даже в Сколково попал, а занимался банальным спамом. После долгой переписки (пришлось даже в техподдержку их хостера писать) я добился своего, они отвалили.

              В общем, пидарасы случаются. Одно неясно: а Unisender-то тут при чём?
              0
              Спам — это незапрошенное письмо.
              Очень часто бывает что какой нибудь сайт присылает письмо (спам) через сервисы такие как например Unisender, пускай оно является легальной рассылкой сути это не меняет.
              Единственный плюс у легальных рассылок это возможность отписаться (если удастся в письме найти ссылку)
                +1
                Легальная рассылка — это значит Вы на неё подписались или возможность отправлять Вам сообщения есть в правилах того сервиса, где регистрировались. Так причём тут спам? (Но также стоит заметить, по опыту, что далеко не у всех сайтов в правилах есть такой пункт и считается, что если клиент зарегистирровался на сайте, то ему можно делать рассылки. Строго говоря — нельзя).

                Ссылка отписки у нас есть в 100% писем внизу, работает, само собой, без всяких паролей и регистраций.

          0
          1. Я правильно понимаю, что вы жёстко завайтлисчены у мейл.ру?
          2. А что с Яндексом? :)
          3. Правильно ли я понял, что вы заявляете, что шлёте от 30000*15*24 = 10 800 000 до 100000*15*24 = 36 000 000 писем в сутки?
            0
            1. Нет, жестко завайтлистчен там никто не может быть. Даже их собственный сервис рассылки с content.mail.ru. Но c mail.ru мы знаем, как работать и рассылку туда уходят без проблем (если не сразу, то в течение дня почти всегда).

            2. Яндекс — один из лучших почтовых сервисов, с очень хорошим спам-фильтров с минимумом ложных срабатываний. То есть с Яндексом всё тоже нормально.

            3. Нет, в сутки мы отправляем на порядок меньше. Сервера не работают на пиковых нагрузках каждую секунду, плюс в выходные нагрузка падает больше, чем на порядок.
              –1
              1. Вообще-то факт, что в мейл.ру есть неофициальный, но обширный вайтлист. Вы не знаете об этом и позиционируете себя, как специалистов по рассылкам в рунете? На всякий случай отмечу, что это был риторический вопрос.

              2. У вас есть объективная статистика, подтверждающая, что вы не попадаете в спам на Яндексе?

              3. Вы правы, я неверно понял данную фразу.
                +1
                Извините за оффтоп, а можно я поинтересуюсь — как так вышло, что вы комментируете только посты в блоге Unisender?
                  +2
                  Предлагаю на ваш выбор 2 версии:

                  а) Я профессионально занимаюсь почтовыми рассылками и спустя 2-3 ваших рекламных поста меня начало раздражать ваше неоправданное надувание щёк при заметной некомпетентности.

                  б) Я засланный казачок ваших конкурентов, нанятый на free-lance.ru для того, чтобы весьма эффективно показывать вашу некомпетентность в вашей же профильной сфере.
                    +1
                    Пункт «а» после некоторых высказываний вызывает очень большие сомнения…
                      +2
                      т.е.

                      а. вы конкурент
                      б. вы конкурент

                      Нет, у вас хорошие вопросы, но их настойчивость настораживает.

                      З.Ы. Нет, я не имею отношение ни к компании, ни к рассылкам.
                        0
                        можете пояснить вашу логику, почему «а» означает конкурент? я, например, почти не трогаю рунет в своей работе. а унисендер таки про рунет.
                    0
                    Извините, я забыл, что Вы — человек, живущий на Луне. Тогда вот Вам последние новости с нашей планеты:

                    1. Давайте не будем продолжать меряться знакомствами в mail.ru, а будем смотреть на веши с точки зрения бизнеса? Такой лист будем вреден самому почтовому серверу по понятным причинам. Пример — я жму постоянно «Это спам» на рассылки от «Моего Мира», они по идее должны мне перестать приходить и они перестают. «Жёсткий вайтлист» эту всю логику нарушит, соответсвенно будет отток пользователей почтового сервиса. Оно им надо?

                    2. Есть, мы монторим это с помощью так называемых seed email accounts.
                      0
                      А как же это?
                        0
                        1. Вы, к сожалению, немного не поняли про жёсткий вайтлист. Он не отменяет персональные правила пользователей мейл.ру, соответственно, описанной вами ситуации не произойдёт. Кроме того, оттекать русскоязычным пользователям просто некуда. Яндекс посимпатичнее, но со спамом всё так же хуже. На гмейл тянутся только гики. Рамблер — спам помойка.

                        2. Во, уже интереснее. Каким образом вы убеждаетесь, что данные с сидов соответствуют реальной обстановке? Банальный пример: на некоторых не российских почтовиках аккаунты, созданные в разное время, имеют различные настройки спам-фильтров. Соответственно, если бы на нём все сиды созданы давно, когда анти-спам настройки были не такими жёсткими, то проблему можно проворонить.
                        Возможно, вы ещё как-то измеряете попадание в инбокс?
                          0
                          1. Я не пользуюсь бесплатными почтовыми службами (кроме тестовых аккаунтов для работы), поэтому не могу судить о спаме с точки зреняи пользователя. Меня больше волнует вопрос спам-фильтрации с точки зрения отправителя. И вот здесь Яндекс работает гораздо лучше, чем mail.ru.

                          2. Трудно поверить, что правила фильтрации разные для разных аккаунтов. Какой смысл в этом дял почтового сервиса? Зачем поддерживать одновременно кучу разных правил? Какой в этом глубинный смысл?

                          PS. Для измерений на западе используют независимые службы типа ReturnPath, но мы их не используем, так как большая часть нашего трафика — в России, а они русские службы не покрывают мониторингом.
                            0
                            Кстати, есть персональный blacklist у пользователей mail.ru: http://help.mail.ru/mail-help/letters/action — раздел Отметить полученное письмо, как спам
                              0
                              2. Послушайте, это факт, я не знаю, зачем оно так сделано. Но я написал данный пример для того, чтобы указать на очевидные недостатки / сложности в мониторинге доставляемости с помощью сидов.

                              Кроме того, уважаемый, я уже немного подустал находить в ваших высказываниях фактические ошибки… ReturnPath уже давно мониторит mail.ru и rambler, собирается сделать Яндекс. Это вы называете «они русские службы не покрывают мониторингом»?

                              Пожалуйста, если не уверены на 100% — не утверждайте. Это вам кучу нервов сэкономит, а менее опытных людей не будут введены в заблуждение.
                    +1
                    хорошо написано, приятно такой (заведомо рекламный) материал четать
                      0
                      Ну, механика рассылок у всех одинакова, так что можете спокойно проецировать эту инфу на любой крупный аналогичный сервис. Отличия могут быть в цифрах — количество серверов и т.п., а задача была объяснить именно принцип — что не просто поставил на комп прогу и рассылай пользователям уведомления о регистрации сколько влезет.
                      0
                      1)как у вас дела с спамхаусом и что скажите про него?
                      2)почему то про прокси ничего не сказали?
                        0
                        1) СпамХаус к нам никаких претензий не предъявляет.

                        2) А причём тут прокси?
                        –2
                        Спам услуги на хабре? Оригинальненько, свежо и дерзко.
                          +1
                          Не сравнится с оригинальностью вашего коммента ;)
                            0
                            дадада, я говно, я помню.
                          +1
                          Мдаа… по таким заголовком выкладывать фото приличного ДЦ… ну и ассоциации у ts
                            –1
                            Это один из дц, где хостится Unisender. Фотка с их сайта.
                              0
                              я так понимаю, и разрешение использовать эту фотку? :)
                            0
                            Прямые соглашения с крупнейшими почтовыми службами — такими как mail.ru, yahoo.com, ukr.net и другими. Соглашения подразумевают, что к сообщениям от нас не применяются столь же жёсткие требования относительно количества сообщений в единицу времени, как для остальных

                            А что это за соглашение такое с Yahoo, позвольте узнать? Какие именно преимущества и на каких условиях оно даёт? Можете показать страницу на яхе, предлагающую такую услугу / договор?
                              –1
                              Речь идёт про FBL — feedbackloop.yahoo.net. При помощи его мы в реальном времени отлавливаем те рассылки, на которые поступает много жалоб и останавливаем их.
                                +1
                                Эм, а каким образом участие в FBL на Yahoo вам даёт такой результат, цитирую: «к сообщениям от нас не применяются столь же жёсткие требования относительно количества сообщений в единицу времени, как для остальных»? Мне всегда казалось, что FBL отдельно, а какие-то преимущества в смысле доставки — отдельно.
                                  +1
                                  Да, в статье не очень удачно сформулировано, FBL и квоты друг от друга не зависят.

                                  И, к сожалению, российские почтовые сервисы по части внедрения FBL далеко не в первых рядах.
                                    +1
                                    Ничего, скоро в плане FBL у русских почтовиков станет всё лучше. Я гарантирую это! (С)
                              0
                              Можно узнать, зачем вам нужно 15 серверов? По моему опыту, таким числом машин можно отсылать 50-100 миллионов писем в сутки. Однако, как я понял, у вас объёмы на порядок меньше даже в пиках. Зачем же тогда так много железа?
                                0
                                Сообщения бывают разные, бывает и транзакционный plain text на 500 байт, а бывает и HTML-рассылка на мегабайт в размере 600 000 штук (много картинок внутри письма).

                                Плюс, мы обязаны доставлять это быстро в течение рабочего дня (то есть с 9 до 18) наших клиентов, а не размазывать рассылку 50 млн в течение 24 часов на протяжении 7 дней.

                                Много серверов используется для гарантии быстрой доставки для большого количества клиентов. Можете считать это страховкой и платой за универсальность.

                                Но я согласен с тем, что рассылка с каждого сервера может идти значительно быстрее, если она будет оптимизирована под конкретного клиента. У нас же универсальный сервис, поэтому скорость не может быть максимальной.
                                  0
                                  Скажите, какие MTA и дисковые подсистемы на ваших машинах? Какой конфигурацию вы считаете оптимальной?
                                    0
                                    Вы же ветеран рассылок (prooflink), этомы Вы нас учить должны, а не спрашивать у нас ;)

                                    Но открою страшную тайну. MTA — Exim, диски — RAID-система, но какая именно, я не скажу, я не занимаюсь такими вещами. Если важно, могу специально для Вас узнать у админа и написать в приват.
                                      0
                                      Да, было бы интересно что за диски и в каком рейде, пробовали ли вы SSD. Интересно сравнить с моим опытом.
                                      0
                                      Дефолтная конфигурация Postfix на древнючем железе:
                                      Opteron 146, 2Gb RAM, и обычных дисках выдаёт такой результат:
                                      image
                                      P.S. к UniSender отношения не имею, просто приходилось настраивать сервера под massmailing
                                        0
                                        Из таблицы непонятен трафик (через размер сообщения), без этого средние 15 тысяч в час не очень показательны.

                                        И в любом случае — 15 тысяч в час — это мало. У нас всё быстрее уходит
                                          0
                                          Чем создаётся эта красивая таблица статистики?
                                          И чем можно получить список bounced email адресов, чтобы подчистить базу (так ведь рекомендуется делать?)?
                                            0
                                            maillog парсится awk скриптом, который генерит html. Список bounced'ов можно вытащить регулярными запросами из maillog'a. Если лень, то поковыряйте pflogsumm, его можно допилить под ваши нужды.
                                              0
                                              Может есть доступные общественноссти awk и скрипт вынимания bounced?
                                              Можно это принять как предложение поделиться в public.
                                          0
                                          Ответ может показаться несколько неожиданным, но для нас производительность сервера (число неких «усредненных» писем, отправляемых в час при максимальной загрузке) определяющим параметром не является. Важнее отношение производительности к цене. Вполне может оказаться, например, что vps со средними параметрами дешевле навороченного выделенного сервера в пять раз, а производительность его ниже только в три. Четыре vps в итоге получаются дешевле, производительнее и надежнее, чем один «железный» сервер.

                                          Сказанное не означает, конечно, что мы используем только vps. Для отправки писем задействованы и виртуальные, и средние, и топовые железные конфигурации. Их MTA настраиваются по-разному, и используется довольно хитрая схема распределения нагрузки. Но использовать диски SSD пока экономического смысла не было.
                                      +1
                                      у вас действительно нельзя загрузить свой макет или я не нашел просто?
                                      Ну неудобно в редакторе ковырять все заново.
                                      А вообще mailchimp намного функциональнее )
                                        0
                                        Всё можно ;)

                                        В редакторе (правый верхний угол его панели инструментов) есть кнопка «HTML», там можно загрузить код и продолжить редактирование в режиме WYSIWYG. Второй вариант — нажать в редакторе «переключиться на простой редактор» и вставить и изменить HTML-код без WYSIWYG.

                                          0
                                          ну это я видел. Но картинки потом надо получается загружать отдельно и расставлять.
                                          Седлайте как у мейлчимпа или хотя бы как campaignmonitor (там картинки отдельным архивом можно закачать)
                                            0
                                            Еть в плане и это, и мультизагрузчик картинок. Будет, надеюсь, что уже этой осенью.
                                        0
                                        Четвёртое — читать как «мы прогоняем все через Spamassassin»? ))

                                        Вообще, если все пойдет удачно, дай бог через n лет вы все дружно посмеетесь над этими оценками величины и ширины… Потому, что серверов будет штук двести и придется проводить 4-й гигабитный канал, ибо 3х уже не хватает ))
                                          0
                                          У меня такой вопрос: если я отправляю SMS с вашего сервиса, какой номер отправителя будет указан в сообщении? Можно ли использовать текст в качестве информации об отправителе, если да, каково макс. количество знаков для этого предусмотрено? Заранее спасибо за ответ.
                                            0
                                            В качестве отправителя (если речь касается России, в других странах могут быть другие правила) можно указать любые цифры и латинские буквы длиной до 11 символов. Если будет указан номер, то на СМС смогут даже ответить (ответ придёт вам на телефон).
                                            0
                                            что с сайтом? хабрэффект что-ль?)
                                              0
                                              DDOS-эффект (200 больших POST-запросов в секунду), решаем сейчас вопрос и в самое ближайшее время всё заработает.
                                                0
                                                решайте, а то пора уже рассылать…
                                                Кстати вот что не нравится. Почему не сделать список доверенных компаний? Чтобы мы не ждали пока вы одобрите новые адреса?
                                                  0
                                                  думаю вам надо быть поближе к клиентам, собирать и анализировать идеи и отзывы.
                                                  если интересно, пишите в личку, можем бартер организовать… надеюсь про Копини вы слышали =)
                                                    0
                                                    Слышали, конечно ;) Напишу, отзывы и пожелания давно собираем на unisender.reformal.ru (правда, ссылка на него спрятана глубоко).
                                                    0
                                                    Это у нас, конечно же, есть. Для «правильных» клиентов мы со временем существенно меняет пороги модераций итд. Напишите мне в приват Ваш логин, я посмотрю что и как.

                                                    Сайт уже практически работает.
                                                  0
                                                  В 11 часов началась ddos-атака на сайт, ботнет с 2500 адресов слал по 70 post запросов в секунду, в пике до 150. Приняли меры, сейчас все работает, но некоторые тормоза из-за паразитного трафика в канале возможны, пока провайдер его не зарежет.

                                                Только полноправные пользователи могут оставлять комментарии. Войдите, пожалуйста.

                                                Самое читаемое