. Давайте жить дружно: Спам-фильтры и принципы их работы
Давайте жить дружно: Спам-фильтры и принципы их работы

Давайте жить дружно: Спам-фильтры и принципы их работы

Вы можете прочесть статью с полным списком спам слов на нашем блогe, на которые негативно реагируют все почтовики, как Яндекс спам фильтр, Gmail спам фильтр, так же правила фильтрации mail ru не позволяют использовать “плохих” слов.

Каждый из перечисленных почтовых клиентов отслеживает полный список слов для спам фильтра или такое частое явление, как спам картинки (изображения неприемлемого характера/попадающие под цензуру.

Несколько фактов о спаме:
  • Спам-атака ведется по всем фронтам – соцсети, мессенджеры, доски объявлений, смс и конечно же email рассылки.
  • В разных странах от 50% до 80% почтового трафика составляет спам.
  • Из-за спама российский бизнес лишается $500 млн. в год, американский – $22 млрд., европейский – 51 млрд. евро.
  • Посредством email рассылок распространены случаи кражи мошенниками личных данных, блокировки компьютеров и последующего за этим вымогательства.

Примеры спам рассылок

  1. В СМС рассылках
  2. В мессенджерах
  3. В соцсетях
  4. В email рассылках
  • Несанкционированные коммерческие рассылки рекламы легальных и нелегальных товаров/услуг.
  • Антиреклама конкурентов, как коммерческого, так политического характера.
  • Фишинг или мошеннические предложения, связанные с участием в денежных операциях, которые “принесут вам миллионы”.
  • Вирусный спам, способен повредить работу вашего компьютера или похитить важную информацию (личные данные, пароли от банковских карт, сервисов и т.д.).

Как работает спам фильтр

  1. автоматический — параметры которого полностью подвластны программе,
  2. неавтоматический — параметры которого задаются человеком и требуют постоянного обновления (чаще всего основывается на определенном списке “стоп-слов”).
  • Проверка содержания email-сообщения На основании анализа делается вывод – помещать письмо в спам или нет. Для этого используется статистический анализ содержания. Для работы этих методов требуется «обучение» фильтров, т.е. используются рассортированные вручную письма для выявления статистических особенностей нормальных писем и спама. Метод очень хорошо работает при сортировке сообщений, в которых рекламная информация представлена в виде простого текста или HTML. После обучения на достаточно большой выборке, удаётся отсечь до 95—97 % спама. Однако есть методы для обхода таких фильтров. Для этого в письмо помещается произвольный текст и реклама в виде присоединенного к письму изображения. Наличие случайного текста обманывает фильтр, и не даёт возможности его обучить. Для обучения фильтров многие почтовые сервисы используют кнопку «пожаловаться на спам». Сведения о том, какие сообщения пользователи считают спамом, используются как для фильтрации этих сообщений, так и для обучения фильтров в дальнейшем. Подобную систему использует Gmail.
  • Анализ отправителя письма В интернете существует множество черных списков IP-адресов компьютеров, о которых известно, что с них ведется рассылка спама. Для получения информации, находится ли IP в черном списке, делается обращение через службу DNS. Поэтому подобные списки называются DNSBL (DNS Black List). Данный метод в данный момент не очень эффективен, так как спамеры находят новые сервера для своих целей быстрее, чем их успевают заносить в черные списки. Кроме того, несколько компьютеров, отправляющих спам, могут скомпрометировать весь почтовый домен или подсеть, и тысячи законопослушных пользователей на неопределённое время будут лишены возможности отправлять почту серверам, попавшими такой чёрный список. Также нередко безответственное и неправильное использование черных списков администраторами ресурсов, приводящее к блокированию большого числа ни в чем не повинных пользователей.
  • Байесовская система фильтрации спама Основана на процессе “обучения” программ путем анализа уже отсортированных писем. После данного “обучения” по выявленным параметрам программа будет сортировать письма на “хорошие” и “плохие”. НО, так как спамеры тоже не сидят сложа руки, их способы совершенствуются. Они научились обходить эту защиту с помощью замены текста тела письма на картинки, которые система не может адекватно проанализировать. Выход – постепенно “дообучать” программы. Именно таким способом проходит совершенствование относительно более новых способов фильтрации электронной корреспонденции:
  • Проверка темы email рассылок Программы, которые используют спамеры для рассылки спама также далеко не идеальны. Например, они не умеют оформлять заголовки и письма не соответствуют установленным стандартам. Этот минус и стал еще одним ориентиром для фильтрации почты программами серверов.
  • Анализ вложений электронных писем Чаще всего такими вложениями являются картинки. Эта методика анализа рассылок на спам является одной из наиболее успешных и позволяет практически полностью уберечь человека от нежелательных писем.
  • Определение признаков массовости Здесь все понятно, в огромном потоке email-сообщений система определяет одинаковые или незначительно отличающиеся сообщения. Данная методика используется в бизнесе в случаях больших оборотов электронной коммерции.
  • Проверка по черным спискам Метод старый и эффективный. Суть его состоит в том, что система создает список “плохих парней” и блокирует их домен, а иногда и всю сеть. Чаще всего в черный список заносят:
    • IP компьютеров, с которых ведется подозрительная рассылка;
    • адреса, которые попали в черные списки, составленные другими системами;
    • списки dial-up;
    • открытые релеи.

    Как обойти критерии работы спам фильтров

    • Делайте рассылки равномерно, например, еженедельно или ежемесячно. Тогда вероятность, что читатели отнесут письмо к спаму меньше;
    • Сохраняйте тематическую ориентацию рассылки, не надо превращать рассылку в сплошную рекламную площадку;
    • Будьте аккуратными и вежливыми, старайтесь избегать грамматических ошибок;
    • Обязательно оставляйте свои координаты. Читатели должны иметь возможность написать Вам письмо в случае недовольства, или наоборот, чтобы поблагодарить Вас.
    • Всегда оставляйте видимую ссылку на отписку;
    • Ну и не делайте рассылки людям, которые не подписались на неё:)
    • Используйте правильные слова. Лучше написать так: Subscribe / Unsubscribe, вместо Remove. Для автоматических систем это важно.
    • Обратите внимание на тему письма (Subject). Некоторые заголовки просто кричат о том, что это спамерские письма, например, те в которых содержится: «Free,» «Respond Now!» «Money,» и т.п.
    • Старайтесь не отправлять прикрепленных файлов. Это вызовет лишние подозрения как у фильтров, так и у Ваших читателей.
    • Используйте только авторитетные сервисы и программы рассылки писем в случае рассылки не со собственного домена, а использовании специальной службы.

    Мораль сей басни такова

    Часто задаваемые вопросы:

    1. Что это спам?

    Спам — это ненужные адресату электронные послания, рекламные письма и т. п., на получение которых он не давал согласия.

    2. Почему мои письма уходят в спам?

    Причин может быть несколько, одной из самых главных является невозможность отписаться от вашей рассылки.

    Если вашему подписчику неинтересна информация, он будет вынужден отправить письмо в спам, что значительно снизит рейтинг вашего IP и домена. Не менее значительной причиной является использование чрезмерного количества спам-слов, об этом явлении вы можете почитать на нашем блоге.

    3. Как обойти черный список в whatsapp?

    На блокировку указывают два признака: вы не видите изображение профиля контакта, который внес вас в черный список, и не можете отправлять ему сообщения.

    Сначала откройте настройки WhatsApp и выберите раздел “Аккаунт”, затем пункт “Изменить номер”. Введите новый номер мобильного телефона, затем пройдите верификацию. После повторной регистрации Вы сможете заново отправлять информацию контактам, к которым попали в черный список.

    📎📎📎📎📎📎📎📎📎📎