Амавис - Amavis

Амавис
Разработчики)Патрик Бен Кёттер
изначальный выпуск1997 (1997)
Стабильный выпуск2.11.1 (9 октября 2018 г.; 2 года назад (2018-10-09)[1]) [±]
Репозиторий
Отредактируйте это в Викиданных
Написано вPerl
Операционная системаUnix-подобный
ТипФильтрация почты
ЛицензияGPLv2, Упрощенная лицензия BSD
Интернет сайтwww.amavis.org Отредактируйте это в Викиданных

Амавис является Открытый исходный код фильтр содержимого для электронная почта, реализация передачи, декодирования, обработки и проверки почтовых сообщений, а также взаимодействие с внешними фильтрами содержимого для обеспечения защиты от спам и вирусы и другие вредоносное ПО. Его можно рассматривать как интерфейс между почтовиком (MTA, Mail Transfer Agent) и один или несколько фильтры содержимого.

Амавис можно использовать для:

  • обнаруживать вирусы, спам, запрещенные типы контента или синтаксические ошибки в почтовых сообщениях
  • блок, тег, перенаправление (используя подадресация ) или пересылать почту в зависимости от ее содержания, происхождения или размера
  • помещать в карантин (и выпускать) или архивировать почтовые сообщения в файлы, в почтовые ящики или в реляционная база данных
  • очистить переданные сообщения с помощью внешнего средства очистки
  • генерировать DKIM подписи
  • проверять подписи DKIM и предоставлять на основе DKIM белый список

Примечательные особенности:

  • обеспечивает SNMP статистика и мониторинг состояния с использованием обширного MIB с более чем 300 переменными
  • обеспечивает структурированный Журнал событий в JSON формат
  • IPv6 протокол поддерживается в интерфейсе, и Формы адресов IPv6 в разделе заголовка письма
  • правильно соблюдает настройки для каждого получателя даже в сообщениях с несколькими получателями, при сканировании сообщения только один раз.
  • поддерживает международная электронная почта (RFC 6530, SMTPUTF8, EAI, IDN )

Обычная установка фильтрации почты с Амавис состоит из Постфикс как MTA, SpamAssassin как спам классификатор и ClamAV как антивирусная защита, все работает под Unix-подобный Операционная система. Многие другие антивирусные сканеры (около 30) и некоторые другие сканеры спама (CRM114, DSPAM, Богофильтр ) тоже поддерживаются, как и некоторые другие MTA.

Топология сопряжения

Три топологии для взаимодействия с MTA поддерживаются. В Amavisd процесс может быть зажат между двумя экземплярами MTA, давая классическую очередь после[2] настройка фильтрации почты, или Amavisd может использоваться в качестве прокси-фильтра SMTP в очереди перед[3]настройки фильтрации, или Amavisd можно проконсультироваться с процессом, чтобы обеспечить классификацию почты, но не для пересылки почтового сообщения отдельно, и в этом случае консультационный клиент остается ответственным за пересылку почты. Этот последний подход используется в Milter setup (с некоторыми ограничениями) или с исторической клиентской программой amavisd-submit.

Начиная с версии 2.7.0 предпочтительна установка предварительной очереди, поскольку она позволяет отклонять передачу почтового сообщения во время сеанса SMTP.[3] с отправляющим клиентом. При настройке пост-очереди фильтрация происходит после того, как почтовое сообщение уже было получено и поставлено в очередь агентом MTA, и в этом случае почтовый фильтр больше не может отклонять сообщение, а может только доставить его (возможно, помеченный) или отбросить, или создать уведомление о недоставке, что может вызвать нежелательные обратное рассеяние в случае подпрыгивая сообщение с поддельным адресом отправителя.

Недостаток настройки до очереди[3] состоит в том, что для этого требуются ресурсы (ЦП, память), пропорциональные текущей (пиковой) скорости передачи почты, в отличие от настройки после очереди, где допустима некоторая задержка, а использование ресурсов соответствует средней скорости передачи почты. С введением опции smtpd_proxy_options = speed_adjust в Postfix 2.7.0 требования к ресурсам для фильтра содержимого до очереди были значительно снижены.[4]

В некоторых странах[5] законодательство не разрешает фильтрацию почты отбрасывать почтовое сообщение после того, как оно было принято MTA, поэтому это исключает установку фильтрации после очереди с отбрасыванием или помещением сообщений в карантин, но оставляет возможность доставки (возможно, помеченных) сообщений, или отклоняя их в настройке до очереди (прокси SMTP или milter).

Протоколы взаимодействия

Амавис может получать почтовые сообщения от MTA по одному или нескольким Розетки из семейства протоколов PF_INET (IPv4 ), PF_INET6 (IPv6 ) или PF_LOCAL (Доменный сокет Unix ), используя протоколы ESMTP, LMTP, или простой частный протокол AM.PDP можно использовать с вспомогательной программой, например Amavisd-Milter[6] взаимодействовать с Милтерс. На стороне вывода протоколы ESMTP или LMTP могут использоваться для передачи сообщения внутреннему экземпляру MTA или LDA, или сообщение может быть передано порожденному процессу через Труба Unix. При использовании ESMTP или LMTP сеанс может быть дополнительно зашифрован с использованием TLS STARTTLS (RFC 3207 ) расширение протокола. Конвейерная обработка команд SMTP (RFC 2920 ) поддерживается в клиентском и серверном коде.

Взаимодействие со SpamAssassin

Когда спам сканирование включено, процесс-демон Amavisd концептуально очень похож на спам процесс SpamAssassin проект. В обоих случаях разветвленные дочерние процессы вызывают SpamAssassin. Perl модули напрямую, следовательно, их производительность аналогична.

Основное отличие заключается в используемых протоколах: Амавис обычно говорит на стандартном ESMTP протокол к MTA, в то время как в случае spamc / spamd MTA обычно порождает спам программа передает ей сообщение по каналу Unix, затем спам процесс передает сообщение в спам демон, использующий частный протокол, и спам затем вызывает модули Perl SpamAssassin.

Приоритеты дизайна

Приоритеты дизайна amavisd-новый (отсюда только что позвонил Амавис): надежность, безопасность, соответствие стандартам, производительность и функциональность.

Надежность

Для того, чтобы ни одно почтовое сообщение не могло быть потеряно из-за неожиданных событий, таких как сбои ввода-вывода, истощение ресурсов и неожиданное завершение программы, Amavisd Программа тщательно проверяет состояние завершения каждого системного вызова и операции ввода-вывода. Неожиданные события регистрируются, если это вообще возможно, и обрабатываются с помощью нескольких уровней обработки событий. Amavis никогда не берет на себя ответственность за доставку почтового сообщения от MTA: окончательный статус успеха сообщается MTA только после того, как сообщение было передано внутреннему экземпляру MTA и было подтверждено получение. В случае каких-либо фатальных сбоев во время обработки или передачи сообщения обрабатываемое сообщение просто остается в очереди внешнего экземпляра MTA, чтобы его можно было повторить позже. Этот подход также охватывает потенциальные неожиданные сбои хоста, сбои процесса amavisd или одного из его компонентов.

Контролируется использование ресурсов программы, таких как размер памяти, файловые дескрипторы, использование диска и создание подпроцессов. Большие почтовые сообщения не хранятся в памяти, поэтому доступный размер памяти не накладывает ограничения на размер почтовых сообщений, которые могут быть обработаны, и ресурсы памяти не расходуются без надобности.

Безопасность

Большое внимание уделяется аспектам безопасности, необходимым для обработки потенциально вредоносных, нестандартных или просто искаженных данных в почтовых сообщениях, поступающих из ненадежных источников.

Процесс обработки почтовых сообщений запускается с ограниченными правами под выделенным идентификатором пользователя. При желании он может работать chroot -ед. Риски переполнение буфера и ошибок выделения памяти в значительной степени можно избежать за счет реализации всей обработки протоколов и обработки почты в Perl, который прозрачно обрабатывает динамическое управление памятью. Необходимо следить за тем, чтобы содержимое обработанных сообщений случайно не попало в систему. Perl обеспечивает дополнительную безопасность благодаря маркировке испорченный данные происходят из дикой природы, и Amavis старается использовать эту функцию Perl с пользой, избегая автоматического удаления данных (использовать re "taint") и только очищая его явно в стратегических точках, в конце потока данных.

Амавис может использовать несколько внешних программ для расширения своей функциональности. Это де-архиваторы, де-компрессоры, вирус сканеры и спам сканеры. Поскольку эти программы часто реализуются на таких языках, как C или же C ++ существует потенциальный риск того, что почтовое сообщение, переданное одной из этих программ, может вызвать ее сбой или даже открыть брешь в безопасности. Риск ограничен запуском этих программ от имени непривилегированного пользователя и, возможно, chroot-ed. Тем не менее, следует избегать использования внешних программ, таких как деархиваторы без поддержки. Использование этих внешних программ настраивается, и их можно отключать выборочно или как группу (как все декодеры или все антивирусные сканеры).

Спектакль

Несмотря на то, что он реализован на интерпретируемом языке программирования Perl, Сам Амавис не медлит. Хорошая производительность функций, реализованных самим Amavis (не говоря уже о внешних компонентах), достигается за счет работы с данными большими фрагментами (например, не построчно), избеганием ненужного копирования данных, оптимизацией часто просматриваемых путей кода, путем с использованием подходящих структур данных и алгоритмов, а также с помощью некоторых оптимизаций на низком уровне. Узкие места обнаруживаются во время разработки путем профилирования кода и сравнительного анализа. Подробный отчет о времени в журнале может помочь распознать узкие места в конкретной установке.

Определенные внешние модули или программы, например SpamAssassin или какая-то командная строка вирус сканеры могут быть очень медленными, и их использование будет составлять подавляющее большинство затраченного времени и ресурсов обработки, что делает ресурсы, используемые самой Amavis, пропорционально довольно небольшими.

Компоненты, такие как внешние почтовые декодеры, антивирусные сканеры и спам Каждый из сканеров может быть выборочно отключен, если они не нужны. Остается лишь функциональность, реализованная самим Amavis, такая как передача почтового сообщения от и к MTA с использованием SMTP или же LMTP протокол, проверка правильности раздела заголовка почты, проверка на запрещенные типы содержимого почты, проверка и создание DKIM подписи.

Как следствие, задачи обработки почты, такие как подпись и проверка DKIM (с отключенной другой проверкой почты), могут быть исключительно быстрыми и могут конкурировать с реализациями на компилируемых языках.[7][8][9] Даже полная проверка с использованием быстрого антивирусного сканера, но с отключенным сканированием спама, может быть удивительно быстрой.

Соблюдение стандартов

Реализация протоколов и структур сообщений строго следует ряду применимых стандартов, таких как RFC 5322, RFC 5321, RFC 2033, RFC 3207, RFC 2045, RFC 2046, RFC 2047, RFC 3461, RFC 3462, RFC 3463, RFC 3464, RFC 4155, RFC 5965, RFC 6376, RFC 5451, RFC 6008, и RFC 4291. В нескольких случаях некоторые функции были повторно реализованы в Амавис код, даже если публичный (CPAN ) Perl модуль существует, но ему не хватает внимания к деталям в соответствии со стандартом или отсутствует достаточная проверка и обработка ошибок.

Лицензия

Amavis имеет лицензию на GPLv2 лицензия. Это относится как к текущему коду, так и к историческим веткам. Исключением являются некоторые вспомогательные программы (например, мониторинг и статистическая отчетность), которые охватываются Новая лицензия BSD.

Проэкт

Проект стартовал в 1997 году как Unix ракушка скрипт для обнаружения и блокировки сообщений электронной почты, содержащих вирус. Он был предназначен для блокировки вирусов на этапе MTA (агент пересылки почты) или LDA (локальная доставка), работающих на Unix-подобный платформа, дополняющая другие механизмы защиты от вирусов, работающие на персональных компьютерах конечных пользователей.

Затем инструмент был повторно реализован как Perl программа, которая позже превратилась в демонизированный процесс. В течение первых пяти лет работы над проектом по очереди десяток разработчиков разработали несколько вариантов, сохранив общую цель, название проекта и часть инфраструктуры разработки.

С декабря 2008 г. (до 09.10.2018 г.) официально была единственная действующая ветка. amavisd-новый, который разрабатывался и поддерживался Марком Мартинеком с марта 2002 года. Это было согласовано между разработчиками в то время в частной переписке: Кристианом Брикартом, Ларсом Хекингом, Хилко Бенгеном, Райнером Линком и Марком Мартинеком. Название проекта Амавис в значительной степени взаимозаменяем с названием amavisd-новый ответвляться.

За прошедшие годы было добавлено много функций, например, добавлена ​​защита от спам и другой нежелательный контент, помимо исходной защиты от вирусов. Основное внимание уделяется надежности, безопасности, соблюдению стандартов и производительности.

Домен amavis.org Используемый проектом был зарегистрирован в 1998 году Кристианом Брикартом, одним из первых разработчиков, который до сих пор поддерживает регистрацию доменного имени. Теперь домен полностью посвящен единственной активной ветке. Список рассылки проекта был перемещен из SourceForge на amavis.org в марте 2011 г., хостинг - Ральф Хильдебрандт и Патрик Бен Кёттер. Веб-страница проекта и главный сайт распространения находились по адресу: Институт Йожефа Стефана, Любляна, Словения (до передачи в 2018 году), где большая часть развития происходила в период с 2002 по 2018 год.

Объявление о смене руководителей проекта

9 октября 2018 года Марк Мартинек объявил [10] в списке рассылки общей поддержки и обсуждения его отставка из проекта, а также то, что Патрик Бен Кёттер продолжит работу в качестве нового руководителя проекта.

Я знаю Бена лично, он является одним из двух авторов «Книги постфикса» и использует Amavis в своей профессиональной жизни, поэтому я думаю, что проект будет в надежных руках.[10]

— Марк Мартинек

После этого Патрик уведомил[11] перенос исходного кода в публичный репозиторий GitLab и его план дальнейших шагов по развитию проекта.

Филиалы и название проекта

На протяжении истории проекта название проекта или его ответвлений несколько менялось. Изначально написание названия проекта было AMaViS (Почтовый сканер вирусов), представленный Кристианом Брикартом. С переписью на Perl название программы было Амавис-перл. Демонизированный версии изначально распространялись под именем amavisd-снимок а затем как Amavisd. Модульный рерайт Хилко Бенген получил название Amavis-ng.

В марте 2002 г. amavisd-новый ветвь была представлена ​​Марком Мартинеком, первоначально как пластырь против amavisd-снимок-20020300. Позже это превратилось в автономный проект, который сейчас является единственной сохранившейся и активно поддерживаемой веткой. В настоящее время название проекта предпочтительно пишется Амавис (а название самой программы Amavisd). Название Амавис теперь в основном взаимозаменяем с amavisd-новый.

История проекта

программа оболочки

  • 1997 (исходный код Mogens Kjr - Carlsberg Laboratory,[12] изменено Юргеном Куэйдом) первоначальный, официально не выпущен[13][14]
  • 1998-01-17 AMaViS 0.1 (Christian Bricart) AMaViS, первый официальный выпуск
  • 1998-01-28 AMaViS 0.1.1
  • 1998-12-08 AMaViS 0.2.0-pre1
  • 1999-02-25 AMaViS 0.2.0-pre2
  • 1999-03-29 AMaViS 0.2.0-pre3
  • 1999-03-31 AMaViS 0.2.0-pre4
  • 1999-07-19 AMaViS 0.2.0-pre5
  • 1999-07-20 AMaViS 0.2.0-pre6
  • 2000-10-31 AMaViS 0.2.1[13] (Кристиан Брикарт, Райнер Линк, Крис Мейсон)

Программа Perl

  • 2000-01 Амавис-Перл (Крис Мейсон)
  • 2000-08 Amavis-perl-8
  • 2000-12 Amavis-perl-10
  • 2001-04 Amavis-perl-11 (разделен на amavisd)
  • 2003-03-07[15] Амавис-0.3.12 (Ларс Хекинг)

Демон Perl: amavisd

  • 2001-01 Демонизация (Джефф Винклесс)
  • 2001-04 amavisd-snapshot-20010407 (Ларс Хекинг)
  • 2001-07 amavisd-snapshot-20010714
  • 2002-03 amavisd-snapshot-20020300 (разделен на amavisd-new)
  • 2003-03-03[15] amavisd-0.1

Perl, модульный редизайн

(Хилко Бенген)

  • 2002-03 amavis-ng-0.1
  • 2003-03 amavis-ng-0.1.6.2

amavisd-новый

(Марк Мартинек)

  • 2002-03-30 amavisd-new, предварительно форк, Net :: Server
  • 2002-05-17
  • 2002-06-30 пакеты, SQL поиски
  • 2002-11-16 интегрировано - один файл
  • 2002-12-27
  • 2003-03-14 LDAP поиски
  • 2003-06-16
  • 25.08.2003 п5
  • 2003-11-10 p6 @ * _ карты
  • 2004-01-05 п7
  • 2004-03-09 п8
  • 2004-04-02 п9
  • 2004-06-29 п10
  • 2004-07-01 2.0 политики банков, IPv6-адрес форматы
  • 2004-08-15 2.1.0 Утилита мониторинга amavisd-nanny
  • 2004-09-06 2.1.2
  • 2004-11-02 2.2.0
  • 2004-12-22 2.2.1
  • 2005-04-24 2.3.0 @decoders, правила блокировки для каждого получателя
  • 2005-05-09 2.3.1
  • 2005-06-29 2.3.2
  • 2005-08-22 2.3.3
  • 2006-04-02 2.4.0 DSN в SMTP,% * _ by_ccat
  • 2006-05-08 2.4.1
  • 2006-06-27 2.4.2 друзья по переписке, ведение журнала SQL и карантин
  • 2006-09-30 2.4.3
  • 2006-11-20 2.4.4
  • 2007-01-30 2.4.5
  • 2007-04-23 2.5.0 блокировка категорий контента, переписано SMTP клиент
  • 2007-05-31 2.5.1 amavisd-Requeue
  • 2007-06-27 2.5.2
  • 2007-12-12 2.5.3
  • 2008-03-12 2.5.4
  • 2008-04-23 2.6.0 DKIM, подпрыгивать убийца TLS
  • 2008-06-29 2.6.1
  • 2008-12-12 Amavis - новый amavisd
  • 2008-12-15 2.6.2
  • 2009-04-22 2.6.3 поддержка CRM114 и DSPAM, усечение
  • 2009-06-25 2.6.4 мониторинг завершен SNMP
  • 2010-04-25 2.7.0-pre4
  • 2011-02-03 2.7.0-pre14
  • 2011-03-07 список рассылки перемещен с SourceForge на amavis.org
  • 2011-04-07 2.6.5
  • 2011-05-19 2.6.6
  • 2011-06-01 Улучшения 2.7.0 предварительной очереди, ускорение
  • 2012-04-29 2.7.1
  • 2012-06-30 2.7.2
  • 2012-06-30 2.8.0 использование ØMQ вместо BDB, оптимизация производительности
  • 2013-04-27 2.8.1-RC1
  • 2013-06-28 2.8.1 можно использовать Redis для хранения друзей по переписке
  • 04.09.2013 2.8.2-rc1 (2.8.2 не выпущен)
  • 2014-05-09 2.9.0 структурированный вход JSON формат, айпи адрес авторепутация
  • 2014-06-27 2.9.1
  • 2014-10-22 2.10.0 Интернационализированная электронная почта (RFC 6530, SMTPUTF8, EAI, IDN )
  • 2014-10-22 2.10.1
  • 2016-04-26 2.11.0
  • 2018-10-09 Незначительные обновления 2.11.1, непосредственно перед миграцией в репозиторий GitLab

Смотрите также

Рекомендации

  1. ^ Мартинек, Марк (2018-10-09). "Выпущен amavisd-new-2.11.1". Архивы amavis-users-list. Новый проект amavisd. Получено 2018-10-10.
  2. ^ Венема, Витсе (17 января 2010 г.). "Фильтр содержимого после очереди Postfix". В архиве из оригинала от 01.08.2012.
  3. ^ а б c Венема, Витсе (11 декабря 2009 г.). "Фильтр содержимого постфикса до очереди". В архиве из оригинала от 01.08.2012.
  4. ^ Венема, Витсе (14 февраля 2010 г.). "Стабильный выпуск Postfix 2.7.0". В архиве из оригинала от 03.08.2012.
  5. ^ "StGB (Германия), § 206 Verletzung des Postoder Fernmeldegeheimnisses". Bundesgesetzblattes. В архиве из оригинала от 21.08.2012.
  6. ^ Рехор, Петр (02.05.2010). "амависд-милтер". В архиве из оригинала от 27.07.2012.
  7. ^ Мартинек, Марк (10.06.2011). "amavisd 2.7.0 и Mail :: OpenDKIM". В архиве из оригинала 30.07.2012.
  8. ^ Мартинек, Марк (10.06.2011). "amavisd 2.7.0 и Mail :: OpenDKIM". В архиве из оригинала 30.07.2012.
  9. ^ Мартинек, Марк (10.06.2011). "amavisd 2.7.0 и Mail :: OpenDKIM". В архиве из оригинала 30.07.2012.
  10. ^ а б Мартинек, Марк (2018-10-09). «ОБЪЯВЛЕНИЕ: проект Amavis передан новым руководителям проекта». Архивы amavis-users-list. Проект amavisd-new.
  11. ^ Кёттер, Патрик Бен (2018-10-09). "amavis: в деталях". Архивы amavis-users-list. Проект amavisd-new.
  12. ^ Кьяер, Могенс. «Насколько это безопасно: автоматическая проверка почты на вирусы (ДЛИННАЯ)». Группа новостей: comp.mail.sendmail.
  13. ^ а б Брикарт, Кристиан; Линк, Райнер (2000-10-31). «AMaViS - Почтовый сканер вирусов - Техническая информация и инструкции по установке». В архиве из оригинала 27.07.2012.
  14. ^ Quade, Юрген (1998). "Mausefalle - EMail-Viren-Check unter Linux". iX - Magazin für Professionalelle Computertechnik (на немецком). Heise онлайн (2/1998): 136. В архиве из оригинала 27.07.2012.
  15. ^ а б «AMaViS - Почтовый сканер вирусов». 2004-10-07. В архиве из оригинала 27.07.2012.

внешняя ссылка