Spamihilator

[quote=pig]Моя задача - экономить входящий трафик. То есть, по возможности не доводить дело до приёма заведомо спамерских писем. К сожалению, делать приходится, имея на руках только IP отправителя, HELO и MAIL FROM. Заголовки по протоколу SMTP, увы, передаются только вместе с письмом.[/quote]
тогда такой вопрос - и часто у Вас срабатывают правила основанные на именах доменов и т.п.? в процентном отношении к числу писем, к числу спама. и процент срабатывания именно этих правил. и если можно, разгласите тайну - сколько ящиков на сервере.

Сейчас около сорока ящиков и около полутора десятков списков рассылки, доступных снаружи. Из них примерно полтора десятка адресов засвечены, то есть, на них активно валится спам. Поток - от 500 до 1000 писем в сутки, из них по делу примерно сотня, остальное спам. Чёрные списки отбивают примерно 90% мусора, остальное на те же 90% ловится контент-фильтром. На самом деле даже больше 90% и там, и там. Если бы эти гады не нащупали (или проинтуичили) адреса типа postmaster@ и abuse@, почта на которые спам-фильтром (по содержимому) не отбивается, мне в ящик доставалось бы одно - два письма в сутки. А так бывает до двух десятков.

Да, чёрные списки пополняются роботом. Если он засекает спам - автоматом блокирует HELO и домен из MAIL FROM. Если вылезла блокировка по HELO, не перебитая по MAIL FROM - блокируется домен MAIL FROM. Если вышла блокировка по MAIL FROM - в чёрный список добавляется HELO. В какой-то степени проактивная защита, потому что список у спамеров всё-таки не бесконечный. До сих пор эксплуатируются системы, использующие примерно сотню (или даже меньше) доменов, одних и тех же. Ботнеты тоже с места на место не переезжают, по крайней мере, те, что в HELO реальное доменное имя выдают.

Уважаемые специалисты, работает ли данный фильтр в локальной сети. Если да, то как его настроить?

Немного не понятен вопрос. Если под локальной сетью имется в виду выход в интернет через локальную сеть, то спамфильтру всеравно как вы подключаетесь к Интернет. Если имеется в виду фильтрация spamhilator-ом всей почты локальной сети, то производительности может не хватить, spamhilator -это ПЕРСОНАЛЬНЫЙ спамфильтр, он обрабатывает одновременно только соединение с одним ящиком. А вообще технически возможно настроить фильтрацию почты для всей сети.

Имеется в виду выход в сеть с рабочего места через локальную сеть организации (Microsoft Exchange Server).
Если это невозможно с данной прогой, то как вообще возможно фильтровать почту в моем случае?

Этот фильтр ставится на рабочем месте. Откуда вы берёте почту - ему должно быть без разницы. Правда, у Exchange Server есть свои собственные почтовые протоколы, их не все поддерживают, поэтому need more details про вашу корпоративную почту. А вообще-то о борьбе против спама голова должна болеть у вашего администратора.

2МОСТ
Открой секрет чем пользуешься?

[quote=4EPT]2МОСТ
Открой секрет чем пользуешься?[/quote]
Spam Filter v2.03 by MOCT
:-)))

[QUOTE=MOCT]Spam Filter v2.03 by MOCT
:-)))[/QUOTE]
А можно попробывать ее в работе?:)

[QUOTE=Ромео]А можно попробывать ее в работе?:)[/QUOTE]
с некоторого времени раздача бесплатных слонов приостановлена.
а какой почтовый сервер используется?

[QUOTE=MOCT]с некоторого времени раздача бесплатных слонов приостановлена.
а какой почтовый сервер используется?[/QUOTE]
Да эта я так для себя-юзера.

[QUOTE=Ромео]Да эта я так для себя-юзера.[/QUOTE]
для юзеров не поможет - ставится на стороне сервера

[QUOTE=MOCT]для юзеров не поможет - ставится на стороне сервера[/QUOTE]
и вся эта красота конечно под Юникс?

Народ! так подскажите есть все таки хорошой фильтр на стороне клиента, который не качал бы полностью все письма, а по заголовкам и темам отстреливал спам на серверной стороне.

Диспетчер писем в TheBat! плюс голова владельца. Лучше ни один фильтр не справится.

[QUOTE=pig]Диспетчер писем в TheBat! плюс голова владельца. Лучше ни один фильтр не справится.[/QUOTE]
Он сначала качает, а потом думает !!! Трафик не халява.

[quote=4EPT]и вся эта красота конечно под Юникс?[/quote]
Win32, Linux, OS/2 - под что надо, под то и накомпилирую. :-)
сейчас работает на Windows 2003

[QUOTE=4EPT]Он сначала качает, а потом думает !!! Трафик не халява.[/QUOTE]
Диспетчер писем качает только заголовки. Если вы хотите, чтобы и они не качались, то вам к Грабовому или какому другому чудотворцу.

под Вин2000, хотябы по заголовкам и пустым полям “To:”, “From:”

Господа!
Позвольте поделиться опытом использования Spamihilator.

На предприятии в настоящий момент используется почтовый сервер Courier Mail Server v2.04b3 (только не тот Courier, который под *nix, а который наш отечественный, см. [URL="http://www.courierms.ru"]http://www.courierms.ru[/URL] - под *nix появился позже и украл название).
Так вот, в самом CMS есть встроенный фильтр, позволяющий отсекать письма по определенным полям заголовков и их комбинациям. При этом по POP3 прием тела письма не производится, если содержимое полей заголовка подпадает под черный список. По SMTP, к сожалению, как и во всех подобных фильтрах, вначале принимается все письмо.
Таким образом, часть писем удается удалить на возможно раннем этапе, даже не принимая полностью.
Для более сложного анализа я прикрутил к CMS спам-фильтр Spamihilator. Суть этого прикручивания проста.
Spamihilator запускается сервисом (для этого есть плагин) и становится на порт, допустим, 1110.
При обнаружении письма в п/я локального аккаунта CMS запускает специальное задание, выполняющее прием писем с этого аккаунта от самого себя, но не напрямую, а подключением по 1100 порту к Spamihilator со специальным образом оформленным логином подключения.
Задание это не удаляет письма на стороне сервера, т.е. из данного аккаунта, и никуда их не отправляет. Оно служит только для активации Spamihilator.
В результате Spamihilator подключается к данному локальному аккаунту, анализирует все письма в нем и удаляет те, которые ему не понравились. Остальные ждут своего часа, когда пользователь соблаговолит подключиться по POP3 и принять их.
Эффекивность данного метода двуступенчатой фильтрации после обучения около 95-99%.

К сожалению, у этого метода есть небольшой недостаток. Хотя письма, уже проверенные фильтром, CMS помечает как проверенные и уже второй раз они передаваться в Spamihilator не будут, тем не менее, запуск задания выполняется чисто по факту наличия определенных файлов в п/я. Таким образом, задание проверки будет периодически выполняться вновь и вновь, нагружая почтовый сервер и засоряя его логи.
Это можно было бы обойти, если проверять письма не "на месте", а пересылать их на другой аккаунт. Но, во-первых, у нас лицензия CMS только на 100 аккаунтов, так что все сдублировать все равно не получится. А во-вторых, даже если применять более хитрые методы, позволяющие обойтись меньшим количеством промежуточных п/я, все равно, придется выполнять много работы на стороне клиентов - перенастраивать их всех так, чтобы они принимали почту с одного аккаунта, а в обратном адресе у них был бы указан совсем другой. А мне откровенно лень. Да и не люблю я по ламерам светиться. Не буди лихо, пока спит тихо. Стоит что-то у них тронуть по собственному почину, как сам виноват в случае чего и окажешься.

А вообще-то, фильтр неплохой. Правда, часть плагинов работают не совсем так, как ожидается, поэтому пришлось их поотключать.
Ошибка в декодировании кириллицы, конечно, существенный недостаток. Но я как-то с этим живу.

[quote=PavelA]После двухмесячного обучения данная прога фильтрует 90% спама.
Но то,что она не понимает русскую кодоривку ой как плохо :))[/quote]
На днях установил новую версию.
Так вот ... То ли в самой проге что-то подправили, то ли в самом спаме что то изменилось. Но теперь письма с нечитаемым из Спамихилятора полем Subject приходят крайне редко. Это те, в которых в этом поле используется кодировка KOI8-R, или не указана вообще. Темы с кодировкой Windows-1251 теперь читаются нормально.

Кто-нить знает, spamihilator.com работает? Вроде сайта не нахожу уже.

24 Dec 2006 был жив. Хотя обновлений уже год не было.

Хороший антиспам, снова стал поддерживаться [url]http://www.spamihilator.com/[/url]
поддерживает русский язык, имеются масса плагинов.

Вышла новая версия [URL="http://www.spamihilator.com/download/index.php"]Spamihilator 0.9.9.29[/URL]

Новая версия 0.9.9.29
[url]http://www.spamihilator.com/download/index.php[/url]

Да не запинают меня почтенные доны. Решусь слово молвить :) Проблема спама возникла когда на почтовик в сутки стало приходить более 100 писем. Соединение - диалап, пров (да низвергнут на него свое проклятие все силы небесные) тупой. линия слабая => связь больше 15 минут не держится. Почта важная, сменить ящик никак неможно, ибо на нем завязано многое.. Решение выбрал такое, завел на gmail.com учетную запись, настроил пересылку всей корреспонденции на него. Не знаю чем они там фильтруют, но в день мне приходится читать всего 1-2 письма спамеров, за все время использования в спам попало всего 3-4 письма. Пользуюсь больше года. В начале была проблема с ответом на письма, но потом гмейловцы прикрутили фишку в настройках и теперь можно отвечать прямо из гмейла с основного адреса. пока доволен.

[QUOTE=osvald;120553]Проблема спама возникла когда на почтовик в сутки стало приходить более 100 писем. Соединение - диалап, пров (да низвергнут на него свое проклятие все силы небесные) тупой. линия слабая => связь больше 15 минут не держится. Почта важная, сменить ящик никак неможно, ибо на нем завязано многое.[/QUOTE]
Хоть это и не имеет никакого отношения к Спамигилятору (почтенные доны модераторы разделят тему, если сочтут нужным), я со своей колокольни посоветовал бы такое решение:
- если нормальных писем приходит на ящик немного,
- если нормальные письма Вы умеете отличать от ненормальных простым прочтением темы письма и имени отправителя,
- если приходится жестко экономить трафик,
то лучшего средства, чем ручное удаление спама на сервере, мне в голову не приходит. Эта штука обычно называется "Диспетчер писем" и присутствует в некоторых почтовых клиентах (из распространенных я знаю только TheBat! и, кажется, Incredimail) и в модуле антиспама Kaspersky Internet Security.

Вообще эта штука присутствует в Outlook Express и в любом почтовом клиенте, если использовать протокол IMAP (если конечно клиент умеет использовать все возможности протокола IMAP). Outlook умеет

[QUOTE=kuznetz;120647]Вообще эта штука присутствует в Outlook Express и в любом почтовом клиенте, если использовать протокол IMAP (если конечно клиент умеет использовать все возможности протокола IMAP). Outlook умеет[/QUOTE]

1. Кроме клиента, этот протокол должен поддерживать и сервер. Разговор, как я понял, изначально шел про POP3 (я не помню, чтобы GMail предоставлял доступ по IMAP).
2. Протокол IMAP не требует диспетчера писем как такового, т.к. сам изначально выполняет его функции.
3. Вы обращали внимание, как реализации IMAP в обоих Outlook'ах относятся к разрывам связи (ибо IMAP подразумевает постоянный коннект)? Речь шла именно о нестабильном коннекте.
3. Особенности реализации обоих Outlook'ов при настройке по умолчанию (с просмотром содержимого письма в нижней/боковой панели) сводят на нет попытки с'экономить трафик. Это надо учитывать и отключать предпросмотр писем.

Я рад, что у нас с Вами стабильное взаимопонимание.

1) Вообще-то изначально речь о конкретном протоколе не шла вообще. Кроме того, изначально речь шла о сервере тупого провайдера. Что не исключает поддержки этим сервером протокола IMAP

2) Как бы оно ни называлось - "диспетчер писем" или иначе, - главное что нам здесь нужно было средство для "ручное удаление спама на сервере". Раз протокол IMAP это делает, то значит он и есть "эта штука"

3) протокол POP3 к разрывам связи относится точно так же - сессия прерывается, и привет

4) Для того чтобы удалить письмо при работе с Outlook через IMAP, там не надо его смотреть (то есть вставать именно на это письмо в списке писем). Поэтому и просмотра письма не будет.

При разрыве связи во время сеанса IMAP в большинстве случаев приходится перезапускать Аутлук. При разрыве POP3 этого делать не нужно.

Полагаю, теперь все вопросы касательно приспособленностей распространенных почтовых протоколов к экономии трафика мы рассмотрели, и всех интересующихся удовлетворили своими знаниями :)

Я еще про gmail скажу. ИМХО, эта служба не подходит для работы с почтовыми программами - только через вэб-интерфейс, и всему виной как раз их спам-фильтр. Письма, отсеянные на gmail, как спам, вы никак не получите по pop3, и у меня были случаи, когда важные письма отсеивались gmail. Да, их спам-фильтр можно обучать, но для этого опять же надо заходить туда через вэб-интерфейс. Конечно, может работать с почтой через вэб-интерфейс и неплохо, но я, например привык полбзоваться почтовой программой - мне кажется, она дает больше возможностей, чем вэб-интерфейс. Кстати, вопрос о возможности получения почты, отсеянной как спам, я задавал техподдержке gmail, и получил отрицательный ответ. С этой точки зрения почта на Яндексе куда более мне подходящее - спам фильтр там работает очень хорошо, в вэб-интерфейсе спам и рассылки находятся в отдельной папочке, а при получении почтовой программой приходят с соответствующей меткой, по которой можно настроить правило.

Возникла проблема со Spamihilator 0.9.9.38. Я использую с ним плагин POP3Notifer 0.3.1, так вот, при рестарте спамигилятора, настройки POP3Notifer и список адресов для проверки новой почты слетают. Никто не сталкивался?

Простите, а спор о чём? Вчера поставил, залез в настройки, так там есть функция "Оставлять спам на сервере, до удаления из корзины" ... или это не то?

Программа благополучно существует и развивается.
В настоящий момент доступна загрузка
[quote]
Spamihilator 0.9.9.44
Dec/23/2008, 1,902 KB, 2,421,559 hits
Windows 2000/2003/XP/Vista
[/quote]
[url]http://www.spamihilator.com/download/1/[/url]

Языковый пакет, включающий русский язык: [url]http://www.spamihilator.com/download/3/[/url]