How to become an author
Search
Write a publication
Pull to refresh

Comments 32

Оно конечно хорошо, но как это использовать в реальной жизни?
В голову приходит только написание какого-нибудь плагина для аутглюка, который будет делать предварительное преобразование неправильных слов в правильные во входящих письмах до срабатывания фильтра на ключевые слова…
Total votes 3: ↑2 and ↓1+1
можно написать PS-скрипт для Exchange, например.
Total votes 2: ↑1 and ↓10
А еще в фильтр комментов к разным блогам можно!
На php, как я понял, портировать ее просто.
This comment wasn’t rated yet0
для большей применимости в реальной жизни, программу надо бы сделать консольной. И под *nix порт нужен, т.к. большинство релеев крутится под *nix.
Total votes 8: ↑4 and ↓40
Для большей применимости — я дал код функции. Хотите, в консоль делайте, хотите — в dll, хотите — переводите в *nix, на питон, на php… Я просто показал идею.
Оконный вид программы с подсветкой слов — исключительно для наглядности работы функции.
Total votes 14: ↑14 and ↓0+14
Что ж, спасибо за идею.
Total votes 1: ↑1 and ↓0+1
К сожалению, это только один из многих частных случаев.
В_И_А_Г_Р_А
Виа(гра)
ВИ/\ГР/\
Не говоря уже о том, что много спама валит без прямого указания там ключевых слов.

Пока компы не научатся понимать смысл текста (читай: пока не будет создан ИИ), спамеры всегда смогут придумать как обойти подобные фильтры.

Но все равно спасибо, что занимаетесь этой темой. Надо держать спамеров в тонусе :)
Total votes 2: ↑2 and ↓0+2
Вряд ли кто-то серьезно рассчитывает создать абсолютный фильтр. Спасает так называемый «барьер» — небольшие усилия помогают отстеять огромную массу любителей-спамеров. Дальше повышать барьер сложнее и процент отсеянных спамеров увеличивается намного медленнее. Главное — решить, где остановиться.

На примере: фильтровал я как-то комментарии на сайте развлекательной тематики. Простой список стоп-слов позволили заблокировать процентов 90 нарушителей. После того как я перед проверкой стал удалять все символы кроме букв и цифр (тем самым отсекая варианты типа «В_И_А_Г_Р_А» или «Виа(гра)»), стало отсеиваться 98%. Остальные проверки были совсем специфическими и добавлялись на конкретные случаи, под настроение. В принципе, это — вариант, на котором можно остановится, все остальное пока проще изредка вычищать вручную.
Total votes 2: ↑2 and ↓0+2
Капитан компилятор сказал что у переменной string OnlyRu в конце не стоит ";"
Total votes 3: ↑2 and ↓1+1
А его друг другой капитан когда присмотрелся сказал что 6 похоже на русскую «б»
Total votes 3: ↑2 and ↓1+1
Можете сами дополнить словарь по своему усмотрению.
Ещё подскажу: «m» похожа на маленькую русскую «т», но это, как и «6»-«б» бросается в глаза.
Total votes 2: ↑2 and ↓0+2
Спамеры вконтакте спокойно используют «k» вместо «к», и не стесняются.
Total votes 1: ↑1 and ↓0+1
k и к как и З и 3 точно так же бросаются. Однакож отмечены в сабже. Зато тот кто будет машинально копировать из поста будет иметь «большую» защиту только не знаю от чего)
Total votes 2: ↑1 and ↓10
Добавил «1тиа@», «imu@a» и убрал k/к из 100%-алфавита.
И обновил скриншот
Total votes 4: ↑4 and ↓0+4
Добавил тему в избранное чтобы был справочник сопоставления букв)
Total votes 2: ↑1 and ↓10
Вообще, надо бы расширить функцию на работу с двусимвольными комбинациями.
Например, «bl» = «Ы», "/\" — «Л»
Total votes 2: ↑2 and ↓0+2
Сделай просто массив, а не стринг.
Total votes 1: ↑0 and ↓1-1
Хм, а почему бы не забраковывать письма в которых есть более некоторого количества слов, в которых используется вперемешку латинские и русские буквы?
Собственно сам факт того что в слове из 5 букв русского алфавита есть две буквы из латинского уже определяет то что слово — паразит.
Total votes 2: ↑2 and ↓0+2
Помоему наиболее разумное решение. Как минимум внимания таким письмам должно больше уделяться.
This comment wasn’t rated yet0
спасибо. я сам хотел написать такой код, но руки не доходили. На моей работе это нужно не для спама, а для проверки написания товара. У нас блондинки умудряются завести в базе 1С товар вперемежку. Например, есть модель CT-404 (буквы англ.), а заводят русскими. А если CN-102, то первую букву напишут русской, а потом, так как в русской раскладке буквы N нет, то переключаются на английскую раскладку и вводят уже второй символ. Бардак в базе был еще тот.
Total votes 1: ↑1 and ↓0+1
Кстати, отсеять практически весь «нигерийский» спам можно всего лишь по одному (или трем) ключевым словам, практически не встречающимися в нормальных текстах — это «kin» или «next of kin» (наследник).
This comment wasn’t rated yet0
Нигерийский спам самый нигерийский спам в спаме)
Total votes 2: ↑0 and ↓2-2
Зря вы так на тему спам-фильтров: наивный байсековский фильтр и фильтр на основе метода Фишера (SmapBayes, подключаемый к Outlook как раз на основе Фишера) могут и используют признак смешение букв из разных алфавитов как признак спама, хотя затем можно нормализовывать текст по описанному выше методу и подвергать другим тестам: ключевые слова и словосочетания, регистр слов (к примеру, все буквы в верхнем регистре и таких «кричащих» слов множество), анализ метаинформации: кто отправил письмо, откуда и т.д… Если же сразу нормализовывать текст, то можно потерять множество признаков, по которым мог бы обнаружен спам.

А за наглядный пример нормализации текста спасибо.
Total votes 1: ↑1 and ↓0+1
Можно еще считать слова с подменой букв как заведомо спамерские.
Total votes 1: ↑0 and ↓1-1
Я ещё проще придумал. Если в слове происходит смена кодировки, то это спам!
This comment wasn’t rated yet0
Кодировки???
Уж не языка-ли?
This comment wasn’t rated yet0
Ещё немного изменил строчки:
string Rus = «АаВЕеКкМНОоРрСсТуХхЗО1тиа@пь930»;
string Eng = «AaBEeKkMHOoPpCcTyXx30imu@anbgEo»;

Total votes 2: ↑2 and ↓0+2
Sign up to leave a comment.

Articles

Show the best of all time
Unlock dark mode

Your account

Sections

Information

Services

Support
© 2006–2024, Habr