Vergleich Spam-Filter-Statistik

[Gast]

Hallo,

gemäß der Filter-Statistik habe ich folgende Werte:
- Summe bearbeitete Emails: 12117
- False-Positives: 10 / 0,08%
- False-Negatives: 151 / 1,25%

Spam-Erkennungsrate: 90,83%
Effektivität des Filters: 96,54%

Nun würde mich mal interessieren, ob diese Werte in Ordnung sind.
Welche Werte haben andere Spami-User zum Vergleich?

Als Plugins verwende ich (in folgender Reihenfolge):

Whitestringfilter
Newsletter Plugin
RFC-Validator
Scripts Filter
Hercule
DCC Filter
URL-Filter
Charset Plugin
Strange Country Filter
Mystic Signs
No Comment Filter
Attachment Filter
Spam Wort Filter
Lernender Filter.

Die Agressivität steht auf HOCH. habe die Plugins vor kurzem übrigens in der Reihenfolge umgestellt (vorher hatte ich eine andere Reihenfolge), seitdem hat sich das Filter-Ergebnis subjektiv deutlich verbessert (weniger False-Negatives).

Postet doch mal eure Werte!

Gruß, Bluescreen

[Andreas_Z]

Hallo Bluescreen!

Anbei meine Statistik:

-----------------------
The number of mails processed is: 314428
The number of mails classified is: 75798
The number of false positives is: 170
The number of false negatives is: 1176

The percentage of false positives is: 0.05%
The percentage of false negatives is: 0.37%

The Spam Recognition Rate is: 98.45%
The Overall Filter Efficiency is: 99.33%

------------------------------------------
65.53% Number: 3378 Lernender Filter
31.74% Number: 1636 Hercule
1.20% Number: 62 Empty Mail Filter
0.99% Number: 51 Server Tester
0.27% Number: 14 Mystic-Signs-Filter
0.21% Number: 11 (Blocked sender)
0.02% Number: 1 Attachment Filter
0.02% Number: 1 Image Filter
0.02% Number: 1 Spam-Wort-Filter


emptymailfilter
newsletter
HerculeFilter
lernender Filter
mysticsignsfilter
ServerTester
attachmentfilter
imagefilter
Spamwortfilter
AlphabetSoup Filter

So von den Prozenten her würde Deine als völlig normal einstufen. Meine Werte sind im laufe meiner schon mehrmonatigen Nutzung entsprechend größer. Aber das heißt nichts. Das einzige was ich für mich so bemerke ist, daß die Werte für false Positivs stark angestiegen sind, nachdem ich den Hercule eingesetzt habe. Leider kann ich den nicht entsprechend optimieren, weil ich mir dann wieder mehr false Negativs einhandle. Und das möchte ich nicht. Ohne den Filter sähe die Statisk vielleicht in dieser Hinsicht etwas besser aus. Jedoch kennt der Hercule einige Spammerkmale, die ein lernender Filter nur schwer bis gar nicht filtern kann. Deshalb bleibt er drin.

Gruß
Andreas_Z

[Chactory]

Hallo Bluescreen und Andreas_Z,

bitte helft doch mal einem armen Statistikbanausen wie mir, und erklärt mir, warum bei Bluescreen bei einer Rate von 1,25% falsch-nichterkannten Spams die Spam-Erkennungsrate bei 90,83% liegt und bei Andreas_Z 0,37% Falsch-Negative eine Spam-Recognition-Rate von 98,45% ergeben.

Bei mir sind im vergangenen und aktuellen Monat alle Spammails richtig als solche erkannt worden. Nach Ausschalten von fehlerträchtigen Unter-Items des Hercule-Filters sind in der gleichen Zeit keine falsch-positiven Filterungen vorgekommen.

Der Hercule-Filter, den ich so liebe, hatte mir lange Zeit ärgerlich viele falsch-positive Bewertungen eingetragen. Inzwischen habe ich aber die fehlerträchtigen Stellen identifiziert. Weitere für den Falsch-Positiv-Fehler verantwortliche Filter sind z.B. Blacklist-Filter (Fehleinträge in den Schwarzen Listen), Substringfilter (Verkehrsexperte), Mandatory String Filter und Adressee-Filter (BCC-Fehler), Alphabeth Soup Filter, Domail Filter, Server Tester und Space Filter (falsch-positive Bewertungen, keine Einstellmöglichkeiten).

Mit welchen Einstellungen das Spamihilatorprogramm bei mir arbeitet und welche Filter in welcher Reihenfolge bei mir in Gebrauch sind, habe ich in ein paar Screenshots dargestellt.

Gruß, Chactory

[Andreas_Z]

Hallo Chactory!

Tja..... das ist ja mal ne spannende Frage. Ich vermute, daß in der Spam-Erkennungsrate noch Werte mit einfließen, die nichts mit False-Positives u.ä. zu tun haben. Geanu erklären kann ich das aber auch nicht. Da ist Bob der bessere Ansprechpartner oder vielleicht noch Michel.

Gruß
Andreas_Z

[Chactory]

Hallo Andreas_Z!

Yeah!

Gruß, Chactory

[Bob Loeffler]

Hi all!

I have just posted a message regarding the statistics. Please see my post at the end of the following topic:

http://www.spamihilator.com/forum/viewtopic.php?t=4505

Regards,

Bob