Vipul's Razor: distributed spam detectie

Op Slashdot is te lezen dat men op SourceForce met een interessant project bezig is: Vipul's Razor. Dit programma werkt met een soort peer-to-peer netwerk, dat ervoor zorgt dat spam geen kans meer heeft. Indien een gebruiker een spam-mailtje ontvangt, geeft hij dit door aan de Razor Reporting Agent. Vervolgens wordt een identificatie-code van twintig karakters berekend, om in de toekomst nieuwe mailtjes te controleren.

Krijgt een gebruiker of provider voortaan e-mail, dan wordt dit gecontroleerd op overeenkomsten met bekende codes. Wordt er een overeenkomst gevonden, dan kan het bericht automatisch verwijderd worden. Een bezoeker van Slashdot heeft het systeem op zijn werk uitgetest, en de resultaten hiervan zijn zeer positief. Behalve dat er veel ongewenste e-mail verwijderd werd, was het ook nog eens zo dat er geen enkel non-spam bericht als zijnde foutief geflagd werd.

Reacties (39)

[Boss]

Het is te hopen dat dit systeem goed beveiligd kan worden. Anders kan een of andere grapjas opgeven dat de mailtjes van de mail-lijsten waarop ik me heb ge-abo'd als spam worden gezien.

En jammer dat het systeem voorlopig alleen met linux mailsystemen kan werken. Het wordt pas interessant als er plug-ins zijn voor de grote mailprogramma's (Eudora, Outlook, Pegasus etc.)

[Jelmer]

Dit moet je anders zien. Dit programma moet bij providers op de mailservers gaan draaien en niet als plugin bij mensen thuis. Zo kan de provider een goede service voor anti-spam leveren en de klant hoeft er niets voor te doen!

[blaatenator]

Daar is ook een ander woord voor: censuur. Spam is irritant, en moet ook aangepakt worden, maar dat zou bij de bron moeten gebeuren. Niet dat dat makkelijk is, maar ik vind het een oncomfortabele gedachte dat een provider beslist wat ik wel en niet ontvang. Daar zijn btw al eerder discussies over geweest

[TheGhostInc]

Daar ben ik het nou helemaal mee eens!

Er moet ergens een IP adres zijn waar die spam opduikt, laat die provider de persoon maar op zoeken en gewoon een boete betalen.
Er is altijd een provider die die persoon verbinding geeft, dan kan de gebruiker altijd achterhaald worden, laat de gebruiker de opsporingskosten ook maar meteen betalen....

[_JGC_]

Ik ga dit zeker draaien op mijn persoonlijke mailserver. Krijg elke dag 30 mails, waarvan er minstens 25 spam zijn (en mijn killfile breidt zich telkens verder uit)

[Verwijderd]

Juist. Als je een hekel hebt aan een bedrijf dan geef je gewoon die mailtjes op als spam. Lekker handig

[Verwijderd]

damn kerel, gade gij nu echt elke post da ook maar een beetje me MS te maken heeft, liggen verneuken door uw kinderlijk gezeik?
Het heeft dan eigelijk nog nie eens iets me MS te maken.

[edit]
http://www.tweakers.net/nieuws/19394

hier bijvoorbeeld ook al
[edit]

[Verwijderd]

Dit lijkt me zeer interresant. Veel gebruikers hebben nu een @hotmail alleen voor het krijgen van spam (wat je altijd krijgt als je weer ergens aanmeldt ). Maar ook Hotmail is niet meer spam proof , had me laatst aangemeld bij een gratis site provider, en kreeg daarna aldoor spam. Hotmail blokt email adressen, en deze spam had elke keer een ander emailadres gevolg, de hotmail anti-spam beveiliging werkt dan niet meer.
Hoop dat dit een goed proggie wordt

[reinouts]

Daarom moet je ook zorgen dat jouw email adres niet direct bekend is bij die partijen, maar dat je toch je email adres kunt opgeven. Hoe doe je dat? Ga naar www.sneakemail.com en lees de instructies...

(Sneakemail genereert een random adres voor je dat wel mail doorstuurt maar zo te blokkeren is als je dat wilt.)

[Opa]

In bepaalde gevallen kan ook http://www.mailexpire.com/ handig zijn.
Stel: Je meldt je aan voor een dienst waarvoor ze je een ID moeten toezenden maar verder hebben ze eigenlijk je mail helemaal niet nodig vind je. Je stelt een expire tijd van een dag in, je ontvangt je bevestiging op dat adres en na een dag bestaat je tijdelijke adres niet eens meer.

[Verwijderd]

Nadat ik echt heel veel spam kreeg heb ik zo'n moerstaal e-mail adres aangemaakt http://www.moerstaal.nl

Het voordeel van zo'n adres is dat je het mag verbasteren, zie als voorbeeld mijn e-mail adres.

Dit heb ik dus ook met KaZaa gehad nou, die SPAM gaat dus direct naar mijn "verwijderde items".

Het grootste voordeel vond ik dat ik weet waar een spammer mijn adres heeft gevonden.

[Tomsworld]

Dat wou ik ook net zeggen. In mijn hotmail boxen komt massa 's spam. Maar wat me opvalt is dat er meer en meer spam begint te komen. Ook op totaal onbekende adressen van mij.

[Vrieskist]

Als je niet uitkijkt tijdens het aanmelden van je hotmail account dan kan je zomaar aangemeld zijn voor het white book (ofzo). En daar kan iedere gek zo 1000-en adressen wegplukken ....

[Atomsk]

Dat valt wel mee. De belangrijkste reden dat je "vanzelf" spam krijgt op je hotmail is omdat je username te kort is. Spammers proberen tegenwoordig willekeurige letter/cijfercombinaties uit tot zo'n 7 karakters op hotmail. Alle adressen die niet bouncen worden in een lijst gezet en zo krijg je spam op een hotmailaccount dat niemand kent.

De enige oplossing is een langere username te kiezen. Mijn hotmail bestaan uit 10 karakters en ik heb nog nooit spam erop gekregen.

[Cartman!]

Je moet voor Hotmail de zogenaamde Inbox Protetor in stellen, dan kan je zeggen dat bij het woorde gratis, free en/of sex bijvoorbeeld het mailtje automatisch un de prullenbak gaat, werkt echt goed! mijn spam mail is met 90% ingekrompen!

[Buggle]

Nou, ik kan je vertellen, ik heb alle beschikbare vakjes ingevuld, en nog steeds krijg ik balen spam binnen. Ik gebruik nu sind kort Spam Punisher, maar dat is niet echt nuttig op korte termijn.

[Tomsworld]

Ja die staat aan. Maar ik vind spam gewoon verkeerd. Je moet eens bedenken hoeveel spam kost. De bandbreedte om het te versturen te ontvangen. De plaats op de servers de processing time. Eigenlijk is spam eigenlijk verkwisting van geld.

[reinouts]

Ja en dat is het schofterige: dat geld wordt niet betaald door de spammers maar door de diensten die de routers e.d. beschikbaar stellen en de ontvangers zelf natuurlijk!

[RRX]

Ik snap het echt niet, ik heb een hotmail adres, ik krijg echt NOOIT spam in me box, ik had laatst voor een vriend van mij een e-mail adres aangemaakt, en de volgende dag had ie al meer dan 100 mailtjes in zijn box

[kyrill]

ik ken geen perl. Hoe installeer ik dat programma?
Op de webpage zijn er geen leken instructies

[Rembert]

Perl = programmeer taal. Ff zoeken op het net om de voor jou geschikte perl software te vinden en voila, het werkt. Als je wat C of Java kent, dan begrijp je Perl snel genoeg - wat vast helemaal niet nodig is: het scheerapparaat van Vipor maakt gebruik van Perl. Dus als jij Perl installeert en dan dat scheer apparaat erop knalt (lees altijd de README in de tarball), dan werkt het misschien zelfs zo out-of-the-tar.

[Verwijderd]

Die haal je op www.perl.com, is opensource
http://www.perl.com/CPAN/src/stable.zip

[Jelmer]

Lees gewoon de INSTALL in de tar bal...

[Verwijderd]

Ik gebruik het al een tijdje en ik moet zeggen het werkt redelijk goed op dit moment. Zo'n 90% van de spam die ik krijg wordt netjes gefilterd en in mijn spam folder verplaatst. Vipul's Razor werkt eigenlijk nu alleen goed met linux/unix. Je kan het wel gebruiken voor windows, maar dat is niet aan te raden. Het werkt met een zgn. razor-check functie, die aan de hand van een md5 checksum spam identificeert. Het komt voor dat je spam ook niet gefilterd word. Dan gebruik je razor-report om die die mail te identificeren als spam, het wordt direct opgenomen in een database, waardoor dat mailtje voortaan als spam zal worden geidentificeerd. Voor meer info+download: [url="http://razor.sourceforge.net."]http://razor.sourceforge.net.[/url]

[WhiteDog]

Zou het niet beter zijn als er bv. 20 reports nodig zijn? Stel, ik krijg een nieuwsbrief van m'n provider. Iemand geeft dat door als SPAM, en voor het mijn beurt is in de mailing list is hij al geblockt... of dat je zelf kunt instellen: na x aantal reports als spam: BLOCK.

[Verwijderd]

Het is inderdaad gevaarlijk dat er na een spam-report de mail al meteen word geblocked, als er mensen gebruik van maken die er niets van snappen of die er misbruik van maken dan is dat een nadeel voor Vipul's Razor users die er serieus gebruik van willen maken. Ik ben benieuwd of daar wel/geen rekening mee gehouden is door de developers. Ik heb het getest aan de hand van paar spam mailtjes, deze werden _direct_ geblocked.

[Verwijderd]

Een ander interessant programma tegen spam is http://www.spambouncer.org/

The SpamBouncer is a set of procmail recipes, or instructions, which search the headers and text of your incoming email to see if it meets one or more of the following conditions:
* Originates from an email address known to belong to a spammer.
etc.

[Ortep]

Ja het ziet er heel leuk uit. Op een klein nadeel na dan:

The SpamBouncer itself must run on a Unix server which has the Procmail mail filtering program installed, so only users who have access to a Unix shell account with Procmail installed can use it.

Niet iedereen heeft de beschikking over zoiets. Sterker nog, meer dan 95% van de mensen heeft zoiets niet. Omdat ze :
A) Windows in de een of andere vorm draaien. Wxx NT, WP of W2K
Ze op een Mac werken
C) Ze met OS/2 werken.

[Krukar]

Wow, dat is wel beter.
Ik wordt helemaal gek van die spam in me mailbox, vooral van bepaalde bedrijven
Mischien zou het mooi zijn als ze ook iets tegen hoaxes vinden, waarvan er altijd van die irritante mensen zijn die het doorsturen.

Zie toch al dat ik in me brievenbus van welke onverlaat dan ook zgoenaamde virusmeldingen en reclame krijg

Ik vind het dus een perfect systeem, en het mag van mij doorgezet worden.

[Verwijderd]

Ze willen binnenkort dat je je eerst registreerd als een user voordat je spam mag reporten. Dit zou een oplossing, of in ieder geval leiden tot reductie van, kunnen zijn voor mogelijk misbruiken van het Vipul's Razor systeem.

[Verwijderd]

Lekker voor je privacy..

[BadRespawn]

hoezo?

[blaatenator]

Hij denkt waarschijnlijk dat de emails op inhoud worden bekeken, wat eigenlijk niet het geval is. Er wordt een soort 'hash' gemaakt van de foute email, een verzameling van eigenschappen dus (begreep ik iig uit het verhaal ). Niet echt een inbreuk op de privacy. Maar zie mijn post hierboven waarom ik er niet blij van wordt als dit gebruikt bij ISP's.

[Verwijderd]

eindelijk van al die zooi mail af