DSPAM简介和使用.ppt

DSPAM简介和使用,Xueron2007-06-16,反垃圾概述,基本MTA控制（防止OpenRelay，SMTP认证，IP并发、频率等）关键字过滤黑、白名单（IP、DOMAIN、用户）DNS测试IP，HELO，SENDER的一些DNS查询SPF、DKIM实时黑名单技术（RBL、URIBL）贝叶斯过滤垃圾邮件评分（SA）指纹识别行为检测蜜罐图片识别HashCashReputation,DSPAM简介,Dspam是一个开源的垃圾邮件过滤软件作者：JonathanA.ZdziarskiEndingSpam:BayesianContentFilteringandtheArtofStatisticalLanguageClassification目前版本：3.8.0(2007.3)特点：高效0.01s-0.07s/msg准确99.5%-99.95%,DSPAM的其他一些特性,数据库支持HashDBSqlite，Sqlite3MysqlPgsqlOracle(最新的3.8.0已经去掉了)ClamAV集成WebUI自动白名单,DSPAM的分词技术,Word-逐个“词”的切分Chain-链式切分Sbph（SparseBinaryPolynomialHashing）Osb（OrthogonalSparsebiGram）,DSPAM使用的算法,Nave（朴素bayes算法）Graham（APlanforSpam）Burton（SpamProbe）Robinson（RobinsonsGeometricMeanTest）Chi-square（Fisher-Robinson）,DSPAM的训练方法,Toetrain-on-error遇到错误才学习优点：数据库写操作少些，学习效率高缺点：准确性低一些Tefttrain-everything学习所有优点：简单实时缺点：数据库增长很快，I/O频繁易出错Tumtrain-until-mature学习到成熟介于Teft和Toe之间的一个方法Tunetrain-until-no-errors学习到没有错误优点：准确率很高缺点：学习需要的时间很长,DSPAM的处理能力,最大的部署在35,000用户的系统上通常处理一封邮件需要0.01s到0.07s(最高的0.20s左右),DSPAM的应用,学习Dspam自带的工具dspam_trainDspam程序,$./dspam_trainUsage:./dspam_trainusername-iindex|spam_dirnonspam_dir,$./dspam-useruser1-class=spam|innocent-source=error|corpus|inoculationDSPAMPostfix-Delivery|_(SMTPReinjection)_|,#ServersideServerModeautoServerParameters-deliver=innocentServerIdentlocalhost.localdomainServerPID/var/run/dspam.pidServerDomainSocketPath/tmp/dspam.sock“#ClientsideDeliveryHost127.0.0.1DeliveryPort10026DeliveryIdentlocalhostDeliveryProtoSMTP,DSPAM的应用,部署dspam（postfix）Postfix的设置Re-inject设置,smtpinetn-n-smtpd-ocontent_filter=lmtp:unix:/tmp/dspam.sock,localhost:10026inetn-n-smtpd-ocontent_filter=-oreceive_override_options=no_unknown_recipient_checks,no_header_body_checks-osmtpd_helo_restrictions=-osmtpd_client_restrictions=-osmtpd_sender_restrictions=-osmtpd_recipient_restrictions=permit_mynetworks,reject-omynetworks=127.0.0.0/8-osmtpd_authorized_xforward_hosts=127.0.0.0/8,DSPAM的应用,部署dspam（amavisd-new）amavisd.confamavisd,my($proc_fh,$pid)=run_command(#-mode=teft#qw(-stdout-deliver-spam)#dspam3.0#useoption-featureinsteadof-tokenizerwithdspam4.1的脚本支持事务,00*mysql-user=user-pass=passdb/path/to/purge-4.1.sql,DSPAM的数据库的清理,00*/usr/local/bi