95.1.46. pepsi-reputation

IP reputation: blocklists for inbound mail, and this host’s own

Handbuchabschnitt:

1

95.1.46.1.1. Name

pepsi-reputation - IP-Reputation: Sperrlisten für eingehende Mail und die dieses Hosts selbst.

95.1.46.1.2. Übersicht

pepsi-reputation [GLOBAL-OPTIONS] iplists update [–force]

pepsi-reputation [GLOBAL-OPTIONS] iplists status [–json]

pepsi-reputation [GLOBAL-OPTIONS] check [–json] [–no-store]

95.1.46.1.3. Beschreibung

pepsi-reputation pflegt die IP-Sperrlisten, gegen die eingehende Mail geprüft wird (iplists), und prüft, ob dieser Host selbst auf einer steht (check).

Jeder [pepsi-reputation-list-NAME]-Abschnitt benennt eine Liste. iplists update lädt jede aktivierte Liste vollständig über HTTPS oder rsync in die Tabelle pepsi.ip_blocklist herunter. pepsi-ingress(1) schlägt den Client jeder nicht authentifizierten Sitzung in dieser Tabelle nach, hält die Listen, die ihn nennen, unter state.origin.ip_blocklist fest und lehnt bei einer Liste mit ACTION = reject ihre Empfänger ab. pepsi-stage-if(1) kann nach der Markierung routen: zu einer Verwerfungs-Stage, zur Pay-to-Send-Schranke, zu einem Quarantäne-Ordner.

Niemand wird über einen Client befragt, während er verbunden ist. Eine DNS-Sperrlistenabfrage pro Verbindung, so wie die meisten MTAs diese Listen verwenden, würde dem Betreiber der Liste verraten, welche Server diesem Host Mail schicken, und würde jede Sitzung auf einen Dritten warten lassen. Eine heruntergeladene Liste kostet keines von beidem, und die Sitzung wartet für sie nie auf das Netz. Der Preis ist die Abdeckung: Die am weitesten verbreiteten Listen (Spamhaus ZEN, SpamCop, Barracuda) werden kostenlos nur als DNS-Abfragen angeboten und lassen sich daher so nicht verwenden.

Die Listen, die in ${DATADIR}/config.d/reputation.conf mitgeliefert werden, sind:

spamhaus-drop-v4, spamhaus-drop-v6 (aktiviert)

Spamhaus DROP, Netze, die von Spam- und Malware-Betreibern gekapert oder betrieben werden. Etwa 1.700 Netze; frei für jede Nutzung.

blocklist-de-mail (aktiviert)

Die Adressen von blocklist.de, die in den letzten 48 Stunden einen Maildienst angegriffen haben. Etwa 14.000 Adressen, alle 30 Minuten neu aufgebaut.

uceprotect-1 (deaktiviert)

UCEPROTECT Level 1, Adressen, die in den letzten 7 Tagen Spam an seine Fallen gesendet haben, per rsync. Aktivieren Sie sie mit ENABLED = YES in pepsi.conf(5); UCEPROTECT bittet um eine Spende.

Alle beginnen mit ACTION = mark, was nichts ändert, bis eine Stage nach der Markierung handelt.

95.1.46.1.3.1. Herunterladen

iplists update ist das, was pepsi-reputation-iplists.timer stündlich ausführt (einige Minuten nach der vollen Stunde, auf einem gegebenen Host jede Stunde zur selben Minute). Für jede aktivierte Liste

  1. überspringt es die Liste, wenn ihr letzter Download vor weniger als MIN_INTERVAL begann. Listenbetreiber bitten um nicht mehr als etwa einen Download pro Stunde, und UCEPROTECT sperrt einen Host, der mehr als vier Dateien pro Stunde abruft, aus und listet ihn;

  2. lädt es sie herunter. Über HTTPS trägt die Anfrage ETag und Last-Modified des letzten Downloads, sodass eine unveränderte Liste ein 304 Not Modified kostet. Über rsync wird die letzte Kopie unter CACHE_DIR aufbewahrt, sodass rsync nur den Unterschied überträgt;

  3. parst es die Datei, wenn sie neu ist (nach SHA-256), und ersetzt die Einträge der Liste in einer Transaktion. Ein Eintrag läuft ab, daher wird nichts von der vorherigen Version behalten;

  4. hält es fest, wann die Liste zuletzt als aktuell bestätigt wurde.

Eine Liste, die sich nicht herunterladen oder parsen lässt, behält ihre Einträge und hält den Fehler fest. pepsi-ingress(1) konsultiert eine Liste nur, solange ihre letzte Bestätigung jünger als MAX_AGE ist, sodass eine Liste, die nicht mehr aktualisiert wird, nicht mehr verwendet wird. Sie gilt dann als unbekannt, nicht als „niemand ist gelistet“, und unbekannt lässt Mail zu. Eine Liste, die deaktiviert, nicht mehr konfiguriert oder auf einem Host ohne rsync per rsync abgerufen wird, verliert beim nächsten Lauf ihre Einträge.

Einträge breiter als ein /8 (IPv4) oder ein /16 (IPv6) werden verworfen: Eine Liste, die plötzlich so viel listet, ist kaputt oder feindlich, und Listen haben schon das ganze Internet gelistet, als ihre Betreiber aufgaben. Eine Datei, in der mehr als ein Zehntel der Zeilen keine Einträge sind, wird als nicht im konfigurierten FORMAT abgelehnt.

HTTPS-Downloads verifizieren den Server gegen die System-CA-Wurzeln und verweigern Loopback- und private Adressen. rsync wird mit leerer Umgebung, der URL nach --, Verbindungs- und E/A-Timeouts und --max-size ausgeführt und nach zehn Minuten beendet.

95.1.46.1.3.2. rsync

Das Programm rsync ist eine optionale Abhängigkeit (das Debian-Paket schlägt es nur vor). Eine Liste, deren URL mit rsync:// beginnt, wird auf einem Host ohne es nicht verwendet: iplists update entfernt ihre Einträge und protokolliert eine Warnung; pepsi-setup(1) run warnt davor und entfernt ihre Einträge sofort, und die Expertenoption IP_BLOCKLISTS des Assistenten weigert sich, sie zu aktivieren.

95.1.46.1.3.3. Diesen Host prüfen

Eine von einem Cloud-Anbieter geerbte Adresse kann mit einem schlechten Ruf ankommen, und eine saubere wird gelistet, nachdem ein Konto kompromittiert wurde. pepsi-reputation-check.timer führt check täglich aus. Es fragt die DNS-Sperrlisten, die die großen Empfänger konsultieren, nach den eigenen Adressen und Domains dieses Hosts und nie nach einem Korrespondenten. Die Listen erfahren so nichts, was sie nicht ohnehin von jedem Empfänger erfahren, dem dieser Host Mail schickt. Geprüft werden:

  • jede PUBLIC_IP einer pepsi-stage-relay-to-internet-Stage, die Adressen, auf die [pepsi-ingress] HOSTNAME auflöst, und CHECK_ADDRESSES, wobei nicht global routbare Adressen weggelassen werden;

  • die [pepsi-ingress] ACCEPTED_DOMAINS.

Antworten werden nicht für bare Münze genommen. Nach RFC 5782 muss eine Liste ihren Testeintrag listen (127.0.0.2, ::ffff:7f00:2, die Domain test) und darf 127.0.0.1 oder invalid nicht listen. Besteht eine Liste diesen Test für eine Adressfamilie nicht, weil sie die Familie nicht bedient, diesen Resolver abweist oder alles beantwortet, wird sie für diese Familie als ungeprüft gemeldet, nie als sauber oder gelistet. Dasselbe gilt für eine Antwort in 127.255.255.0/24, die Spamhaus für eine abgewiesene Abfrage zurückgibt: .254 bedeutet, dass die Abfrage über einen öffentlichen Resolver wie 8.8.8.8 kam, den Spamhaus nicht bedient; betreiben Sie einen lokalen Resolver (Pepsi braucht ohnehin einen für DANE). Ein Eintrag wird als Warnung protokolliert, die Antworten werden in pepsi.reputation_check gespeichert, und pepsi-status(1) zeigt sie an. pepsi-setup(1) check meldet sie unter blocklists, neben den Anforderungen und Anmeldungen der großen Postfachanbieter.

95.1.46.1.4. Befehle

iplists update [–force]

Lädt die fälligen Listen herunter und lädt neue Versionen ein. –force lädt jede aktivierte Liste jetzt herunter und ignoriert MIN_INTERVAL, die Cache-Validatoren und den Hash der zwischengespeicherten Kopie. Verwenden Sie es sparsam: Listenbetreiber sperren Hosts, die zu oft herunterladen.

iplists status [–json]

Für jede konfigurierte Liste: ob sie current, stale (älter als MAX_AGE, daher vom Ingress ignoriert), never-loaded, disabled oder no-rsync ist; ihre ACTION; wie viele Einträge sie hat; wann sie zuletzt als aktuell bestätigt wurde; und der letzte Fehler.

check [–json] [–no-store]

Fragt die DNS-Sperrlisten nach diesem Host, gibt jeden Eintrag und jede Liste aus, die nicht gefragt werden konnte, und ersetzt die gespeicherten Antworten. –no-store gibt aus, ohne zu speichern; –json gibt die Ziele und jede Antwort aus.

95.1.46.1.5. Konfiguration

[pepsi-reputation]
CACHE_DIR

Wo rsync seine Kopie jeder Liste aufbewahrt (Standardwert /var/lib/pepsi-reputation, das StateDirectory= der Timer-Unit).

CHECK_IP_ZONES

Die Adresslisten, die check fragt (Standardwert zen.spamhaus.org bl.spamcop.net b.barracudacentral.org psbl.surriel.com bl.mailspike.net dnsbl-1.uceprotect.net ix.dnsbl.manitu.net; none für keine).

CHECK_DOMAIN_ZONES

Die Domainlisten, die check fragt (Standardwert dbl.spamhaus.org multi.surbl.org).

CHECK_ADDRESSES

Weitere zu prüfende Adressen, etwa eine NAT-Adresse, die die Konfiguration nicht nennt.

GOOGLE_SITE_VERIFICATION

DOMAIN:TOKEN-Paare: das Token, das Gmail Postmaster Tools anzeigt, wenn dort eine Domain hinzugefügt wird. pepsi-setup(1) run gibt den zu veröffentlichenden TXT-Eintrag google-site-verification=TOKEN für die Domain aus, und check verifiziert ihn. Pepsi kontaktiert Google nie.

[pepsi-reputation-list-NAME], einer pro Liste. NAME besteht aus Kleinbuchstaben, Ziffern und -.

URL

https://… oder rsync://HOST/MODULE/FILE. Erforderlich, außer für die vier Listen oben, deren URL und FORMAT standardmäßig die mitgelieferten Werte haben.

FORMAT

ip-list (der Standard): ein Eintrag pro Zeile, wie ihn die Datensätze ip4set und ip6trie von rbldnsd oder eine einfache Adressliste haben. Ein Eintrag ist eine Adresse, ein Netz (a.b.c.d/n), ein Bereich (a.b.c.d-e.f.g.h oder a.b.c.d-h für das letzte Oktett) oder die Kurzform von rbldnsd (a.b.c für ein /24); ! vor einem Eintrag schließt ihn aus. Kommentare, die :-Wertzeilen von rbldnsd und $-Direktiven werden ignoriert. spamhaus-drop: die JSON-Zeilen von Spamhaus DROP.

ENABLED

Ob die Liste heruntergeladen und konsultiert wird (Standardwert YES).

ACTION

mark (Standard): den Eintrag festhalten. reject: außerdem die Empfänger der Sitzung mit 554 5.7.1 ablehnen. postmaster wird weiterhin angenommen, wie RFC 5321 verlangt, damit ein gelisteter Absender deswegen einen Menschen erreichen kann.

MIN_INTERVAL

Die kürzeste Zeit zwischen zwei Downloads (Standardwert 45 m).

MAX_AGE

Wie lange der Ingress die Liste nach ihrer letzten erfolgreichen Prüfung noch konsultiert (Standardwert 12 h).

MAX_SIZE

Die größte angenommene Datei, in Bytes (Standardwert 64 MiB).

95.1.46.1.5.1. Die Downloads abschalten

ENABLED = NO schaltet eine einzelne Liste ab. Um alle Downloads zu stoppen, maskieren Sie den Timer; pepsi.target bleibt aktiviert und hält alles andere am Laufen:

systemctl mask --now pepsi-reputation-iplists.timer

95.1.46.1.6. Ausführung als root

Als root gestartet, läuft das Werkzeug als Dienstkonto pepsi weiter, bevor es sich mit der Datenbank verbindet, wie es pepsi-status(1) tut. Die Konfiguration wird vor dem Wechsel gelesen; Downloads geschehen danach. Beide Timer-Units laufen als pepsi.

95.1.46.1.7. Globale Optionen

Diese globalen Optionen stehen vor dem Unterbefehl (ein nachgestelltes Flag wird abgelehnt).

-c FILE, –config FILE

Liest die Konfiguration aus FILE, statt die Standardorte zu durchsuchen.

-L LOGLEVEL, –log LOGLEVEL

Setzt die Log-Ausführlichkeit. LOGLEVEL ist eines von error, warn, info, debug oder trace. Fehlt die Option, gilt die globale Option [pepsi] LOG und, wenn auch diese fehlt, info.

-v, –verbose

Zeigt Log-Meldungen aus allen Quellen, einschließlich Drittanbieter-Bibliotheken.

-h, –help

Gibt eine Verwendungsübersicht aus und beendet sich.

-V, –version

Gibt die Version aus und beendet sich.

95.1.46.1.8. Exit-Status

0

Erfolgreicher Abschluss.

1

Ein Fehler ist aufgetreten: ein fehlerhafter Listenabschnitt, eine fehlgeschlagene Datenbankverbindung oder mindestens eine Liste, die nicht aktualisiert werden konnte (die anderen werden dennoch aktualisiert).

78

Das Datenbankschema passt nicht zu diesem Build; führen Sie zuerst pepsi-setup(1) schema aus.

95.1.46.1.9. Beispiele

Ob dieser Host irgendwo gelistet ist, ohne die Antwort zu speichern:

pepsi-reputation -c /etc/pepsi/pepsi.conf check --no-store

Wie die Listen jetzt aussehen:

pepsi-reputation -c /etc/pepsi/pepsi.conf iplists status

Mail von den Adressen ablehnen, die blocklist.de listet, in pepsi.conf(5):

[pepsi-reputation-list-blocklist-de-mail]
ACTION = reject

Eingehende Mail von einem gelisteten Client mit pepsi-stage-if(1) statt in den Posteingang an eine Quarantäne-Stage schicken:

[stage-blocklisted]
PROGRAM = pepsi-stage-if
STATE_PATH = origin.ip_blocklist.listed
VALUE = true
TRUE_STAGE = quarantine
FALSE_STAGE = deliver

95.1.46.1.10. Siehe auch

pepsi-ingress(1), pepsi-stage-if(1), pepsi-setup(1), pepsi-status(1), pepsi.conf(5), pepsi.state(7).