Jak jeden infikovaný modem ohrozil celý /22 prefix

Ve zkratce

Malware na modemu jednoho zákazníka začal skenovat internet a hledat otevřené Telnet porty. Flow data ho zachytila včas, dřív než utrpěl /22 prefix ISP a jeho IP reputace.

Situace

Operátor obsluhuje firemní i domácí zákazníky. Domácí zákazníci si mohou připlatit za veřejnou IP adresu, například aby se z práce podívali na domácí kameru.

Jeden z těchto domácích modemů byl infikován malwarem a stal se součástí botnetu. Ten týden měl botnet za úkol skenovat internet, hledat otevřené Telnet porty a infikovat nalezená zařízení.

Výzva

Takové zařízení se rychle dostane na veřejné blacklisty. Nejdřív to postihne jen jeho jednu IP adresu. Pokud se nic nestane, může IP reputace utrpět celému prefixu, v tomto případě /22. Peeringoví partneři pak mohou začít provozovatele AS kontaktovat a žádat nápravu.

Malá anomálie na jednom modemu se tak může změnit v týdny práce, zatímco na začátku by stačila rychlá oprava. Háček je v tom, že takové anomálie obvykle zůstávají pod radarem SNMP monitoringu, jako je Zabbix nebo Nagios. Nezatěžují hardware routerů a negenerují velké objemy bajtů ani paketů.

Řešení

ISP měl zavedenou analýzu provozu z flow dat:

  • NetFlow se exportoval z perimetrových routerů.
  • Flow data se ukládala do centrálního kolektoru FLOWCUTTER.
  • FLOWCUTTER umožňuje rychlou drill-down analýzu NetFlow i dalších zdrojů dat.

Rychlý ranní pohled na dashboard Home ve FLOWCUTTERu ukázal změnu trendu v počtu talkerů (unikátních párů zdrojové a cílové IP adresy).

Trend shift in talkers on the FLOWCUTTER Home dashboard

Drill-down lokalizoval anomálii na jednu IP adresu, domácího zákazníka s veřejnou IP.

Drill-down to a single customer IP with over 500,000 talkers

Zařízení každých pár minut posílalo miliony Telnet paketů (port 23) do celého internetu.

Top source IP addresses, with the infected modem at the top
Telnet port 23 taking 36% of destination ports

Během několika hodin se IP adresa objevila na blacklistech.

AbuseIPDB result for the infected IP, a hit to IP reputation

Aby nemusel spoléhat na každodenní ruční kontroly, nastavil ISP ve FLOWCUTTERu dvě věci:

  • Vestavěnou detekci síťových anomálií, včetně skenování Telnetu.
  • Obohacení NetFlow o data o IP reputaci s upozorněním, kdykoli se některá IP adresa ISP objeví na blacklistu.

Výsledek

ISP zachytil Telnet anomálii včas a infikovaný modem vyřešil dřív, než se problém rozšířil na celý /22 prefix. Upozornění teď hlásí podobné anomálie i IP adresy na blacklistu, aniž by někdo musel každý den procházet dashboardy.

Zdroje

Závěr

Jedno infikované zařízení může poškodit IP reputaci celého prefixu nebo AS. Řešení problémů z flow dat odhalí takové anomálie, dokud jsou malé, a upozornění udrží ISP o krok napřed.

Řešíte podobnou situaci?

Popište nám, co ve své síti vidíte. Inženýr se vám do jednoho pracovního dne ozve s konkrétním dalším postupem.

Napsat inženýrovi

REÁLNÉ PŘÍPADY. REÁLNÉ SÍTĚ.

Další případy z praxe.

DDoS

Jak ISP ustál dvoutýdenní vlnu DDoS útoků

Distribuovaný DDoS útok procházel přes scrubbing. Flow data umožnila ISP oslabovat útok vlnu po vlně, dokud útoky neustaly.

9

DNS a IP reputace

IP na blacklistu vedla až do páteřní sítě ISP

Sdílená IP opakovaně končila na blacklistech, přestože NetFlow vypadal normálně. Za IP na blacklistu stály botnety na páteři ISP.

9

DDoS

Jak britský ISP ukončil dvoudenní DDoS útok

Britský ISP čelil 20 DDoS útokům za dva dny. Flow data ukázala vektor útoku a mitigace DDoS přes BGP komunity upstreamů ukončila výpadky.

9