Egyre növekvő ál-forgalom random microsoftos IP tartományokból

Hálózatok általános

1-2 hete vettem észre indokolatlanul nagy felhasználószám növekedést az egyik weboldalunkon.
Folyamatosan egyre jobban torzította a statisztikákat.
A gond, hogy ezek a kérések teljesen normális felhasználóknak látszanak Win10-zel, böngészővel, nem tudom őket robotként szűrni. Letöltik a főoldalt és onnan mindent, mint egy normál felhasználó, még a javascripteket is futtatják. Pont ez a baj, mert még a statisztikai rendszerben is látszanak. Aztán mást nem töltenek le, csak időnként a főoldalt újra, ugyanúgy.
Már vagy 20 darab /20-as IP tartományt tiltottam ki, ezek mind a Microsoft tulajdonában vannak, de majdnem minden nap új címtartományokból kezdenek jönni ilyen kérések.
Ma is tizenvalahány bejött már egy újabb tartományból, különböző címekről, mire észrevettem és kitiltottam ezt a /20-as tartományt is.
Olyanok, mint a csótányok. Kiirthatatlanok.
Valaki tudja, mi lehet a céljuk ezzel?
Ha nem tiltanám ki őket, már nagyobb forgalmat generálnának, mint a valós userek.

  • 992 megtekintés

( dotnetlinux | 2019. 08. 19., h – 20:43 )

Azure-ba rakott botok. Milyen URL-t hívnak elsőre? Nem valami security bepróbálkozás? Vagy egy crawler menti a teljes weboldalt.

( fairlane | 2019. 08. 19., h – 20:52 )

Nézd meg az alábi cvs fájlban:
https://www.microsoft.com/en-us/download/confirmation.aspx?id=53602

Ez az összes MS által használt Public IP cím.

https://www.microsoft.com/en-us/download/details.aspx?id=56519

Ez meg az Azure Public IP-k.

Először az Azure IP-kkel csinálnék egy tiltólistát, aztán ha nem sikerül, akkor a teljessel.

--------------------------------
...úgyis jönnek...

( zsolt | 2019. 08. 20., k – 02:16 )

Köszönöm mindenkinek, aki hozzászólt!
Hosszas olvasgatás és logelemezgetés után rájöttem, mi történik.
Leírom, hátha másnak is hasznára lesz.

Egy számlázó programot fejlesztünk és most került bele, hogy a számlákat akár tömegesen is ki lehet vele küldeni e-mailben. Egyelőre még csak tesztelők használják, de egyre többen.

Nos úgy néz ki, a felhasználóink olyan e-mail sablonokat szerkesztettek, amiben benne van a számlázó program weboldalának linkje is. Ami jó fej dolog és hálásnak is kéne lennünk miatta, de emiatt jön létre az extra forgalom, amit az email-eket elemző botok generálnak. Nem tudom még, mit fogunk rá kitalálni, mindenesetre csak a statisztikai rendszerből szabad kitiltanunk a botokat, ha nem akarjuk, hogy a felhasználóink levelei emiatt minősüljenek spam-nek.

Köszi még egyszer a segítséget!