Velika aktivnost mreže

Trebao si uzeti u račun obzir zaštite od visoke mrežne aktivnosti iz jednog (poseban) IP adresa (Poplava). kada prikupljaš informacije iz javnih izvora. Večina servera imaju ovakva ograničenja.

Što to znači?

Ako bude puno upita u specifičnoj stranici iz jedne IP adrese, ova stranica će blokirati takve upite na određeno vrijeme. Greška stranice ili prazna stranica će biti prikazana u ovom slučaju - to je vrsta zaštite od mogučeg DDoS napada od početne IP adrese.

Što je tako važno?

EmEx 3 može skidati i do 50 dokumenata odjednom. Obrada skeniranja se može pokazati kao potencijal DoS napad i nemožeš primiti ikakve informacije uključujući rezultate pretrage iz ovog servera.

Kako izbječi ovo?

Koristi mehanizam raspodjele od domene, kod toka skidanja biti će raspodjeljen po drugim domenama

Koristi Anti-Flood Filter

Koristi lista anonimnih proxy servera Svaki novi upit će biti pokrenut iz druge IP adrese. Pažnja, brzina skidanja ovisi o proxy brzini.