Schlagwort: ip proxy pool

Eines Tages schrieb ich in aller Ruhe meinen Crawler-Code, als ich mich plötzlich an ein Problem erinnerte: Wie kann ich verhindern, dass ich von der IP der Website blockiert werde? Ich möchte nicht, dass mein Crawler plötzlich aufhört zu crawlen...