Eine Problemsite war gameplorer.de. Ich fand schließlich, dass sie immer GZIP schickt und implementierte eine Lösung, die den Fall behandelt. Daneben nutzte sie auch ein Lazyload JS, was das normale Image scraping per img src verhinderte. Das Problem konnte auchper regex gelöst werden.
Ich wollte die Sache noch weiter ausbauen aber ließ das dann, weil es ja auch so funktionierte. Regex brauchen doch einige Zeit zum compilieren und das ganze System ist jetzt schon mit jedem neuen Spezialfall lahmer. Man könnte schon mit einigen Regex einen ziemlich genialen Image Scraper bauen, der intelligent vorgeht.
Abends raffte ich mich doch nochmal auf und ging weg. Das Oerbayern stand aus und zum Saisonende war es auch nach 2:30 zielich leer. Oli P wohl macht Stimmung im kleinen Kreis. Er ist nun auch schon 37 Jahre als und hat ganz schön Tattoos gesammelt und Haare verloren. Es war eine lange Saison für ihn, sagt er.
Mallorcas Sommer ist nun wirklich vorbei. Sehr kalt in der Nacht, leere Straßen und aus.
0 Responses to “GZIP & Lazyload Scraping, Oberbayern”