Das image-cache Ding wird mit jedem Tag komplizierter. Heute hatte ich, dass ein Bild als Thumbnail erkannt wurde, dann aber das gleiche Bild im Blog wohl falsch verlinkt war und auf einer 404 endete. Da hatte ich also dann das img nicht definiert. Wir kann ich das umgehen?
Ich generiere beim Fehler dann ein Bild per Imagedraw und schreibe eine Fehlermeldung als Bild rein.
So langsam reicht’s aber snipz macht immer noch Probleme. Eigentlich müsste ich die ganze URL auseinandernehmen und immer http:// schreiben. Dazu habe ich noch keine Lust, denn eigentlich sollte man sowieso die requests-Library nehmen.
19:30 riss ich mich los und ging mal eine Runde. Kiev ist nett und am Abend sind noch einige Leute auf der Straße – weniger einsam als in der Nacht um 3. Ich knipste etwas herum, brauche eine Camera mit Stabilisierung aber OK. Eigentlich alles schon gesehen. Heute mal bei McDonalds eine Art Wrap, war OK. Um 21:30 erst wieder zu Hause, wo ich mich an ein paar Fixes auf dem Server machte.
Telize funktionierte, als ich den default server löschte. Auf dem blog hier kommen pro Tag einige hundert Aufrufe, waren schon tausende, die irgendwas scrapen oder das Ding für Spam vorbereiten. Als User-Agend war der gute alte Internet Explorer 6 angegeben. Da der sowieso nicht für den Blog genutzt werden sollte, schrieb ich in nginx ein redirect auf Telize IP.
if ($http_user_agent ~ "MSIE 6.0" ) {
rewrite ^ http://37.187.98.132/ip break;
}
Per ab -n 1000 -c 5 http://37.187.98.132/ip testete ich das mal, denn mit 2ms pro Abfrage ist das eine nette und schnelle Art, bots abzuschrecken – vielleicht besser noch mit GeoIP am Ende. Ist ironisch, dass ich genauso Scraper auf der Seite habe und ich ja das gleiche mit anderen machen will. So lerne ich ein paar Abwehrtechniken kennen. Die erste mit dem offensichtlich falschen User-Agent war ja einfach.
Nachts schaute ich „Good Kill“ an.
Nebenbei später sollte ich mal auf async crawlers gehen. Gute infos hier auch jetzt mit Python 3.5 sollte alles besser gehen aber erst mal mein Ding fertig machen. Der image-scraper sollte nun kaum mehr Fehler bringen. Mal gucken, wann er wieder stoppt.
0 Responses to “Redirect und Abendrunde”