Logdatei von bots befreien

Auf dem webspace auf dem dieser Blog läuft, kann man sich eine Applikation (webalizer) einrichten, um die die Statistiken zu betrachten. Um mir diesen Applikationsslot freizuhalten lade ich mir lieber bei Bedarf die aktuelle access.log herunter und jage sie durch webalizer.

Eigentlich ist das ja auch so simpel wie nur irgendwas, aber eines ärgerte mich dann doch zunehmend, vor lauter Bots war an eine Analyse gar nicht zu denken.

webalizer bietet zwar durchaus in der Konfigurationsdatei einiges an, um sich Bots zu entledigen, aber die zu konfigurieren war mir viel zu umständlich und unflexibel.

Also galt es den ganzen Mist herauszufiltern. Dazu bieten RegEx ein breites Spektrum.

Etwas vergleichbares hatte ich im Internet nicht gefunden, und da vermutlich auch andere dieses Schicksal teilen, werde ich ein kleines Shell-Skript zum herunterladen anbieten.

Im Prinzip muß man es nur von dem Ordner aus aufrufen, in dem sich die access.log-Datei befindet. (Achtung! - webalizer erzeugt u.a. eine index.html-Datei, es sollte also nicht im root-Verzeichnis eines webspaces erledigt werden.) Es wird eine Zwischendatei angelegt, aus der webalizer gespeist wird (eine direkte Pipe ist leider nicht möglich, da webalizer mit dem Erzeugen beginnt, bevor sed fertig ist), diese Hilfsdatei wird aber wieder entfernt. auch die Logdatei bleibt intakt, für diejenigen, die dies gerne auf einem Servre ausführen möchten.

Das Shell-Skript:

antibot.sh

Viel Erfolg!

  Nergal

2 Karten fertig

Noch ein bisl Zeit investiert und schon sind zwei komplette Karten fertig und können begangen werden.

Die Rieselfelder sind vollständig und auch zwei Wintersonnwendfeiertage-Spaziergänge in Marl (wenn auch mit wenig Bildern) sind fertiggestellt.

Rieselfelder
Marl

  Nergal

neue Photos und an Ort und Stelle

Endlich gibt es neue Photos, es hat sich in der letzten Zeit doch einiges angesammelt und ich habe kräftig aussortiert.

Googles Map / Earth Applikation hat mir nach ein bisl Einarbeitung ermöglicht endlich Bild und Ort zusammenzubringen. Erstmal als 'proof of concept' ein kleiner Auszug aus einer Radtour in die Münsteraner Rieselfelder zum Photographieren. Die GPS-Koordinaten sind aus der .gpx-Datei in eine Polylinie umgewandelt, und dann noch zum Testen einen Punkt herausgegriffen und zu einem Vorschaubild verlinkt.

Wie das ganze funktioniert kann man dann hier sehen: Rieselfelder.

Das Photo dort kann man immerhin schon anklicken ;) .

  Nergal

Monasteria Obscura


Admirabilis · Above and Beyond (©Quelle: Admirabilis)

Heute waren wir wieder im Studio für die Aufnahme der nächsten Ausgabe von Monasteria Obscura. Und da gab es gleich eine große Überraschung: doppelte Sendezeit.
Das Team der Sendung Kontrabass, die uns normalerweise folgt, konnte diesen Monat keine Aufnahmen machen. So mußten wir zwar gehörig improvisieren, aber es bedeutet natürlich vor allem mehr Musik!


Tarja Turunen (© Photo: Toni Härkönen)

Besonders freut uns, Admirabilis mehr Raum gegeben zu haben; wir haben zwar noch nicht das ganz neue Album zur Hand gehabt, aber hoffen es Euch in der nächsten Zeit auch vorstellen zu können.

Auch für alle (Ex?-)Nightwish-Fans, die die Stimme von Tarja Turunen vermissen, gibt es mit deren Solo-Album 'My Winter Storm' Erlösung.

Wir freuen uns bereits jetzt auf die 1. Sendung in 2008 und wünschen allen Hörern bis dahin eine erholsame Wintersonnwendzeit.


Unsere Playlist und Links zu den Liedern aus der Sendung:

  1. Tarja Turunen - Minor Heaven, vom Album 'My Winter StormSerum' (2007)
    Tarja Turunen - I Walk alone (artist version), vom Album 'My Winter StormSerum' (2007) :: tarjaturunen.com
  2. admirabilis - Senseless, vom Album '' (2004)
    admirabilis - Of Angels and Demons, vom Album '' (2004) :: admirabilis.de
  3. Up in Hell - Bring My Blood, von dem Album 'Trance' (2007) :: upinhell.de
  4. Samael - On Earth, vom Album 'Reign Of Light' (2004) :: samael.info
  5. Burzum - Dunkelheit, vom Album 'Filosofem'
  6. Steinkind - Deutschland Brennt, vom Album 'Vom Hier Im Jetzt' (2007) :: steinkind.com
  7. This Morn'Omina - One-Eyed Man, vom Album '7 Years of Famine' (2002) :: hegira.be
  8. :wumpscut: - Our Fatal Longing, vom Album 'Bone Peeler' (2003) :: wumpscut.de
  9. Qntal - Nihil, von der EP 'Nihil' (2003) :: qntal.de
  10. Combichrist - This is My Rifle

Ausgestrahlt wird die Sendung am 16. November um 20.00 Uhr im Bürgerfunk via Antenne Münster auf der Frequenz 95.4 MHz. Empfangbar in Münster und näherem Umland.

Weitere Infos ...

Wir freuen uns auf Euer Einschalten!

  Nergal

Hochwasser


Wienburgpark

Eine kleine Phototour gestern hat ein paar Impressionen hinterlassen. Die Bilder werden demnächst auch noch in der Gallerie eingestellt werden, bis dahin aber hier zwei vorab.

In der Region hat es in den letzten anderthalb Wochen außerordentlich viel geregnet und die Aa hat einen ziemlich hohen Pegel erreicht, ebenso die Altarme im Wienburgpark.


Die Aa bei Hochwasser am 08. Dezember 2007

Entsprechend matschig war es auch überall, aber ich denke es hat sich am Ende dennoch gelohnt die Camera mitgenommen zu haben, auch wenn mir ein Eisvogel leider zu schnell weggeflogen ist, das wäre ein wahrhaft prächtiges Motiv geworden, aber ihn gesehen zu haben war bereits ein Genuß.

Schließlich noch ein paar Aufnahmen an der Aa. Es ist erstaunlich, wie dieses bisweilen klägliche Rinnsal sich in einen kleinen Fluß verwandeln kann. Leider war das Wasser äußerst trüb und die vielen Scheinwerfer der Autos erschwerten es, die an sich fast schon melancholische Stimmung festzuhalten.

  Nergal

Photogallerie fertig

Was lange wärt wird endlich gut ...


Selbsportrait

Nachdem ich einige Lösungen für Photogallerien mit django ausprobiert habe, was alles in allem eher nervig war, da viele Inkompatibilitäten zwischen der installierten django-Version und den diversen, mehr oder minder ausgereiften Modulen bestanden.

Darüberhinaus war erschreckend, wie stark man den Server verlangsamen kann, wenn man größere Bilddateien durch django überträgt. Die statische Lösung war um ein vielfaches schneller, was man sogar bei einer lokalen Installation deutlich zu spüren bekam.

Zu guter letzt fiel die Wahl auf ein Werkzeug, geschrieben in Python, mit dem man offline die Gallerien erstellt und diese dann komplett hochladen kann (ich könnte es auch bei webfaction installieren, aber das würde die begrenzte Rechenleistung und vor allem den zugeteilten Arbeitsspeicher über Gebühr beanspruchen). Es waren doch einige Stunden in die Anpassung zu investieren, da ich erstens kein Tabellendesign, wie es der Autor des Programms verwendet mag, und zum anderen das gewohnte Design dieser Seite erhalten bleiben sollte.

Es mag noch die eine oder andere Rauheit im Design übrig geblieben sein (wird im Laufe der Zeit behoben werden), aber ich hoffe in nächster Zeit weitere Bilder einstellen zu können und die Software soweit abändern zu können, daß ich die in meiner Bilddatenbank hinterlegten Kommentare und Bemerkungen zusammen mit dem Bild werden einbnden können.

Also geschwind auf Photo geklickt!

Noch ist nicht viel drin, teilweise noch das Testmaterial für das Design und die nötige Funktionalität.

  Nergal