Verziere grad diverse Verzeichnisse mit .htaccess - Dateien.

Manchmal blockiere ich damit zu viel.

Dann sieht die Seite vorübergehend etwas seltsam aus.

Aber es wird.

Analysiere eben das FTP-Log. Auch sehr interessant.

Seit kurzem(ca. 28.Dez.) toben sich zwei Crawler auf der Seite aus: GoogleBot und JobBoerseBot.

Alle 2 Sekunden ein neuer Besuch. Kein Wunder, dass die Gästezahlen falsch waren.

Ich versuch sie über robots.txt auszusperren.

Zum Seitenanfang