Archiv
Kategorien
Ärgernisse
Biblionetz
Elektromobil
Gadgets
Geek
Ideen
Informatik
IA
iPhone
Medienbericht
MedienBildung
OLPC
PH Solothurn
PHSZ
Schule & ICT
Scratch
Software
Tablet-PC
Veranstaltungen
Visualisierungen
Video
Wiki
Wissenschaft
Mehr als 0 und 1
Letzte Postings
- Weitere Logfile-Merkwürdigkeiten09 Jan 2025 - 08:54 5
- Kann eine KI 'die härtesten Bezahlschranken überwinden'?29 Sep 2024 - 16:27 1
- Boah, aus X lässt sich jetzt Y generieren!22 Sep 2024 - 07:59 4
- Evaluationsstruktur 'Lernen mit GMLS'17 Sep 2024 - 13:52 1
- Pixel-Inflation15 Sep 2024 - 11:39 2
- Kurze URLS für Portraitseiten von Mitarbeitenden an Hochschulen07 Sep 2024 - 08:24 1
- Sommerlektüre 202414 Aug 2024 - 17:05 1
- Spass mit Graphen19 Jul 2024 - 12:13 2
- Warum GMLS und nicht einfach LLM?18 Jul 2024 - 12:19 2
- Die Informationsflut-Pegelstandanzeige04 Jan 2024 - 12:36 1
für gesamten Blog
Unerwünschte Wiki-Crawler
05 August 2006 - 13:58
|
Version 1
|
doebeli
Trotz entsprehcend gesetztem robots.txt verirren sich immer wieder Spider auf meine Wikis. Erstaunlicherweise kommen sie meist aus Südamerika, Russland, oder China...
Mit der Zeit sind sie auch schlauer geworden. Während sie früher mit massenhaftem Seitenabruf auf sich aufmerksam gemacht haben (20 Seiten pro Sekunde), verhalten sie sich jetzt unauffälliger und grasen pro Minute maximal eine Seite ab. Aber auch hier hilft:
Order allow,deny Allow from all Deny from 208.66.195.2 Deny from 208.66.195.8 Deny from 208.66.195.15
.htaccess.
Zum Kommentieren ist eine Registration notwendig. Kategorien: IsaBlog, IsaWiki
Kontakt
- Beat Döbeli Honegger
- Plattenstrasse 80
- CH-8032 Zürich
- E-mail: beat@doebe.li
