Das Wiki-Tagebuch

(:wikilog:)

Yahoo Crawler jetzt gesperrt

Heute habe ich endgültig den Crawler von Yahoo für das Wiki gesperrt. Da der Robot von Yahoo es nach Monaten noch nicht hin bekommt, gesperrte Seiten nicht mehr anzulaufen, habe ich heute die Datei robots.txt um den entsprechenden Eintrag ergänzt. Diese Suchmaschine hat bisher mit hunderten von Einträgen unseren Logfile zugemüllt. Schaun mer ma, wie das zukünftig ausschaut. ;-)

Gruß

=>Posted at 12:09 by Holger

Kategorie(n):