robots.txt

Alles, was den Apache betrifft, kann hier besprochen werden.

robots.txt

Postby Heini_net » 22. June 2004 09:41

Hi Leutz..

Mindestens 50% meiner Log Datei besteht aus :
[Mon Jun 21 12:36:35 2004] [error] [client xx.xxx.xx.xxx] File does not exist: C:/webpages/robots.txt

Weiss es einer was es mit der file auf sich hat ? Sind es irgend welche Script Kiddies die denken das ich nen IIS Server hab oder sind es irgend welche Suchmaschinen die schnüffeln wollen ?

Kann man um dies zu vermeiden ne leere robot txt datei erstellen?

mfg. Heini
User avatar
Heini_net
 
Posts: 520
Joined: 25. July 2003 15:43
Location: hier

Postby DJ DHG » 22. June 2004 09:58

Moin Moin

Kann man um dies zu vermeiden ne leere robot txt datei erstellen?


ja kann man.

http://www.drweb.de/suchmaschinen/robots.shtml


mfg DJ DHG
User avatar
DJ DHG
AF Moderator
 
Posts: 2455
Joined: 27. December 2002 13:50
Location: Kiel


Return to Apache

Who is online

Users browsing this forum: No registered users and 208 guests