linux-l: robots ?
Johannes Walther
hannes at walther.in-berlin.de
Fr Jan 16 18:06:30 CET 1998
JSC wrote:
>
> hallo,
>
> wie war das gleich mit den ungebetenen www-robots?
>
> eine datei namens robots.txt in der DocumentRoot
> und voellig unwichtigem inhalt reicht aus ?
Nein,
Inhalt: von robots.txt
# go away
User-agent: *
Disallow: /
Gruß Hannes
--
Johannes Walther <http://walther.in-berlin.de>
BeLUG: <http://www.belug.org>
IN-Berlin: <http://www.in-berlin.de>
Mehr Informationen über die Mailingliste linux-l