linux-l: robots ?

Johannes Walther hannes at walther.in-berlin.de
Fr Jan 16 18:06:30 CET 1998


JSC wrote:
> 
> hallo,
> 
> wie war das gleich mit den ungebetenen www-robots?
> 
> eine datei namens robots.txt in der DocumentRoot
> und voellig unwichtigem inhalt reicht aus ?
Nein, 

Inhalt: von robots.txt

# go away
User-agent: *
Disallow: /

Gruß Hannes
-- 
Johannes Walther  <http://walther.in-berlin.de>
BeLUG:            <http://www.belug.org>
IN-Berlin:        <http://www.in-berlin.de>




Mehr Informationen über die Mailingliste linux-l