linux-l: robots ?

Marc Ende marcende at roxin.ml.org
Fr Jan 16 20:37:23 CET 1998


On Fri, 16 Jan 1998, JSC wrote:

> hallo,
> 
> wie war das gleich mit den ungebetenen www-robots?
> 
> eine datei namens robots.txt in der DocumentRoot
> und voellig unwichtigem inhalt reicht aus ?

Neeeee

robots.txt:

User Client *
Disallow /


Oder so ähnlich... Müßte so sein...


Marc





Mehr Informationen über die Mailingliste linux-l