co to je ROBOTS.TXT

[Petr Snajdr]

On Thu, 27 Aug 1998, Michal Zemek wrote:

> Zdravim.
> Mam WEB server na linuxu s Apachem a obcas se mi v logech objevuje tohle.
> user61.anect.cz - - [17/Aug/1998:18:26:14 +0200] "GET /robots.txt HTTP/1.1"
> 404
> nevite nekdo co , a kdo  , a proc chce ten soubor robots.txt

Soubor v ktere se definuje kam vselijake ty "altavisty","webcrawleri"
apod. pavouci pri svem vyhledavani nemaji chodit. je to 
naprosto v poradku.

S pozdravem
	Petr Snajdr