co to je ROBOTS.TXT

Zdeněk Mazanec bluehawk na cesnet.cz
Čtvrtek Srpen 27 10:37:54 CEST 1998


>Zdravim.
>
>Mam WEB server na linuxu s Apachem a obcas se mi v logech objevuje tohle.
>user61.anect.cz - - [17/Aug/1998:18:26:14 +0200] "GET /robots.txt HTTP/1.1"


Tento soubor obvykle ctou nejruznejsi prohledavaci roboti, programy co
mirroruji (vas) server, vyhledavaci sluzby...
Maji v nem byt instrukce prave pro tyto sluzby (trebas - koukej mazat, tady
pro tebe nic neni ;-)) )
Zdenek Mazanec



Další informace o konferenci Linux