hej, The Web Robots FAQ
robots.txt
Svara
till vad används robots.txt, och vad skriver man i den? var kan man läsa mer om den?
/rickard
Sv: robots.txt
Svara
http://info.webcrawler.com/mak/projects/robots/faq.html
I robots.txt ger du instruktioner till spindlar and andra www-robotar som söker av internet åt diverse internettjänster.
Ex.vis om du vill stoppa indexering av ett par kataloger kan du ange:
User-agent: *
Disallow: /log
Disallow: /script
mvh
Jocke