User-agent: *
# Gjelder: www.fk.no, www.fkt.no, www.agronord.no
# Det er nå sperret for tilgang for WEB crawlere (Googlebot, YahooSlurp)
# Grunnen er at de tar 100% av all kapasitet på serveren
# IT-drift må tilføre mere server-kapasitet før dette kan settes på igjen
# Morten Moa 25.jan 2006
Disallow: /
# Kommenter linjen over, og alt er ok igjen
Disallow: /trade/stockentry/
Disallow: /trade/cart/
Disallow: /trade/customerlogin/
Disallow: /trade/wishlist/
Disallow: /article/articleprint/
Disallow: /article/mailtofriend/
Disallow: /trade/productprint/
Disallow: /form/
Disallow: /imagecatalogue/imageview/
Disallow: /trade/search/
Disallow: /article/articleview/3750/1/136/
Disallow: /article/articleview/2846/1/1/
User-agent: Slurp
Crawl-delay: 20