# robots.txt for http://www.pur-gmbh.de/ # Zugriff auf alle Dateien erlauben User-agent: ia_archiver Disallow: / User-Agent: Googlebot-Image Disallow: / # Yahoo image crawler User-Agent: Yahoo-MMCrawler Disallow: / # Yahoo multimedia crawler User-Agent: Yahoo-MMCrawler/3.x Disallow: / User-agent: * Disallow: /cgi-bin/ Disallow: /intranet/ Disallow: /_shared/ Sitemap: http://www.pur-gmbh.de/sitemap.xml