# robots.txt # # Doku: siehe http://info.webcrawler.com/mak/projects/robots/norobots.html # # Gilt für jeden Robot: User-agent: * # Hier nicht suchen: Disallow: /broker Disallow: /cgi-bin Dissalow: /statistics