# robots.txt zu http://www.wax-and-more.de/ # Im ersten Teil wird angegeben, für welche Robots (User-agent) die nachfolgenden Anweisungen gelten # Im zweiten Teil werden die Anweisungen selbst notiert. # alle robots haben zugriffserlaubnis (auf alle verzeichnisse) User-agent: * # Durch eine fehlende Angabe hinter Disallow: wird alles erlaubt Disallow: # Mit / bestimmen Sie "alle Daten dieses Verzeichnisses und aller Unterverzeichnisse" Allow: /