User-agent: linkCheck # Datensatz betrifft linkCheck Disallow: /Anfahrt/ # alle Seiten in /Anfahrt/ sind gesperrt Disallow: /buttons/ # /buttons/ ist ebenfalls gesperrt Disallow: /frameset/ # /frameset/ gesperrt # Leerzeile beginnt neuen Datensatz User-agent: BadSpider # Datensatz betrifft BadSpider Disallow: / # BadSpider hat Site-Verbot # Leerzeile beginnt neuen Datensatz User-agent: * # Datensatz betrifft alle anderen Spider Disallow: /Anfahrt/ # alle Seiten in /Anfahrt/ sind gesperrt Disallow: /buttons/ # /buttons/ ist ebenfalls gesperrt Disallow: /frameset/ # /frameset/ gesperrt