# robots.txt zu http://dialogus.de/

# diesen Bots  Zutritt gestatten
User-agent: Googlebot
User-agent: Googlebot-Mobile
User-agent: Feedfetcher-Google
User-agent: bingbot
# diesen Bots jedoch bestimmte Verzeichnisse/Dateien verwehren
Disallow: /cgi-sys/
Disallow: /img/
Disallow: /*.gif$
Disallow: /*.jpg$
Disallow: /*.png$
Disallow: /*.pdf$
# Dateien ausschließen
Disallow: /status/401.php
Disallow: /status/403.php
Disallow: /status/404.php
Disallow: /status/410.php

# alle nicht genannten Bots sperren
User-agent: *
Disallow: /
Sitemap: https://dialogus.de/sitemap.xml