## robots.txt
# Zugriff auf alle Dateien erlauben
User-agent: *
Disallow: 404.html
Disallow: /werbung/
Disallow: /links/

User-agent: psbot
Disallow: /