#ganze Website außer php-Seiten für die robots freigeben User-agent: * Disallow: /inhalt.php #kein Zugriff für Alexa-Archivar User-agent: ia_archiver Disallow: /