#gilt fuer alle spider
User-agent: *

#grundsaetzlich erlaubt
Allow: /

#vom Spidern ausschliessen:
Disallow: /wp-admin
Disallow: /mediadaten
Disallow: /zwischenspeicher
Disallow: /mysqldumper