# robots.txt for autoteil-ersatzteil.de

User-agent: *
Disallow: /_sub
Disallow: /admin
Disallow: /css
Disallow: /dat
Disallow: /gfx
Disallow: /htm
Disallow: /inc
Disallow: /mod
Disallow: /tmp
Disallow: /tpl

User-agent: Googlebot
Disallow: /*.png$
Disallow: /*.gif$
Disallow: /*.jpg$
Disallow: /*.pdf$
Disallow: /*.doc$

User-Agent: Googlebot-Image
Disallow: /

User-agent: ia_archiver
Disallow: /

User-agent: *
Allow: /alfa,ersatzteile,autoteile
Allow: /citroen,ersatzteile,autoteile
Allow: /fiat,ersatzteile,autoteile
Allow: /lancia,ersatzteile,autoteile
Allow: /peugeot,ersatzteile,autoteile
Allow: /renault,ersatzteile,autoteile
Allow: /seat,ersatzteile,autoteile

Allow: /alfa,autoteile,ersatzteile
Allow: /citroen,autoteile,ersatzteile
Allow: /fiat,autoteile,ersatzteile
Allow: /lancia,autoteile,ersatzteile
Allow: /peugeot,autoteile,ersatzteile
Allow: /renault,autoteile,ersatzteile
Allow: /seat,autoteile,ersatzteile

Allow: /autoersatzteile
Allow: /ersatzteilsuche.html
Allow: /ersatzteilanfrage.html

# Allow: /autoteile/alfa.shtml
# Allow: /autoteile/citroen.shtml
# Allow: /autoteile/fiat.shtml
# Allow: /autoteile/lancia.shtml
# Allow: /autoteile/peugeot.shtml
# Allow: /autoteile/renault.shtml
# Allow: /autoteile/seat.shtml

# Allow: /ersatzteile/alfa.shtml
# Allow: /ersatzteile/citroen.shtml
# Allow: /ersatzteile/fiat.shtml
# Allow: /ersatzteile/lancia.shtml
# Allow: /ersatzteile/peugeot.shtml
# Allow: /ersatzteile/renault.shtml
# Allow: /ersatzteile/seat.shtml

User-agent: Googlebot
Disallow:

User-agent: google
Disallow:

User-agent: abacho
Disallow:

User-agent: aladin
Disallow:

User-agent: altavista
Disallow:

User-agent: scooter
Disallow:

User-agent: anzwers
Disallow:

User-agent: dino
Disallow:

User-agent: crawler
Disallow:

User-agent: eule-robot
Disallow:

User-agent: eule
Disallow:

User-agent: excite
Disallow:

User-agent: architextspider
Disallow:

User-agent: fireball
Disallow:

User-agent: kit_fireball
Disallow:

User-agent: galaxy
Disallow:

User-agent: hotbot
Disallow:

User-agent: smartcrawl
Disallow:

User-agent: motor
Disallow:

User-agent: hyperbot
Disallow:

User-agent: infoseek
Disallow:

User-agent: kolibri
Disallow:

User-agent: mariner
Disallow:

User-agent: lycos
Disallow:

User-agent: Lycos_Spider_(T-Rex)
Disallow:

User-agent: netfind
Disallow:

User-agent: northern light search
Disallow:

User-agent: webcrawler
Disallow:

User-agent: Slurp
Disallow:

# Yahoo!
# User-agent: Slurp
# Crawl-delay: 10