#####################################
#
# File used by search engine spiders
#
####################################

####################################
# Google Ads can go everywhere
#
####################################
User-agent: Mediapartners-Google*
Disallow:

####################################
# Google only
# Ignore cgi and inc files
####################################
User-agent: googlebot
Disallow: /*.cgi
Disallow: /*.inc
Disallow: /*.txt

####################################
# All others can't go there:
# Not useful for search engines
####################################
User-agent: *
Disallow: /members/actsettings/
Disallow: /members/
Disallow: /auto/
Disallow: /banners/
Disallow: /bugs/
Disallow: /darkness/
Disallow: /documentation/
Disallow: /gns/
Disallow: /graphs/
Disallow: /hosted/
Disallow: /logs/
Disallow: /php/
Disallow: /templates/
Disallow: /sajax/