############################## # Google ############################## User-agent: googlebot Disallow: /cgi-bin/ Disallow: /images/ User-agent: Googlebot-Image Allow: /* User-agent: Mediapartners-Google* Disallow: Allow: /* ############################## # MSN ############################## User-agent: MSNBOT Disallow: /cgi-bin/ Disallow: /images/ ############################## # MSN2 ############################## User-agent: msnbot-media/1.0 Disallow: /cgi-bin/ Disallow: /images/ ############################## # ALEXA ############################## User-agent: alexa_site_report Disallow: /cgi-bin/ Disallow: /images/ ############################## # YAHOO ############################## User-agent: slurp Disallow: /cgi-bin/ Disallow: /images/ ############################## #Other ############################## User-agent: Lycos_Spider_(T-Rex) Disallow: /cgi-bin/ User-agent: teoma Disallow: /cgi-bin User-agent: FAST-WebCrawler Disallow: /cgi-bin User-agent: Nutch Disallow: /cgi-bin User-agent: ia_archiver Disallow: /cgi-bin User-agent: vscooter Disallow: /cgi-bin User-agent: scooter Disallow: /cgi-bin User-agent: fast Disallow: /cgi-bin User-agent: gulliver Disallow: /cgi-bin User-agent: ArchitextSpider Disallow: /cgi-bin User-agent: ZyBorg Disallow: /cgi-bin User-agent: SurveyBot Disallow: /cgi-bin User-agent: Baiduspider Disallow: /cgi-bin Sitemap: http://www.v1va.net/vb/sitemap_index.xml.gz Sitemap: http://www.v1va.net/sitemap.xml.gz Sitemap: http://www.v1va.net/sitemap.xml Sitemap: http://www.v1va.net/urllist.txt Sitemap: http://www.v1va.net/ror.xml Sitemap: http://www.v1va.net/sitemap.html Sitemap: http://www.v1va.net/vb/external.php?type=RSS2