#robots.txt for http://www.4defence.nl/ # dit teken zorgt dat de tekst genegeerd wordt # http://www.seoking.nl/zoekmachine-optimalisatie-met-robotstxt/ nuttige info pagina #Wees gerust, dit is geen rocket science. #De eerste regels geeft aan dat alle spiderbots alle pagina's en mappen mogen indexen, #De tweede regel behalve de onderstaande mappenen alle pagina's die daarin zich bevinden. #http://tool.motoricerca.info/robots-checker.phtml hiermee kan je robots.txt controleren op fouten. User-agent: * Disallow: /alleenbestuur/ Disallow: /AlleenLeden/ Disallow: /Alleen_rubenvissers/ Disallow: /Alleen_janschellekens/ Disallow: /ContactOpnemenMet/ Disallow: /ductmasters/ Disallow: /DownloadbareBestanden/ Disallow: /FORMfields/ Disallow: /foruma/ Disallow: /fotos_en_tekeningen/ Disallow: /foto_overzicht/ Disallow: /Nikko/ Disallow: /lds/adressen_organisatie/ Disallow: /temp/ Disallow: /error_page_404_die_mailt.php Disallow: /ZesWekenGratisSporten/