User-agent: * Disallow: #toelichtingen: #User-agent: * (wildcard-teken) betekent dat alle spiders worden toegestaan. #User-agent: googlebot betekent dat alleen google(bot) is toegestaan. #Disallow: blanco betekent dat de spiders overal mogen kijken. #Disallow: / slash betekent dat de spiders nergens mogen kijken. #Disallow: /mapnaam/ betekent dat de spiders niet in die map mogen kijken. #Disallow: /header.htm/ betekent dat de spiders niet die specifieke pagina mogen kijken. #White space at the beginning of a line is allowed, but not recommended.