User-Agent: *
Disallow: /cgi-bin			# На какой хрен спрашивается индексировать CGI?
Disallow: /includes			# Здесь лежат запчасти страничек
Disallow: /guestbook			# Индексировать гостевую книгу - дурной тон
Disallow: /Pictures			# Зачем грузить канал индексацией картинок
Disallow: /backup			# бэкапы
Disallow: /docs				# не подлежит индексированию
Disallow: /temp				# мусор не индексируют
Disallow: /Templates			# см. пункт выше