# Инструкции для всех роботов
User-agent:   *
Disallow: /

User-agent: Yandex
Disallow: /cgi-bin
Allow: /forboard
Host: set.ru

User-agent: Googlebot
Disallow: /cgi-bin
Allow: /forboard

# Инструкции для робота Рамблера
User-agent: StackRambler
Disallow: /cgi-bin
Allow: /forboard

User-agent: Aport
Disallow: /cgi-bin
Allow: /forboard

User-agent: Webalta
Disallow: /cgi-bin 
Allow: /forboard

User-Agent: Yahoo! Slurp
Disallow: /cgi-bin 
Allow: /forboard