# /robots.txt - указывает поисковым роботам какие каталоги # брать для индексации не следует. # Если пуст или не существует, то все можно брать # # Пример /robots.txt file # # User-agent: webcrawler # Disallow: # # Host: указывает основное зеркало для яндексовского робота # # User-agent: lycra # Disallow: / User-agent: * Disallow: /cgi-bin/moshkow Disallow: /cgi-bin/html-KOI/AQUARIUM/songs Disallow: /cgi-bin/html-KOI/AQUARIUM/history Disallow: /cgi-bin/html-windows/AQUARIUM/songs Disallow: /cgi-bin/html-windows/AQUARIUM/history Host: www.reklama.su