Если dle то я бы посоветовал так:
User-Agent: *
Allow: /index.php
Allow: /main/
Allow: /softs/
Тут все котегории
Allow: /
Crawl-delay: 10
Sitemap: [url]http://ваш[/url] сайт.ru/uploads/sitemap.xml
Disallow: /engine/
Disallow: /language/
Disallow: /templates/
Disallow: /addnews.html
Disallow: /rules.html
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /user/
Disallow: /backup/
Disallow: /favorites/
Disallow: /?do=lastcomments
Disallow: /statistics.html
Host: ваш сайт.ru
|