Сео форум про методы раскрутки сайтов. Как раскрутить сайт и заработать в интернете.

Сео форум про методы раскрутки сайтов. Как раскрутить сайт и заработать в интернете. (http://forum-seo.net/index.php)
-   Вопросы по своим сайтам, решаем проблемы оптимизации сайтов (http://forum-seo.net/forumdisplay.php?f=24)
-   -   Robots.txt (http://forum-seo.net/showthread.php?t=2181)

Максим Анатольевич 26.11.2008 11:16

Robots.txt
 
Вот карачун вопщем то, открыл для индексации файл link.htm, там одни каталожные ГС, пс это дело проиндексировало и наложило санкции. Вопщем закрыл я в Disallow link.htm от индексации, но на самой странице link.htm куча внутренних ссылок на сами эти каталожные ГС.
Вопрос если закрыл сам link.htm будут ли его внутряки индексироватся дальше ?

Seo-man 30.11.2008 02:14

Я думаю не будут.
Я бы link.htm перенёс в папку, а к ней уже Disallow применил.
Вообще покажи свой файл robots.txt

Максим Анатольевич 01.12.2008 11:37

ОК, спасибо, впринципе так и зделаю, но логика мне подсказывает, что получится один и тот же результат, все ссылки не проиндексируются, что есть хорошо. :gl:

Seo-man 01.12.2008 15:45

можешь ещё в htaccess запретить доступ к папке для всех ip роботов поисвковиков:
Deny from ip поисковых роботов ))


Часовой пояс GMT +3, время: 22:59.

Powered by vBulletin® Version 3.8.6
Copyright ©2000 - 2024, Jelsoft Enterprises Ltd. Перевод: zCarot