|
|
01.06.2009, 12:16
|
#1 |
|
Пользователь
Регистрация: 28.03.2009
Сообщений: 25
Вы сказали Спасибо: 0
Поблагодарили 0 раз(а) в 0 сообщениях
|
что должно быть прописано в файле robots
что должно быть прописано в файле robots чтобы всем поискавым роботам можно было индексировать мой сайт
я прописал так User-agent: * Disallow: Host: [url]www.moneybiznes.ru[/url] подскажите пожалуйста это правильно ? и может чтото ищё подскажете, а то я только два дня про этот файл знаю, может я чтото не так сделал, я по интернету пашустрил вроде бы всё правельно написал, но я гне уверен есле не трудно обясните мне мольшую роль играит этот файл robots или нет |
|
|
|
02.06.2009, 01:50
|
#2 |
Регистрация: 08.05.2008
Адрес: Молдова/ПМР, Тирасполь
Сообщений: 3,557
Вы сказали Спасибо: 95
Поблагодарили 137 раз(а) в 124 сообщениях
Репутация: 1596
|
Да вообще стери файл, он в твоём случае лишний.
Или запрети доступ к служебным папкам в Disallow:
__________________
Недорогой хостинг! forum-seo.net/showthread.php?p=10754 Для просмотра ссылок или изображений в подписях, у Вас должно быть не менее 30 сообщение(ий). Сейчас у Вас 0 сообщение(ий). |
|
|
|
|
03.06.2009, 12:28
|
#3 |
|
Пользователь
Регистрация: 09.04.2009
Сообщений: 10
Вы сказали Спасибо: 0
Поблагодарили 2 раз(а) в 1 сообщении
|
Они и так все будут прекрастно индексировать.
В robots.txt запрещаеться к индексации определенные страницы сайта. Например нам надо запретить админку и скрипт постов, пишим: User-agent: * Disallow: site.ru/admin Disallow: site.ru/poster.php |
|
|
|
Линейный вид
