![]() |
что должно быть прописано в файле robots
что должно быть прописано в файле robots чтобы всем поискавым роботам можно было индексировать мой сайт
я прописал так User-agent: * Disallow: Host: [url]www.moneybiznes.ru[/url] подскажите пожалуйста это правильно ? и может чтото ищё подскажете, а то я только два дня про этот файл знаю, может я чтото не так сделал, я по интернету пашустрил вроде бы всё правельно написал, но я гне уверен есле не трудно обясните мне мольшую роль играит этот файл robots или нет |
Да вообще стери файл, он в твоём случае лишний.
Или запрети доступ к служебным папкам в Disallow: |
Они и так все будут прекрастно индексировать.
В robots.txt запрещаеться к индексации определенные страницы сайта. Например нам надо запретить админку и скрипт постов, пишим: User-agent: * Disallow: site.ru/admin Disallow: site.ru/poster.php |
Часовой пояс GMT +3, время: 18:32. |
Powered by vBulletin® Version 3.8.6
Copyright ©2000 - 2025, Jelsoft Enterprises Ltd. Перевод: zCarot