[Seo-man]

Вот интересная статья по теме:

Русская поисковая машина Яндекс целыми пачками выбрасывает сайты из своего индекса. Или, для тех кто не понимает оптимизаторского птичьего языка – Яндекс отказывается производить поиск по огромному количеству сайтов.
В настоящее время по некоторым интернет-отраслям количество таких «вылетевших» сайтов составляет десятки процентов, что, согласитесь, уже явный повод задуматься и забеспокоиться. Характерный симптом заболевшего сайта: вылетает он не целиком (как это бывает когда Яндекс «банит» вредоносный с его точки зрения сайт), в индексе всегда остается от 1 до 15 страниц, что позволяет службе поддержки Яндекса отвечать на недоуменные вопросы владельцев стандартной отпиской, дескать, что вы волнуетесь, ваш сайт все же присуствует в поиске, ну а то, что присуствует не все страницы – так вы это, типа, работайте, улучшайте сайт.
Итак, что такое этот самыЙ ФИЛЬТР?

1. Он представляет собой независимый процесс (робот, алгоритм, фильтр – не знаю как сказать правильно, я в терминологии не силен), работающий автономно по своим собственным правилам и – видимо – не обменивающийся или почти не обменивающийся информацией с другими процессами. АГС-17 пользуется базой страниц, который собрал робот-индексатор, но при этом не информирует индексатора, что нужно брать, а что не нужно брать в индекс. Индексатор загружает все. А АГС-17 чистит уже загруженные страницы и делает это несинхронно с индексацией. Если ваша страница попала в индекс сегодня, то АГС-17 может добраться до нее и сегодня, и завтра и через месяц. А может, кстати, при определенных условиях (например, если будете делать упомянутые ниже прививки) и вовсе не добраться.

2. АГС-17 видимо самонастраивающийся процесс, при этом не исключено, что он может корректировать свои алгоритмы и без участия человека. Например, была замечена совершенно четкая тенденция: если достаточно большое количество забракованных АГС-17 страниц на разных сайтах содержало в URI какой-то определенный шаблон, АГС-17 начинал браковать все страницы URI-которых попадал под этот шаблон. Так, например, в какой-то период времени из индекса выпадали все страницы сформированные джумловским компонентом «Аккокомент», независимо от их содержания, или страницы содержащие в URI параметр searchword.

3. АГС17 можно уподобить вирусу. Если он однажды прицепился к вашему сайту, то он будет теребить его бесконечно, поэтому тут уместно будет использовать выражение «сайт, зараженный АГС17». Как и от любого вируса, от АГС17 можно вылечиться, но об этом чуть позже.

4. Большая часть правил по которым АГС-17 выкидывает страницы – не вечна и живет ограниченный срок. Например в начале мая searchword получил реабилитацию. У некоторых моих коллег возникла версия (я не являюсь ее сторонником), что набор правил, по которым работает АГС-17, имеет ограниченный диапазон и новые «более важные» правила, вытесняют «менее важные» старые.

Главное и определяющее правило по которому АГС-17 обращает внимание на ваш сайт – это (нет, не продажные ссылочки) качество контента. Правил определения качества довольно много, и в них не разберется даже самый продвинутый аналитик. Но, в современных интернет-реалиях определяющий вес тут играет то, что называется «уникальностью» текстов. Причем под уникальностью подразумевается, не только уникальность ваших текстов в границах интернета, но и в границах самого вашего сайта. Если на вашем сайте есть достаточно большое количество идентичных или очень похожих текстов расположенных по разным адресам – вы привлечете внимает АГС-17, даже если на других сайтах эти тексты не встречаются. Если же вы прибегали ко всяким хитрым способат «получения уникальных текстов из неуникальных», вроде программ-синонимизаторов или генераторов, и считаете свои тексты уникальными, не факт, что алгоритм Янлекса будет того же мнения.

Само по себе наличие плохого контента на вашем сайте – это уже повод для того, чтобы АГС-17 вычистил ваши «некачественные» страницы из индекса. Именно поэтому под раздачу попали уже упоминавшиеся ранее New2.ru и министерство транспорта.

В первом случае это произошло очевидно потому, что все материалы на news2.ru представляют собой фрагменты других материалов, опубликованных ранее в интернете. Нормативные документы Минтранса – как и любые другие публичные госбумаги, тоже, увы, неуникальны.

Сейчас же наблюдается массовый вылет фотогаллерей, что тоже понятно – текст, состоящий из одной только подписи к картинке – слишком мал, чтобы пройти проверку на качество.

Однако, плохой контент является только фактором, запускающим интерес АГС-17 к вашему сайту. Как правило, помимо основного, «контентного критерия» срабатывает множество добавочных.

Если ваш сайт попал под раздачу по контентному критерию, то будьте готовы к тому, что АГС-17 начнет шерстить его по другим критериям, коих великое множество. Но SEO-сообщество больше всего интересует прежде всего один из этих критериев – а именно – наличие продажных SEO-ссылок. Скажу смело, господа, в ходе испытаний было достоверно и однозначно установлено, что сам факт наличия на вашем сайте продажных SEO-ссылок великому АГС-17 до глубокой балды. А вот то, как влияют эти ссылки на выдачу поисковки – не до балды. Если ваши ссылочки недопустимым образом искажают выдачу поисковки с точки зрения Яндекса – АГС-17 оправит ваш сайт прямиком в предбанник – именно так остроумно оценил состояние «15 страниц в индексе» участник одного из форумов. Еще не бан, но уже и не нормальное состояние.
Самое пакостное в логике работы АГС-17 это то, что оценивается, повторюсь, не наличие «плохих» ссылок и не их количество, а исключительно их влияние. Поэтому, если ваш сайт угодил в предбанник именно из-за плохого влияния на выдачу, то просто снятие ссылок с сайта вам уже не поможет.