Почему мой сайт попал под АГС?

Почему мой сайт попал под АГС? Фильтры Яндекса – подробностиДобрый день! Сегодняшняя статья будет полезна начинающим вебмастерам, которые находятся на начальном этапе создания блога. Тем не менее, для всех остальных также будет интересно узнать, что такое фильтры Яндекса, за что их дают и чем они так опасны для блога. Кто ещё не совсем понимает для чего это ему нужно, всё равно рекомендую прочитать статью до конца и узнать, как мой сайт попал под АГС, чтобы понять саму идею и не совершать тех же ошибок. Знания помогут сберечь Ваше время и нервы.

Яндекс занимает ведущие позиции среди поисковиков рунета. Достойную конкуренцию в русскоязычном сегменте ему составляет лишь Google, а остальные напоминают лишь слабую тень гиганта. Уже только по этой причине каждый начинающий блоггер обязан знать ;), к чему приводит не знание основ блоггинга и не правильные действия.

Такие слова прекрасно звучат, и всё же пока что-то не случится, я сам вряд ли заинтересуюсь этим вопросом :smile:. Пока нет проблемы и решать нечего, то есть пока бан Яндекса не грянет – блоггер не пошевелиться!Фильтры поисковой системы Яндекс

Скажу сразу, именно из-за своего незнания попал мой сайт под АГС. Хоть из бана вышел 4 месяца назад, и, тем не менее, по-прежнему мои отношения с могучим поисковиком Yandex не самые лучшие и страницы сайта до сих пор сидят глубоко в выдаче. Но эта уже совсем другая тема, о которой я обязательно напишу, так что подписывайтесь на обновления и оставайтесь в пекле событий.

Фильтры поисковой системы Яндекс

Фильтр — это наложение сакции на сайт (наказание) со стороны поисковика, в результате чего из поиска выпадают страницы или сразу весь блог.  Давайте поближе познакомимся с этими страшными для вебмастера фильтрами, узнаем, за что их дают и способы выхода из них:

  1. Песочница. Данный фильтр автоматически накладывается на молодые проекты возрастом 6-12 месяцев, пока они не заслужат авторитет от поисковика.
    Как выйти из-под фильтра:

  2. Ты последний. Накладывается за бесполезный контент, не имеющий никакой пользы для читателей. Страницы сайта остаются в поиске, но находятся на последнем месте, и соответственно переходов с поисковика практически нет.
    Для проверки нахождения страницы под фильтром следует скопировать часть текста из статьи и вставить её в строку поиска. Если страницы нет на первых позициях, то это тревожный сигнал, говорящий о применении санкции, то есть ты попал.
    Как выйти из-под бана Яндекса:

  3. Ты спамный. Бан приходит к сайтам с переоптемизированными текстами, имеющих высокую плотность ключевых слов, слишком много подчеркиваний и выделений. За это тоже страницы понижаются в выдаче.
    Вывод сайта из-под АГС:

    • Оптимизировать статьи без фанатизма. Советую прочитать Правильно оптимизированная статья.
    • Соблюдать плотность ключевых слов. Какой процент ключевиков в тексте оптимальный трудно сказать. Кому интересны цифры смотрите статью Как узнать плотность ключевых слов?
      Я особо не загоняюсь по этому поводу, а лишь делаю статьи с вхождением слов из подобранного поискового запроса не больше 2%. Для проверки использую сервис megaindex, где следует сначала пройти регистрацию и после этого перейти на страницу анализа релевантности текста (данная услуга на сервисе БЕСПЛАТНАЯ):megaindex.ru - анализа релевантности текста
  4. Непот фильтр. Накладывается поисковиком за чрезмерную продажу ссылок. Яндекс такие сайты понижает в поиске и перестает учитывать их ссылочный вес.
    Как выйти из АГС:

  5. Аффилирование. Если у одного владельца несколько ресурсов одинаковой тематики, то в выдаче остается только один из его проектов. При наличии нескольких веб-сайтов авторы пытаются уменьшить конкуренцию путем продвижения в ТОП своих площадок по одинаковым ключевым словам, что прекрасно видят поисковые роботы.
    Вывести сайт из бана:

    • Поменять владельца хостинга и домена;
    • Размещать площадки на различных хостингах;
    • Указывать разные контактные данные: имена, телефоны, адреса.
  6. За накрутку поведенческих факторов. Сейчас появилось много сервисов по накрутке показателей блога, и если поисковик Вас спалил, то почти по всем поисковым запросам страницы просядут в выдаче.
    Как вывести сайт из АГС: 

  7. Фильтры АГС-17 и АГС-30. Наконец мы дошли до самых страшных Яндекс фильтров для вебмастеров. Наверное, уже многие слышали о них. Именно под ним мой блог находился 9 месяцев с ноября 2011 по август 2012.
    Аббревиатура АГС расшифровывается, как Автоматический Гранатомет Станковый – мощное оружие против вражеских элементов. На просторах рунета ему дали название Анти Говно Сайт, направленный на борьбу с вражескими элементами в виде некачественных веб-проектов.

    • АГС-17. Разработан для выявления площадок, которые предназначены для заработка и рассылки спама, то есть не для пользы людей. После получения бана у такого ресурса в выдаче остается одна или несколько страниц и не индексируются новые посты. Под этот фильтр также попало много сайтов для людей (СДЛ).
    • АГС-30. Более продвинутая модификация алгоритма, доработанная и улучшенная для выявления гавно сайтов (ГС).

Про вывод из-под АГС я напишу в следующих выпусках, поэтому обязательно подпишитесь на обновления. Сейчас более подробно остановимся на причинах выпадения страниц из поиска и узнаем, как проверить АГС.

Как определить АГС?

  1. Для начала нужно добавить свой блог на сервис webmaster.yandex.ru, представляющий данные об индексации, и посмотреть, сколько страниц находится в поиске. Если у Вас 100 статей, а реальная цифра от 1 до 10, тогда Вы попали под злой бан от системы Яндекс. 

    Cервис webmaster.yandex.ru - как определить АГС

  2. Еще проще перейти на сервис xtool.ru, ввести url адрес площадки и в дополнительных параметрах посмотреть пункт Санкции в Яндексе (красный – это плохо):xtool.ru - как определить АГС
Как я попал под фильтр АГС?

Под санкции Яндекса мой блог попал практически сразу после его создания. Причин для наложения фильтра было несколько, а точнее это был комплекс ошибок и не доработок:

  • Настройка площадки. Netbu.ru – это мой первый созданный блог на WordPress, я много ещё не знал и не понимал. Хотел блог, просто взял, создал и начал наполнять. А вот с правильной настройкой площадки был пробел, а точнее отсутствовали файл robots.txt и самый нужный плагин All in One SEO Pack. Рекомендую почитать пост Все WorPress плагины, которые я установил на блоге и настроить блог правильно.
  • Дублирование страниц. Как писать статьи и проверять их на уникальность представлял, а про дублирование узнал только после попадания в бан. Отсутствовал плагин по оптимизации блога и robots.txt. Как всё тесно связано с настройками!
  • Исходящие ссылки. Тоже и со ссылками, о необходимости закрывать от индексации ненужные узнал слишком поздно. Были ссылки в шаблоне, в статьях и даже нашел одну скрытую. Кстати, в одном из анонсов я насчитал почти 10 ссылок!
  • Реклама. На начальном этапе становления блога рекламу устанавливать смысла нет, а вот лишние исходящие ссылки делают хуже ещё не окрепшему интернет-проекту, негативно влияя на поведенческие факторы. Мне не терпелось начать монетизацию блога, и с первых дней разместил Google Adsense, а также несколько баннеров.
    Хочу заметить, что основным видом дохода для молодых проектов являются партнерские программы. Например, партнерка Попова или Борисова. А когда посещаемость подрастет и блог окрепнет, то только тогда можно начать заработок на сайте и добавить рекламу Yandex, а также баннеры от Rotaban.

Если сразу подойти к созданию и заработку на блоге серьезно, писать качественные и увлекательные статьи для людей, то никакие фильтры Яндекса не помешают развитию и продвижению Вашего бизнеса через интернет, поэтому вбивать запрос сайт попал под АГС не придется.

Как я вышел из бана, а также подробнее о методах улучшения поведенческих факторов напишу в следующих выпусках, ждите и подписывайтесь на обновления.

Для продвижения знания крайне важны, поэтому обязательно посмотрите видео:

Всем пока!

С уважением, Дмитрий Байдук

Отзывов (25)

  1. Для меня эта тема сейчас актуальна как никогда. Меня яндекс индексировал, а потом пропал. Но я все же не смогла разобраться в чем дело :( В роботс был запрещен знак вопроса в адресе страниц и я это изменила. Но яша упорно меня игнорирует. Хотя в гугле я есть и PR. :lol:
    По прочтении вашей статьи появился вопрос: Достаточно ли закрывать исходящие ссылки тегом “noindex”? Или надо закрывать еще каким-то тегом? :twisted:

    • *PR – 4

    • Яндекс не находит сайт по url http: //lit-dety.ru/, возможно сайт не в индексе. Я добавил Ваш сайт в ручную для индексирования, нужно немного подождать. У меня со вторым блогом такое было, один лишний пробел стоял в robots.txt и блог из-за этого месяц не индексировался Яндексом, исправил, внес в индекс – сейчас всё нормально.
      Яндекс и Google отлично понимают тег rel=”nofollow”, поэтому нет необходимости использовать “noindex” (созданный когда-то специально для Яндекса)

      • У меня с яндексом особая история. Он меня немного индексировал (несколько страниц), а потом перестал. Я так понимаю, что если бы ошибка была в robots.txt, то яндекс меня бы и не начинал индексировать.
        Я адрес сайта добавляю на индексацию. Но сколько ждать надо? Может, я рано волнуюсь?
        Я ссылки закрываю вручную и только тегом ноиндекс. Значит, сейчас мне надо стереть теги ноиндекс и прописать вместо их ”nofollow”?

        • C robots.txt все в порядке, и всё-таки зайдите в Яндекс Вебмастер http://webmaster.yandex.ru/ и через меню Анализ robots.txt проверьте его.
          И ещё, когда последний раз Яндекс индексировал страницы сайта?
          Поставьте плагин WP No External Links для закрытия исходящих ссылок в записях и комментариях, он всё автоматически правильно закроет. Если участвовали в конкурса, внесите адреса организаторов в форму исключения.

          • Последний раз это было где-то после 28 ноября. Я в этот день отправляла страницы на принудительную индексацию и яндекс принял несколько страниц, а через пару дней обиделся.

          • Что в Яндекс вебмастере написано? Когда было последнее посещение роботом? robots.txt проверили?
            20 ноября и 7 декабря были апдейты Яндекса, возможно случилась какая-то ошибка и сайт полностью выпал из индекса.
            Первый вариант: ждать
            Я сайт заново добавил в Яндекс и при следующем обходе поисковым роботом он может быть заново проиндексируется. При добавлении http://lit-dety.ru/ ничего не выдало о бане, а также о прохождении индексации. Площадки просто нет в индексе.
            Второй вариант: написать в службу поддержки и рассказать подробней о проблеме, причем без нажима и критики.

  2. Татьяна пишет:

    Здравствуйте, Дмитрий!
    Вопрос – у меня тоже некоторые статьи сразу в двух рубриках, нужно это исправить? Я не предавала этому значения, т.к. в школе, где меня учили размещать посты рассказывали, что выбрать можно несколько рубрик. Кроме этого все посты размещаются и в рубрике и в новостях. Я думала, что за этим “следит” robots.txt. Это не так?
    И еще, я никак не могу избавиться от ссылки в плагине карта сайта dagondesing (не могу найти, где ее закрыть), а сервис xtool.ru показывает, что с моего сайта ссылок нет, он не может ошибаться?

    • Здравствуй, Татьяна!
      Блог отлично у Вас настроен и в школе правильно сказали, так что ничего не трогайте. Статьи хоть и находятся в разных рубриках, и всё же поисковый робот их видит, как в XML файле прописано. В моем случае блог был не настроен правильно.
      У вас стоит плагин для закрытия исходящих ссылок от индексирования и ссылка в плагине dagondesing была взята в тег rel=”nofollow” автоматически, поэтому сервис по определению исходящих ссылок её не видит, у Вас она закрыта от индексирования. Если не нравится сама надпись я уже писал раньше, как её удалить совсем здесь http://netbu.ru/making-the-site/plagini-wordpress/sozdat-kartu-sajta-plagin-dagon-design-sitemap-generator.html

  3. Когда-то я тоже был под АГС. Хорошо что вылез оттуда.

  4. Дмитрий, по поводу плагина, маскирующего ссылки. В настройках оставлять все так как было изначально и только адреса прописать?
    Здесь ставить птичку? – “Окружать маскируемые ссылки тегом link (для яндекса)”

    • В пункте “Окружать маскируемые ссылки тегом link (для яндекса)” у меня птичка стоит. В пунктах выше тоже нужно поставить галочки и прописать исключаемые адреса.

      • Спасибо вам, Дмитрий, что уделили столько времени моим проблемам!
        Все настроила как надо.
        Я сейчас во многом улучшила сайт и главное – закрыла лишние ссылки. Так что пока что подожду. Думаю, месяц ожиданий – это нормально. Но если и после этого ничего не изменится, тогда буду писать в поддержку.

  5. Татьяна пишет:

    Дмитрий, а вы не знаете, почему может не восприниматься тег rel=”nofollow”? имеет ли значение место его расположения по отношению к ссылке? почему-то при проверке упорно выдается ряд ссылок, в которых якобы ” nofollow ” Тогда как реально он есть! Например, при таком построении строки:
    a href=” http://info.flagcounter.com/mDy” rel=”nofollow”> – он корректно ведь поставлен? А почему-то не воспринимается :-(

    • Татьяна пишет:

      Дмитрий, пыталась поставить пример ссылки – но видимо, так нельзя в комментах, если вы не против, отправлю вам её иначе.

      • Я убрал одну деталь в ссылке, теперь всё видно.
        Да, rel=”nofollow” в ссылке стоит корректно и в виджете “ВСЕ ФЛАГИ В ГОСТИ К НАМ!” все ссылки закрыты от индексации. Это можно проверить при нажатии сочетания клавиш Ctrl+U, найти нужную ссылку и посмотреть, как в коде она прописана.
        И вообще, поставьте RDS bar для Google Chrome, он показывает открытые и закрытые ссылки.

        • Татьяна пишет:

          Спасибо, Дмитрий! Поставила RDS bar. Я правильно понимаю, что он пунктиром выделяет фрагменты с открытыми ссылками?
          Так вот он почему-то и показывает как якобы открытые те, в которых есть этот тег. Что бы это могло значить? :cool:

          • По умолчанию в RDS bar открытые для индексации ссылки берутся в красный прямоугольник с пунктирными линиями. Если такой прямоугольник стоит на ссылке, значит ссылка индексируется и не закрыта в rel=”nofollow”.

  6. Татьяна пишет:

    А-а-а, так пунктир красный? Это у меня ссылки с топа комментаторов, но это так и задумано. А если пунктир черный – это что, это ничего страшного? Однако некоторые вообще без пунктира…

    • Черный пунктир и зачеркнутые ссылки не индексируются, без всего – внутренние ссылки.

      • Татьяна пишет:

        Спасибо Вам Дмитрий преогромное, успокоили меня! Спасибо по всем каналам :idea:

  7. wordpress-f1 пишет:

    Хорошо написано, очень подробно. Спасибо, освежила в памяти

  8. Роман пишет:

    Дмитрий, здравствуйте. Полезная статья, спасибо.
    А не подскажете, что это за фильтр такой “АГС-1″ и как из-под него выйти. На днях мой блог попал именно под такой – и как начать выводить блог из-под данного фильтра ума не приложу.
    Пока склоняюсь к переспаму ключевиками, т.к. первые мои статьи имели по 5-7 вхождений на 3-5 к символов. Сейчас корректирую статьи.
    Может еще что-то?

    Спасибо!

    • 1.11.13 у Яндекса появился обновленный фильтр АГС-40, возможно под него попал сайт. Сейчас в интернет под новым фильтром оказалось много площадок, блоггеры на форумах сидят и пытаются вкурить как из этого положения выйти.
      Странное дело – поиск Яндекс у health-bit.ru находит 73 страницы, Google столько же, http://xtool.ru/ показывает АГС-1, а http://pr-cy.ru/ одну проиндексированную страницу. Кому верить? Выдача ещё не обновилась или сервисы глючат? Что показывает Яндекс Вебмастер, есть ли переходы с Яндекса?

Оставить комментарий

Ваш email не будет опубликован. Обязательные поля отмечены *