Начиная с 2012 года большинство юзеров сети интернет обсуждают санкции «яндекситов». С выходом обновленной версии фильтра от компании Яндекс АГС-40, дискуссии разгорелись с новой силой. Если предыдущие версии (АГС-17, АГС-30) можно было обойти, то теперь вывести сайт с «черного списка» АГС-40 стало сложней. О том, как появился данный фильтр, как проверить сайт за блокировку, а также несколько рекомендаций по выведению его с «черного списка» - расскажу в данной статье.

История появления АГС-40

В 2012 году некоторых владельцев сайтов ждал неприятный сюрприз от Яндекс. Поисковая система попросту «выпилила» из индекса сайта большую часть Web – страниц, при этом оставив в базе данных совсем малое количество этих страниц. Данные действия характерны только для фильтра АГС. Суть заключается в том, что этот фильтр создан с целью блокировать и не выводить в строке поисковой системы любые запросы, связанные с сайтами с запрещенным контентом. В категория запрещенного контента входят: порно, экстремистские материалы, пропаганда насилия и наркотиков, продаж взрывчатых веществ или любого оружия. Также фильтр распространяется на сайты, которые изобилуют неуникальными материалами, с большим содержанием рекламы, а также сайты с продающими ссылками.

Самая последняя категория чаще всего попадала в немилость. Яндекс вел активную войну с подобными ресурсами, на сленге SEOшников называемых ГВС (говносайт). Такую дурную славу они получили за свое количество (просто промышленные масштабы) и высокую способность «забивать» собой результаты поиска. С одной стороны, такие действия весьма облегчили жизнь многим пользователям сети интернет. Но, как известно у любой монеты — две стороны. Со временем под banhammer”, которым Яндекс раздавал путевки в «черный список» стали попадать сайты, которые не по одному критерию не подходили под категорию ГВС. Это были коммерческие сайты и даже блоги. Их страницы небыли забиты пластами рекламы, ворованным контентом или другими запрещенными материалами. Однако «баны» летели без исключений. После модернизации АГС до версии АГС-30, количество «незаконно пострадавших» сайтов резко начало увеличиваться. С осени 2013 года больше 30% всех сайтов Рунета получили «подарочки» от Яндекса, так как вышла обновленная версия АГС-40. Большинство веб-мастеров 6 ноября получили такое вот уведомление:

АГС-40

А теперь минутка аналитики. Если внимательно вчитаться в текст, сразу становится понятно, по чему на ряду с ГВС, сильнее пострадали "нормальные" блоги и сайты. В данном тексте акцент сделан не на "продающие ссылки", а на "малополезные сайты". Теперь Яндекс стал "оценочным экспертом". Перед тем, как выписать какому либо сайту очередную путевку в ЧС, системой оценивается его "полезность". Если сайт действительно информативный, содержит ссылки или информацию о других "полезных" Веб-ресурсах, тогда такой сайт получает место среди результатов поиска в системе Яндекс. Если же "добавочная стоимость" сайта низкая или отсутствует вовсе - неизбежный фильтр. Следующие комментарии были даны Яндекситами, на множество вопросов веб -мастеров и владельцев сайтов из ЧС:

Комментарий Яндекситов

Яндекс привел перечень причин, по которым сайт может получить фильтр:

  1. Размытая тематика сайта. Не имеющая конкретного направления. (Блоги формата "Поговорим о всем, и не о чем или просто потратим ваше время" ).
  2. Наличие шаблонных статей и материалов. Однотипность контента.
  3. Слишком СЕО - оптимизированные статьи. (Более 60% заспамленности).
  4. Контент не соответствует тегу title.
  5. Большое количество рекламных баннеров.
  6. Плохая посещаемость сайта.

Если хотя бы один из пунктов характерен для сайта, владелец и веб-мастер становятся "счастливыми обладателями фильтра АГС-40.

До лета 2013 года, определение добавочной стоимости какого либо сайта проводилась вручную командой Яндекс. Начиная с 2014 года данный процесс полностью автоматизирован. Такое решение сильно отразилось на количестве индексированных сайтов. АГС-40 работает в автономном режиме и проверяет все ресурсы Рунета. Сайты не обладающие добавочной стоимостью сразу же отправляются в ЧС.

Как проверить сайт на наличие фильтра АГС?

В том случае, если каким-либо образом возникло ощущение того, что сайт был подвержен фильтру, следует незамедлительно сделать следующее:

  • Проверить, бал ли проведено индексирование страниц сайта/блога при помощи специальных сервисов Яндекс. Сориентироваться поможет количество страниц (если хоть что-то осталось в базах данных). Много отсутствующих страниц говорит о том, что сайт был проиндексирован.
  • Просмотреть отчеты об индексации. В том случае, если контент сайта соответствует требованиям размещения в поисковике, график индексирования будет расти вверх, а не в низ. Это значит, что после индексации, "приемлемые" страницы почти все или большая часть.
  • В том случае, если процедура регистрации блога или сайта в поисковой системе Яндекс еще не завершена, то отчеты по индексации можно получить через специальные сайты, например pr-cy.ru.

Еще одним вариантом является Xtool.ru. Работа с данным сервисом очень проста. В свободной форме указывается название или адрес бога\сайта, после чего запускается процедура сбора данных. По ее окончанию появится окно, которое будет содержать подробные отчеты. В отдельной графе "Фильтр АГС" будет отмечен зеленый или красный цвет. Зеленый - значит все в норме, красный - ну, большинство уже догадалось.

Как выбраться из черного списка АГС-40: несколько рекомендаций 

Если сайт или блог получил фильтр, не следует сломя голову писать Платону Щукину, и "плакаться" с мольбой снять фильтр. Для начала следует самому провести несколько аналитических работ с сайтом: оценить контент, заспамленность и оптимизацию. Не обязательно, что во всем будет виноват только Яндекс, но и это не значит, что вся вина лежит на плечах Веб-мастера. "Follow the white rabbit. Истина где-то рядом".

Чтобы повысить добавочную стоимость следует:

  • Полностью изменить концепцию сайта или блога. Выбрать четкую тематику, пересортировать весь контент. Самое главное - задать ориентацию контенту сайта на ту или иную сферу. Особенно эффективным действием будет добавление новых рубрик.
  • Тематические сервисы. Добавив парочку таких, можно весьма эффективно "излечить" сайт. Все возможные виджеты сыграют хорошую службу интернет порталу. Важно, чтобы они подходили под тематику сайта, чтобы посетителям было полезно использовать их возможности
  • Смена стиля и подачи информации. Тексты- клоны не смогут прижиться в поисковой системе без надлежащего меди-контента. Большинство юзеров ценит яркий, броски, а главное - "живой текст". Время шаблонов прошло. Даже если текст будет обладать максимальной оригинальностью, но при этом уровень академической тошноты будет зашкаливать - можно даже не рассчитывать на популярность такого материала. "Канцеляризм" сейчас никому не нужен. Следует добавить несколько "фишек" и "изюминок" в текст. Это сделает его запоминающимся.
  • Если присутствует реклама, постараться уменьшить уровень ее "навязчивости". Лучше отказаться от баннерной рекламы, а использовать текстовую. Подчеркиваю, "ненавязчива" реклама собственных услуг или продукции сайта/блога не попадает в штрафной список. Это касается продающих ссылок, как текстовых, так и интегрированных в/под баннер.
  • Повышение уровня активности пользователей. Сайт или блог должен "жить". Одни лишь просмотры страниц с контентом не обеспечат место в индексе поисковых систем. Следует вести дискуссии с посетителями, отвечать на комментарии к постам, проводить опросы среди  посетителей сайта или блога. Однако, здесь важно придерживаться "золотой середины". Бестолковые "спамные" сообщения будут рассматриваться АГС-40, как активность ботов. Проще говоря, нужно сделать все возможное, дабы контент не выглядел "бестолковым".

Как правильно написать обращение к Платону Щукину?

После того, как все оценочные и оптимизационные работы с сайтом\блогом будут завершены, следует написать обращение в техническую поддержку сервиа Яндекс. Вот несколько рекомендаций:

Обращение

Самое главное, это сделать акцент на важности и полезности сайта\блога для пользователей Рунета. Данное обращение демонстрирует доказательства "невиновности" сайта\блога, или отчет о проделанной реструктуризации ресурса, а не негодование Веб-мастера. Если фильтр был выдан несправедливо, согласно всем указанным отчетам будет видно, что АГС-40 не правильно оценил сайт\блог и ошибочно выдал фильтр. В этом случае командой Яндекс будет проедена повторная оценка, но теперь вручную. Если же часть контента действительно не соответствовала требованиям, в обращении следует указать это, и попросить об изменении "меры наказания".

Итак, статья подошла к концу. Следует акцентировать внимание на том, что при проведении всех выше указанных процедур следует сохранять спокойствие и "холодный рассудок". Получение фильтра АГС-40 заметно отразится во-первых, на доходе от сайта, во-вторых на количестве посетителей. Для некоторых крупных проектов даже один день такого "простоя" обходится "в копеечку". Однако безвыходных ситуаций не бывает, главное не сделать еще хуже. Даже после отправленного обращения в тех. поддержку Яндекса, следует проявить терпение. Ведь процедура повторной проверки займет не пару часов. Поэтому не следует засыпать агентов технической поддержки потоком писем, а ля "скоро уже фильтр снимите?". Как только все работы будут завершены, отправитель обращения будет проинформирован личным сообщением. После снятия фильтра и выведения сайта/блога с черного списка следует постоянно отслеживать соответствие поступающего контента всем требованиям. Чтобы будущие индексирования (а они проводятся каждых пол месяца) сайта/блога проходили с положительным результатом, следует постоянно модернизировать структуру интернет ресурса. Добавлять новые элементы, тем самым увеличивая добавочную стоимость, а так же подробно отслеживать отчеты индексации страниц сайта/блога.