Бан сайта, или за двух битых третьему битой дают!
Для русскоязычных сайтов залогом хорошего продвижения по карьерной лестнице является дружба с поисковой машиной Яндекс. Или, как принято называть её в обиходе – Яшей. Главное в этой дружбе – взаимность. И тогда все будет хорошо для вас, как вебмастера и для ваших проектов в виде всевозможных интернет - ресурсов, которые вы холите и пестуете.
Тем не менее, для многих из нас уже не является секретом тот факт, что Яша объявил крестовый поход на ГС (говносайты), подвергая их безжалостной кастрации в виде сокращения количества страниц в поиске, либо существенно снижая это число. Битва началась ещё летом и под писькорезку попали очень многие ресурсы, владельцы которых были уверены в том, что начиная публиковать посты в своих блогах, они осчастливят мир и сделают его лучше.
Об этом много написано разными блоггерами, но мне пришлось столкнуться с несправедливостью по отношению к моему блогу. Однако, мне удалось доказать свою правоту. И главным оружием торжествующей справедливости было обычное человеческое общение. Правда, мой партнер оказался киборгом – Платон Щукин, как подписывается робот системы техподдержки Яндекса, оказался вполне адекватным и способным разрешать конфликты мирным путем.
Итак, мой первый блог, запущенный в феврале 2010 года, к маю месяцу уже был вовсю индексируем Гуглем, на нем был строго уникальный контент, оптимизированный по всем законам СЕО, что называется, как вебгуру прописали. Но, несмотря на мои потуги, я не наблюдал своего детища в поисковой выдаче Яндекса, а Я.Вебмастер день за днем выдавал мне одно и то же – бублик в графе «количество страниц в поиске», а дата последнего посещения робота оставалась открытой. Робот мой блог на Блоггеровской платформе от Гугля с доменом второго уровня на бесплатном хостинге игнорировал полностью. Что делать?
Тогда я решил написать письмо в службу техподдержки Яндекса. Многие любят употреблядь слово «суппорт», что в переводе с английского и означает «поддержка, помощь», но я люблю русский язык. В нем слово «суппорт» означает часть токарного станка, на которой крепится резец и с помощью которой снимают стружку с болванки, превращая её в деталь по заданным чертежам.
В своем первом письме, датированным 25 мая 2010, я обращаю внимание на тот факт, что робот не посещал мой блог месяц. Что характерно, предварительный ответ от поддержки приходит быстро – дня через два, а разбираться в ситуации могут гораздо дольше.
Ответ пришел 27 мая и под ним значилась подпись: «Платон Щукин». Сначала к своему стыду я подумал, что это псевдоним такой у оператора. Мало ли. Чтобы вдруг кто битой не настучал в переулке по голове за плохую индексацию или низкий ТИЦ. Но как-то быстро вдруг стало ясно, что я разговариваю с вежливым роботом. Вот ответ киборга человеку:
Здравствуйте, Максим!
Приносим свои извинения за задержку с ответом.
По нашим данным Ваш сайт нормально индексируется и регулярно посещается
роботом. К сожалению, дата последнего посещения сайта роботом в сервисе
Яндекс.Вебмастер может быть неактуальна, но со временем она обязательно
обновится, пожалуйста, подождите.
С уважением, Платон Щукин
Служба поддержки Яндекса
Дальше действительно случилось чудо. На мой блог стал заходить робот раз в три-пять дней. И мои писульки стали индексироваться Яндексом. К слову сказать – Гугл работает куда оперативнее. Бывает, что только пост опубликуешь, а его уже можно отгуглить. Яндекс куда менее расторопнее. В лучшем случае в поиске статья появляется через три дня, а то и больше. Как повезет…
Но на этом мои неприятности не закончились. Битва с ГС началась аккурат в середине июня. Тогда у меня вдруг исчезли из поиска все страницы упомянутого выше блога. Причем, к индексации ни одна из страниц не была запрещена. Я решил пойти уже проверенным путем и снова написал Платоше челобитную. Дескать, спаси, мил робот, от напасти жуткой и не принимай мой собственными ручками по буковке собранный блог за ГС. Не прошло и двух дней, как получил я ответ.
Здравствуйте, Максим!
Приносим свои извинения за задержку с ответом.
Благодарим Вас за то, что обратили наше внимание на проблемы с индексированием
Вашего сайта. Мы постараемся в скором времени определить, по какой причине он
отсутствует в поиске.
--
С уважением, Платон Щукин
Служба поддержки Яндекса
А 22 июня Платон отписал более детально, почему мой бложек не нравится Яндексу. Привожу этот ответ целиком, так как в нем заключена ценная информация для всех вебмастеров. Особенно, если вы грешите тягой к быстрому продвижению при помощи поисковых (так называемых ключевых) фраз, которые подбираете через Вордстат.
Здравствуйте, Максим!
Извините за задержку с ответом.
В данный момент санкций, запрещающих индексирование Вашего сайта, с нашей
стороны нет. В ближайшее время он должен начать индексироваться и затем сможет
появиться в поиске. Скорее всего, это произойдет в течение двух недель.
Обратите внимание, результаты поиска Яндекса упорядочены таким образом, чтобы
на первых позициях находились наиболее информативные и ценные для
пользователей страницы. Мы постоянно совершенствуем алгоритмы ранжирования, в
том числе для борьбы с попытками сайтов обмануть роботов поисковой машины и
завысить позиции в поиске.
На Вашем сайте были проиндексированы страницы, содержащие списки поисковых
запросов. Также возможно, что на Вашем сайте были проиндексированы страницы,
созданные не для чтения человеком, а для продвижения в поисковых системах.
Причиной является неестественный («переоптимизированный») текст, который
появляется в результате массовой замены слов и словосочетаний на запросы, по
которым вебмастер хочет, чтобы сайт находился в поисковой системе.
В силу того, что по многим запросам Яндекс не может корректно отранжировать
такие страницы, Ваш сайт был понижен в результатах поиска.
Если эти элементы страниц не являются жизненно важными для существования
сайта, уберите их, пожалуйста, или измените таким образом, чтобы они были
удобны для восприятия пользователями. После внесения изменений напишите нам
еще раз, и мы рассмотрим возможность снятия санкций с Вашего сайта.
--
С уважением, Платон Щукин
Служба поддержки Яндекса
Так вот в чем проблема! Оказывается, поисковая машина стала настолько умной, что ей больше не нужны ключевые фразы в таких количествах, которые принято считать нормой для правильно оптимизированного текста. Считалось, что процент оптимизации должен быть никак не меньше 2-3, а в идеале должен достигать 5-7%! Да ещё и под тэгом <b>, то есть выделенные жирным шрифтом. Признаюсь, что на своем блоге я поступил именно так. То есть, у меня в каждой статье имелись в указанном процентном соотношении ключевые фразы, которые были выделены вдобавок ко всему.
Но Яша решил не останавливаться на полумерах, а устроил хорошую взбучку любителям оптмизации. В июне – августе 2010 года наблюдалась значительная активность на форумах, посвященных продвижению и СЕО. Все были в полной растерянности. Что делать? Яндекс напал без объявления войны и неожиданно поменял правила. Я не стал искать окольных путей, а перетряхнул все свои статьи, избавив их от лишних ключевиков и убрал всё выделение. После чего снова написал Платону Щукину о том, что сделал работу над ошибками и прошу снова посмотреть мой блог.
Все замечания по переоптимизации я устранил за один день, благо контента было не так уж много. Поэтому ответ на мое письмо пришел на следующий день – 23 июня 2010 года.
Здравствуйте, Максим!
Спасибо за письмо, мы проверим, все ли сейчас в порядке с Вашим сайтом, и
сообщим Вам.
--
С уважением, Платон Щукин
Служба поддержки Яндекса
А 24 июня пришло письмо, в котором более детально описывались требования к добропорядочному сайту, предъявляемые Яндексом ко всем ресурсам. Вот что написал между делом П.Щ. в качестве памятки или напутствия на будущее:
Здравствуйте, Максим!
Обратите внимание, что ранжирование сайта в поиске зависит также от
авторитетности сайта, оригинальности его контента, наличия спама (в том числе
ссылочного) на его страницах. В соответствии с этим, сайт может быть понижен в
результатах поиска в том случае, если его страницы не несут пользователям
никакой добавленной ценности.
Мы стараемся хорошо индексировать и ранжировать высоко сайты, соответствующие
нашему пониманию качественных:
http://help.yandex.ru/webmaster/?id=995298#995342
http://webmaster.ya.ru/replies.xml?item_no=325&ncrnd=2022
http://webmaster.ya.ru/replies.xml?item_no=3772
--
С уважением, Платон Щукин
Служба поддержки Яндекса
Если прочитать то, что написано по указанным ссылкам, то вкратце там говорится о том, что торговать ссылками плохо, что не нужно тратиться на оптимизацию, а достаточно написать хороший познавательный контент, а Яша постарается его продвинуть повыше, если он действительно представляет интерес для людей (но решение о пользительности принимает не человек, а робот, что уже само по себе странно).
Мой блог вновь появился в выдаче только в конце июля 2010 года. Почти полтора месяца прошло с момента обращения, устранения замечаний и выполнения всех условий Яндекса для хороших сайтов, прежде чем мой ресурс был разбанен и вернулся в выдачу. За это время существенно снизился трафик не только из-за самого бана (понятно, что раз сайта нет в выдаче Яндекса, значит его нет в русскоязычном Интеренте), но и в связи с сокращением общего числа запросов из других поисковых систем. Так, я наблюдал снижение числа переходов из Гугл при одновременном отсутствии моего блога в выдаче Яндекса. Может ли это говорить о взаимосвязи двух поисковых машин и в чем может выражаться такая связь, мне трудно сказать. Хотя, конечно, они должны быть полностью независимыми.
Осенью я решил пойти дальше. Блог, на котором вы сейчас находитесь, уважаемые читатели, имел строго манимейкерское направление до момента его приобретения мною. Соответственно, начиная с названия «Антикризисная программа» и всех материалов блога, которые, так или иначе, связаны с возможностями заработка в Сети, есть не что иное, как красная тряпка для Яши. Поэтому я не был удивлен, обнаружив полное отсутствие в поиске всех страниц блога. Но меня стала душить жаба и возник вполне резонный вопрос – почему Гугл индексирует и находит мне подходящие поисковые фразы, а Яндекс пессимизирует. Я тогда решил пойти на эксперимент. Убрал всю рекламу, переоптимизацию в некоторых статьях, провел детальную ревизию всех размещенных ссылок и написал Платоше очередную челобитную о том, что да, мой блог весь такой манимейкерский, но я глубоко раскаиваюсь в его содержании и прошу указать мне путь истинный. К моему удивлению глас мой был услышан и я получил ответ.
14 ноября 2010 года Щукин сообщил, что меры принимаются и «Антикризис» будет проверен. А 18 ноября 2010 года прислал официальный ответ, который очень показателен на мой взгляд.
Здравствуйте, Максим!
Приносим свои извинения за задержку с ответом.
В ближайшее время Ваш сайт должен начать индексироваться, и затем некоторые
его страницы смогут появиться в поиске. Скорее всего, это произойдёт в течение
двух недель.
Однако, после анализа и классификации страниц Вашего сайта наши алгоритмы
приняли решение ограничить его в поиске. Обратите внимание, что не все
страницы, известные поиску Яндекса, включены в индекс и ранжируются высоко. Их
включение и позиция зависят от качества сайта и его контента. На решение
алгоритма может оказать влияние использование поискового спама, наличие на
сайте страниц предназначенных для робота-индексатора, а не для чтения
пользователями, размещение уникальной информации и др. факторы.
Наше понимание качественных сайтов отражено в следующих документах:
http://help.yandex.ru/webmaster/?id=995342
http://webmaster.ya.ru/replies.xml?item_no=325&ncrnd=2022
http://webmaster.ya.ru/replies.xml?item_no=3772
http://webmaster.ya.ru/replies.xml?item_no=4967&ncrnd=1743
Мы стараемся настраивать и улучшать алгоритмы поиска так, чтобы сайты,
соответствующие этим рекомендациями, быстро и полно индексировались и
находились на высоких позициях по релевантным запросам.
Если Вы будете развивать сайт для пользователей, размещать уникальную и
полезную информацию и следовать нашим рекомендациям, Ваш сайт со временем
обязательно восстановится в поиске.
--
С уважением, Платон Щукин
Служба поддержки Яндекса
В итоге спустя пару недель, то есть уже в начале декабря «Антикризисная программа» появилась в поисковой выдаче Яндекса, но до сих пор индексируется только одна главная страница, что очень наглядно подтверждает факт наличия определённых фильтров в глубинах Яндекса.
В итоге я хочу отметить, что наша национальная поисковая машина достаточно адекватна к запросам даже таких маленьких букашечек как отдельно взятые люди с их дневниками – блогами. А прямое обращение в поддержку помогает решить даже такие сложные вопросы, как вывод из-под фильтров и пессимизации вашего ресурса. Надеюсь, что многим из вас будет чем дополнить материалы этой статьи.
27 декабря 2010 г. в 23:43
А я, Максим, что-то не заметил "человечности" в последнем письме Платона. Стандартная шаблонная отписка без конкретных объяснений. И на их "предложение" сделать сайт лучше, я бы предложил им "выпить йаду" или "убиться апстену", и если б они последовали моим рекомендациям, всем стало бы легче и свободнее дышать в рунете
27 декабря 2010 г. в 23:49
Их человечность в том, что в поиске сейчас аж главная страница! Я благоговейно трепещу и падаю ниц, лобзая сандалии священного Яши. А переходов с Яндекса было аж два! Такая роскошь, но зато Гугл и Мейл.Ру дают хороший трафик по таким манимейкерским запросам, от которых Платоша бы дух испустил. Мне уже хочется, чтобы Мейл.Ру хорошо встал на ногои как поисковая система, чтобы хоть немного обломать снобизм Яндекса.
27 декабря 2010 г. в 23:55
Маловероятно, ведь Мейл.Ру похоже не имеет собственной базы поисковой выдачи. На Серче читал, что они работают из-под Яндекса, а по моим наблюдениям выдача Мейл.Ру была идентична Рамлеру (тоже уже почти почившему)
27 декабря 2010 г. в 23:56
Была неплохая заявка на поисковое лидерство от системы Нигма, но они что-то не развиваются, бабла видно не хватает
28 декабря 2010 г. в 00:03
Нигма дает очень маленький трафик. В принципе, можно сделать поисковую систему на базе любого компьютера, обозвать её как-нибудь, да организовывать ранжирование и выдачу в своем сельском околотке. А потом уже развиваться до района и так далее. Только времени это займет кучу, а бабосов ещё больше. Ведь, чем болдьше круг поиска, тем мощнее нужны компьютеры. Яндекс наверняка супермашины использует, а они стоят очень неслабо.