создание сайтов, разработка и продвижение

Запрет на индексацию сайтов Яндексом: причины и следствия

Не так давно мне довелось анализировать посещаемость одного сайта. Несмотря на то, что через сайт осуществляется бизнес и производятся продажи, посетителей у сайта было не очень много. Данный факт выглядел довольно странно, поскольку создание сайта происходило практически год назад. В результате анализа выяснилось, что основной поисковой трафик идет с поисковой системы Google, поисковая система Яндекс и другие региональные поисковые системы, которые в своей работе используют Яндеск XML (фактически это тот же Яндекс, только рассчитанный на регионы), сайт напрочь игнорировали.
По статистическим данным, более 50% посетителей, использующих поисковые системы, приходят на сайт именно благодаря Яндексу, что и сказалось на посещаемости сайта. Собственно создание сайтов и включает в себя, как один из элементов разработки, продвижение сайтов в поисковиках для привлечения посетителей. Опасения подтвердились: после попытки добавить сайт в форму для добавления сайта в приложении Яндекс Вебмастер появилась надпись:
Указанный URL запрещен к индексации.
Довольно странно, что сайт с хорошей историей, не использовавший (на первый взгляд) никаких запрещенных методов для своего продвижения попал в немилость к столь уважаемой поисковой системе. После беседы с хозяином ресурса и просмотра его исходников выяснились следующие детали.
1. Сайт ссылается на большое количество систем подсчета статистики и рейтингов. Их набралось порядка 10. Ссылки стояли на каждой странице. Вряд ли это могло расцениваться как поисковый спам, однако данный вариант исключать не стоит.
2. Хозяин сайта сознался, что не так давно заплатил людям за «прогон сайта по каталогам». Вроде бы тоже ничего страшного, однако с точки зрения Яндекса, одновременное появление большого числа обратных ссылок в короткий промежуток времени могло быть оценено как тот же поисковый спам.
3. На созданном сайте (т.е. интернет магазине) находятся описания товаров, взятые из других источников. Этот факт Яндекс мог расценивать как копирование авторского материала, за что также мог последовать запрет к индексации.
4. Недавно в исходный код сайта непонятно каким образом попал вредоносный код, который «заметил» антивирус. После профилактических мероприятий были найдены зараженные файлы, вредоносный код с сайта был удален. Однако поисковик, пользующийся антивирусными программами, также мог обнаружить этот код и посчитать сайт хакерским, в результате запретив индексацию.
Вернуть сайт в выдачу Яндекса бывает очень сложно, а зачастую попросту невозможно. И неизвестно какой из пунктов стал причиной запрета на индексацию, хотя это неважно. Самое главное следствие – потеря посетителей, что для сайта, делающего бизнес в интернете совершенно неприемлемо. Поэтому всем своим читателям рекомендую внимательно просмотреть все 4 вышеуказанных пункта и создать сайт с учетом подобных вещей, дабы потом не пришлось столкнуться с подобной ситуацией.
PS - проблема с сайтом разрешилась после письма в службу технической поддержки Яндекса. Что именно послужило причиной запрета на индексацию пока остается загадкой…