Раскрутка сайта в поисковиках. Как не попасть в песочницу Яндекс

30.04.2013 | Автор Алексей

 

Фильтры поисковых систем - песочница

Все, кому интересно раскрутка сайта в поисковиках, слышали о фильтре поисковых систем, так называемом песочница. Обычно там «играются» молодые сайты, к которым по мнению поисковой системы (далее ПС), еще рано допускать пользователя.

Бытует мнение, что все молодые сайты, поисковик первое время держит в песочнице. На самом деле, это заблуждение. Если на сайте качественная и полезная информация, которая интересна читателю, какой смысл держать его в песочнице?

Фильтр песочница сам по себе не страшен, как правило сайты легко выходят из под него, через некоторое время :-). И насколько мне известно в зоне .ru действует только песочница Яндекс.

Раскрутка сайта в поисковиках дело не легкое, но интересное. Занимаясь продвижением сайта самостоятельно, иногда не замечаешь очевидных ошибок.

Каким же образом сайт может загреметь под фильтр песочница? О рекламных баннерах и счетчике Метрики, я не говорю и так все известно, но есть еще один важный момент, на который многие не обращают внимания.

 

Обычная история

Начинающий вебмастер решает создать собственный сайт. Сказано сделано. И над молодым сайтом закипает работа.

В это время, поисковая система узнает, что где-то появился новый сайт, быстро наведывается сюда и что же видит — кругом мусор, обрывки кода, непонятный контент, ссылки не по теме и думает:

- Хорошо, возьму этот сайт на заметку и зайду попозже.

Знаю насколько это увлекательный процесс, постройка и дизайн сайта, может затянуться на недели и даже месяцы. :-)

Очень скоро ПС наведывается сюда еще раз, может через день, а может через неделю и видит тоже самое — обрывки текста, ссылки в никуда. Сайт-то все еще в разработке. Поисковая система думает:

 - Так, значит с этим сайтом все ясно. Непонятный контент, какие-то левые ссылки и еще много чего. Пользователей к нему допускать нельзя. Помещу его на всякий случай в песочницу, пусть там побудет, пока не исправится.

Постройка сайта в конце концов заканчивается и вебмастер с удивлением обнаруживает, что многих страниц нет в поисковой выдаче. Закрадываются мрачные мысли:

- Угодил под фильтр. А ведь ничего еще и не делал.

Пока вы разрабатываете сайт, в идеале нужно закрыть его от доступа всех поисковых систем. Раз на нем пока нет полезной для посетителей информации, нет смысла показывать его поисковикам и соответственно нечего там индексировать.

Как скрыть страницу или весь сайт от поисковиков?

Первый способ. Закрыть доступ роботам поисковиков во все папки сайта с помощью инструкции  Disallow  в файле robots.txt

User-agent: * 
Disallow: /
User-agent: Yandex
Disallow: /

Если имеется несколько веток  User-agent: * , где вместо звездочки может стоять  Yandex   или другие директивы, то нужно поместить    Disallow: /   в каждую ветку. Этот способ самый простой. Правда, 100% гарантии он к сожалению не даст. Как я понимаю ограничение чисто формальное и ничто не мешает роботу вломиться на сайт и проиндексировать там все, что попадется под руку. Но, первое время, пока сайт молодой и на него нет ссылок в интернете, может сработать.

 

Второй вариант, который гарантировано закроет страницы сайта от индексации поисковыми системами, называется — базовая HTTP авторизация. Звучит страшновато, а на самом деле, обычное окно ввода имени и пароля, появляющееся например, при входе в личный кабинет.

Это простейший и надежный способ из всех, которые я знаю на данный момент. Кстати самое понятное описание, как сделать авторизацию, я нашел в статье Голышева С.В,  поэтому не вижу смысла приводить его еще раз и дам ссылку на статью: «Защита сайта с помощью .htaccess и .htpasswd».

 

И напоследок. Похожая история случилась и с одним из моих вебсайтов, когда я только начал интересоваться этой темой. Не знаю по какой причине, но половины страниц, причем опубликованных первыми, не оказалось в Яндексе.

Сайту было, примерно, три-четыре месяца отроду. Я много экспериментировал над ним. Было очень интересно. Но к счастью, не успел навешать никаких счетчиков и рекламы, которую так «любят» ПС на молодых сайтах, лишь несколько внешних ссылок на сайты не моей тематики. Думаю, поэтому, проблема счастливо разрешилась для меня простым письмом в Яндекс.

Я отправил письмо в техподдержку поисковика, с вопросом, почему не индексируется половина страниц. Честно, без особой надежды, потому как слышал, что на письма отвечает робот.

Через несколько дней мне на почту пришел ответ “Ваш сайт потихоньку индексируется бла-бла-бла». Думаю, вряд ли робот. Сайт действительно начал индексироваться. К моей радости, на второй же день! по прямому запросу, поисковик выдавал мне уже все страницы. В общем, легко отделался.

Ваш персональный сайт это ваше лицо в интернете и думаю не стоит портить его репутацию с самого начала.

На этом все. Желаю Вам быстрой раскрутки сайта.

 

Добавить комментарий

Ваш e-mail не будет опубликован. Обязательные поля помечены *

Можно использовать следующие HTML-теги и атрибуты: <a href="" title=""> <abbr title=""> <acronym title=""> <b> <blockquote cite=""> <cite> <code> <del datetime=""> <em> <i> <q cite=""> <strike> <strong>