Яндекс не индексирует мой сайт...

Данную фразу можно нынче встретить на каждом форуме. Как меня, так и тысячи других владельцев новых сайтов очень интересует вопрос: "Почему Яндекс в последнее время очень медленно индексирует новые сайты или не индексирует их вообще?".

Большинство начинающих вебмастеров описывает приблизительно одинаково сложившуюся проблему. Очень часто сайт успешно индексируется другими поисковыми системами, тем же Гуглом, Рамблером, Yahoo, MSN, Апортом и т.д., но вот Яндекс наотрез отказывается индексировать сайт даже при наличии внешних ссылок, уже проиндексированных самим же Яндексом. Вот такой парадокс получается...

И начинают владельцы недавно созданных ресурсов рыскать по форумам в надежде найти ответ на этот непростой вопрос.
Кстати я не являюсь исключением, поэтому и решила поднять эту тему. Мой сайт был проиндексирован в полном объеме поисковой системой Google уже через две недели после его опубликования в Интернете. На тот момент сайт не имел ни одной внешней ссылки, но был добавлен в панель вебмастеров.

Яндекс не проиндексировал ни одной страницы до сих пор, хотя уже прошло более двух месяцев. И такая ситуация наблюдается у многих владельцев сайта. Многие из них, устав выяснять причины отсутствия индексации со стороны Яндекса, стали раскручивать свои сайты под Гугл. Чувствую, что пойти этим путем придется и мне. Тем более, что все новые статьи на моем сайте Гугл индексируют очень шустро.

Тоже самое могу сказать и о поисковой системе Рамблер. Да, она несколько уступает по скорости индексации Гуглу, но тем не менее ею проиндексированы на сегодняшний день почти все страницы моего сайта. Жаль, что по популярности у пользователей Интернета Рамблер значительно отстает от Яндекса...

Для тех, кто еще не потерял надежды попасть в индекс Яндекса посвящается дальнейшая часть статьи, где мы попытаемся выяснить основные причины отсутствия молодого сайта в индексе.

Итак, для начала давайте убедимся, что Яндексом действительно не проиндексировано ни одной страницы сайта. Для этого воспользуемся расширенным поиском самого же Яндекса.

Поле "Я ищу" на странице расширенного поиска оставляете пустым. В поле "На сайте" вводите адрес вашего сайта и нажимаете "Найти" в самом низу страницы. Если в ответ получите "Искомая комбинация слов нигде не встречается", то индексация действительно прошла мимо вас.

А может Яндекс вовсе не знает о существовании вашего сайта, Добавляли ли вы его в панель вебмастеров, отображается ли он там?
Если данные о нем фигурируют в панели вебмастера, значит Яндекс в курсе и ваш сайт вероятно застрял в очереди на индексацию. Если сайта в панели вебмастеров нет, возможно вам не удалось подтвердить права на него. Попробуйте подтвердить права еще раз.

У многих вебмастеров возникают опасения в том, что их сайт оказался забанен либо он под штрафными санкциями. Проверить свой сайт на бан несложно, для этого в форму добавления новых урлов (в народе она называется аддурилкой) добавьте адрес любой внутренней страницы вашего сайта. Если результат будет: "Ваш адрес успешно добавлен и будет проиндексирован...", значит ни о каком бане и речи нет.

Если результат выглядит так: "URL запрещен к индексации", то здесь либо действительно сайт забанен, либо неправильно  составлен robots.txt, ответственный за разрешение/запрещение индексации сайта поисковыми системами.

Если ответом будет: "URL недоступен", значит имеют место технические проблемы сервера. Чтобы убедиться в этом, просмотрите логи сервера. Обычно клиенты хостинга имеют свободный доступ к серверным журналам логов в своей админпанели. Если доступа нет, можно обратиться в техподдержку хостинга с просьбой предоставить последние записи в журнале логов.

Запись в журнале логов выглядит следующим образом:
    275.169.105.78 - [ 29.11.2010: 15:35:47 + 0500 ]" GET/HTTP/1.01 200 OK "_" "Yandex/1.01.001 (compatible, win16, I).

Теперь давайте расшифруем данную запись:
  -   275.169.105.78 - это IP- адрес, с которого к вам заходят посетители либо боты;

  -   29.11.2010: 15:35:47 - это дата и время посещения ими вашего сайта;

  -   HTTP/1.01 200 - это ответ сервера, обязательно в ответе сервера должна присутствовать цифра 200, это значит, что страница сайта доступна для прочтения. При отсутствии такого ответа есть смысл обратиться к хостеру с просьбой устранить неполадки;

  -   Yandex/1.01.001 (compatible, win16, I) - это название бота Яндекса, обратите внимание на последний символ I, он присущ основному боту Яндекса. Если такая запись в журнале имеется, то паниковать не стоит. Значит основной бот Яндекса посещает ваш сайт и возможно скоро страницы сайта появятся в индексе. 

Главное, чтобы после Yandex/1.01.001 (compatible, win16, I) не было сообщения об ошибке, например HTTP/1.1.404 Not Found, означающей, что бот сервера не разрешил боту Яндекса прочесть страницу. В случае обнаружения подобной записи немедленно обращайтесь к хостеру.

Проверить ответ сервера можно также в сервисе be1.ru/stat/ либо его аналоге seo-rus.com. В конце страницы, после анализа сайта будет вот такая запись:

Заголовок
271
HTTP/1.1 200 OK
Server: nginx/0.7.67
Date: Thu, 02 Dec 2010 08:46:23 GMT
Content-Type: text/html
Connection: close
Last-Modified: Sun, 28 Nov 2010 10:20:04 GMT
ETag: "5c8e26-6636-4961a4c921a80"
Accept-Ranges: bytes
Content-Length: 26166
Vary: Accept-Encoding
   
В строке после 271 вы видите нужный ответ сервера. Если в результате проведенной проверки вами не выявлено технических причин и ваш сайт не забанен, посещается ботами, вы не нарушили никаких правил лицензионного использования поисковой системы Яндекса, ваш сайт представляет собой СДЛ, контент на сайте уникальный, ссылками не торгуете, спам не плодите, тогда единственный выход из создавшейся ситуации - это обратиться в техподдержку Яндекса.

Обращаться лучше из своей панели вебмастера, написав письмо на адрес:addurl@yandex-team.ru (это е-мэйл Платона Щукина, представлять его думаю не нужно, его имя на слуху на всех форумах). В полученном ответном сообщении возможно вы найдете ответ на вопрос: "Почему Яндекс не индексирует мой сайт?".


Чтож, садимся писать ....
Всем удачи и быстрой индексации!

P.S. Возвращаясь к написанному, я просто обязана поделиться со всеми посетителями радостной новостью: мой сайт проиндексирован Яндексом в полном объеме! Читаем об этом в отдельном посте.

А на десерт публикую пару ссылок на трастовые сайты, зарегистрировавшись на которых можно получить бесплатную внешнюю ссылку на свой ресурс из профиля:

    - forumclassika.ru (ТИЦ 950, PR 4) - портал, посвященный классической музыке. После регистрации есть возможность в Личном кабинете отредактировать свои данные, вписав ссылку на сайт.

    - x-memory.ru (ТИЦ 400, PR 4) - социальная сеть, позволяющая добавить ссылку на свой ресурс. Прошу не путать с сервисом социальных закладок memori.ru.
   

   
   
Пошаговое руководство для новичков по созданию,
раскрутке и монетизации собственного сайта.
WebPageMaker, Wordpress, Joomla - инструкции для
новичков по установке CMS и шаблонов к ним.
                                               Добро пожаловать в проект "Сайт с нуля" !
Прежде всего данный проект предназначен для тех, кто пытается создать сайт самостоятельно, то есть для новичков. Соответственно, вся информация изложена доступно, все этапы построения сайта сопровождаются скриншотами, что позволит начинающим вебмастерам быстро и просто освоиться в этом нелегком вопросе.
Здесь вы можете скачать русские версии WebPageMaker, WordPress, Joomla, Adobe Muse, а также инструкции по установке WordPress и Joomla на хостинг и мануалы по установке тем (шаблонов) для этих CMS.

                               Всем желаю удачи и смелых воплощений идей на вашем сайте !
Проект для новичков
2010 - 2016 © Сайт с нуля: пошаговое руководство для новичков по созданию, раскрутке и монетизации собственного сайта. WebPageMaker, WordPress, Joomla -  русские версии.
Автор и администратор  данного проекта - SvetLana_TSV.  Копирование материалов сайта разрешено только при наличии активной ссылки на данный проект.
Главная       Скачать       Уроки        Новости        Статьи        Контакты        Карта сайта
Хочешь быть на шаг впереди и первее
остальных получать новые материалы
сайта? Тогда не забудь оставить свои
координаты: имя и электронный адрес!
??????.???????
ПОДРОБНЕЕ

Не забудь заглянуть в свою почту и подтвердить подписку!