Индексация сайта

 Успешность сайта определяется его популярностью, количеством привлеченных посетителей, или же заработком Веб-мастера. Однако прежде, чем достигнуть успеха, любой сайт проходит долгий и трудный путь оптимизации, на котором встречается множество проблем, успех решения которых и определяет его дальнейшую судьбу.


 Одной из самых распространенных проблем является проблема с индексацией сайта. Так как основной трафик поступает на большинство сайтов через поисковые системы, очень важно, чтобы те вовремя и без сбоев индексировали новые страницы сайта. Но с этим по разным причинам нередко возникают проблемы, решать которые нужно оперативно. Думаю, что вникнуть в проблемы с индексацией просто необходимо.

 Механизм попадания страницы в выдачу прост. Робот поисковой системы постоянно индексирует все новые страницы сайтов, которые уже имеются в реестре поисковой системы, находя их посредством ведущих на них ссылок. Поисковый робот регулярно индексирует и старые страницы, поэтому получает возможность найти ссылки на новые.

 Если же необходимо проиндексировать новый сайт, которого нет в реестре, а внешних ссылок на него пока мало, сайт добавляется в очередь на индексацию посредством добавления его в панели Вебмастера поисковой системы, которая у большинства поисковиков есть. Там же можно отслеживать прогресс индексации и все проиндексированные страницы, а также страницы, на которых возникли ошибки.

 Почему же важна не просто индексация, а еще и своевременная индексация? Все дело в том, что в интернете широко распространена кража контента, когда злоумышленники просто копируют чужой контент и размещают у себя на ресурсе. Если ранее контент был уже проиндексирован на странице вашего сайта, вреда от кражи вам не будет, но вот если нет, то поисковый робот, найдя контент сразу на двух страницах, может принять за первоисточник ресурс, укравший контент, и тогда против вас будут применены санкции. Поэтому чем быстрее индексируются новые страницы – тем меньше вероятность таких проблем. Вдобавок при долгой индексации страница позже начинает привлекать на сайт трафик, что можно назвать, по аналогии с экономикой, издержками упущенных возможностей.

Плохо индексируется сайт, возможные причины

 Итак, большинство проблем с индексацией технические, виновниками же, чаще всего, являются сами ресурсы и ошибки Веб-мастера. Выделим наиболее распространенные причины плохой индексации и, соответственно, способы ее ускорить.

1. Внешние ссылки и перелинковка. После создания новой страницы на нее, как правило, ведет только одна навигационная ссылка. Нам же нужно больше, поэтому мы должны поставить еще несколько ссылок с других страниц. Кроме того, не лишними будут и внешние ссылки, особенно с динамично индексируемых сайтов. Это увеличит шанс попадания робота на нашу страницу, да и посодействует поднятию ТИЦ, что также не повредит. Жалеть ссылок для не проиндексированной страницы не стоит, после ее индексации часть можно будет убрать.


2. Навигация и карта сайта. На ресурсах часто используется навигация на flash или с использованием скриптов. Это удобно для посетителей и красиво, но поисковый робот лучше «дружит» с обычными ссылками. Поэтому желательно, чтобы все элементы навигации дублировались в обычном виде. Кроме того, нелишним будет создать легкодоступную страницу с картой сайта – ссылками на каждую конечную его страницу. Карта позволит быстро найти все страницы как поисковому роботу, так и обычному посетителю.

3. Содержимое страницы. Даже попав на страницу контента, поисковый робот не всегда успешно ее индексирует. Так как он каждый раз, встречая ссылку, переходит по ней, чрезмерное их количество может помешать индексации. То же самое можно сказать про объем текста. Поисковый робот хорошо «проглатывает» тексты до 20000 символов, дальше начинаются трудности. Что же до изображений, то важно не перегружать ими страницу: чем она тяжелее – тем выше вероятность того, что поисковый робот не сможет ее проиндексировать.

4. Ошибки в коде страницы. С развитием CMS и унификацией кодов критические ошибки встречаются все реже, однако, полностью избежать их невозможно. Особенно это касается «самописных» CMS. Проверить код сайта на ошибки и соответствие стандартам w3c.

5. Плохой хостинг сайта. Робот поисковой системы сильно нагружает сервер, поэтому успешность индексации зависит и от качества хостинга. Выбирайте только проверенного хостера. Конечно, сейчас эта проблема не столь актуальна, как, скажем, еще несколько лет назад, однако, ограничения все же существуют. Чем они меньше – тем лучше, ведь поменять хостинг уже состоявшемуся сайту довольно трудно и болезненно.

 Проблемы с индексацией в том или ином виде возникают практически у каждого сайта. Даже если вам удалось их избежать, не помешают профилактические действия по всем обозначенным направлениям. Если же с ресурсом все нормально, но проблемы с индексацией все же возникают, нужно обратиться в службу поддержки поисковой системы: хоть и редко, но бывают случаи, когда проблема возникает на их стороне.




Комментарии: 108
  • #108

    Merijoi (Вторник, 29 Ноябрь 2016 13:56)

    уже 5 апов прошло и ни одной страницы не проиндексировал яндекс, а в гугле все 100% страниц в индексе. не подскажете в чем тут проблема вообще?

  • #107

    Папай (Воскресенье, 27 Ноябрь 2016 19:23)

    Это не нормально, но Яндекс всегда так работает, иначе он не способен. Так он устроен что поделать

  • #106

    Брюлька (Понедельник, 21 Ноябрь 2016 15:52)

    То все страницы вижу в вебмастере яндекса, то они куда то исчезают, потом опять как бы проиндексированные. Нормально когда так?

  • #105

    крокус (Суббота, 12 Ноябрь 2016 12:27)

    А мне Яндекс нормально ответил! Платон Щукин так и написал: на ваш блог наложен фильтр за слишком большое количество некачественных входящих ссылок.

  • #104

    Korol Olya (Вторник, 08 Ноябрь 2016 10:54)

    Писать в Яндекс бессмысленно, они отписками отвечают, всем одно и тоже. Лучше на форуме спросить у знающих и опытных вебмастеров. Показать сайт, описать проблему, подскажут и помогут.

  • #103

    laricheva86 (Вторник, 01 Ноябрь 2016 13:24)

    У меня так и было. После прогона сначала в Гугле все позиции просели, а потом и в Яндексе. Написала в Яндекс сказали на ваш сайт наложен фильтр работайте над ним и фильтр уберем.

  • #102

    БЭН (Четверг, 27 Октябрь 2016 22:00)

    Прогоны помогают, сам их делаю. Но зависит от того как делать прогон, по каким социалкам ну и т.д. И вообще нужно уметь это делать, а то вместо индексации схлапочешь фильтр.

  • #101

    Катя (Суббота, 22 Октябрь 2016 15:13)

    Здравствуйте. Может кто посоветовать, стоит ли заказывать прогоны сайта для его скорейшей индексации или же это очередная заманушка неопытных вебмастеров? спасибо.

  • #100

    espina (Понедельник, 17 Октябрь 2016 18:14)

    У меня все наоборот! никогда не знал мой блог проблем с индексацией, все странички были в поиске. но вот теперь они все вылетели из Яндекса, осталась только главная страница. нормально это вообще?

  • #99

    Диня (Среда, 12 Октябрь 2016 13:25)

    Мой сайт Яндекс целый год индексировал еле как! Теперь почему то проиндексировал его на 100% и эта планка держится уже 5 аппов!

  • #98

    Moryachok28 (Вторник, 04 Октябрь 2016 11:59)

    Не знаю что все так на Яндекс гонят? У меня несколько сайтов и все индексируются всеми поисковиками в течении часа-трех! У меня новостные сайты, у них всегда индексация была быстрая, но все же.

  • #97

    Хрящ (Вторник, 27 Сентябрь 2016 19:13)

    Яндекс намекает - либо ты работаешь на нас и получаешь трафик либо ты работаешь не на нас и мы тебе даем фильтр.

  • #96

    T-O-R (Четверг, 22 Сентябрь 2016 13:13)

    Апы выдачи у яндекса стали проходить чаще, за это спасибо! Вот только толку как всегда нету! А вчера совсем обнаглел - наложил на мой сайт санкции за рекламу! Я вообще присел от такого! Что за новые правила таки у него? Траф просел на 100%!!!!!!!!!!

  • #95

    Крутой (Пятница, 16 Сентябрь 2016 17:32)

    Мой новый сайт не индексируется! Столько сил работы и денег вложил и отдачи нету совсем! а почему? да просто потому что яндекс не индексирует сайт блин!!

  • #94

    вася (Среда, 14 Сентябрь 2016 13:43)

    У кого-то было так: в ап тица из индекса выпадают несколько страниц?

  • #93

    komik&men (Понедельник, 05 Сентябрь 2016 19:37)

    не индексируется сайт, все перепробовал толку нуль! в гугле уже месяц как все страницы, яндекс тупит по жетски!! ну это как бы ни для кого не новость.

  • #92

    Маша (Четверг, 01 Сентябрь 2016 11:57)

    Не понимаю в чем сложность индексировать сразу новые страницы моего сайта. Гугл максимум день индексирует - нормально же! Но яндекс может реально месяц репу чесать, почему так а? Замучилась уже совсем.

  • #91

    Луи (Среда, 24 Август 2016 23:06)

    Че за ап сегодня Яндекс выдал в очередной раз? Мало всего ему что страницы скинул, так еще и фавиконы исчезли. Ну реально олени в этом Яндексе сидят. За что им только зарплату дают?

  • #90

    Innoos77 (Суббота, 20 Август 2016 14:51)

    Ссылки нужно "прогонять" по всем социальным сетям. Особенно индексации помогает Твиттер. Но и еще раз но!! Твит нужен на раскрученном акке! тогда страница будет в индексе через час!

  • #89

    Саид (Воскресенье, 14 Август 2016 19:31)

    Что вы делаете для ускорения работы этого яндекса? Где ссылки на новый материал размещать чтобы быстрее попадал в выдачу?

  • #88

    danilovskaia (Вторник, 09 Август 2016 13:01)

    что-то не в ту сторону он гайки крутит! раньше с горем попалам за две недели новые материалы "съедал", а теперь вообще перестал индексировать!

  • #87

    ДигеРР (Пятница, 05 Август 2016 17:48)

    по моему с яндексом что-то случилось, возможно подкрутили свои гайки и он стал индексировать быстро новые страницы. раньше новую страницу загонял в индекс неделю а теперь день-два.

  • #86

    Esperanza99 (Воскресенье, 31 Июль 2016 20:09)

    Новый блог сегодня Яндексом проиндексирован, но только одна главная и все, это так и должно быть?

  • #85

    katofeia (Суббота, 23 Июль 2016 13:33)

    Совершенно верный взгляд на вещи у вас! За счет ссылочной массы такие ужасные сайты в выдаче на высоких позициях находятся... Зачем эти ссылки учитываются не понимаю...

  • #84

    Юзверь (Понедельник, 18 Июль 2016)

    яндес любит частое обновление сайта, в комментах или же в статьях. гугл любит ссылки, были бы деньги на закупку и любой гс в топ можно протолкнуть!

  • #83

    ViktoriaN (Понедельник, 11 Июль 2016 12:46)

    нет, это не опыты над сайтами, это просто руки у наших "специалистов" кривые. они даже фильтры меирики не могут нормально прописать. я уже по всякому пробовала, но со спамного сайта все равно трафик учитывается. с гуглом здесь проблем вообще нет!

  • #82

    shev80 (Вторник, 05 Июль 2016 16:27)

    индексация Яндекса мне напоминает какую-то лабораторию, где ставят опыты на мышах. то сайт в топе, то в конце выдачи, то все страницы в индексе, то минусует по не понятной причине большую половину... опыты ставят, за место мышей наши сайты и блоги...

  • #81

    Серж (Суббота, 02 Июль 2016 12:02)

    Яндекс стал апы делать очень часто, что на него не похоже. Опять под Гугл косит, как всегда:-)

  • #80

    Марина (Четверг, 23 Июнь 2016 17:16)

    Не знаю, что все так на Яндекс ополчились? Нормальный поисковик с очень удобной главной страницей. Мой сайт индексирует своевременно, претензий нет.

  • #79

    Sova28 (Пятница, 17 Июнь 2016 12:08)

    Яндекс это тупой поисковик с не современными и трудными алгоритмами, как поиска, так и индексации. Вы такой не один, таких много. Яндекс хорошо индексирует высокопосещаемые сайты, новостники особенно, на которых, как говорится - живет быстроробот.

  • #78

    Серёжа (Воскресенье, 12 Июнь 2016 12:50)

    Яндекс не индексирует мой новый блог, Гугл уже готов. Почему? Кто подскажет?

  • #77

    Макс (Вторник, 07 Июнь 2016 12:39)

    Индексация сайта зависит от вас, а не от поисковиков. Делайте страницы без ошибок в коде и интересные пользователям и индексация не заставит себя долго ждать.

  • #76

    Dimkaw2016 (Вторник, 31 Май 2016 10:14)

    Яндекс скоро начнет чистку поиска, не6 сомневаюсь в этом. Они периодически так делают, после чего куча сайтов просто выкидывается из индекса и досвидос.

  • #75

    Винимамина (Четверг, 26 Май 2016 11:48)

    Ждать придется и помогать индексации соц. сетями. Я свой новый сайт больше месяца в Яндекс "загоняла". Эта поисковая система совсем ничего "есть" уже не хочет!

  • #74

    Екатеринка (Среда, 18 Май 2016 12:37)

    Мой сайт Гугл проиндексировал давно, а наш Яндекс тянет и тянет. Уже месяц прошел, а в индексе до сих пор только меньшая половина страниц сайта.

  • #73

    Gambol (Четверг, 12 Май 2016 10:32)

    Сегодня Яндекс проиндексировал мой новый сайт - все страницы в поиске теперь, вот только на нулевой трафик это конечно же никак не повлияло))))

  • #72

    Владик (Пятница, 06 Май 2016 10:59)

    В Яндексе реально олени какие-то работают. То АП раз в две недели, то почти каждый день. То выкинет все страницы, то больше чем есть на самом деле в индексе. Что за...?

  • #71

    sergio88 (Четверг, 28 Апрель 2016 10:58)

    Сайты под бурж многие начинают в связи с упадком доходов в РУ. Но там все не так просто. Ссылки нужны - без них не вариант. Где их покупать я хз. Как многие говорят - бурж интернет - это война бюджетов...

  • #70

    зиг (Воскресенье, 24 Апрель 2016 16:14)

    Скажите кто может занимается, как продвигать сайт под бурж? Есть ли там свои нюансы и свои биржи по покупке ссылок, просто точно знаю что для Гугла ссылки это все!

  • #69

    kroha24 (Вторник, 12 Апрель 2016 13:03)

    Привет всем! Помогите понять такую штуку: новый сайт Гугл то индексирует, то нет. Захожу и вижу, что проиндексировались, например, 5 страниц. На следующий день захожу - там уже 2 страницы и такие пляски изо дня в день. Это нормально вообще?

  • #68

    555 (Воскресенье, 03 Апрель 2016 15:56)

    не ну Яндекс как всегда молодец - взял и выкинул 1000 страниц из индекса. такое впечатление что они это специально делают чтобы нас выводить из себя.

  • #67

    korando (Понедельник, 28 Март 2016 13:22)

    Чем тут поможешь, когда у всех такая беда. Я что подметил в плане индексации Яндекса. Тут все зависит от быстро-робота, как часто он посещает твой сайт. Так вот чтобы он посещал сайт часто - нужно постоянно обновлять сайт новыми материалами. Посмотрите сайты новостники - у них индексация проходит за 10 секунд!!

  • #66

    Anastasha96 (Пятница, 25 Март 2016 21:36)

    Не индексируется мой новый сайт, помогите плиз!!

  • #65

    1990 (Воскресенье, 20 Март 2016 14:57)

    последний ап яндекса порадовал, наконец все страницы сайта проиндексированы и уже дают трафик. я этого праздника ждал 7 аппов!!!

  • #64

    Рита (Воскресенье, 13 Март 2016 20:06)

    Как помочь Яндексу проиндексировать новые страницы? Читала на форуме что типа прогонять нужно новые страницы - я так делала, но эффект нуль! Сижу, стараюсь, а весь труд игнорится, что делать?

  • #63

    Ромыч (Пятница, 04 Март 2016 19:53)

    да ему 40 стукнет, а он все будет мою новую страницу индексировать, которую к слову сказать я сделал еще две недели назад.

  • #62

    Konfetka (Понедельник, 29 Февраль 2016 13:07)

    ну как бы Яндексу 20 лет уже, мог бы научится индексировать сайты как полагается к такому возрасту... мне вообще кажется что Яндекс таким будет всегда, а знаете почему? а потому что он НАШ!

  • #61

    Юля (Среда, 24 Февраль 2016 17:39)

    это от того, что интернет придуман в США - следовательно они более прошареные в этом пацаки. молодцы конечно. Гугл дак вообще красавчик. Яндекс только начинает что-то понимать, дайте время, он еще молод.

  • #60

    bob-korn (Четверг, 18 Февраль 2016 15:32)

    Яндекс вообще загадочное какое-то "существо". Вот почему у Гугла всё всегда нормально а Яндекс через заднее место всё пропускает? Индексация в Гугле вопрос одного дня. Яндекс же иногда месяцами думает...

  • #59

    loban19 (Пятница, 12 Февраль 2016 14:18)

    Конечно это ещё ерунда. Вот у меня один сайт есть так его который год так колбасит в выдаче что диву даёшься. То Яндекс проиндексирует весь - смотришь вроде и трафик идет, потом возьмёт выкинет из индекса - трафика нет и так год уже. Мне уже стало интересно наблюдать за этими "качелями", пытаюсь понять причину но понять невозможно.