Индексация сайта
Успешность сайта определяется его популярностью, количеством привлеченных посетителей, или же заработком Веб-мастера. Однако прежде, чем достигнуть успеха, любой сайт проходит долгий и трудный путь оптимизации, на котором встречается множество проблем, успех решения которых и определяет его дальнейшую судьбу.
Одной из самых распространенных проблем является проблема с индексацией сайта. Так как основной трафик поступает на большинство сайтов через поисковые системы, очень важно, чтобы те вовремя и без сбоев индексировали новые страницы сайта. Но с этим по разным причинам нередко возникают проблемы, решать которые нужно оперативно. Думаю, что вникнуть в проблемы с индексацией просто необходимо.
Механизм попадания страницы в выдачу прост. Робот поисковой системы постоянно индексирует все новые страницы сайтов, которые уже имеются в реестре поисковой системы, находя их посредством ведущих на них ссылок. Поисковый робот регулярно индексирует и старые страницы, поэтому получает возможность найти ссылки на новые.
Если же необходимо проиндексировать новый сайт, которого нет в реестре, а внешних ссылок на него пока мало, сайт добавляется в очередь на индексацию посредством добавления его в панели Вебмастера поисковой системы, которая у большинства поисковиков есть. Там же можно отслеживать прогресс индексации и все проиндексированные страницы, а также страницы, на которых возникли ошибки.
Почему же важна не просто индексация, а еще и своевременная индексация? Все дело в том, что в интернете широко распространена кража контента, когда злоумышленники просто копируют чужой контент и размещают у себя на ресурсе. Если ранее контент был уже проиндексирован на странице вашего сайта, вреда от кражи вам не будет, но вот если нет, то поисковый робот, найдя контент сразу на двух страницах, может принять за первоисточник ресурс, укравший контент, и тогда против вас будут применены санкции. Поэтому чем быстрее индексируются новые страницы – тем меньше вероятность таких проблем. Вдобавок при долгой индексации страница позже начинает привлекать на сайт трафик, что можно назвать, по аналогии с экономикой, издержками упущенных возможностей.
Плохо индексируется сайт, возможные причины
Итак, большинство проблем с индексацией технические, виновниками же, чаще всего, являются сами ресурсы и ошибки Веб-мастера. Выделим наиболее распространенные причины плохой индексации и, соответственно, способы ее ускорить.
1. Внешние ссылки и перелинковка. После создания новой страницы на нее, как правило, ведет только одна навигационная ссылка. Нам же нужно больше, поэтому мы должны поставить еще несколько ссылок с других страниц. Кроме того, не лишними будут и внешние ссылки, особенно с динамично индексируемых сайтов. Это увеличит шанс попадания робота на нашу страницу, да и посодействует поднятию ТИЦ, что также не повредит. Жалеть ссылок для не проиндексированной страницы не стоит, после ее индексации часть можно будет убрать.
2. Навигация и карта сайта. На ресурсах часто используется навигация на flash или с использованием скриптов. Это удобно для посетителей и красиво, но поисковый робот лучше «дружит» с обычными ссылками. Поэтому желательно, чтобы все элементы навигации дублировались в обычном виде. Кроме того, нелишним будет создать легкодоступную страницу с картой сайта – ссылками на каждую конечную его страницу. Карта позволит быстро найти все страницы как поисковому роботу, так и обычному посетителю.
3. Содержимое страницы. Даже попав на страницу контента, поисковый робот не всегда успешно ее индексирует. Так как он каждый раз, встречая ссылку, переходит по ней, чрезмерное их количество может помешать индексации. То же самое можно сказать про объем текста. Поисковый робот хорошо «проглатывает» тексты до 20000 символов, дальше начинаются трудности. Что же до изображений, то важно не перегружать ими страницу: чем она тяжелее – тем выше вероятность того, что поисковый робот не сможет ее проиндексировать.
4. Ошибки в коде страницы. С развитием CMS и унификацией кодов критические ошибки встречаются все реже, однако, полностью избежать их невозможно. Особенно это касается «самописных» CMS. Проверить код сайта на ошибки и соответствие стандартам w3c.
5. Плохой хостинг сайта. Робот поисковой системы сильно нагружает сервер, поэтому успешность индексации зависит и от качества хостинга. Выбирайте только проверенного хостера. Конечно, сейчас эта проблема не столь актуальна, как, скажем, еще несколько лет назад, однако, ограничения все же существуют. Чем они меньше – тем лучше, ведь поменять хостинг уже состоявшемуся сайту довольно трудно и болезненно.
Проблемы с индексацией в том или ином виде возникают практически у каждого сайта. Даже если вам удалось их избежать, не помешают профилактические действия по всем обозначенным направлениям. Если же с ресурсом все нормально, но проблемы с индексацией все же возникают, нужно обратиться в службу поддержки поисковой системы: хоть и редко, но бывают случаи, когда проблема возникает на их стороне.
парень (Вторник, 20 Июнь 2017 19:43)
новые страницы в индекс не попадают как ускорить индексацию? это только по яндексу, с гуглом и прочими все good
Дивергент (Четверг, 15 Июнь 2017 20:32)
да все что угодно можно, так многие и делают! тока нужно заказывать комменты, чтобы с разных ай пи были
Мария (Суббота, 10 Июнь 2017 12:02)
А можно самой на своём блоге писать комментарии и вроде как это не я а посетители пишут? Ничего не будет мне за такое?
cardone87 (Суббота, 03 Июнь 2017 11:07)
Многое решают комментарии. Вот допустим этот сайт, на нем везде комменты и он в топе по большинству запросов. На индексацию тоже влияют не хило как и на ранжирование
Ольга (Воскресенье, 28 Май 2017 07:12)
Чтобы сайт хорошо воспренимали все поисковики нужно чтобы в коде все было ровно + к этому нужно часто обновлять инфу, от быстро-робота зависит скорейшая индексация вашего сайта
Митяй (Пятница, 19 Май 2017 15:33)
вот же вебмастера с Украины попали а)) представляете у на Яндекс закрыли бы... тут уж не до индексации было бы))) сочувствую коллегам...
Andrei24 (Вторник, 16 Май 2017 17:12)
ага))) а ты знаешь сколько нужно поработать чтобы посещаемость была 5к в месяц? если те же усилия пихнуть на сайт о финансах то доход был бы в 20 раз больше!
neuron (Среда, 10 Май 2017)
У меня у знакомого сайт о рыбалке с посещалкой 5к в месяц, доход 10к рублей! Так то не плохо, не много но и не мало я так думаю
Валдай (Воскресенье, 07 Май 2017 14:40)
Ничего подобного! Есть тематики на сайтах которые весьма трудно монетизировать, например рыбалка, здоровье
Миха (Среда, 03 Май 2017 17:53)
Любой трафик это всегда деньги! А кто любит не любит это его проблемы! Для индексации использую прогоны по твиттеру, максимум час и страница в индексе.
Suzdalskaya (Вторник, 25 Апрель 2017 14:23)
Бывает что большой трафик идет не с поисковиков а из социальных сетей. Но такой трафик вроде как никто не любит, но я точно не знаю.
Стёпик (Вторник, 18 Апрель 2017 22:30)
У меня сайт не индексируется а траф с поисковиков идет и при этом не малый, как так для меня загадка
Витос (Четверг, 13 Апрель 2017 15:48)
не попадает сайт в Яндекс выдачу уже месяц и неделю! что подскажете предпринять чтобы решить эту проблему???
NIKA97 (Пятница, 07 Апрель 2017 12:19)
У меня тоже такая идея была. Но толку об этом думать если от нас ничего не зависит. Так-то конечно было бы лучше, на самом деле лучше! 20 ТОП мест вместо всего 10!!!
1998 (Вторник, 28 Март 2017 13:06)
Как знать лучше или нет. Но как вариант я бы не против сравнить. Во всяком случае больше мест в топе это точно не плохо!
elvet (Суббота, 25 Март 2017 11:13)
А я вот все думаю че не сделать так: разделить страницу выдачи на два столбика, т.е. не 10 сайтов на странице а 20! Было бы явно лучше!имхо
Харитон (Пятница, 17 Март 2017 20:01)
Жалко что основных поисковиков всего два яндекс да гугл. Спутник какой-то там запустили еще с которого у меня трафу 5 чел в день. С мэйла тоже не более 10. По индексации конечно Гугл рулит!
Runar23 (Воскресенье, 12 Март 2017 13:04)
Задать вопрос Платону Щукину нужно (это собирательный образ тех. поддержки Яндекса). Хотя заранее могу сказать что ответят - "работайте над сайтом и все будет хорошо"
Светуль (Вторник, 07 Март 2017 11:32)
Привет всем специалистам! Может кто подсказать что не так с моим блогом? Яндекс не индексирует его уже месяц!! Вначале главная страница в поиске находилась,а теперь и ее там не наблюдаю. Что нужно делать при такой проблеме? Спасибо)
asdfg (Суббота, 25 Февраль 2017 12:06)
через rrs ленту хорошо прогонять, тоже индексации помогает!))
Ян (Понедельник, 20 Февраль 2017 15:13)
Чтобы Яндекс инденсировал страницы быстро и правильно нужно ежедневно обновлять сайт. Яндекс очень любит частые обновления. Когда на сайте новый материал появляется раз в месяц, то быстроробот сваливает - от этого проблемы с индексированием.
Tanya (Четверг, 16 Февраль 2017 12:27)
Знать бы как под гугл работать, ведь этот поисковик вообще не пойми как относится к сайтам. Сам по себе, не так как наши индексирует и трафу дает.
Саша (Среда, 08 Февраль 2017 11:55)
Тогда работайте под Гугл, он отлично все индексирует. Правда трафик с него немного другой - значительно моложе чем с Яндекса, а это важный фактор!
Марат (Среда, 01 Февраль 2017 15:46)
Ап за апом яндекс проводит а новые страницы так в индекс и не залетают! Как-то напрягать начинает вся этв кухня с яндексом!!
Stas33 (Воскресенье, 29 Январь 2017 11:23)
Из раза в раз в выдаче вижу скачки по страницам моего сайта, то вылетают, то опять чудным образом появляются. Ни как не могу определить причину этих событий. Кто знает от чего так происходит? И такое не у меня одного!
margo (Четверг, 19 Январь 2017 09:07)
Просто наши програмёры ещё не достигли необходимого уровня, как например у Гугл. Со временем всё наладят и додумают.
Серёга (Понедельник, 16 Январь 2017 15:46)
Ну я вроде как умею сайты делать, но с индексацией Яндекс действительно что-то не так)) Просто другие поисковики нормально же индексируют, значит напрашивается вывод что проблема именно в Яндекс!
Гарик (Понедельник, 09 Январь 2017 06:31)
Когда сайт посещаемый и интересный, то на нем всегда находится быстро-робот поисковиков и индексация происходит в минимальные сроки! буквально за несколько минут! сайты сначала научитесь делать, - потом будете на поисковики жаловаться, - что они медленно индексируют
стасян (Понедельник, 02 Январь 2017 14:07)
можно цельный год ждать когда этот тормознутый яндекс проиндексирует мой сайт ! как же меня это все бесит а!!
Мashel (Четверг, 22 Декабрь 2016 12:10)
с гуглом ничего не понятно, но индексирует он новые материалы со скоростью света! хоть за это спасибо!
Абаз (Пятница, 16 Декабрь 2016)
Но с гуглом хотя бы нет вопросов с индексированием, вопрос решается за максимум 24 часа. Яндекс может 24 дня думать и ходить вокруг и около но так и не проиндексировать новую страницу
Ольга (Суббота, 10 Декабрь 2016 07:02)
у заморского собрата Гугла тоже не все так ровно как хотелось бы. если наш Яндекс хоть как-то поддается пониманию, то Гугл просто темный лес!
Паша (Среда, 07 Декабрь 2016 17:26)
Проблема одна (как и всегда) - ЯНДЕКС! Запомни - это самый тупой и мутный поисковик! Сами не умеют алгоритмы настроить. так хотя бы у Гугла тырили бы технологии)))
Merijoi (Вторник, 29 Ноябрь 2016 13:56)
уже 5 апов прошло и ни одной страницы не проиндексировал яндекс, а в гугле все 100% страниц в индексе. не подскажете в чем тут проблема вообще?
Папай (Воскресенье, 27 Ноябрь 2016 19:23)
Это не нормально, но Яндекс всегда так работает, иначе он не способен. Так он устроен что поделать
Брюлька (Понедельник, 21 Ноябрь 2016 15:52)
То все страницы вижу в вебмастере яндекса, то они куда то исчезают, потом опять как бы проиндексированные. Нормально когда так?
крокус (Суббота, 12 Ноябрь 2016 12:27)
А мне Яндекс нормально ответил! Платон Щукин так и написал: на ваш блог наложен фильтр за слишком большое количество некачественных входящих ссылок.
Korol Olya (Вторник, 08 Ноябрь 2016 10:54)
Писать в Яндекс бессмысленно, они отписками отвечают, всем одно и тоже. Лучше на форуме спросить у знающих и опытных вебмастеров. Показать сайт, описать проблему, подскажут и помогут.
laricheva86 (Вторник, 01 Ноябрь 2016 13:24)
У меня так и было. После прогона сначала в Гугле все позиции просели, а потом и в Яндексе. Написала в Яндекс сказали на ваш сайт наложен фильтр работайте над ним и фильтр уберем.
БЭН (Четверг, 27 Октябрь 2016 22:00)
Прогоны помогают, сам их делаю. Но зависит от того как делать прогон, по каким социалкам ну и т.д. И вообще нужно уметь это делать, а то вместо индексации схлапочешь фильтр.
Катя (Суббота, 22 Октябрь 2016 15:13)
Здравствуйте. Может кто посоветовать, стоит ли заказывать прогоны сайта для его скорейшей индексации или же это очередная заманушка неопытных вебмастеров? спасибо.
espina (Понедельник, 17 Октябрь 2016 18:14)
У меня все наоборот! никогда не знал мой блог проблем с индексацией, все странички были в поиске. но вот теперь они все вылетели из Яндекса, осталась только главная страница. нормально это вообще?
Диня (Среда, 12 Октябрь 2016 13:25)
Мой сайт Яндекс целый год индексировал еле как! Теперь почему то проиндексировал его на 100% и эта планка держится уже 5 аппов!
Moryachok28 (Вторник, 04 Октябрь 2016 11:59)
Не знаю что все так на Яндекс гонят? У меня несколько сайтов и все индексируются всеми поисковиками в течении часа-трех! У меня новостные сайты, у них всегда индексация была быстрая, но все же.
Хрящ (Вторник, 27 Сентябрь 2016 19:13)
Яндекс намекает - либо ты работаешь на нас и получаешь трафик либо ты работаешь не на нас и мы тебе даем фильтр.
T-O-R (Четверг, 22 Сентябрь 2016 13:13)
Апы выдачи у яндекса стали проходить чаще, за это спасибо! Вот только толку как всегда нету! А вчера совсем обнаглел - наложил на мой сайт санкции за рекламу! Я вообще присел от такого! Что за новые правила таки у него? Траф просел на 100%!!!!!!!!!!
Крутой (Пятница, 16 Сентябрь 2016 17:32)
Мой новый сайт не индексируется! Столько сил работы и денег вложил и отдачи нету совсем! а почему? да просто потому что яндекс не индексирует сайт блин!!
вася (Среда, 14 Сентябрь 2016 13:43)
У кого-то было так: в ап тица из индекса выпадают несколько страниц?
komik&men (Понедельник, 05 Сентябрь 2016 19:37)
не индексируется сайт, все перепробовал толку нуль! в гугле уже месяц как все страницы, яндекс тупит по жетски!! ну это как бы ни для кого не новость.
Маша (Четверг, 01 Сентябрь 2016 11:57)
Не понимаю в чем сложность индексировать сразу новые страницы моего сайта. Гугл максимум день индексирует - нормально же! Но яндекс может реально месяц репу чесать, почему так а? Замучилась уже совсем.