Как ускорить индексацию сайта. Часть 1
Всем привет. Сегодня начнем разбор такой глобальной темы, как индексация сайта. Рассмотрим, что это вообще такое, зачем она нужна, и как эту самую индексацию улучшить. Уверен, что данная информация будет полезна не только начинающим блоггерам, но и маститым вебмастерам. Применив эти знания на практике, вы в разы ускорите индексацию своего сайта.
Итак, давайте рассмотрим, что такое индексация. Индексация – это процесс занесения содержимого вашего блога (статьи, картинки, видео и тд) в индексную базу поисковой системы. Мы будем ориентироваться на две поисковые системы: Яндекс и Google. Про маил.ру, рамблер, yahoo.com, апорт и другие можно смело забыть. Как показывает практика, русскоязычный сегмент ими практически не пользуется.
У каждой поисковой системы есть специальная программа (поисковый робот или паук на языке сеошников), который блуждает по просторам интернета, то есть по всем сайтам, ищет на них новый контент и если такой имеется, то заносит его в свою поисковую базу. Возвратившись обратно на базу Яндекса или Гугла, он передает всю полученную информацию, и она появляется в поисковой выдаче. Затем робот отправляется за новой порцией информации. Это достаточно примитивная схема, работы поисковых систем. В реальности она гораздо сложнее и содержит огромное количество алгоритмов и различных поисковых роботов.
Нам же достаточно иметь представление о схеме работы в целом. Почему нам это важно? Потому что при наличии определенных знаний мы можем в некоторой степени воздействовать на поведение паука. Проще говоря, мы можем заставить его чаще заходить на наш блог, или вообще заставить его там жить. Вы представляете, с какой скоростью ваши статьи будут влетать в индексную базу, если на ваш блог будет часто заходить поисковый робот? Время индексации уменьшается до нескольких минут (Гугл) и пары часов (Яндекс)!
Перед тем как я расскажу вам, как ускорить индексацию сайта, давайте рассмотрим плюсы быстрой индексации. Я вижу два основных и огромных плюса быстрой индексации сайта: во-первых, быстрая индексация приводит к быстрому появлению вашей статьи в результатах поисковой выдачи и соответственно увеличению трафика на ваш ресурс. Думаю, тут ничего объяснять не надо, понятно даже первокласснику.
Второй момент – это защита от воровства вашего контента. Да, да. Не все об этом знают, но, тем не менее, это так. Давайте я вам объясню на примере. Допустим, вы сделали новенький блог в интересной и востребованной теме. Как правило, за таким блогом сразу прикрепляется какой-нибудь парсер (пират по-русски), который постоянно сканирует ваш ресурс на появление нового контента. Итак, вы написали в блог отличную статью, убили на нее целый день (или ночь), и довольные собой любуетесь на свое произведение.
Беда в том, что эта статья есть на вашем блоге, но ее нет в индексной базе поисковых систем, и когда на ваш сайт зайдет робот еще неизвестно. И вот этот самый пират берет и копирует вашу статью на свой блог, а потом загоняет ее в индекс. В итоге эту статью робот проиндексирует сначала на его сайте, а потом только на вашем. В данном случае автором будет считаться этот нахал, а вы обычным копипастером. Да вас еще и понизят в результатах поисковой выдачи или вообще наложат фильтр. Вот такая вот несправедливость. Как показывает практика, огромное количество новых блогов попадает под фильтр именно по этой причине, из-за таких вот нехороших людей.
Как ускорить индексацию сайта
Все приемы ускорения индексации я условно разделю на две группы. Первая группа – это внутренние факторы, то есть правильная установка и настройка wordpress, набор необходимых плагинов, настройка шаблона и тд. Проще говоря, это манипуляции с самим блогом, которые помогут ускорить индексацию сайта. В этой части мы рассмотрим именно внутренние факторы. Во второй части я расскажу вам про внешние факторы, можно ускоряющие индексацию, так что не забудьте подписаться на обновление блога.
Внутренние факторы ускорения индексации:
1. Уникальный, красивый, удобный шаблон. Поверьте, это очень важный момент. Где его взять или как сделать самому, здесь писать не буду. Следите за обновлением блога.
2. Регулярное написание уникального контента. В этой фразе два ключевых слова: регулярное и уникального. Допустим, вы пишите статьи через день. Робот зашел на ваш сайт и нашел новую статью. Пришел через неделю и нашел еще три новых статьи. Следующий раз он зайдет на ваш сайт не через семь дней, а через три. И так далее. А теперь представьте обратную ситуацию. Вы пишите редко. Робот пришел, а у вас ничего нового нет, ушел ни с чем. Пришел через неделю, опять та же ситуация. В следующий раз он придет через месяц. Зачем ему идти туда, где его не кормят? По поводу неуникального контента я думаю все понятно. Скопированный текст напрочь отбивает желание робота возвращаться к вам на сайт.
3. Создание карты сайта для робота. Это список всех страниц вашего блога в специальном формате. Создается он при помощи специального плагина Google Sitemap Generator. Устанавливаете плагин, нажимаете на кнопку создать карту сайта и в корне вашего блога появляются два файла: sitemap.xml и sitemap.xml.gz. Эти файлы нам понадобятся для следующего шага. Более подробно про карту сайта читай здесь.
4. Регистрация в инструментах для вебмастеров Яндекса и Гугла. Это абсолютно необходимые сервисы для успешного ведения блога. В оба сервиса необходимо добавить ранее созданную карту сайта.
5. Создание правильного файла robots.txt. Этот файл показывает роботам, что на вашем блоге надо индексировать, а что не надо. Например, необходимо закрывать от индексации дублированный контент. Правильный robots.txt можете скачать здесь. Распаковываете архив, открываете файл при помощи блокнота и в конце заменяете мой сайт на ваш, сохраняете и закидываете в корневую папку вашего сайта. Sitemap.xml и robots.txt – это первые файлы, которые ищет робот, придя на ваш сайт.
6. Грамотная перелинковка и страница со всеми статьями на вашем блоге. Более подробно про перелинковку в следующих статьях.
7. Добавление в настройки вашего wordpress списка пинг сервисов. Эта специальные сервисы, которые при появлении новой статьи на вашем блоге отсылают запрос (пинг) поисковым роботам с призывом прийти на ваш сайт. Скачать список пинг сервисов можно тут. Открываете файл в блокноте, копируете все сервисы и вставляете в параметры -> написание -> в самом низу будет окно «сервисы обновления». Вот туда и надо вставить весь список, каждый сервис с новой строчки.
Ну вот, друзья, это, пожалуй, основные настройки вашего блога для максимального ускорения индексации сайта. Во второй части вы узнаете о том, как ускорить индексацию сайта при помощи внешних факторов, так что советую подписаться на обновления блога, что бы не пропустить ценную информацию.
С уважением, Данил Новоселов
я обычно сделаю ретвит на твиттере и поделюсь вконтакте и фэйсбук. мне понравился пинг сервисы
Как правило этого хватает, ну можно еще для надежности прокомментировать парочку популярных блогов или же сделать анонс статьи.
Пинг-сервисы — это интересно. Еще одна новость для меня. Спасибо.
А я где-то читал, что пинг-сервисы практически бесполезны, и толку от них не много. И я наверное соглашусь с этим мнением.
Кстати, хочу дать совет новичкам, у которых еще зеленые блоги. Не волнуйтесь, если на ваш ресурс долго не приходят поисковые роботы. У них в почете сайты постарше — 1, 2, 5 лет и т.д. Самое главное — следите, нет ли у сайта ошибок. Все отслеживается в панели управления сайтами, т.е. в панели Яндекса и Гугла.
Совет хороший, только вот проблемка, далеко не все новички знают об панели управления сайтом Яндекс и Гугл
Точно! Я например не знал этого. Пока в почёте сайты 1-5 лет, контент заберут за милую душу.
А я никогда раньше не слышал о пинг сервисах интересно... А со всеми остальными способами ускорения индексации полностью согласен.
Теперь тоже пользуюсь пинг сервисами
Я уже прочитал об этом звере не такой он хорош как о нем говорят.
Озадачили. В статье пишется одно, Вы говорите другое.
Спасибо за информацию, на счёт правильного шаблона это +1, не все шаблоны нормально работают с пс
Как красивый шаблон может повлиять на быстроту индексации. Робот же не понимает в красоте ничего. А если это обычный рядовой шаблон, но с удобствами для пользователя?