Узнайте больше о работе поисковой системы. Как проверить индексацию в Google и Яндекс

Роботы поисковых систем в обязательном порядке добавляют в базу данных информацию обо всех размещенных сайтах. Собранные показатели специальным образом обрабатываются, и в итоге мы получаем индекс - т. е. определенную, так сказать, выжимку из документов, которая очень пригодится для SEO-продвижения. Индексацию можно осуществить собственноручно (добавлять URL веб-ресурса в форму поисковика) или автоматически (роботы сами осуществляют переход по гиперссылкам, сканируют файл-карту sitemap.xml). Индексация - необходимый этап грамотно выстроенного SEO-продвижения, ведь она влияет на ранжирование портала.

Особенности процесса

Каждый поисковик располагает роботами, т. е. определенными программами, которые регулярно собирают данные о вашем сайте, анализируют весь html-код. Именно поэтому так важно правильно заполнять теги:

• h1, h2 (заголовок и подзаголовок);
• title;
• description и т. д.

Чтобы SEO-продвижение действительно могло считаться эффективным, не забывайте также про создание карты сайта, перелинковку и микроразметки.

Как осуществляется индексация

Существуют основные методы индексации:

• В этом случае следует создать ресурс, наполнить его контентом на соответствующую тематику, оформить все теги и просто дождаться поискового робота. Чтобы ускорить процесс, оставляем ссылку на наш сайт с другого, более авторитетного. Эта услуга платная, но положительно влияет на SEO-продвижение (и индексацию в частности).
• Отправьте запор на индексирование в ПС. Да, вам придется отстоять очередь, но когда придет время, поисковой робот отправится по вашему адресу и занесет сайт в каталог. Причина, по которой чаще всего выбирают этот метод, способ бесплатный.

Вы можете совместить оба варианта, т. е. заполнить специальную форму и проставить ссылки со сторонних ресурсов. Занимаясь SEO-продвижением, помните, что даже если вас и посетил робот, то он не будет индексировать сразу все станицы портала. Здесь ничего не поделаешь, придется подождать. Следует так же отметить, что роботы в каждом ПС (Google, Яндекс, Mail и т. д.) свои, а значит невозможно предсказать, сколько времени займет создание индекса в конкретном случае.

Как можно упростить процесс

Для SEO-продвижения крайне необходимо создать действительно грамотный и качественный сайт, который будет хорошо восприниматься не только целевой аудиторией, но и поисковыми системами. Существуют такие рекомендации при создании сайта:

• Поскольку структура портала все же имеет прямое влияние на заинтересованность поисковиков в индексации, желательно создать определенные страницы, ссылающиеся на веб-документы, расположенные внутри портала. Это облегчит SEO-продвижение, поскольку программы автоматически будут переходить на внутренние разделы.
• Чем чаще вы обновляете ресурс, тем больше он привлекает внимание роботов. Советуют регулярно выкладывать хотя бы небольшие статьи в блог, новости или просто заметки/видеоролики. Как в случае и с другими параметрами SEO-продвижения, индексация будет успешной только в том случае, если вы работаете с уникальным контентом.
• Перелинковка страниц на сайте очень полезна, особенно если вы предлагаете похожие товары.

Что касается создания карты сайта, то здесь можно столкнуться с определенными проблемами, ведь робот при изучении «тяжелой» площадки останавливается, проверив только несколько первых ссылок. Если SEO-продвижением занимается профессионал, то он знает, как обойти этот нюанс. Достаточно создать древовидную карту, т. е. каждый подраздел в этом случае получает собственную страницу, на которую легко попасть с главной. О том, как правильно организовать продвижение по трафику лучше посоветоваться со специалистами, так как в этом деле существует много нюансов.

Вы наверняка уже знаете, что поисковая оптимизация (SEO) – важнейший инструмент продвижения для любого бизнеса в сети. Если ваш сайт не появляется достаточно часто в поисковой выдачи Google и Яндекс, вам будет не просто найти новых клиентов, заинтересованных в ваших услугах.

Примерно половина опрошенных маркетологов, занимающихся своим бизнесом, признались, что более 25% клиентов нашли их сайт в поисковой выдаче. Конечно, полагаться на поисковые системы как на единственный источник трафика для вашего сайта не стоит; но вы однозначно должны сделать все возможное, чтобы появляться в поисковой выдачи по релевантным запросам.

Тут важно подчеркнуть, что поисковые системы индексируют сайты по множеству различных параметров, а не только по информации, представленной в этих полях. Поэтому найденные ключевые слова следует использовать не только для оптимизации заголовков страниц, описаний и ссылок, а и во всем содержании сайта. Но не стоит перебарщивать – об этом в следующем пункте:

02. Перенасыщение ключевыми словами

Чтобы отображаться по релевантным ключевым запросам, вам нужно буквально напичкать сайт . Но при этом они должны гармонично вписываться в контекст страницы, иначе поисковые системы могут заблокировать сайт за перенасыщение ключевыми словами (в SEO такая техника называется «stuffing »).

Если вы хотите быть уверенным, что алгоритмы поисковых систем не возненавидят вас за попытки манипулировать ими, используйте ключевые слова разумно, а именно – там, где они гармонично вписываются в контент. Словом, информация в мета-тегах и в содержании сайта должна выглядеть так, будто она была написана для людей, а не для роботов.

Вы можете поупражняться в креативности, подбирая синонимы к вашим ключевым запросам. Но не забывайте, что куда важней написать качественный контент и сделать его «читабельным», чем добавить очередное ключевое слово в каждую строчку текста.

03. Неправильное использование ссылок

Существует 3 типа ссылок, полезных для улучшения индексации сайта: ссылки с других ресурсов на ваш сайт (так называемые «обратные ссылки»), ссылки с вашего сайта на другие ресурсы («внешние ссылки») и ссылки на различные страницы на вашем сайте («внутренние ссылки»). Со всеми тремя нужно обращаться разумно.

Пару лет назад еще можно было подтасовать результаты поиска, заплатив другим сайтам за размещение обратных ссылок на ваш сайт, но теперь поисковые системы относятся к этому с большой осторожностью. Если ссылка на ваш сайт находится на ресурсе, который считается ненадежным или не соответствует релевантной тематике, это может привести к понижению ваших позиций в поисковой выдаче.

Тот же принцип работает с внутренними и внешними ссылками – старайтесь, чтобы они были соответствующей тематики и их не было слишком много.

4. Пренебрежение справочниками

Некоторые сайты считаются «пиратскими», и если ваш сайт будет упоминаться на таких ресурсах, это может привести к понижению вашего ранга в поисковой выдаче. В то же время есть много «хороших сайтов», размещение ссылок на которых позволит вам ощутить благотворное влияние SEO.

Вдобавок к регистрации сайта в онлайн-каталогах, вам стоит зарегистрировать вашу компанию в Яндекс.Справочнике. Яндекс.Справочник - это база организаций, данные из которой показываются на поисковых сервисах Яндекса в ответ на запрос пользователя. При этом учитывается его географическое положение или заданный географический район поиска. Это значит, что ваши данные появятся сразу в Яндекс.Картах и Навигаторе, а также на относительно новом ресурсе Яндекс.Город .

Чтобы ваш сайт отображался в результатах поиска на Google Maps, добавьте адрес вашего офиса в «Google Мой бизнес » (аналог Яндекс.Справочника).

5. Отсутствие обновлений на сайте

Работа над сайтом не заканчивается с нажатием на кнопку «Опубликовать». Создание качественного контента, доработка дизайна и поисковая оптимизация – это лишь некоторые из обязательных шагов в создании профессионального онлайн проекта.

Поисковые системы любят активные сайты с постоянно обновляющимся контентом, поэтому вы должны регулярно пополнять ваш ресурс. Это можно сделать с помощью тематического блога, интеграции соцсетей с сайтом, или простым обновлением главной страницы. Как мы уже написали выше, умеренное использование ключевых слов в контенте пойдет вам только на пользу.

6. Игнорирование социальных сетей

Чтобы не оставаться в тени, заявите о себе при помощи соцсетей, таких как Вконтакте, Facebook, Twitter, и Google Plus. Ведь на репутации вашего сайта может сказаться не только SEO, но и ваша социальная активность. Если в каждой из этих соцсетей у вас есть активная страница, они могут стать дополнительным источником привлечения трафика (и продаж).

Не смотря на то, что ссылки с ваших страниц в соцсетях не будут считаться «обратными» (разработчики социальных сетей относят такие ссылки к типу «no follow »), они будут появляться в результатах поиска. Таким образом, ваш сайт будет еще легче найти в поисковиках, что в общем-то и является главной задачей SEO.

Индексация сайта - это процесс сбора информации поисковой системой о содержимом вашего сайта. Во время индексации поисковые роботы (пауки) сканирую и обрабатывают web страницы, изображения, видео и другие доступные для сканирования файлы. Сайт должен быть проиндексирован чтобы отображаться в поиске.

Страницы, которые прошли сканирование и обработку, сохраняются в базу данных. Такая база называется «поисковой индекс». Именно в этой базе данных поисковая система ищет результаты, отвечающие на запросы пользователей.

Важно понимать:

• Если страницы нет в поисковом индексе - ее невозможно найти в поисковой системе.
• У каждой поисковой системы свой поисковой индекс, свои поисковые боты.
• Поисковой бот от Google называется Googlebot.

Как проверить индексацию страницы?

Самый быстрый способ - написать в строку поиска команду site:[адрес страницы] . Такой поиск найдет все проиндексированные страницы сайта. Для того, чтобы просмотреть дату последнего сканирования страницы, напишите в строку поиска cache:[адрес проверяемой страницы]

Совет: Сравните количество проиндексированных страниц с реальным количеством страниц на сайте. Это поможет быстро оценить есть ли у вашего сайта проблемы с индексацией. К примеру: если на сайте 100 товаров, 10 разделов и 10 информационных страниц (в сумме 120), а в индексе только 50 страниц, это означает, что поисковая система не знает о большей части вашего сайта.

Как проверить индексацию всего сайта

Для проверки индексации сайта нужно выполнить 2 простых шага:

Как добавить новый сайт в индекс поисковиков?

Сообщите поисковой системе о своем сайте в специальном инструменте Google или Yandex . Поделитесь своим сайтом в социальной сети или создайте на него ссылку с другого, уже проиндексированного сайта.

Узнайте больше о работе поисковой системы

Что делать, если сайт плохо индексируется?

Для решения проблем нужно разобраться в процессе индексации подробнее. С технической точки зрения “индексацию сайта” правильнее рассматривать как два отдельных процесса:

1. Сканирование страниц.
2. Обработка страниц.

Как происходит индексация сайта

Этап 1: Сканирование

Сканирование или “обход” страниц - это основная задача, которую выполняет поисковой бот. Попадая на новую страницу, бот получает со страницы два набора данных:

1. Содержание самой страницы, информацию о сервере и служебные данные. А именно: ответ сервера, html код страницы, файлы css стилей, скриптов, изображений.
2. Перечень ссылок, которые находятся на странице.

Полученное содержание передается для дальнейшей обработки и сохранения в базу. Просканированные ссылки так же сохраняются в специальный список - “очередь сканирования”, для дальнейшей обработки.

Когда бот добавляет в очередь индексации страницу, которая уже есть в очереди, эта страница занимает более высокое место в списке и индексируется быстрее. А это значит, что первый способ ускорить сканирование сайта - увеличить количество ссылок на нужные страницы.

Создавая очередь сканирования, google bot, как и другие поисковые боты, изучает карту сайта sitemap и добавляет в очередь ссылки из этой карты. Второй способ улучшить индексацию - создать карту сайта sitemap.xml и сообщить о ней поисковой системе.

Есть несколько способов создать карту сайта:

• Бесплатный онлайн инструмент для сайтов до 500 страниц www.xml-sitemaps.com .
• Программа для сканирования сайта, с возможностью создания sitemap - xenu links .
• Библиотека приложений для создания sitemap.
• Самый популярный плагин для создания карты сайта для WordPress .

Чтобы Google узнал о вашем sitemap, нужно добавить ссылку на карту сайта в инструментах search console или файле robots.txt

Добавление карты сайта в Search Console:

1. Зайдите в https://www.google.com/webmasters/tools/
2. Добавьте свой сайт или выберите из списка.
3. Перейдите в раздел Сканирование — Файлы Sitemap.
4. Выберите “добавить файл sitemap”, вставьте ссылку и добавьте карту сайта.

Добавление sitemap в robots.txt:

1. Зайдите в корневой каталог сайта через ftp.
2. Откройте файл robots.txt
3. Добавьте в конец файла строку “Sitemap: [адрес сайта]/sitemap.xml” и сохраните файл.

Третий способ ускорить индексацию - сообщить поисковому боту о дате последнего изменения страницы. Для получения даты и времени изменения страницы боты используют данные из заголовка ответа сервера lastmod. Сообщить наличие изменений на странице можно с помощью кода ответа not modify.

Надеюсь у вас больше не возникнет вопрос: “Что такое индексация сайта”.

• Tutorial

Недавно мы закончили курс по SEO в Нетологии и составили для себя чек-лист того, что обязательно нужно сделать на сайте «Я люблю ИП » для поисковой оптимизации. Но эти советы универсальны для любого проекта. В статье вы найдёте список практических рекомендаций со всего курса из 13 лекций от 8 разных специалистов, а также полезные ссылки и сервисы, которые помогут вам улучшить SEO вашего сайта.

Для кого эта статья:

• для веб-дизайнеров и разработчиков, которые хотят создавать сайты, изначально оптимизированные под SEO,
• для владельцев интернет-ресурсов, которые хотят самостоятельно разобраться в SEO, чтобы увеличить поисковый траффик.

Дисклеймер: эти советы вряд ли помогут вам выйти в топ по высокочастотным запросам, но вы сможете исправить все технические и текстовые ошибки на сайте, чтобы повысить свои позиции.

Работы по SEO в основном состоят из 5 этапов:

1. Технический аудит сайта.
2. Аудит коммерческих факторов.
3. Подбор семантического ядра.
4. Внутренняя и внешняя оптимизация сайта.
5. Наращивание ссылочной массы.

Технический аудит сайта

1) Проверьте, все ли страницы сайта находятся в поиске:

• по количеству результатов в поиске (в Google - при помощи site:site.ru, в Яндексе - при помощи host:site.ru),
• в Яндекс.Вебмастер (Индексирование → Страницы в поиске) или в Google Search Console (Индекс Google → Статус индексирования).

2) Проверьте наличие дублей на сайте. Дубли - это страницы с одинаковым содержанием, но с разными URL. Дубли могут быть полные (если контент совпадает на 100 %) или частичные (с высоким % совпадения). Дубли страниц необходимо удалять.

3) Проверьте наличие пустых страниц (которые не содержат контента). Пустые страницы можно:

• удалить,
• закрыть от индексации (в файле robots.txt, см. ниже ),
• наполнить контентом.

4) Проверьте наличие мусорных страниц (которые не содержат полезного контента). Мусорные страницы можно:

• закрыть от индексации,
• сделать полезными.

5) Проверьте наличие файла robots.txt. Это текстовый файл в корневой директории сайта, который содержит специальные инструкции для поисковых роботов. Подробнее см. справку Яндекса и Google . Размер файла не должен превышать 32 КБ.

6) В файле robots.txt можно указать общие правила для всех поисковых систем и отдельно для Яндекса. В правилах для Яндекса должна быть дополнительно указана директива Host (главное зеркало вашего сайта с www или без) и директива Sitemap с ссылкой на карту вашего сайта. Проверить файл robots.txt можно в Яндекс.Вебмастере .

User-agent: Yandex
Disallow: /contacts/
Host: www.iloveip.ru
Sitemap: http://www.iloveip.ru/sitemap.xml

Пример файла robots.txt с нашего сайта

7) Проверьте наличие файла sitemap.xml. Это аналог карты сайта, предназначенный специально для поисковых роботов. Подробнее см. справку Яндекса и Google . Создать карту сайта можно по ссылке . Проверить файл sitemap.xml можно в Яндекс.Вебмастере .

8) Проверьте наличие «битых» ссылок (ссылок на несуществующие или недоступные страницы). Необходимо удалять все битые ссылки, как внешние, так и внутренние. Проверить битые ссылки можно в программе Screaming Frog SEO Spider Tool (загружается на компьютер, есть бесплатная версия) или онлайн с помощью инструмента Технический анализ от SeoWizard (сервис платный). Также битые ссылки можно проверить в Яндекс.Вебмастере: Индексирование → Статистика обхода (см. HTTP код 404).

9) Проверьте наличие редиректов на сайте. Виды редиректов:

• 301 - запрошенный документ окончательно перенесен на новый URL,
• 302 - запрошенный документы временно доступен по другому URL.

Редиректами лучше не злоупотреблять, так как наличие на страницах сайта ссылок, ведущих на страницы с редиректом, способствует «утере» ссылочного веса.

Проверить можно в Яндекс.Вебмастере: Индексирование → Статистика обхода (см. HTTP код страницы).

10) Проверьте скорость загрузки сайта (должна быть менее 3 сек). Это один из важных факторов, который влияет на ранжирование сайта поисковыми системами. Проверить можно с помощью Google PageSpeed или в Google Search Console (Сканирование → Статистика сканирования → Время, затраченное на загрузку страницы).

11) Настройте ошибку 404 для удалённых или несуществующих страниц. Это можно сделать в файле.htaccess. Подробнее см. справку Яндекса .

12) Проверьте ответы сервера и файл.htaccess. Наиболее частые ошибки, которые встречаются:

• Доступны обе версии сайта с www и без (например, site.ru и www.site.ru). Это плохо влияет на индексацию, так как поисковик старается исключать дубли и может выбрать в качестве оригинала совсем не ту страницу, которую вы продвигаете.
• Отсутствуют редиректы для страниц со « /» на конце и без него. Если страницы сайта без слэша на конце и со слэшем отдают ответ сервера 200 (страница доступна), то попадая в индекс поисковых систем они представляют собой полные дубли.

13) Проверьте правильность URL. Неконечные страницы (разделы, подразделы) должны содержать «/» на конце URL, а конечные страницы (страницы товаров, статей) не должны содержать «/». Но применять этот формат рекомендуется только к новым страницам, так как для старых это приведёт к потере возраста документа.

14) Старайтесь использовать «ЧеловекоПонятныеУРЛы» (сокращенно «ЧПУ») или красивые и дружественные адреса URL. Пример отсутствия ЧПУ: yoursite.net/viewpage.php?page_id=23. Основные рекомендации:

• можно использовать иностранные слова (/contacts/) или транслит (/kontakty/),
• в качестве разделителя между словами используйте дефис «-»,
• между разделителями «/» в адресе URL должно быть не более 2–3 слов,
• длина URL не должна превышать среднее значение по конкурентам.

15) Соблюдайте иерархию папок в URL. Например:

site.ru/название-раздела/назавание-подраздела/конечная-страница

Это поможет Яндексу составить навигационные цепочки и отразить их в сниппете вашего сайта при выдаче в поиске. Подробнее см. справку Яндекса .

16) Проверьте отображение сайта на мобильных устройствах. Это можно сделать в Яндекс.Вебмастере (Инструменты → Проверка мобильных страниц) или в Google Search Console .

17) Укажите в head кодировку страниц meta charset=«utf-8».

18) Проверьте наличие и уникальность тегов title, description и h1 на каждой странице.

19) Тег title должен быть максимально близко к началу head.

20) Старайтесь добавить в тег title все ключевые слова, при этом самое популярное ключевое слово должно быть ближе к началу тега.

21) Максимальная длина тега title - 150 символов, оптимально - 60 символов.

22) В теге title не должны повторяться одинаковые слова (максимум не более 2 раз), можно использовать синонимы, близкие слова или другие слова из запросов. Например: Займ в банке под залог комнаты. Получить кредит под залог комнаты в Москве.

23) Для разделения разных фраз в теге title (например, названия страницы и сайта) используйте символ «|».

24) Тег description не влияет на ранжирование сайта прямо, но поисковые системы могут использоваться его содержимое для сниппета сайта при выдаче.

25) Длина description может быть от 100 до 250 символов, оптимально - 155 символов. Обычно это одно-два осмысленных предложения для описания страницы, включая поисковые запросы.

26) Укажите в head метаданные по Open Graph Protocol для правильного представления сайта в социальных сетях.

27) Добавьте в корневую директорию фавикон сайта.

28) Стили и скрипты должны загружаться в head отдельными файлами.

29) На странице может быть только один заголовок h1.

30) Заголовок h1 не должен копировать title.

31) Заголовок h1 может содержать от 1 до 7 слов и должен включать точное вхождение главного поискового запроса. Например: Займ под залог комнаты.

32) Старайтесь не использовать вложенные теги в теге h1 (например, span, em, a href и т. д.).

33) Соблюдайте последовательность заголовков h2-h6 и включайте в них остальные ключевые слова. Теги h2-h6 должны использоваться только для разметки SEO-текстов.

34) Используйте семантическую вёрстку (для параграфов - p, а не div), старайтесь включать ключевые слова в списки, таблицы, картинки (теги alt, title), выделения (em, strong).

35) Атрибуты alt и title для картинок должны отличаться. Alt - это альтернативный текст для картинки, если она не загрузилась. Title - это заголовок картинки, который всплывает при наведении на картинку, а также выходит в поиске.

36) Добавьте на сайт микроразметку Shema.org . Валидатор микроразметки в Яндекс.Вебмастере .

37) Если вы планируете переезд сайта на https, почитайте эту .

Аудит коммерческих факторов

38) Коммерческие факторы важны для коммерческих сайтов.

39) На сайте должны присутствовать контакты:

• телефоны,
• онлайн-консультант,
• обратный звонок,
• адрес, схема проезда,
• график работы.

40) Разместите на сайте юридическую информацию:

• договор-оферту, условия оказания услуг,
• реквизиты компании,
• условия обмена/ возврата,
• условия доставки.

41) Разместите на сайте ассортимент:

• прайс-лист,
• количество товаров в наличии,
• скидки, акции.

42) Добавьте информацию, которая вызывает доверие:

• отзывы,
• портфолио (примеры работ),
• видео,
• вакансии.

43) Разместите электронную почту на своём домене (например, [email protected]).

44) Если на сайте публикуются новости, следите за их обновлением.

45) В копирайте (с) укажите текущий год.

46) Стремитесь, чтобы дизайн сайта был современным и адаптированным для мобильных устройств.

Подбор семантического ядра

Подбор семантического ядра - это большая тема, которая заслуживает отдельной статьи. Здесь мы остановимся на основных принципах.

47) Прежде, чем перейти к подбору семантического ядра, необходимо понять, какие бывают типы пользовательских запросов и по каким запросам вы будете продвигать сайт:

• Навигационные (брендовые) запросы - поиск конкретного сайта или места в сети интернет. Обычно по таким запросам сайты находятся на первом месте, и продвижение не нужно.
• Информационные запросы - поиск информации, неважно на каком сайте (например, как лечиться от простуды).
• Транзакционные запросы - пользователь хочет совершить какое-то действие («скачать», «купить» и т. д.). Коммерческие запросы всегда являются транзакционными. Но не все транзакционные запросы являются коммерческими (например, «скачать бесплатно»).

Коммерческие страницы (интернет-магазины, сайты компаний) нужно продвигать по коммерческим запросам, информационные (форумы, блоги, статьи) - по информационным.

48) Определить, каким является запрос, информационным или транзакционным, можно при помощи поиска. Введите фразу и посмотрите на результат поисковой выдачи. Если там в основном информационные статьи, то запрос информационный, если коммерческие страницы - то коммерческий.

Всем хочется, чтобы опубликованные материалы мгновенно попадали в индекс и сразу же приводили посетителей. Особенно это актуально при продвижении в Яндексе, которому порой требуется несколько апдейтов для индексации новой страницы. А что если за это время истечет актуальность статьи? Получается, что вы зря потратили ресурсы на ее создание. Если вы хотите, чтобы статьи уже спустя пару часов после публикации были доступны в поиске, следуйте представленным ниже советам.

Почему не индексируется сайт?

Проблемы с индексацией сайта бывают трех типов:

• страницы долго индексируются (зачастую причина - в низкой частоте обновления контента на сайте, и робот просто реже его посещает; также проблема может крыться в плохой SEO-оптимизации, некачественном контенте и сайте в целом);
• страницы не индексируются ни Яндексом, ни Google (в этом случае нужно убедиться, что не установлен запрет на обход площадки роботами в robots.txt , настройках хостинга или в мета-тегах robots);
• страницы не индексируются только одним поисковиком (стоит проверить сайт на фильтры поисковых систем).

Последние две проблемы устраняются или очень легко (если нужно просто разрешить индексацию страниц) или очень долго (если придется выводить сайт из-под санкций Яндекса или Google). В этой же статье рассмотрим именно способы ускорения индексации.

Способы ускорения индексирования сайта поисковиками

1. Улучшите внутреннюю SEO-оптимизацию

Сделайте внутреннюю перелинковку

В теле статей ставьте ссылки на другие страницы сайта. Также добавьте похожие записи (в конце статей) и популярные или новые записи (в сайдбаре). Не делайте более 3-4 уровней вложенности - страницы на 5 и 6 уровне индексируются хуже.

Хотите научиться расставлять внутренние ссылки так, чтобы улучшить поведенческие показатели и позиции в поиске? В статье «Как сделать перелинковку для успешного SEO и роста конверсий » описаны все самые эффективные подходы.

Пишите полезные и уникальные тексты

Если вы размещаете плагиат или поверхностный рерайт, то не удивляйтесь, что страницы не попадают в индекс. Поисковики считают такой контент дублирующимся и не несущим ценности для пользователей. О том, какими должны быть грамотно оптимизированные тексты для сайта, читайте .

Чаще публикуйте записи и обновляйте страницы

Поисковики любят «живые» сайты. Если несколько месяцев ничего не размещали, то робот перестает регулярно посещать сайт.

Как поддерживать актуальность сайта:

• публикуйте новые записи не реже 1 раза в неделю;
• добавляйте ссылки со старых страниц на новые материалы;
• актуализируйте и обновляйте информацию на сайте;
• настройте заголовки Last-Modified и If-Modified-Since (так поисковики будут обходить старые страницы только после внесенных на них изменений).

Устраните дубли на сайте

Дубли создают не только неудобства для вебмастеров, но и ухудшают качество сайта в глазах поисковиков. Они могут быть:

• явными (URL со слешем в конце и без него, с WWW и без WWW, с HTTP и HTTPS, с GET-параметрами);
• неявными (дубли страниц с комментариями, страницы товаров со схожими описаниями, страницы пагинации).

Устраняются они путем настройки 301 редиректа , указания канонических страниц , с помощью robots.txt. Все способы с примерами описаны в статье «Что такое дубли на сайте и как с ними бороться?» .

2. Используйте инструменты для вебмастеров

После запуска сайта обязательно зарегистрируйте его в панелях для вебмастеров: в Яндекс.Вебмастере и Google Search Console. Так вы сообщите поисковикам о появлении нового сайта, сможете отслеживать динамику индексации, будете получать уведомления об ошибках.

После создания новой страницы или обновления старой необходимо уведомить об этом поисковики, чтобы ускорить индексацию (переиндексацию). Делается это с помощью так называемых «аддурилок» (от англ. «add URL» - «добавить URL»).

В Яндексе этот инструмент находится в Вебмастере (раздел Индексирование / Переобход страниц). Введите новый URL и нажмите «Отправить».

«Аддурилка» Яндекса

До изменения в 2018 году интерфейса Search Console в Google был инструмент, который позволял добавлять любую страницу для переобхода. До сих пор в сети «висит» масса статей со ссылками на этот инструмент и описанием его работы, но он больше не поддерживается .

Старая «аддурилка» Google

Новые страницы в Google уже не нужно куда-то добавлять для индексации - достаточно того, чтобы они были в sitemap.xml. А вот старые страницы, на которых вы изменили контент, можно переиндексировать быстрее. Для этого перейдите в новый интерфейс Search Console в раздел «Проверка URL», введите адрес интересующей страницы и нажмите кнопку «Запросить индексирование». Это сигнал роботу обойти страницу вне очереди.

Данные действия - не гарантия попадания страницы в индекс или ускорения процесса (сами же поисковики ничего не обещают). Но поскольку такие инструменты есть, ими грех не воспользоваться.

3. Добавьте сайт в RSS-каналы, каталоги, рейтинги и соцсети

RSS-каналы и топовые каталоги хорошо индексируются поисковыми системами, и если в них будут ссылки на ваш сайт, то повысится вероятность быстрой индексации.

Добавьте сайт в бесплатные RSS-агрегаторы:

• liverss.ru
• rssreader.ru
• feeds.feedburner.com

• top100.rambler.ru
• top.mail.ru
• liveinternet.ru

4. Используйте пинг-сервисы

С помощью пинг-сервисов вы уведомляете поисковые системы о появлении новых страниц на сайте. В интернете можно найти громадные списки пинг-сервисов, и многие используют сразу все. Это ошибка. В данном случае принцип «чем больше, тем лучше» не работает. Достаточно 5-7 сервисов:

Пример списка пинг-сервисов для блога на WordPress

Практика показывает, что использование пинг-сервисов ускоряет индексацию - особенно это заметно в случае с молодыми сайтами, которым меньше 6 месяцев.

5. Нарабатывайте «жирные» ссылки

Чем больше будет ссылок на ваш ресурс с авторитетных площадок, тем лучше. Это повысит значимость сайта в глазах поисковиков. Проблема в том, что на «добычу» естественных ссылок нужны годы.

Ускорить процесс можно, сотрудничая напрямую с вебмастерами с целью интеграции ссылок на трастовых ресурсах. Найти релевантные площадки можно с помощью модуля PromoPult - достаточно добавить сайт, и система самостоятельно подберет ключи, посадочные страницы и внешние ресурсы.

Если у вас возникнут вопросы, то всегда можно воспользоваться услугой - специалист проведет аудит сайта, будет регулярно высылать рекомендации по его улучшению и отвечать на возникающие вопросы.