Техническая оптимизация. Дубликаты и клоны

Техническая оптимизация сайта – полный перечень технических доработок. Вывод сайта в ТОП-10 PS Google and Yandex. Корректировка и исправление существующих ошибок, которые могут повлиять на продвижение сайта в поисковых системах. Без проведения грамотной технической оптимизации и доработок, эффективность направленных на продвижение действий сводиться к нулю. Давайте рассмотрим все необходимые действия, которые необходимо учесть.

Содержание статьи:

Техническая оптимизация и доработка сайта

Комплекс мер, направленных на корректную доработку важных технических аспектов сайта. Основной целью которых является:

Полноценное индексирование в поисковых системах.
Правильное ранжирование документов.
Простая эффективная структура! Которая позволит поисковому боту, быстро достичь нового документа и понять его.
Грамотная структура – удобство переходов между страницами.
Навигация для лучшего взаимодействия пользователей с необходимой информацией. Позволит посетителю быстро найти нужный документ.

Правильно проведенная работа над ошибками, позволит значительно улучшить показатели сайта. Поспособствует:

Быстрой индексации страниц сайта;
Значительному улучшению позиций большинства страниц;
Уменьшению показателя отказов;
Приросту аудитории;
Равномерному распределению веса между документами;
Уменьшению времени отклика и прочих немало важных аспектов. Влияние которых зависит от технической оптимизации сайта.

Техническая оптимизация сайта: полный чек – лист

Важно понимать, что все ваши действия должны начинаться именно с начала. Двигаясь только в перед до конечных вариантов ошибок. Которые не оказывают серьезного влияния на сайт. Некорректное внесение исправлений в код или прочие элементы сайта, может привести к фатальным ошибкам. Обдумайте и проверьте все доработки несколько раз, прежде, чем внести изменения на работающем сайте.

Оптимизация работы хостинга и сервера

Хостинг оказывает одно из самых критических влияний на сайт. Плохое программное обеспечение или низкое количество выделенных ресурсов для работы. Приведет к серьезным последствиям на сайте.

Установите качественное программное обеспечение или готовый хостинг.
Обеспечьте достаточное кол-во выделенных ресурсов для сайта. Объемы памяти RAM, HDD, SSD.
Следите за актуальность версий, программного обеспечения хостинга – PHP, баз данных и прочих.
Абсолютно все страницы сайта, должны отдавать код ответа сервера 200 ОК.

Помочь могут следующие сервисы:

Google PageSpeed;
Инструменты Pingdom;
GTmetrix;
Яндекс веб-мастер.

Установка и настройка необходимых 301-редиректов и кодов ответа для избежания дублей страниц

Такие меры нужны для корректного указания основного зеркала сайта. Правильной обработки 404 ошибок и уменьшению дублей документов сайта в поиске.

301 – редирект с “www” (или без “www”) на основное зеркало сайта.
301 – редирект с других зеркал на основное (если таковые имеются).
Настройте 301 – редиректы на URL со слешем “/” в конце или наоборот без него.
Обязателен 301 – редирект с “http” на “https” или наоборот, зависит от версии сайта. Редирект поможет избежать дублирования контента.
Создание страницы 404 – для несуществующих URL. Такая страница должна передавать код ответа 404 Not Found . Страницу 404 оформляют под дизайн проекта, а также организуют удобную структуру на ней. Это позволит посетителям быстро отыскать информацию на сайте, а не покидать его.

Оптимизация скорости загрузки сайта – HTML, CSS, JS и графики

В 2019 году скорость загрузки сайта, будет также востребованной поисковиками. Влияние этого показателя на ранжирование сайта одно из самых значимых в поисковом продвижении.

Оптимизируйте Html код страниц – проверьте верстку на отсутствие незакрытых тегов. Это хорошо улучшит валидность документа. Html код должен быть чистым и иметь небольшой вес.
CSS и JS – значительно влияют на скорость загрузки документа. Их нужно сжать и объединить как отдельные подключаемые файлы. Так увеличится скорость их обработки и загрузки визуальных элементов в браузере.
Оптимизация графики – картинки нужно с начало обработать и сжать перед загрузкой на сайт. Будьте внимательны и следите за качеством изображения после сжатия.
Ответ сервера должен быть в пределах 0.200 мс.
Общее время загрузки сайта не должно превышать 0.700 мс.

Организация качественной структуры сайта, навигации и правильных ЧПУ

Структура сайта и его навигация значимый фактор. Он влияет на показатели отказов, индексацию и передачу веса между страницами.

Структура сайта должна быть простой и иметь глубину не более 4 кликов. Пользователю должно быть удобно перемещаться по страницам.
Создайте главное меню для обеспечения доступа к основным разделам.
Сделайте перелинковку между страницами.
Используйте метки и постраничную навигацию.
Добавьте дополнительную страничку, имеющую всю структуру проекта. Так посетитель быстро отыщет важную информацию. А ПС – бот быстро проиндексирует новый контент.
Настройка ЧПУ сайта – такие url, должны полностью отображать смысл заголовка страницы и быть понятными человеку.
Рекомендуется использовать rel=“canonical”, для избавления от большинства дубликатов контента сайта. Позволяет указать поисковикам на оригинал документа. Таким образом, все копии оригинала страницы не будут учитываться поисковой системой.

Файлы robots.txt, sitemap.xml и.htaccess

Инструкции прописанные в этих файлах, помогут П – боту корректно индексировать страницы проекта. Все три файла должны находится в корневой директории.

Robots.txt – позволяет указать правила индексации многочисленным поисковикам. В этом файле устанавливают запреты на служебные разделы, страницы дубли, поиск и прочие.
Sitemap.xml – необходим для быстрой индексации. Должен иметь полную идентичную структуру сайта. Обеспечивая быстрый обход П – ботом новых или измененных страниц.
.htaccess – позволяет указать правила для сервера. Неправильно прописанные правила! Приведут к фатальным ошибкам с серверной стороны! Этот файл позволяет сделать следующее:
- в.htaccess можно указать большинство правил переадресации на сайте;
- настроить сжатие большого количества форматов файлов со стороны сервера;
- установить правильное хеширование документов в браузерах;
- установить некоторые правила безопасности;
- и прочие.

К таким рекомендациям можно отнести действия, которые несут второстепенный характер. Но несут не мало важную роль в оптимизации сайта. Эти дополнительные доработки, также улучшат ранжирование сайта и поведенческие факторы.

Тег h1 единственный и не может повторяться на странице.
H1-h6 не должны быть элементами стилистического оформления и дизайна.
На страницах находятся только полностью уникальные теги Title и Description. Которые отражают суть страницы.
Создайте привлекательный Favicon.
Внешние ссылки, должны открываться в новой вкладке.
Закройте от индексации страницы входа в админку. Директивой Disallow в файле robots.txt.
- Также это касается служебных папок: cgi-bin, wp-icnludes .
- Страниц регистраций, входа: register=, logout= .
- Результаты поиска: search .
- Rss избегая дублирования контента: feed”, wp-feed .
Используйте дополнительное меню в статье “Содержание”, для навигации в статье.
Сайт должен иметь оптимизированную мобильную версию.
Необходима версия AMP – для мобильного поиска.
Также рекомендуется настроить TURBO страницы, для поисковой системы Яндекс.
Шрифт документа должен быть виден пользователю.
Избегайте большого количества выделений в тексте .
Не ставьте большое количество рекламных блоков на сайте. Поисковые системы могут негативно отреагировать на кучу рекламы, как в прочем и пользователи.

Это были все самые нужные доработки сайта. Надеюсь эта статья будет Вам полезна.

Читайте статьи по этой теме:

Эта статья посвящена технической оптимизации сайта. Из статьи вы узнаете, зачем нужна техническая оптимизация сайта, что именно в неё входит и какие инструменты мы можем использовать. С сайтом постоянно взаимодействуют пользователи и поисковые системы. И нам нужно наладить это взаимодействие, чтобы оно происходило как можно быстрее, и без ошибок. Другими словами, нам нужно избавиться от ошибок взаимодействия, ускорить процесс, отдавать только нужные страницы.

Если мы говорим про индексацию, мы не можем сказать, что техническая оптимизация сайта — это какой-то спектр работ, который сильно улучшит ранжирование сайта в поисковой системе. Но это такая база, без которой сложно будет что-то делать дальше. То есть технические ошибки могут мешать дальнейшему продвижению. И так как мы говорим о взаимодействии с сайтом, то это в первую очередь процесс краулинга.

Коды статуса

Поисковая система может видеть не только код страницы, но и http заголовки. Одним из важных элементов http заголовков являются коды статусов. Кодов статусов очень много, но нам важно знать только 6 основных кодов статуса.

200 означает OK, можно индексировать.
400 — not found — страничка не найдена. Значит индексировать нельзя.
301 код статуса означает постоянный редирект и для поисковика это инструкция оставить новую страничку в Яндекс, заменив ею старую.
302 код статуса в отличие от 301 — это временный редирект. Поисковик в этом случае оставит два урла в выдаче и будет показывать тот, который имеет более короткий урл.
304 код статуса значит not modified — контент не изменился. И таким образом просто не будет происходить переиндексация контента.
503 код статуса — это сервис временно недоступен. Полезен, когда мы проводим технические работы. Поисковик будет знать, что нужно зайти позже.

Как проверять коды статусов?

Для чего необходимо проверять коды статуса при технической оптимизации сайта? Все очень просто: вам нужно точно знать, какие страницы работают, а какие нет. Для разных страниц сайта есть несколько инструментов. Первый — это браузерный инструмент. Один из удобных — это инструмент в Google Chrome, хотя он есть во всех браузерах. Чтобы его найти, надо зайти в инструменты разработчика, далее в меню “дополнительные инструменты разработчика” и здесь вкладка Network (сеть). Здесь мы можем получить все запросы, которые идут к сети и первый запрос — видим код статуса 200. В данном случае все хорошо.

Этот инструмент удобно использовать, когда мы смотрим конкретные странички через браузер.

Кроме браузерных инструментов существуют онлайн чекеры, которые можно найти по запросу “чекеры http заголовков” или “проверка кода ответа сервера”. В обоих случаях показывается ряд инструментов, которые можно использовать онлайн.

Еще одним интересным инструментом для проверки кода ответа сервера, который удобно использовать, является Telegram-bot @httpstatusbot. Если вы используете Telegram, то просто отправляйте урл, и он отдает в ответ какой код статуса у страницы.

Существует также большой набор различных инструментов. Когда вам необходимо проверить коды статусов сразу всех страниц вашего сайта и найти битые ссылки, редиректы, ошибки и еще что-то. В этом случае можно использовать несколько известных сервисов.

Сразу понять, какой инструмент вам подойдет больше, достаточно сложно. Поэтому можно скачать все эти программки, попробовать их использовать и выбрать для себя более удобный инструмент.

Оптимизация скорости загрузки

Техническая оптимизация скорости загрузки сайта — это очень обширная тема, которая будет рассмотрена в отдельной статье. А сейчас только упомянем несколько инструментов и обсудим пару моментов, что можно оптимизировать.

Для того, чтобы сайт работал быстрее, важны:

размер и количество файлов, количество запросов, которые идут к серверу после того, как страничка загрузилась, количество скриптов, стилей, картинок и размеры этих файлов. Понятно, что чем меньше, тем лучше.
Также важна удаленность сервера: чем ближе сервер находится к вашей целевой аудитории, тем лучше.
Наличие кэширования клиентского и серверного.
Использования http2 протокола.

Эти четыре пункта являются основными для оптимизации скорости.

Как измерить скорость загрузки?

Для измерения скорости загрузки при технической оптимизации сайта можно рекомендовать несколько инструментов.

GTMetrix — очень удобный инструмент, проверяет скорость загрузки и выдает ряд рекомендаций. Здесь мы видим общую статистику, во вкладках будут рекомендации от сервиса Page Speed, YSlow и WaterFall. В последнем есть полезный график, где мы видим последовательность загрузки элементов и как быстро они загружались.

Второй инструмент — Pingdom Tools, который показывает похожую статистику.

Этих двух инструментов часто достаточно для анализа скорости загрузки, еще можно использовать PageSpeed Insights. И еще один инструмент — Load Impact, который измеряет не скорость загрузки, а то, как сервер выдержит нагрузку, если вы вдруг станете популярным сайто.

Что еще проверить при технической оптимизации сайта?

При технической оптимизации нужно проверить несколько технических моментов на сайте. Например, что ссылки на сайте имеют текстовый формат, а контент открыт для индексации. Что значит контент открытый индексации? То есть не используется JavaScript для отображения контента, не используется Flash, а ссылки не является, допустим, картинками, а являются текстом. Это очень важный пункт для того чтобы сайт в принципе индексировался.

Проверьте, что на сайте используется корректная кодировка. Это редкая ошибка, но, тем не менее, иногда встречается.

На сайте должна присутствовать 404 страница, которая отдает 404 код статуса. Несмотря на то, что страничка такая не существует, здесь мы тоже можем взаимодействовать с пользователем и рекомендовать ему что-то другое, чтобы задержать его на сайте, а не отпустить обратно.

На сайте также должно быть минимум дублей и малоинформативных страниц. Существует несколько способов поиска дублей, но один из простых — это можно опять же использовать вышеуказанные программы. Также дубли можно находить при помощи инструментов сайтрепорт (это онлайн сервис, который работает по принципу парсера, но не с вашего компьютера, а со своих серверов), с помощью панели вебмастеров, парсеров, аналитикс и пр. Обычно это отдельная и очень объемная задача, так как надо хорошо понимать структуру сайта.

Также необходимо проверить использование канонических тегов на всех страничках сайта, которые избавляют как раз от присутствия дублей. Еще в технической оптимизации можно проверять наличие https версии сайта, мобильной или адаптивной версия.

Итак, подытожим. При технической оптимизации нам важно проверять http коды статусов, скорость загрузки, различные технические элементы. Для проверки можно использовать различные инструменты. Кроме этого, очень сильно пригодится панель для мастеров яндекс или гугл. В них присутствует много полезной информации как раз по техническим вопросам.

Сегодня тема разговора в блоге – оптимизация сайта, и есть конкретный пример, на котором можно объяснить, в чем заключается эта оптимизация и что вообще требуется от сайта, чтобы он был в Интернете хорошо видимым, на первых страницах выдачи, приводил клиентов из поисковых систем.

Ко мне обратился человек, который искал оптимизатора для вывода ресурса ни больше ни меньше как в ТОП3. Такая постановка вопроса насторожила: раньше для быстрого вывода в ТОП искали продвиженцев. А те уже «продвигали», как время показало, прямо в бан, потому что использовались недозволенные методы.

Выяснилось, что владелец бизнеса ориентируется в этих вопросах и понимает, что ситуация в Интернете кардинально изменилась. Нужен ему был именно оптимизатор, который выведет в ТОП. Проведя экспресс-аудит, поняла, что создателей сайта совершенно не заботила никакая оптимизация или это не входило в пакет при разработке, что в корне неправильно, и сейчас вы поймете, почему.

Техническая оптимизация сайта

Во-первых, страницы на компьютере очень медленно загружались, а должны – быстро. На мобильных не проверяла, но и задачи такой не стояло на данном этапе, хотя мобильность (и скорость, и удобство) – очень существенный момент в технической оптимизации. Бросилось в глаза, что вместо ссылок краказябры. А они должны быть удобочитаемыми. Следующее: нарушена иерархия страниц. Каталоги созданы, а все страницы идут во втором уровне, минуя каталоги. Исправление этой ситуации приведет к смене url-адресов, а значит, к переиндексации страниц, на что требуется время. В Яндексе, например, это может происходить очень долго. Отсутствуют мета-теги, но семантическое ядро якобы составлялось.

Оптимизация сайта под Яндекс

От определения того, под какую поисковую систему должен оптимизироваться веб-ресурс, зависят методы работы над ним. Поисковые системы отличаются не только принципиально, но и аудиторией, которая предпочитает пользоваться какой-то одной. В Яндексе своеобразный алгоритм ранжирования. Роботы собирают информацию в своем режиме, но сразу ее не показывают. Обновление текстовой поисковой базы происходит с интервалами примерно в неделю, ссылочной, а теперь и поведенческого фактора — еще реже. Качество сайта по всем своим показателям влияет на то, на какой позиции он окажется в результате очередного апдейта.

Задача Яндекса выбрать из множества площадок несколько тех, которые, на его взгляд, более точно отвечают на запрос, и показать их на первых страницах. Он лоялен к хорошим ресурсам. Вебмастерам дана возможность пользоваться рядом инструментов для быстрой индексации. Важная деталь та, что в Яндексе достаточно быстро присваивается регион, если геотаргетинг настроен на город или регион. Это большой плюс для тех, кто ведет бизнес на определенной территории. Поднять качество сайта до необходимого уровня для продвижения под Яндекс могут специалисты, имеющие знания и опыт и демонстрирующие результат.

Оптимизация под Google

Мое мнение такое, и, уверена, многие со мной согласятся: даже при выборе приоритетной поисковой системой Яндекс влиятельность Google умалять не стоит. Здесь и Alexa, собирающая статистику всех веб-ресурсов Интернета, представляющая информацию по многим показателям и ведущая глобальный рейтинг. В итоге, в «паутине» все взаимосвязано.

Тематика и география – основные критерии, которые нужно брать за основу при выборе оптимизации под Google. Но чтобы она была успешной, придется подстраиваться и под его требования. Например, большое значение имеет вес определенной страницы. Считается, что молодой сайт может быть в ТОПе Гугла по определенному запросу, обращенному к конкретной странице. Есть способы увеличить ее CTR. Роль играет объем контента, его уникальность (и не только та, которая выражается в проценте совпадений слов и фраз, если это текст), понятные сниппеты, микроразметка и прочее.

Все знают, что роботы Гугла всеядные. Они индексируют все, что видят, даже игнорируя установленные запреты. И вот здесь могут возникать проблемы с дублями страниц. Тонкий момент, требующий понимания, как этого не допускать. Кстати, Google первый начал яростную борьбу с такими методами продвижения, как массовая закупка ссылок, выкидывая за борт провинившихся и освобождая места в рейтинге, получается, достойным.

Юзабилити

Посетителю в нашем виртуальном офисе должно быть удобно, интуитивно понятно, как перейти с одной страницы на другую, глазу приятно. В первую очередь это касается навигации. Время пребывания на каждой странице фиксируется роботами. Когда это значение маленькое даже на внутренних переходах (до 15 секунд), увеличивается показатель отказов. Из таких малюсеньких факторов складывается авторитетность сайта. Можно загрузить красивые картинки, но если текст сформатирован неправильно, будут раздражать огромные или мелкие шрифты, нелогичные отступы абзацев. Гигантские шрифты заголовков могут оказаться не только изъяном в дизайне, но и нести прямую угрозу сайту, если множество раз использованы теги H1-H3. Существуют определенные нормы, при превышении которых страница будет считаться переоптимизированной. В приведенном мной примере сайта тегами регулировались пиксели, а ведь это настраивается в CSS.

Внешняя оптимизация сайта

К внешней оптимизации можно переходить лишь тогда, когда на веб-ресурс не стыдно пригласить друзей из социальных сетей, разместить со ссылкой на него пресс-релиз или что-то подобное на трастовой площадке. Мой «пациент» был явно не готов, но и исправить абсолютно все мне было не под силу, например, настроить кеширование. Оптимизация напрямую зависит от знаний языка программирования, технических. Показала сначала одному своему коллеге. Ответ после осмотра был таким: «У клиента столько денег нет, сколько там нужно всего исправлять». Не взялся.

Мы же все хотим в ТОП? Конкуренция должна быть здоровой. Поисковики создали нам все условия к тому, чтобы мы занимались своими сайтами, совершенствовали их, улучшали. Надлежащая техническая оптимизация сайта, особенно коммерческого, поможет подняться на несколько позиций, а то и вообще вырвет из небытия. И это вложение в бизнес выгодное, потому что теперь без представительства в Интернете бизнеса просто не может существовать.

– это с одной стороны набор знаний и навыков технического спектра в поисковой оптимизации сайтов, то есть, грубо говоря, это знание о том, где и что надо добавить, убрать, прописать, чтобы сайт лучше оценивался поисковиками, с другой стороны, это целостный продукт, предлагаемый для покупки, своего рода «оптимизация под ключ».

Техническое SEO как область знания об оптимизации

Техническое SEO в широком смысле набор навыков, позволяющий реализовать из просто идеи о том, как это должно быть, в готовый план, а потом и исполнить этот план по пунктам. То есть если рассматривать оптимизацию через призму:

Идея того как должен выглядеть сайт, удовлетворяющий поисковики и пользователей
План оптимизации
Реализация каждого пункта плана

То техническое seo в широком смысле – это обеспечение корректного проявления последнего пункта.

Как бы не рассматривать техническое seо, в широком или в узком смысле, нельзя уйти от темы субъектности специалиста, который эту оптимизацию осуществляет . При употреблении эпитета «технический» может начать казаться, что речь идет об объективном продукте или знании. В общем-то, это действительно так, но если речь идет о техническом seo как о продукте, то вмешивается сугубо человеческое представление об оптимизации и, в каком-то смысле, о корпоративном устройстве поисковых компаний. Этот аспект будет рассмотрен в следующем разделе.

Здесь же можно коротко упомянуть те аспекты, о которых нельзя забывать при технической оптимизации сайта:

Заголовки Н1 и подзаголовки Н2

Какие неочевидные технические ошибки могут быть найдены при проведении SEO-аудита :

Техническое SEO как продукт

В более узком смысле технической оптимизацией является продукт, предлагаемый различными фирмами-оптимизаторами . Суть продукта заключается в том, что покупателю предлагается в одной «упаковке» seo-аудит, исправление всех технических ошибок, а также рекомендации по дальнейшим действиям в развитии сайта. Вообще, речь о подобной услуге как о целостном продукте возможна исключительно в силу несовершенства протекания бизнес-процессов и коммуникации между людьми на разном уровне: у каждого человека, работающего с сайтом есть какие-то свои представления об идеалах (одни споры между дизайнерами и программистами чего стоят). И надо всеми этими работниками должен стоять некто, именуемый специалистом по технической оптимизации сайта и направлять всю работу в нужное русло. Когда техническая оптимизация начинает рассматриваться как продукт, то тут уже включается человеческое представление оптимизатора. То есть, грубо говоря, оптимизатор может знать все технические аспекты и при этом быть приверженцем исключительно белых методов, знать всё про написание контента и совмещать в себе контент-маркетолога и поискового оптимизатора, тогда продукт «техническое seo» будет иметь один вид, а может быть приверженцем своего рода теории заговора поисковых компаний, которые, дескать, не дают оптимизаторам зарабатывать на кусок хлеба, и постоянно вводят фильтры и банят за линкопомойки . И вот именно тут и происходит разделение на продажу специалистов технического seo различного рода. И как для клиента, так и для оптимизатора важно найти своего рода своего специалиста/клиента. Потому что если оптимизатору, которого можно условно отнести в разряд контент-маркетологов, придется работать с клиентом, желающим «сделать без напряга и просто продвинуть», то это будет очень тяжелый заказ, при исполнении которого 90% времени уйдет на переубеждение клиента, если он вообще будет переубеждаем и может просто закончиться расторжением сотрудничества. Если же к клиентам, которые не против контентной работы придет «покупатель ссылок», то такое сотрудничество в конечном счете будет невыгодно клиентам, которых будут уговаривать вкладывать деньги в ссылки ежемесячно, а потом еще и доставать сайт из-под фильтров.

Где применяется техническое SEO

Техническая поисковая оптимизация сайта как набор знаний о том, как же проводить оптимизацию применяется, как уже несложно догадаться, везде. То есть, это именно знание как, что и где конкретно заполнить, записать или настроить переадресацию, чтобы поисковик правильно понял структуру сайта, проранжировал документы, проиндексировал страницы, а посетитель не запутался во всем этом и легко находил интересующую его информацию на сайте. Ни один человек, занимающийся оптимизацией сайта, хоть на уровне самостоятельного раскручивания, хоть на уровне профессии не может обойтись без знаний того, как именно проводить все манипуляции. Рассматривая же техническую поисковую оптимизацию как продукт, предлагаемый на рынке, можно увидеть, что наиболее выгоден он сайтам, с большим количеством автоматически генерируемых страниц, таким как интернет-магазины, в которых некорректность, зашитая в одном месте, может испортить огромное количество страниц, наследующих установки и настройки . Наибольший «выхлоп» в грамотном применении технической стороны знаний об оптимизации проявится именно для таких клиентов. Но в любом случае техническая оптимизация является неотъемлемой частью при продвижении любого сайта, какую бы форму он не имел, и на какую бы аудиторию не был рассчитан.

Эффективному SEO может помешать всего лишь одна досадная ошибка в технической оптимизации сайта, но это приведет к тому, что роботы ПС не смогут правильно индексировать ресурс, понять структуру сайта, а пользователи не найдут необходимую для них информацию. Все это, в свою очередь, приведет к низкому ранжированию сайта.

Техническая оптимизация сайта - это комплекс мер, которые направлены на корректировку технических аспектов ресурса с целью улучшения его взаимодействия с роботами поисковых систем. Техническая оптимизация позволяет обеспечить быструю и максимально полную индексацию страниц сайта.

5 основных параметров технической оптимизации

1. Файл robots.txt

Важно отметить, что файл robots.txt должен содержаться в корневой директории каждого ресурса. Это первый файл, к которому обращаются роботы ПС, когда заходят на сайт, и в котором хранятся инструкции для них.

В этом файле указаны параметры индексирования сайта: какие страницы следует заносить в поисковую базу, а какие нужно исключить. Помимо этого, в нем можно указывать директивы как для всех роботов поисковых систем сразу, так и для роботов каждой ПС в отдельности. Про составление данного файла и его настройку можно подробнее узнать на сайте помощи веб-мастерам Яндекса.

Проверить файл можно в сервисе Яндекс.Вебмастер , пункт меню «Анализ robots.txt» (https://webmaster.yandex.ru/robots.xml).

2. Sitemap - карта сайта

Карта сайта - одна из страниц ресурса, информация на которой аналогична содержанию обычной книги. Эта страница используется как элемент навигации. В карте сайта содержится полный перечень разделов и/или всех страниц, размещенных на ресурсе.

HTML-карта сайта нужна пользователям для быстрого и удобного поиска информации, а XML - поисковикам для улучшения индексации сайта.

С помощью карты сайта поисковые роботы видят всю структуру и быстрее индексируют новые страницы.

Проверка карты сайта (https://webmaster.yandex.ru/sitemaptest.xml)

Пример корректной карты сайта в формате.html:

3. Редиректы (перенаправления)

Редирект применяют для перенаправления посетителей ресурса с одной страницы на другую. Примеров, для чего нужны редиректы, достаточно много:

Смена доменного имени сайта.
Переклейка зеркал. У многих сайтов не настроен 301 редирект с домена, который содержит www в адресе, на домен без www, или наоборот.

Проставлять редиректы необходимо в файле.htaccess. Так как поисковые системы site.ru и www.site.ru могут считать разными сайтами, то в выдачу могут попадать дубли. Это создаст сложности с ранжированием в выдаче и т. д.

Основные статус-коды редиректов:

300 - Multiple Choices (несколько вариантов на выбор);
301 - Moved Permanently (перемещено навсегда);
302 - Temporary Redirect (временный редирект);
303 - See Other (затребованный ресурс можно найти по др. адресу);
304 - Not Modified (содержимое не изменялось - это могут быть рисунки, таблицы стилей и т. п.);
305 - Use Proxy (доступ должен осуществляться через прокси);
306 - Unused (не используется).

Полезный сервис для определения откликов страниц: http://www.bertal.ru/

4. Настройка видов URL-страницы

Важно проверить сайт на единообразие адреса всех его страниц. Например, на всем сайте страницы должны иметь закрывающий слеш: http://site.ru/katalog/ и http://site.ru/products/ . Если часть страниц имеет вид http://site.ru/katalog , а часть - http://site.ru/products/ это неверно.

Проверить адреса внутренних страниц ресурса на ошибки будет удобно после создания карты сайта.

5. Ошибки сайта

Во время загрузки любой страницы сайта посылается запрос серверу, который отвечает кодом статуса HTTP и загружает (или не загружает) страницу.

Основные статус-коды:

200 - со страницей все в порядке;
404 - несуществующая страница;
503 - сервер временно недоступен.

«404 ошибка» - один из наиболее важных технических параметров оптимизации, по которому обязательно следует проводить доработку.

Если страница существует, а сервер при ее запросе информирует о 404 ошибке, то страница не будет проиндексирована поисковиками. Иначе в индекс может попасть большое количество страниц с одинаковым текстом, что крайне негативно влияет на ранжирование.

Проверить коды статусов можно с помощью http://www.bertal.ru/ или Яндекс.Вебмастера.

Мы рассмотрели только основные параметры технической доработки сайта, на которые нужно обращать внимание в первую очередь. Если Вы обнаружите подобные ошибки на своем сайте или возникнут сложности с их устранением, обращайтесь только в профессиональную SEO-компанию.