SEO-продвижение сайтов

Прежде чем заниматься продвижением сайта, важно понять, как работает сам поиск в интернете. Поисковые системы собирают информацию из разных источников, находят сайты и определяют, какие из них показать первыми. После того как человек вводит запрос, система обрабатывает его и формирует результаты.

В этом разделе вы узнаете, что такое поисковые системы, как они находят и анализируют информацию, а также как выглядит страница с результатами поиска. Эти знания помогут заложить прочную базу перед тем, как перейти к изучению SEO.

1.1. Поисковые системы

Поисковые системы представляют собой специальные сайты и программы, которые помогают людям находить информацию в интернете.

Когда вы вводите какое-то слово или вопрос в поисковую строку, например в Google или Яндексе, поисковая система начинает обрабатывать запрос, анализирует миллионы веб-страниц и показывает список результатов, которые, по ее мнению, лучше всего отвечают на ваш вопрос. Все это происходит очень быстро, за доли секунды, но при этом работает сложная система алгоритмов.

Поисковая система должна уметь определять, какие страницы существуют в интернете, а также решать, какие из них полезнее и заслуживают быть на первом месте. Чтобы понять, как это работает, заглянем внутрь поисковой системы и разберемся, как она устроена.

Чтобы ваш сайт появлялся в результатах поиска, его страницы должны пройти сканирование и попасть в специальную базу данных под названием «поисковый индекс». Это делают специальные программы-роботы, которых также называют «пауками» или «краулерами».

Обычно поисковый робот находит новые страницы, переходя по ссылкам с уже известных ему сайтов. Он обходит интернет, открывает страницы, считывает их содержимое и сохраняет эту информацию в поисковом индексе.

Однако сайт не обязательно должен ждать, пока поисковая система сама его найдет. Если сайт новый или вы хотите ускорить его появление в поиске, можно вручную отправить его на индексирование с помощью специальных инструментов для владельцев сайтов. Для этого используются Google Search Console и Яндекс. Вебмастер. Подробно об этих сервисах мы поговорим в Части 5 «Техническая оптимизация и аудит сайта».

Если сайт нарушает правила или не соответствует техническим требованиям, его страницы могут быть просканированы, но не добавлены в индекс. В этом случае они не будут отображаться в результатах поиска. Кроме того, при необходимости вы или специалист, который ведет сайт, можете закрыть от индексации весь сайт или отдельные страницы.

Когда страница попадает в индекс, поисковая система анализирует ее содержание. Она определяет, какие слова и фразы используются на странице, и на какие запросы эта информация может быть полезной. Таким образом формируется каталог всех проиндексированных страниц, по аналогии с указателем в конце книги. Только в этом случае он содержит миллиарды веб-страниц.

Интернет можно представить как огромную библиотеку, где вся информация хранится на миллионах серверов. Эти серверы размещены в специальных зданиях, которые называются дата-центрами.

Дата-центр представляет собой специально построенное здание, в котором размещаются серверы и другое оборудование для хранения и передачи данных. Внутри таких центров создаются идеальные условия для стабильной работы. Поддерживается подходящая температура, есть защита от перебоев с электричеством, обеспечивается физическая и цифровая безопасность.

Когда вы вводите запрос в поисковой системе, он передается на сервер, расположенный в одном из таких дата-центров. Система находит нужную информацию в поисковом индексе, хранящемся на этих серверах, и отправляет результат обратно, вам на устройство.

У крупных поисковых систем, таких как Google, есть десятки дата-центров по всему миру. Благодаря этому результаты поиска доставляются быстро, независимо от того, где находится пользователь. Можно сказать, что дата-центры являются «мозгом» и «памятью» поисковой системы, где хранится вся информация и обрабатываются запросы.

Поисковые системы не только сохраняют данные, но и регулярно возвращаются к уже проиндексированным страницам, чтобы обновить информацию и убедиться, что содержимое сайта остается актуальным. Этот процесс называется переиндексацией. Частота повторного обхода зависит от авторитетности сайта, активности обновлений и его размера. Чем ценнее и стабильнее ресурс для поисковой системы, тем чаще робот возвращается. А чем больше страниц на сайте, тем больше времени может понадобиться, чтобы их все переобойти.

Таким образом, интернет действительно похож на огромную библиотеку. Только в этом случае роль каталога играет поисковый индекс, в котором хранится информация о миллиардах веб-страниц.

Если вы внесли важные изменения и не хотите ждать автоматического повторного сканирования, можно ускорить процесс вручную. В Google Search Console есть инструмент проверки URL, который позволяет запросить переобход конкретной страницы. В Яндекс. Вебмастере доступны похожие функции, которые помогают ускорить обновление страниц в поиске.

Примечание: существуют настройки и инструменты, которые помогают управлять сканированием и индексацией страниц. Подробно мы рассмотрим их в Части 5 «Техническая оптимизация и аудит сайта».

Чтобы лучше представить, как это работает на практике, рассмотрим простой пример. Допустим, вы добавили новую статью в блог. Поисковый робот находит ее через ссылку с главной страницы, сканирует содержимое, добавляет текст в индекс, и спустя некоторое время эта статья начинает отображаться в результатах поиска. Если позже вы обновите текст или добавите новые изображения, робот вернется и проиндексирует страницу, чтобы данные в поиске были актуальными.

Мы уже разобрались, как поисковые системы находят и сохраняют информацию. Теперь важно понять, почему это имеет значение для владельцев сайтов. Поиск в интернете сегодня является одним из главных источников посещаемости. Миллиарды людей каждый день используют его, чтобы находить товары, услуги и ответы на свои вопросы. Именно поэтому SEO становится таким важным, ведь оно помогает сайтам получить часть этого огромного потока и привлечь новых посетителей. Чтобы лучше представить, о каких масштабах идет речь, можно обратиться к статистике популярности поисковых систем.

По последним данным, которые со временем могут меняться, интернетом пользуется уже более 66% населения планеты. Поисковые системы играют в этом процессе ключевую роль, ежедневно помогая миллиардам людей находить нужную информацию.

Google обрабатывает около 8,5 миллиарда запросов в день, и его доля на мировом рынке составляет примерно 91%. Для сравнения, у Яндекса около 1,3%. Точных цифр компании не раскрывают, поэтому эти данные приводятся только как ориентир для понимания масштаба.

В русскоязычных странах распределение популярности немного отличается. В России примерно 65% пользователей выбирают Яндекс и около 35% используют Google. В Беларуси около 70% отдают предпочтение Google и около 30% пользуются Яндексом. В Казахстане примерно 80% используют Google и около 20% Яндекс.

Приведенные доли служат ориентиром и со временем меняются, поэтому ориентируйтесь на свой регион и свою аудиторию.

Поисковые системы приводят на сайты огромное количество посетителей. Именно через поиск пользователи находят товары, услуги, статьи и решения своих проблем.

Понимание того, какая поисковая система преобладает в стране или регионе, помогает учитывать, каким поиском пользуется ваша аудитория и как выстраивать продвижение.

Примечание: в этой книге основное внимание уделяется Google и Яндексу, двум самым популярным поисковым системам в русскоязычном интернете. Однако принципы и подходы, описанные в дальнейших главах, применимы и к другим поисковым системам.

Важные моменты для понимания

— Поисковые системы сканируют и индексируют только те страницы, которые находят через ссылки или с помощью инструментов для вебмастеров.

— Страница может быть просканирована, но не попасть в индекс, если она нарушает требования поисковой системы.

— Частота повторного обхода зависит от авторитетности сайта, активности обновлений и числа страниц. Большие сайты обходятся дольше.

— Новые или измененные страницы можно вручную отправить на сканирование через Google Search Console или Яндекс. Вебмастер.

— Сайт или его отдельные разделы можно закрыть от индексации, если не хотите, чтобы они появлялись в результатах поиска.

Основные термины и понятия

Поисковая система. Программа или сайт, который помогает находить информацию в интернете, например Google или Яндекс.

Поисковый робот. Программа, которая обходит сайты, считывает их содержимое и передает данные поисковой системе.

Сканирование. Процесс, когда робот заходит на страницу и изучает ее содержимое.

Индексирование. Добавление страницы в базу данных поисковой системы, то есть в поисковый индекс.

Поисковый индекс. Огромная база данных всех страниц, которые могут быть показаны в поиске.

Дата-центр. Здание с серверами, где хранятся данные поисковой системы и происходит обработка запросов.

Переиндексация. Повторное сканирование уже известных страниц для обновления информации.

Примечание: инструменты для вебмастеров, такие как Google Search Console и Яндекс. Вебмастер, а также вопросы закрытия сайта или отдельных страниц от индексации будут подробно рассмотрены в Части 5 «Техническая оптимизация и аудит сайта».

Мы посмотрели, как страницы попадают в поиск. Теперь разберемся, почему одни из них оказываются выше других.

1.2. Ранжирование и релевантность

Релевантность и ранжирование являются двумя ключевыми понятиями, которые помогают понять, как работают поисковые системы.

Релевантность означает степень соответствия содержания страницы запросу пользователя. Одна и та же страница может быть релевантной для одних запросов и нерелевантной для других. Если она точно и понятно отвечает на вопрос, ее считают релевантной.

Например, если пользователь вводит в поиске слово «кот», поисковая система должна определить, что именно он имел в виду, будь то домашний питомец, известная картинка или короткометражный фильм. В таком случае она старается угадать намерение пользователя, то есть интент, и показать страницы, которые лучше всего подходят под это намерение.

Важно понимать, что поисковые системы оценивают релевантность не только по точному совпадению слов в тексте, но и по смысловому соответствию.

Другой пример можно увидеть в запросе «лечение головной боли». Поисковая система может показать страницы, где нет точной фразы «лечение головной боли», но встречаются близкие по смыслу выражения вроде «как избавиться от мигрени», «снизить боль в голове» или «симптомы головной боли и способы ее лечения».

Иногда на релевантность влияет то, где находится пользователь. Например, если человек ищет «пицца», «рестораны», «автомойка» или «аптека», чаще всего он хочет найти ближайшие к себе варианты. В таких случаях поисковая система учитывает местоположение и показывает результаты поблизости.

Важна и актуальность информации. Поисковые системы обращают внимание на свежесть контента. Если пользователь ищет новости, расписание концертов, спортивные события или прогноз погоды, система будет стараться показать самую свежую информацию.

Кроме того, поисковая система может подстраивать результаты под конкретного пользователя. Это называется персонализацией. Результаты поиска могут отличаться у разных людей, так как система учитывает местоположение, историю запросов, настройки аккаунта и другие параметры.

Например, если человек вводит общий запрос вроде «рецепты», то результаты у разных пользователей могут немного отличаться. Тот, кто чаще ищет блюда с картофелем, увидит в выдаче больше таких рецептов. А тот, кто предпочитает супы, скорее получит подборки супов. Персонализация работает и по другому принципу. Если вы уже заходили на конкретный сайт, поисковая система может показать его выше при следующем похожем запросе.

Персонализация работает не всегда явно. Она зависит от множества факторов, таких как авторизация в аккаунте, разрешения браузера, включение истории поиска и другие настройки. Поэтому один и тот же запрос у разных людей может давать немного разные результаты.

Когда система оценила релевантность страниц, следующим шагом становится определение их порядка. Этот процесс называется ранжированием. Поисковая система сортирует результаты так, чтобы наиболее полезные из них оказались первыми.

Сначала система находит все страницы, которые могут подходить под запрос, затем определяет, какие из них лучше всего соответствуют ожиданиям пользователя. Для этого используются алгоритмы, учитывающие сотни факторов, среди которых содержание текста, техническое состояние сайта, поведение пользователей и многое другое.

Подробно основные группы факторов мы будем рассматривать по мере прохождения книги, а краткое введение сделаем в главе 1.4 «Введение в факторы ранжирования».

Кроме текста и технических параметров, поисковая система обращает внимание на то, как пользователи взаимодействуют с результатами поиска. Если после определенного запроса люди чаще нажимают на одну и ту же страницу или проводят на ней больше времени, это может указывать на ее полезность.

Поисковые системы могут использовать данные о поведении пользователей, чтобы совершенствовать алгоритмы. Для этого применяются технологии машинного обучения и искусственного интеллекта. Однако детали и вес этих сигналов не раскрываются. Главная цель при этом остается прежней. Поисковая система старается показывать страницы, которые с наибольшей вероятностью удовлетворят запрос пользователя.

Чтобы лучше понять, как работает принцип релевантности и намерения пользователя, приведем простой пример. Если человек вводит запрос «купить ноутбук Lenovo», поисковая система с помощью ранжирования расположит сайты так, чтобы на первых позициях оказались интернет-магазины, где ноутбук можно сразу приобрести. Статьи с обзорами или форумные обсуждения будут ниже, так как они не удовлетворяют коммерческое намерение пользователя.

Важные моменты для понимания

— Поисковая система старается не просто найти точные совпадения слов, а понять смысл запроса.

— Страница может быть релевантной, даже если в ней нет точного вхождения фразы, главное, чтобы она отвечала на запрос по смыслу.

— При локальных запросах, например «ресторан» или «аптека», система учитывает местоположение пользователя. Этот принцип особенно заметен в коммерческих темах, где важно найти ближайший магазин, сервис или доставку.

— Для тем, связанных с новостями, событиями, погодой и т.д., поисковые системы отдают приоритет свежей информации.

— Персонализация может влиять на выдачу. Один и тот же запрос может давать разные результаты у разных людей в зависимости от их интересов и поведения.

— Ранжирование начинается после того, как поисковая система определяет релевантные страницы. Далее она выбирает, в каком порядке показать их пользователю.

— Алгоритмы ранжирования оценивают страницы по множеству характеристик, начиная от содержания и структуры и заканчивая поведением пользователей и техническими параметрами сайта.

— Чем лучше страница отвечает на запрос и удобна для человека, тем выше она окажется в результатах поиска.

— Поведение пользователей помогает поисковику понять, какие страницы люди считают действительно полезными.

— Поисковая система постоянно совершенствует алгоритмы с помощью искусственного интеллекта, чтобы результаты были максимально точными.

— Главная задача ранжирования состоит в том, чтобы помочь человеку как можно быстрее найти нужную информацию.

Основные термины и понятия

Релевантность. Степень соответствия страницы запросу пользователя.

Интент. Намерение пользователя, которое стоит за его поисковым запросом.

Геолокация. Учет местоположения пользователя при формировании поисковой выдачи.

Актуальность. Насколько информация на странице свежая и соответствует текущей ситуации.

Персонализация. Индивидуальная настройка выдачи с учетом интересов, истории запросов и местоположения.

Ранжирование. Процесс сортировки релевантных страниц в таком порядке, чтобы сначала показывались самые полезные.

Алгоритмы ранжирования. Программы и правила, по которым поисковая система определяет порядок выдачи страниц.

Поведенческие сигналы. Действия пользователей в поиске, по которым система понимает, какие страницы считаются более полезными.

1.3. Что такое SERP

SERP представляет собой страницу результатов поиска, которую еще называют выдачей. Вы видите ее после того, как вводите запрос в поисковую строку. Она включает не только список ссылок на сайты, но также рекламные объявления, блоки с ответами, изображения, карты и другие элементы. Структура страницы может меняться в зависимости от запроса, и все это помогает человеку быстрее найти нужную информацию.

Например, если человек вводит запрос «погода Москва», в верхней части SERP сразу появится блок с прогнозом на ближайшие дни. Это удобнее, чем просматривать сайты, потому что ответ виден сразу.

Рассмотрим основные элементы выдачи и их назначение.

Отображение запроса. Страница с результатами всегда начинается с отображения поискового запроса. После нажатия Enter или кнопки «Найти» система обрабатывает введенный текст и показывает SERP. В верхней части страницы отображается сам запрос, который ввел пользователь. Иногда поисковая система автоматически исправляет опечатки или предлагает более точную формулировку в виде поисковых подсказок. Пользователь может согласиться с этим вариантом или вернуться к исходному. Сразу под запросом могут появляться вкладки и фильтры, позволяющие переключиться, например, на поиск по картинкам, новостям или видео.

Контекстная реклама. Под ней понимаются платные объявления, которые поисковая система показывает в зависимости от запроса пользователя. Преимущество таких объявлений в том, что они видны людям, уже ищущим нужный товар или услугу. Чтобы отличать такие результаты от органической выдачи, поисковые системы помечают их словом «Реклама».

Органические результаты. Это основная часть SERP, где показываются сайты, которые система считает наиболее полезными и подходящими под запрос. Эти результаты располагаются ниже рекламных блоков и формируются алгоритмами ранжирования. Каждая страница отображается в виде сниппета с заголовком, адресом, иконкой сайта и описанием. Иногда в сниппет добавляются дополнительные элементы, например дата публикации, рейтинг или ссылки на разделы. Все это помогает пользователю заранее понять содержание страницы и решить, переходить ли по ссылке.

Специальные информационные блоки. Помимо обычных результатов, поисковая страница часто содержит блоки с дополнительной информацией. Это могут быть короткие ответы на вопросы, карты с адресами, изображения и видео, новости или поисковые подсказки, которые помогают точнее сформулировать запрос. Отдельно стоит упомянуть новые ответы с использованием искусственного интеллекта. Это автоматически сгенерированные системой краткие пояснения или сводки по запросу.