Как добавить страницу в индекс - инструменты от поисковых систем

Индексация сайта – это добавление сведений о страницах сайта поисковыми роботами в базу данных поисковых систем (в индекс). Индексироваться могут:

• текстовые файлы
• изображения
• аудио-, видеофайлы
• ссылки
• pdf-документы и др.

Только проиндексированные страницы (файлы) появляются в поиске. Если же страница не проиндексирована, то и в результатах поиска она не появится. Перед тем, как добавить сайт в индекс поисковых систем, необходимо убедиться, что ничего не мешает индексации.

Условия корректной индексации

• Сайт или страница сайта открыты в robots.txt. Следует обратить внимание на директивы: Disallow, User-agent, Crawl-delay. Например, так выглядит запрет на индексацию сайта всеми роботами:

А вот так выглядит запрет на индексацию папки private поисковым роботом Google:

• Страница, добавляемая в индекс, не должна содержать в себе мета-тега “noindex, nofollow”.

Автоматическое добавление в индекс

Сайт попадет в индекс автоматически, если существует хотя-бы одна ссылка на сайт с других ресурсов, уже проиндексированных поисковиком. Чем больше ссылок на сайт/страницу, тем выше вероятность быстрого попадания сайта в индекс. Сроки добавления могут быть большими, поэтому, если вы не хотите ждать, то можно воспользоваться ручным способом добавления в индекс.

Ручное добавление в индекс

Как добавить страницу в индекс Google

Чтобы отправить страницу на индексацию в Google необходимо ввести URL страницы через сервис: https://www.google.com/webmasters/tools/submit-url. Далее потребуется ввести капчу:

Если со страницей все хорошо, то индексация пройдет быстро. Обычно, скорость добавления сайта в индекс Google – от нескольких минут до недели.

Дополнительно, рекомендуем добавить сайт в панель инструментов для вебмастеров – Google Search Console – https://www.google.com/webmasters/tools/

Как добавить страницу в индекс Яндекс

Чтобы отправить сайт или страницу на индексацию необходимо авторизоваться в сервисе Яндекс Вебмастер и предварительно добавить туда сайт. Отправление сайта на индексацию в Яндекс осуществляется по ссылке: https://webmaster.yandex.ru/sites/add/. Вам будет показана такая картинка:

Чтобы отправить на индексацию одну или несколько страниц сайта нужно воспользоваться разделом “Переобход страниц” или перейти по ссылке https://webmaster.yandex.ru/site/indexing/reindex/

Дневной лимит – 20 адресов для сайта, учитывая поддомены. Сроки индексации в Яндекс от момента узнавания о странице до появления её в поиске – как правило, от нескольких дней до двух недель.

Как добавить страницу в индекс Mail.ru

Если вы продвигаетесь в России, то не стоит обходить вниманием ещё одну популярную в России поисковую сеть – mail.ru. Чтобы добавить сайт в индекс, перейдите по ссылке http://go.mail.ru/addurl.

Как добавить страницу в индекс Нигма

Нигма – это также поисковая система в российском регионе. Чтобы отправить на индексацию сайт/страницу в поисковую систему Нигма перейдите по ссылке http://www.nigma.ru/index_menu.php?menu_element=add_site.

Как добавить страницу в индекс Meta.ua

Мета – это украинская поисковая система, которая уже не пользуется такой популярностью, как в былые времена. Однако, для повышения узнаваемости вашего ресурса не стоит упускать такую возможность. http://web.meta.ua/?action=add – по этой ссылке можно добавить сайт на ресурс Мета.юа. Сначала необходимо зарегистрировать профиль в этой системе.

Как добавить страницу в индекс Bing

Поисковая система Бинг актуальна для продвижения в англоязычном сегменте. Однако, эта система становится все популярней и, не исключено, что скоро будет актуальна и для русскоязычной среды. Чтобы добавить в индекс сайт перейдите по ссылке: http://www.bing.com/toolbox/submit-site-url

Факторы, влияющие на индексацию

Внешние ссылки

На индексацию влияют внешние факторы, а именно – количество внешних ссылок на сайт. Соответственно, чтобы улучшить индексацию, необходимо нарастить ссылочную массу. Поле деятельности тут очень велико.

Получение внешних ссылок с социальных сетей – Facebook, Google+, Twitter, YouTube… Ссылки должны быть прямыми, тогда они хорошо работают. Как минимум, можно создать профили компании в соцсетях и заполнить поле URL. Еще лучше – периодически постить анонсы статей со ссылками на сайт.

Получение ссылок с тематических трастовых сайтов. Чтобы получить ссылки, можно воспользоваться биржами (например, Миралинкс), либо напрямую договариваться с площадками (например, гостевое размещение статей). Популярные способы получения внешних ссылок – доски объявлений, каталоги сайтов и статей, ведение блогов, размещение пресс-релизов, сайты вакансий, и многое-многое другое…

Наличие Sitemap.xml

Карта сайта, которая содержит в себе все важные ссылки сайта, очень помогает роботам быстрее “обойти” сайт. И хотя робот может пройтись по сайту без карты сайта, все таки рекомендуем добавить её. Для этого необходимо сгенерировать файл Sitemap.xml (например, с помощью бесплатных сервисов, таких как https://www.xml-sitemaps.com/) и добавить файл в корень сайта. В итоге, карта сайта должна быть доступна по адресу вида: site.com/sitemap.xml. Обязательно добавляем файл в панели вебмастеров.

Ошибки на сайте

Иногда, сайт плохо индексируется из-за возникающих технических ошибок. Чтобы проверить ошибки индексации, нужно зайти в панель вебмастера. Например, в Google Search Console – заходим в раздел “Сканирование” / “Ошибки сканирования” и смотрим на уведомления. По возможности исправляем ошибки.

Как проверить индексацию

Ниже приведены способы проверки индексации в популярных поисковиках Google и Яндекс.

Индексация в Google

Способы проверки состояния индексации в Google.

1. Чтобы проверить количество проиндексированных и доступных к поиску страниц – нужно перейти в поисковую систему Google и ввести комбинацию: site:www.example.com

Например, сайт Википедия содержит 116 миллионов страниц в поиске:

2. Зайти в панель Google Вебмастер, перейти в раздел Индекс Google → Статус индексирования. Тут видно количество проиндексированных страниц.

Как пишет Google: “Здесь отображается общее число URL, которые появляются в результатах поиска, и URL, которые обнаружены другими способами. Этот показатель может меняться по мере добавления или удаления страниц. Индексированных URL почти всегда значительно меньше, чем сканированных, так как в показателе Проиндексировано всего не учитываются URL, которые система определяет как повторяющиеся или неканонические, а также URL, содержащие метатег noindex.” https://support.google.com/webmasters/answer/2642366?hl=ru

Индексация в Яндекс

Чтобы проверить индексацию в Яндекс, можно воспользоваться двумя путями:

1. Необходимо зайти в панель Яндекс Вебмастер:

1. 1. Перейти на страницу Индексирование → Проверить статус URL.
   2. В поле ввести URL страницы, информацию о которой хотите получить.
   3. Нажать кнопку Проверить.
2. Перейти в поисковую систему Яндекс и ввести комбинацию: url:www.example.com*:

Это были основные методы управления индексацией страниц. Надеемся, что эта статья была полезной. Советуем также почитать статью о тегах Noindex, Nofollow.