Как добавить сайт на индексацию поисковикам. Индексация сайта


Как добавить сайт на индексацию поисковикам

Продвижение сайтов самостоятельно | Индексация сайта

В этой инструкции мы рассмотрим вопрос добавления нашего нового сайта на индексацию к различным поисковым системам. Я решил упомянуть как популярные поисковики, так и те, про которые вы возможно и не слышали.

Индексация сайта в Яндексе

Что бы добавить сайт для индексации в Яндекс (Yandex.ru) достаточно вести его адрес в специальную форму addurl (англ. addurl - добавить URL). Вебмастера прозвали ее адурилкой. Находится она тут: webmaster.yandex.ru/addurl.xml

Для добавления сайта на индексацию достаточно ввести url главной страницы и капчу. Капча - это несколько цифр, которые защищают от автоматических регистраций. После того как вы нажмете кнопку «добавить» возможно несколько вариантов развития событий.

1) Сообщение «ваш сайт добавлен» сигнализирует об успешном добавлении ресурса в очередь на индексацию в Яндекс.

2) Если появилась надпись «Ваш хостинг не отвечает» - значит, ваш сервер лежит в этот момент. Можно попробовать добавить сайт позже или найти более качественный хостинг.

3) А вот если появилось сообщение, что «указанный URL запрещен к индексации» то дела плохи. Это говорит о том, что на ваш ресурс наложены санкции в виде бана сайта. Вполне возможно, что на купленном вами домене уже когда-то был сайт, который и получил санкции. При помощи addurl вебмастера часто проверяют сайты на бан в Яндексе.

Индексация сайта в Google (Гугле)

Следующая по значимости для нашего сайта идет поисковая система Google (Гугл). Процесс добавления на индексацию сайта в Google точно такой-же как на Yandex. В Гугле тоже есть своя адурилка, которая расположена по адресу: https://www.google.com/webmasters/tools/submit-url.

Так же надо ввести капчу при добавлении. Но есть два отличия. Если в Яндексе можно просто добавить урл без лишних телодвижений, то в Google надо быть залогиненым в своем аккаунте. Иначе не получится. Соответственно если аккаунта у вас там еще нет, его придется завести. Второе отличие Google от Яндекса это скорость индексации. Google очень быстро индексирует сайты.

Индексация сайта в Рамблере (Rambler.ru)

Конечно, Рамблер уже не тот, что раньше, как скажут многие, и дает совсем немного трафика. И все равно, зачем им пренебрегать? Процесс индексации сайта в Rambler самый затяжной, среди других отечественных поисковых систем. Да и его адурилка уже давно не работает, она была по адресу: robot.rambler.ru/cgi-bin/addsite.cgi

Он уже давно использует поисковую базу Яндекса. Поэтому, что бы попасть в индекс Rambler.ru достаточно добавиться в Яндекс.

Индексация сайта в Mail.ru (Майл)

Поисковая система Mail.ru тоже имеет кабинет вебмастера. Добавление сайта на индексацию в Mail.ru происходит через форму addurl, которая расположена по адресу: go.mail.ru/addurl

Причем как и у гугла, что бы сделать заявку на индексирование, нужно завести свой аккаунт и войти в него. Иначе не выйдет. Майл в последнее время старается развивать свои собственные инструменты для вебмастеров.

Выше мы рассмотрели основные отечественные поисковики, в которых нам желательно проиндексировать свой сайт. Идущие далее ПС приведу скорее для вашей общей SEO-эрудиции, чем для конкретных действий.

Поисковая система Aport.ru (Апорт)

Aport.ru когда-то был поисковой системой, со своей индексной базой и адурилкой. Сейчас из него сделали товарный поисковик, в котором можно сравнивать цены на товары и услуги.

Поисковая система Nigma.ru (Нигма)

Nigma.ru это наша русская интеллектуальная поисковая машина. Суммарный объем ее трафика порядка трех миллионов запросов в сутки. Очевидно, что не надо пренебрегать трафиком из Нигмы. Добавить свой сайт на индексацию в Нигму можно на странице nigma.ru/index_menu.php?menu_element=add_site.

Медиа навигатор Tagoo.ru

Система Tagoo.ru представляет собой медийный поисковик, который ищет медиа данные. Это музыкальный контент, видеоролики и программы. Что бы ваш сайт был проиндексирован системой Tagoo, нужно воспользоваться формой добавления: tagoo.ru/ru/webmaster.php?mode=add_site.

Поисковая система Turtle.ru (Черепаха)

Международный поисковик Turtle (Черепаха) осуществляет поиск по странам СНГ на любом языке. Для индексации принимаются ресурсы расположенные на таких доменных зонах как: ru, su, ua, am, az, ge, by, kz, kg, uz, md. Что бы добавить сайт на индексацию в черепахе нужно воспользоваться адурилкой: http://www.turtle.ru/add.html. Желательно дождаться вывода сообщения о принятии вашего сайта. Может не добавить, а вы и знать не будете.

Зарубежные поисковые системы

Если выше были отечественные поисковые системы, то ниже будет список зарубежных поисковых систем.

Поисковая система Yahoo.com (Яху)

Yahoo это один из первых поисковиков, появившихся в Интернет. Про нее слышали наверно все люди, так или иначе связанные с Интернетом. Добавить сайт в Яху можно тут search.yahoo.com/info/submit.html.

Поисковая система Bing.com (Бинг)

Поисковая система Bing принадлежит корпорации Microsoft и была создана на замену Live Search. Майкрософ надеется, что новое детище окажется намного популярнее предшественника. Если вы хотите индексации своего сайта ПС Bing.com, это это можно сделать на странице http://www.bing.com/toolbox/submit-site-url.

Украинские поисковые системы

И в заключении моего обзора приведу две популярных поисковых системы на Украине.

Украинская поисковая система Meta.ua (Мета)

Что бы добавить свой сайт на индексацию в поисковую систему Meta там сначала надо пройти регистрацию. После того как вы войдете в свой аккаунт, добавить сайт можно будет на странице web.meta.ua/?action=add. Правда поисковиком принимаются только украинские web-сайты.

Поисковая система Uaport.net

В индексную базу украинского поисковика Uaport.net тоже можно добавить только украинские ресурсы. На сайте написано, что перед добавлением они смотрят сайты вручную. Как бы намекая, что некачественные сайты не пропустят. При регистрации сайта в ПС придется заполнить около десяти полей. Страница с адурилкой находится по адресу http://uaport.net/cat/register.

Как добавить сайт в тот или иной поисковик мы разобрались. Теперь переходим к следующей теме как ускорить индексацию сайта в поисковых системах.

Оглавление

seob.info

Индексация сайта в поисковых системах

Продвижение сайтов самостоятельно

В прошлом разделе мы подробно поговорили про внутреннюю оптимизацию сайта. Теперь переходим к изучению вопроса индексации сайта. А что же это такое вообще? Индексация сайта в поисковых системах - это процесс сбора информации о сайте поисковым роботом. Поисковый робот обходит сайт и добавляет в свою базу всю найденную информацию: текст, картинки, видео, ссылки и т.д.). Эта база называется индексом поисковой системы. Получается если сайт добавлен в индексную базу, то это значит поисковик о нем знает. После этого другие алгоритмы уже проверяют сайт на условия соблюдения лицензии поиска и принимают решение о ранжировании сайта в выдаче.

Соответственно, что бы получить переходы с поисковой системы, на страницы, которые мы продвигаем, они все должны находится в индексе поисковой системы. Проще говоря – быть проиндексированными. Но вы должны понимать, если страница попала в индекс, это еще не значит, что она появится в поиске, для этого ее нужно еще оптимизировать и продвинуть. Так же думаю понятно, что если какая-то страница не попала в индекс ПС, то она ни как не может появиться в серпе.

Вывод напрашивается очевидный - полная индексация страниц сайта в основных поисковых системах Яндекс и Google это неотъемлемый процесс продвижения. Чем быстрее новый сайт проиндексируется в ПС, тем лучше.

Методы индексации страниц сайта

Сообщить поисковой системе о новом сайте или о новых страницах на сайте можно несколькими способами.

1) Добавить сайт для индексации через addUrl (так называемую адурилку) в самом поисковике. «Адурилка» - это специальная форма для ввода адреса вашего сайта, что бы сообщить поисковой системе о новом web-ресурсе. После добавления в форму addUrl web-сайт записывается в очередь для индексации. Как правило, достаточно добавить только главную страницу сайта, остальные поисковый робот найдет сам по внутренним ссылкам или карте сайта. Как раз вспоминаем статью про задачи перелинковки. При данном методе индексация сайта может замет затянуться на пару недель.

2) Пригласить на сайт индексирующего бота через внешние ссылки. Если на ваш сайт есть внешние ссылки с других сайтов, то рано или поздно бот придет с них. Чем больше ссылок - тем быстрее придет бот. Но, важно знать, что не все сайты часто посещаются роботами. Поэтому если вы разместите ссылку на хорошем, часто обновляемом портале (например, новостном), то есть большая вероятность, что индексирующий бот быстро обнаружит ссылку на ваш сайт и придет. И наоборот, с заброшенного ресурса можно ждать месяц и более. Для индексации советую использовать сервис по регистрации в каталогах 1ps. Реально очень помогает.

3) Комбинированный способ, т.е. сочетание первого и второго. Например, я чаще прибегаю ко второму способу, т.е. размещаю ссылки на других сайтах. Чаще всего в твиттере. Начальная индексация сайта зависит от многих факторов, начиная от оптимизации сайта и заканчивая капризами поисковиков, и может длится от пары дней до нескольких недель.

В следующей статье мы поговорим про поисковых роботов.

- поисковые роботы

- добавление сайта на индексацию поисковыми системами

- как ускорить индексацию сайта

- как проверить индексацию сайта поисковыми системами

- как запретить индексацию страниц сайта поисковыми системами

- почему не индексируется сайт

- почему сайты выпадают из индекса ПС

Оглавление

seob.info

что это значит, как ускорить процесс

Тематический трафик – альтернативный подход в продвижении бизнеса

Мы выпустили новую книгу «Контент-маркетинг в социальных сетях: Как засесть в голову подписчиков и влюбить их в свой бренд».

Подпишись на рассылку и получи книгу в подарок!

Индексация сайта — это процесс поиска, сбора, обработки и добавления сведений о сайте в базу данных поисковых систем.

Больше видео на нашем канале - изучайте интернет-маркетинг с SEMANTICA

Индексация сайта значит, что робот поисковой системы посещает ресурс и его страницы, изучает контент и заносит его в базу данных.Впоследствии эта информация выдается по ключевым запросам. То есть, пользователи сети вводят в строку поиска запрос и получают на него ответ в виде списка проиндексированных страниц.

Если говорить простым языком, получится приблизительно так: весь интернет — это огромная библиотека. В любой уважающей себя библиотеке есть каталог, который облегчает поиск нужной информации. В середине 90-х годов прошлого века, вся индексация сводилась к такой каталогизации. Роботы находили на сайтах ключевые слова и формировали из них базу данных.

Сегодня боты собирают и анализируют информацию по нескольким параметрам (ошибки, уникальность, полезность, доступность и проч.) прежде, чем внести ее в индекс поисковой системы.

Алгоритмы работы поисковых роботов постоянно обновляются и становятся все сложнее. Базы данных содержат огромное количество информации, несмотря на это поиск нужных сведений не занимает много времени. Это и есть пример качественной индексации.

Если сайт не прошел индексацию, то информация до пользователей может и не дойти.

Как индексирует сайты Гугл и Яндекс

Яндекс и Гугл, пожалуй, самые популярные поисковики в России. Чтобы поисковые системы проиндексировали сайт, о нем нужно сообщить. Сделать это можно двумя способами:

  1. Добавить сайт на индексацию при помощи ссылок на других ресурсах в интернете — этот способ считается оптимальным, так как страницы, найденные таким путем, робот считает полезными и их индексирование проходит быстрее, от 12 часов до двух недель.
  2. Отправить сайт на индексацию путем заполнения специальной формы поисковой системы вручную с использованием сервисов Яндекс.Вебмастер, Google Webmaster Tools, Bing Webmaster Tools и др.

Второй способ медленнее, сайт встает в очередь и индексируется в течение двух недель или больше.

В среднем, новые сайты и страницы проходят индексацию за 1–2 недели.

Считается, что Гугл индексирует сайты быстрее. Это происходит потому, что поисковая система Google индексирует все страницы — и полезные, и неполезные. Однако в ранжирование попадает только качественный контент.

Яндекс работает медленнее, но индексирует полезные материалы и сразу исключает из поиска все мусорные страницы.

Индексирование сайта происходит так:

  • поисковый робот находит портал и изучает его содержимое;
  • полученная информация заносится в базу данных;
  • примерно через две недели материал, успешно прошедший индексацию, появится в выдаче по запросу.

Есть 3 способа проверки индексации сайта и его страниц в Гугл и Яндексе:

  1. при помощи инструментов для вебмастеров — google.com/webmasters или webmaster.yandex.ru;
  2. при помощи ввода специальных команд в поисковую строку, команда для Яндекс будет выглядеть так: host: имя сайта+домен первого уровня; а для Гугл — site: имя сайта+домен;
  3. с помощью специальных автоматических сервисов.

Проверяем индексацию

Это можно сделать используя:

  1. операторы поисковых систем - смотрим в справке или тут;
  2. услуги специальных сервисов, например rds бар;
  3. Яндекс вебмастер;
  4. Google вебмастер.

Как ускорить индексацию сайта

От того, насколько быстро роботы проведут индексирование, зависит скорость появления нового материала в поисковой выдаче, тем быстрее на сайт придет целевая аудитория.

Для ускорения индексации поисковыми системами нужно соблюсти несколько рекомендаций.

  1. Добавить сайт в поисковую систему.
  2. Регулярно наполнять проект уникальным и полезным контентом.
  3. Навигация по сайту должна быть удобной, доступ на страницы не длиннее, чем в 3 клика от главной.
  4. Размещать ресурс на быстром и надежном хостинге.
  5. Правильно настроить robots.txt: устранить ненужные запреты, закрыть от индексации служебные страницы.
  6. Проверить на наличие ошибок, количество ключевых слов.
  7. Сделать внутреннюю перелинковку (ссылки на другие страницы).
  8. Разместить ссылки на статьи в социальных сетях, социальных закладках.
  9. Создать карту сайта, можно даже две, — для посетителей и для роботов.

Как закрыть сайт от индексации

Закрыть сайт от индексации — запретить поисковым роботам доступ к сайту, к некоторым его страницам, части текста или изображению. Обычно это делается для того, чтобы скрыть от публичного доступа секретную информацию, технические страницы, сайты на уровне разработки, дублированные страницы и т. п.

Сделать это можно несколькими способами:

  • При помощи robots.txt можно запретить индексацию сайта или страницы. Для этого в корне веб-сайта создается текстовый документ, в котором прописываются правила для роботов поисковых систем. Эти правила состоят из двух частей: первая часть (User-agent) указывает на адресата, а вторая (Disallow) запрещает индексацию какого-либо объекта.Например, запрет индексации всего сайта для всех поисковых ботов выглядит так:

    User-agent: *

Disallow: /

  • При помощи мета-тега robots, что считается наиболее правильным для закрытия одной страницы от индексирования. При помощи тегов noindex и nofollow можно запретить роботам любых поисковых систем индексировать сайт, страницу или часть текста.

Запись для запрета индексации всего документа будет выглядеть так:

<meta name="robots" content="noindex, nofollow"/>

Можно создать запрет для конкретного робота:

<meta name="googlebot" content="noindex, nofollow"/>

На что влияет индексация при продвижении

Благодаря индексации сайты попадают в поисковую систему. Чем чаще обновляется контент, тем быстрее это происходит, так как боты чаще приходят на сайт. Это приводит к более высокой позиции при выдаче на запрос.

Индексация сайта в поисковых системах дает приток посетителей и способствует развитию проекта.

Кроме контента, роботы оценивают посещаемость и поведение посетителей. На основании этих факторов они делают выводы о полезности ресурса, чаще посещают сайт, что поднимает на более высокую позицию в поисковой выдаче. Следовательно, трафик снова увеличивается.

Индексация — это важный процесс для продвижения проектов. Чтобы индексирование прошло успешно, поисковые роботы должны убедиться в полезности информации.

Алгоритмы, по которым работают поисковые машины, постоянно меняются и усложняются. Цель индексации — внесение информации в базу данных поисковых систем.

semantica.in

Индекс и индексация сайта: что это такое?

Индекс поисковых систем – специальная база данных, в которую заносится информация, собираемая поисковыми роботами со страниц сайтов. При этом учитывается текстовое наполнение, внутренние и внешние ссылки, графические и некоторые другие объекты. Когда пользователь задает запрос поисковой системе, происходит обращение к базе данных. После этого выполняется ранжирование по релевантности – формирование списка сайтов по мере убывания их значимости.

Что такое индексация

Процесс добавления роботами собранной информации в базу называется индексацией. Затем данные определенным образом обрабатываются и создается индекс – выжимка из документов. Процесс заполнения индекса осуществляется одним из двух способов: вручную или автоматически. В первом случае владелец ресурса должен самостоятельно добавить URL веб-ресурса в специальную форму, которая есть у «Яндекса», Google и других поисковых систем. Во втором робот сам находит сайт, планомерно переходя по внешним ссылкам с других площадок или сканируя файл-карту sitemap.xml.

Первые попытки индексировать веб-ресурсы были сделаны еще в середине 90-х годов прошлого столетия. Тогда база данных была похожа на обычный предметный указатель, в котором содержались ключевые слова, найденные роботами на посещенных ими сайтах. Почти за 30 лет этот алгоритм был значительно усовершенствован и усложнен. Например, сегодня информация перед попаданием в индекс обрабатывается по сложнейшим вычислительным алгоритмам с привлечением искусственного интеллекта.

Зачем индекс поисковым системам

Индексация страниц сайта – неотъемлемая часть работы поисковых систем (не только Google и «Яндекса», но и всех остальных). База, полученная в процессе сканирования веб-ресурсов, используется для формирования релевантной выдачи. Основные роботы поисковых систем:

  • основной – сканирует весь контент на сайте и его отдельных страницах;
  • быстрый – индексирует только новую информацию, которая была добавлена после очередного обновления.

Также существуют роботы для индексации rss-ленты, картинок и др.

При первом посещении в базу попадают все новые сайты, если они подходят под требования поисковой системы. Во время повторного визита информация лишь дополняется деталями.

Скорость индексации страниц

Чем быстрее происходит добавление страницы в индекс, тем лучше для веб-ресурса. Однако поисковые роботы не могут выполнять такой большой объем работы так же часто, как обновляется наполнение сайтов. Индексация в «Яндекс» в среднем занимает одну-две недели, а в Google – несколько дней. С целью ускорения индексации ресурсов, для которых очень важно быстрое попадание информации в базу (новостные порталы и т. д.), применяется специальный робот, посещающий такие сайты от одного до нескольких раз в день.

Как проверить индексацию в «Яндексе» и Google

Воспользоваться информацией из панели веб-мастеров. В списке сервисов Google откройте Search Console, а затем перейдите в раздел «Индекс Google». Нужная информация будет находиться в блоке «Статус индексирования». В «Яндекс.Вебмастер» необходимо перейти по следующей цепочке: «Индексирование сайта» — «Страницы в поиске». Еще один вариант: «Индексирование сайта» — «История» — «Страницы в поиске».

Задать поиск по сайту с использованием специальных операторов. Для этого используйте запрос с конструкцией «site:», указав далее адрес вашего ресурса в полном формате. Так вы узнаете количество проиндексированных страниц. Серьезные расхождения в значениях (до 80 %), полученных в разных поисковых системах, говорят о наличии проблем (например, веб-ресурс может находиться под фильтром).

Установить специальные плагины и букмарклеты. Это небольшие дополнения для браузера, которые позволяют выполнить проверку индексации страниц сайта. Одним из самых популярных среди них является RDS Bar.

Как ускорить индексацию

На скорость индексации сайта прямо влияют несколько факторов:

  • отсутствие ошибок, замедляющих процесс сбора информации поисковым роботом;
  • авторитетность ресурса;
  • частота обновления контента на сайте;
  • частота добавления нового контента на сайт;
  • уровень вложенности страниц;
  • корректно заполненный файл sitemap.xml;
  • ограничения в robots.txt.

Чтобы ускорить индексацию сайта, выполните ряд правил:

  • выберите быстрый и надежный хостинг;
  • настройте robots.txt, установив правила индексации и сняв ненужные запреты;
  • избавьтесь от дублей и ошибок в коде страниц;
  • создайте карту сайта sitemap.xml и сохраните файл в корневой папке;
  • по возможности организуйте навигацию таким образом, чтобы все страницы были в 3 кликах от главной;
  • добавьте ресурс в панели веб-мастеров «Яндекса» и Google;
  • сделайте внутреннюю перелинковку страниц;
  • зарегистрируйте сайт в авторитетных рейтингах;
  • регулярно обновляйте контент.

Дополнительно рекомендуем оценить объем flash-элементов с точки зрения их влияния на продвижение. Наличие визуальных объектов этого типа значительно снижает долю поискового трафика, так как не дает роботам выполнить индексацию в полной мере. Также не желательно размещения ключевой информации в PDF-файлах, сохраненных определенным образом (сканироваться может только текстовое содержимое документа).

wiki.rookee.ru

Проверка индексации сайта в поисковых системах

Продвижение сайтов самостоятельно | Индексация сайта

Если вы последовательно читаете мой мануал, то в прошлой статье узнали, как можно ускорить индексацию сайта. Теперь нам надо это процесс контролировать. Т.е. следить за страницами, какие попадают в индекс, а какие нет. Осуществить проверку индексации сайта не сложно. Для этого есть два решения: ручной метод и специальный seo-софт.

В первую очередь можно воспользоваться системой автоматического продвижения SeoPult. Система конечно платная, НО много информации по своему сайту можно посмотреть бесплатно! В частности, какие страницы проиндексированы, посмотреть релеватные запросы, советы по оптимизации страниц и много другой и полезной информации. Советую по чаще туда заглядывать.

Так же, можно воспользоваться бесплатной программой Site-Auditor от Ашманова. Как я сказал, она бесплатная, периодически обновляется и вполне справляется с этой задачей. Что бы проверить индексацию сайта через программу Site-Auditor, скачиваем ее с официального сайта. Запускаем софт и в меню «экспресс анализ» вбиваем наш урл, жмем «проверить».

Прога выдает нам количество страниц в индексе Яндекс и Google. Нажав на эти цифры мы попадем в выдачу ПС, где и будут наши проиндексированные страницы. Такую же проверку можно сделать, если у вас есть программа Yazzle, которой мы оценивали конкурентов.

Но бывают случаи, когда подобный анализ не совсем удобен или невозможно сделать. Например ПС обновили что-то и софт перестал работать (пока его не обновят), а вам надо срочно проверить. Или, что чаще, надо проверить индексацию конкретной страницы, а в общем списке искать не всегда удобно. Тут и поможет второй (ручной) способ.

Проверка индексации сайта в Яндексе

Проверить индексацию своего сайта в Яндексе можно в панели вебмастера webmaster.yandex.ru/. Но для этого сайт придется добавить в эту панель и подтвердить права на сайт. Без регистрации, увы, он не покажет все данные по индексации. Вот раздел с данными по индексации в панеле вебмастера.

Там вы сможете посмотреть индексацию страниц за последнюю неделю, за 2 недели и за все время.

Индексацию отдельной страницы в Яндексе проще всего в самом поиске. Тупо вбиваем страницу в строку поиска и жмем найти. Если она в индексе, Яндекс покажет ее сниппет. Если ее нет, соответственно не покажет.

Там же, если нажать зеленую стрелочку рядом с url станицы, мы сможет посмотреть сохраненную копию документа. Это та версия страницы, которая хранится в данный момент в кэше Яндекса. В кеше содержится очень важная информация - дата, когда робот последний раз посещал ваш сайт. Всегда можно глянуть в кэше, учел Яндекс или Гугл ваши последние изменения на странице или нет.

Проверка индексации сайта в Google

Что бы проверить, как ваш сайт проиндексировал Google достаточно в поисковой строке ввести специальную команду

site:имя_сайта.домен

Гугл покажет, сколько страниц в индексе. А по зеленой стрелочке (как и в Яндексе) можно посмотреть сохраненную копию страницы (содержимое кеша). Где вы увидите текущую версию страницы в базе Google. Отдельную страницу также можно глянуть просто вбив ее в поисковую строку.

Проверка индексации сайта в Rambler

Индексацию в Рамблере в данный момент можно проверить только одним путем – вбить урл в строку поиска. Там же можно посмотреть, что находится в кэше. Для этого надо нажать «копия».

Советую вам периодически проверять индексацию вашего сайта. Тогда вы сможете вовремя заметить неприятности, например, выпадение страниц из индекса. И своевременно принять меры.

Но не все станицы на сайте нужно индексировать, есть и такие, которые надо закрыть от ПС. Поэтому дальше мы разберем вопрос - как запретить индексацию сайта.

Оглавление

seob.info

Как ускорить индексацию сайта Яндексом и Google

Продвижение сайтов самостоятельно | Индексация сайта

Пожалуй, самый волнующий вопрос всех вебмастеров это как ускорить индексацию сайта в поисковых системах. Причем если Google индексирует быстро и не надо прилагать особых усилий, то индексация в Яндексе иногда затягивается надолго. Поэтому, рассматривая сегодня вопрос ускорения, мы будем в первую очередь подразумевать ускорение индексации сайта в Яндексе.

Ускорить процесс индексации можно как платными методами, так и бесплатными. Для получения гарантированного результата желательно использовать сразу несколько перечисленных ниже способов. Итак, переходим к самим способам ускорения. Я решил описать все бесплатные способы ускорения индексации, какие только возможны.

Быстрая индексация сайта в Яндексе и Google

1) Структура сайта. Продумайте и постройте структуру своего сайта так, что бы поисковый робот без труда добрался до любой страницы. Очень желательно сделать вложения страниц не более трех кликов от морды. В противном случае индексация может затянуться.

2) Внутренняя перелинковка сайта. О пользе внутренней перелинковки я уже писал. Как раз одна из ее задач это ускорение индексации ресурса. Мы помним, что бот ходит по ссылкам внутри сайта, чем больше ссылок ведут на разные страницы. Тем быстрее бот их найдет и включит в индекс.

3) Карта сайта (sitemap). Это должен быть неотъемлемый элемент любого веб-сайта. Ее основная и единственная задача - это ускорение нахождения роботом всех страниц сайта. Показать Google и Яндексу карту сайта, можно через панель вебмастера. Так же путь к ней указывается в файле robots.txt. Так же будет полезным сделать html вариант карты сайта, которая будет доступна в одном клике т главной. Все сомнений, что карта сайта хорошо помогает ускорить индексацию внутренних страниц сайта.

4) Добавление сайта в панель вебмастера Яндекса и Google. Панели вебмастера дают широкие возможности по контролю за разными параметрами сайта. И если для хороший сайтов это плюс, то для откровенных ГС будет минусом. Если у вас СДЛ то смело добавляйте.

5) Добавление в адурилки ПС. Можно добавить как новый сайт, так и новые страницы на сайте непосредственно в саму ПС через специальную форму addurl. Подробно про это читайте в статье добавление сайта на индексацию.

6) Добавление сайта в популярные рейтинги. Такие широко известные рейтинги как Рейтинг@Майл, Рамблер ТОП100 и LiveInternet часто посещаются поисковыми ботами. Соответственно если они найдут там ссылку на ваш сайт, то перейдут на него.

7) Регистрация в трастовых каталогах. Не поленитесь и отправьте заявки на добавление сайта в трастовые каталоги. Они есть у всех популярных поисковиков: На Яндексе это Яндекс.Каталог (с 2018 года не принимают новые сайты), у Googla это DMOZ (закрылся в 2017 году) и Каталог Майла. На самом деле регистрация в них нужна не для индексации а для набора траста сайта. Ведь попасть в каталог, даже если ваш сайт туда примут можно в лучшем случае через три месяца (для Я.Каталога). В дмоз же вообще можно прождать год, там жуткая нехватка модераторов и сайт будет висеть на рассмотрении до посинения...

8) Прогон по каталогам. Речь идет про регистрацию в куче низкосортных каталогов. Вручную делать это безумие, нужно пользоваться специальными сервисами. Например, я раньше пользоваться сервисом 1PS. Он мне очень нравился тем, что в ночное время можно было работать с сервисом совершенно бесплатно. В то время каждая копейка была на счету. Сейчас этот сервис предоставляет большое количество услуг, не только прогоны.

9) Публикация статей в каталогах статей. По сути, это тоже самое, что пункт выше, только там мы размещаем ссылки, а тут статьи. В сети есть большое количество таких каталогов, а так же сервисы рассылок по ним. Прогон по каталогам статей для ускорения индексации нового сайта так же можно сделать через упомянутый выше сервис.

10) Использование социальных закладок. Социальные закладки хорошо индексируются поисковиками. Вы можете сделать прогон по социальным закладкам или вручную добавить ссылки на страницы своего сайта. Отличие от прогона по каталогам в том, что в каталоги можно добавить только главные страницы, а в закладки еще и внутренние.

11) Размещение анонсов и пресс-релизов на трастовых сайтах. Процесс полностью ручной и очень трудоемкий. Я собрал свою базу трассовых сайтов через один сервис, который сейчас загнулся.

12) Используем сервисы вопросов и ответов. Сервисы вопросов и ответов очень любят поисковые боты, наравне с пользователями, которые там тусуются. Там тоже можно оставить ссылку на свой сайт, как самому, так и найти исполнителя через адвего. Если у вас нет прокаченной репы, то вашу ссылку, скорее всего, удалят модераторы. Они там очень злые))). Поэтому лучше найти хорошего исполнителя и работать с ним. Google прикрыл свой сервис, теперь там можно только читать, а вот на Mail.ru еще можно.

13) Комментарии в тематических блогах. Качественные блоги, которые не завалены рекламой, часто обновляются и имеют постоянных читателей так же часто посещаются поисковыми роботами. Такие блоги тоже можно использовать для ускорения индексации. Конечно, если будете спамить толку не будет, админы будут удалять ваши ссылки. Просто добавляйте ссылку в предназначенное для этого поле. Найти такие блоги легко, можно воспользоваться одним из Интернет-рейтингов, спросите в Яндексе «рейтинг блогов».

14) RSS-трансляция. Если на вашем сайте есть такая возможность, можно организовать RSS-трансляцию в специальные RSS-каталоги. Анонсы ваших новых материалов на других сайтах смогут привести поисковых ботов на ваш ресурс. Рекомендую добавить трансляцию в эти каталоги: Feedreader.ru, Feedburner.com, Newsread.ru, LiveRSS.ru, Rssreader.ru, Plazoo.com.

15) Используйте популярные форумы. Хороший способ ускорить индексацию сайта это ссылка в профиле популярного форума (если профиль открыт к индексации) и ссылка в подписи. Найдите топовые форумы по вашей тематике и зарегистрируйтесь в них. Боты любят форумы с большим количеством новых ежесуточных сообщений. Участвуйте в «горячих» диалогах на форуме и бот найдет вашу ссылку в подписи. Помимо индексации такие ссылки еще дадут и трафик на сайт, пусть не большой, но все же.

16) Пингование. Популярные движки для сайтов, типа Wordpress обладают функцией пингования. Т.е. они посылают сигнал ПС о новой странице на сайте. Если у вашей CMS есть такая функция - почему бы не воспользоваться ей.

17) E-mail рассылка. Доказанный факт, что быстрая индексация сайта возможна при почтовых рассылках. Особенно если люди будут переходить на рекламируемый сайт по ссылкам из почты. Самый популярный сервис для e-mail рассылки Subscribe.ru. Вам нужно там зарегистрироваться и организовать выпуск рассылки.

18) Блоги на бесплатных блогохостингах. Блоги на бесплатных хостингах LiveJournal.com (он же ЖЖ), Blogger.com, Liveinternet.ru, Blogs.Mail.ru и т.д. тоже могут помочь нам в индексации нового сайта. Заводим там себе новый блог и ставим ссылки на нужный сайт. Боты любят эти сервисы и обязательно заметят появление нового блога. Что бы ускорить этот процесс, можно завести «дружбу» с другими блогерами этого сервиса.

19) Социальные сети. Я оставил это на закуску. В данный момент это один из лучших способов ускорения индексации сайта. Особенно твиттер. Обязательно заведите себе твиттер аккаунт. Прокачайте его как следует, и это будет незаменимая вещь для индексации новых страниц сайта. Буквально через минуты, после публикации ссылки в прокаченном твиттере, станицы появляются в выдаче Яндекса. Раскрутить твиттер можно этим софтом

20) Свои сайты в помощь. Если у вас уже есть другой сайт, который в индексе - поставьте с него сквозную ссылку на новый сайт. Бот найдет ее и перейдет для изучения нового сайта.

21) Через систему автоматического продвижения SeoPult. Делается проект и закупаются ссылки на нужные вам страницы, например на карту сайта, главную и страницы разделов.

Вот мы и рассмотрели все возможные бесплатные способы повлиять на скорость индексации нового сайта или страниц. Существуют и платные способы, но они все однотипны - это размещение ссылки на чужом веб-сайте. Лично я, когда мне это нужно, иду в биржу sape делаю там проект, и покупаю 2-3 ссылки на крупных новостных сайтах. В идеале купить морду, хоть цена ее и большая. Но мы покупаем на день-два, этого достаточно для приглашения бота на сайт.

Думаю данный вопрос рассмотрен более чем подробно, пришло время поговорить, а как же проверить индексацию сайта в различных поисковиках.

Оглавление

seob.info

Индексация сайта - что это такое и кем она проводится? Экопарк Z

Индексация сайта - это процесс, проводимый роботами поисковых систем и заключающийся в исследовании ими страниц сайта с выявлением используемых слов, частоты их употребления, … со внесением полученной информации в базы данных, которые используются для формирования ответов на поисковые запросы.

Индексирование в поисковых системах (веб-индексирование) — процесс добавления сведений (о сайте) роботом поисковой машины в базу данных, впоследствии использующуюся для (полнотекстового) поиска информации на проиндексированных сайтах.

В сведения о сайте чаще всего входят ключевые слова (алгоритм определения ключевых слов зависит от поисковой системы), статьи, ссылки, документы, также могут индексироваться изображения, аудио и т. д.

Далее на этой странице выявлен и описан самый быстрый и верный способ определения числа проиндексированных страниц.

Индексация страниц сайта приводит к тому, что начинает брезжить надежда на появление посетителей из выдачи поисковых систем.

Google обычно обнаруживает и индексирует новую страницу буквально в первые 12-ть часов её существования.

Чтобы узнать, что конкретная страница проиндексирована Google, я обычно на google.ru делаю поиск по запросу название_страницы экопарк Z  Например, 12.06.2014 создал страницу Цвета, а 13.06.2014 эта страница находится на 4-м месте поисковой выдачи по запросу цвета экопарк Z

Можете проверить этот способ сначала на моём запросе, а потом и на подобном своём.

Яндекс действует значительно медленнее, на обнаружение страницы у него обычно уходит от 3-х до 7-ми дней, а индексацию, как я не совсем обоснованно считаю, он обычно проводит только тех страниц, которые имеют более ста слов.

Удалось обнаружить проиндексированные Яндексом страницы, имеющие 56-ть и 17-ть слов, поэтому считаю, что число слов, равное ста, не является чётким критерием, но уверен, что увеличение числа слов повышает шансы на индексацию Яндексом.

07.09.2014 даже обнаружил давно опубликованную страницу, имеющую лишь название и дважды упомянутое ключевое слово, совпадающее с названием. Вполне очевидные выводы делайте сами… У меня создалось впечатление, что Яндекс проиндексировал её авансом: ему просто надоело ждать , когда же страница будет наполнена текстом.

Используя сортировку на отдельном листе, выделил в таблице сайта 34-ре страницы с числом слов от 2-х до 97-ми — собираюсь вскоре существенно дополнить их текстами, ибо просто считаю неприличным иметь столь короткие страницы.

Чтобы наверняка и чётко узнать число страниц, проиндексированных Яндексом и Google, запускал программу Site-Auditor версии 2.54.1, которая выдавала информацию о числе проиндексированных страниц, но значения были сильно завышены: Яндекс - 779-ть, Google  — 940-к. Кликнув по подчёркнутому значению 779, попадаю в поисковую выдачу Яндекса. В строке поискового запроса стоит значение 779.

Перейдя в конец страницы, кликнул по +5 и перешёл на 6-ю страницу выдачи. Аналогичным образом перешёл на 11-ю, 16-ю, 21-ю, … страницы. На 46-й странице в строке поискового запроса появилось число 630-ть. Дошёл до 63-й странице и увидел число 628-мь. Именно столько страниц проиндексировал Яндекс. На сайте создано 645-ть страниц, согласно чёткой информации WordPress. 17-ть страниц по разным причинам ещё не попали в число проиндексированных.

За последние два дня создал примерно 11-ть страниц, которые наверняка ещё не проиндексированы Яндексом. 6-ть страниц — это, пожалуй, заготовки страниц, содержащие совсем мало слов. Таким образом, можно считать, что с индексацией страниц сайта Яндексом всё в порядке!

Считается, что можно узнать число страниц, проиндексированных Яндексом, набрав в адресной строке браузера на сайте yandex.ru запрос site:адрес_сайта

Попробовал — получил 2000-чи ответов. Кликнул по адресной строке браузера, информация в ней стала более подробной. Увидел в конце p=1 (то есть page=1), заменил 1 на 65 — попал на 63-ю страницу, так как 65-я не существует. В строке запроса увидел 628-мь ответов.

Вот так обнаружил быстрый и верный способ определения числа проиндексированных страниц.

Попытался аналогичным образом, танцуя от Site-Auditor, определить число страниц, которые проиндексированы Гуглом. Вместо 940-ка сначала получил значение 779-ть, последней страницей выдачи оказалась 43-я, причём с 35-й страницы в теле сниппетов появлялась запись «Описание веб-страницы недоступно из-за ограничений в файле robots.txt«. То есть реально Гугл индексирует всего лишь примерно 350-т страниц!

Начал разбираться. Файл robots.txt не редактировал, он у меня стандартный — просмотрел его текст, но ничего странного не заметил — последние две строки, как положено, указывают путь к двум файлам Sitemap. Странно то, что файлы Sitemap не менялись с 31.03.2014

Деактивировал плагин Google XML Sitemaps, который должен формировать два файла Sitemap. Снова активировал плагин, но он не сформировал новые файлы Sitemap. Деактивировал плагин Google XML Sitemaps

Подобрал другой плагин: Sitemap - сразу активировал его. Понаблюдаю за его действиями и попытаюсь наладить обновление двух файлов Sitemap, чтобы облегчить деятельность поисковых роботов и нарастить число страниц, нормально проиндексированных Гуглом.

Странная наблюдается ситуация: в панели управления хостинга два файла Sitemap не видны, но по адресу http://ep-z.ru/sitemap.xml файл виден. Снова активировал плагин Google XML Sitemaps, предварительно деактивировав плагин Sitemap.

Хотя прошёл слушок, что вскоре Гугл перестанет функционировать в России, пренебрегать трафиком с него не имеет смысла. За последние 30-ть суток Гугл дал 10,88 % посетителей (2160-т), что примерно в 8-мь раз меньше, чем Яндекс.

Самый быстрый и верный способ узнать число страниц, проиндексированных Яндексом, — заглянуть на страницу Мои сайты панели Вебмастера Яндекса по адресу http://webmaster.yandex.ru/sites/ Само собой разумеется, что сайт предварительно должен быть внесен в список сайтов!

Пришёл к выводу, что проще всего определить число страниц, проиндексированных Яндексом, если обратиться по адресу http://yandex.ru/search/?text=site%3Aep-z.ru&clid=9403&lr=213&p=99

Индексация страниц сама по себе мало что значит, ибо посетители на страницы сайта приходят, в основном, из так называемого ТОП10, то есть с первой страницы поисковой выдачи. Поэтому надо стараться, чтобы созданные страницы поскорее попадали в ТОП10.

Сколько времени нужно, чтобы страница попала в ТОП10? Иногда мне удавалось этого добиться за 30-ть, а за 55-ть суток удавалось вывести страницу на 1-е место в Яндексе по высокочастотному запросу! Крайний пример можете посмотреть на странице Как сделать быстрый сайт.

Многие страницы этого сайта побывали на первой позиции Яндекса, но с течением времени потеряли её — чтобы этого не происходило, нужно, как мне представляется, регулярно обновлять и совершенствовать эти страницы, обращая особое внимание на привлекательность Сниппета, ибо от него зависит переход на страницу.

В 2016-м году заметил, что Яндекс отказывается индексировать более тысячи страниц на моём сайте, причём это относится не только к моему сайту.

29-го апреля 2016-го года на сайте опубликовано 1124-ре страницы, Site-Auditor версии 3.0.12.beta сообщает, что Google проиндексировал 1240-к страниц, а Bing — 1120-ть страниц. Проверка показала, что Google проиндексировал 390-то страниц, а Bing — 1000-чу страниц, как и Яндекс. Получается, что полностью верить Site-Auditor версии 3.0.12.beta нельзя!

Если Вам нужно продвинуть страницу в ТОП10, посетите страницу Услуги.

Приглашаю всех высказываться в Комментариях. Критику и обмен опытом одобряю и приветствую. В хороших комментариях сохраняю ссылку на сайт автора! И не забывайте, пожалуйста, нажимать на кнопки социальных сетей, которые расположены под текстом каждой страницы сайта.

ИндексацияПродолжение тут…

ep-z.ru