Что такое переобход страниц
Переобход страниц в Яндекс.Вебмастер: что это и как его использовать?
Переобход страниц в Яндекс.Вебмастер — это полезная и популярная функция, позволяющая отправить сигнал боту список URL, которые в первую очередь необходимо проиндексировать.
Что это и как использовать?
После подключения к сервису Яндекс.Вебмастер потребуется перейти в раздел «Инструменты»-«Переобход страниц».
В специальном поле потребуется ввести URL страниц, которые потребуется обойти в первую очередь и нажать на «отправить»
Важно! Дневной лимит по умолчанию 20 страниц, но может быть увеличен в зависимости от размера сайта.
Важно! Можно вводить как полный URL, так и относительный (пример, «/otnositelniy-url/»).
В течение некоторого времени робот обойдет страницы и в таблице ниже появиться статус задачи.
Полный переобход по Sitemap
Чтобы робот полностью проиндексировал все страницы потребуется в Вебмастере перейти «Индексирование»-«Файлы Sitemap».
Далее напротив нужного файла карты сайта нажать на специальную кнопку, после чего начнется полный обход веб-ресурса по указанным адресам.
Важно! Точный срок завершения задачи не известен, но в среднем занимает от 1 до 7 дней (по наблюдениям) в зависимости от размера карты.
Важно! Запуск данного инструмента возможен не чаще чем 1 раз в месяц.
Отслеживание и возможности
При клике на кнопку «Отслеживать» пользователь попадает на инструмент «Мониторинг важных страниц».
Здесь можно будет поставить уведомления на изменения кода ответа или заголовков, что позволит всегда вовремя исправлять ошибки на сайте.
Для того, чтобы получить список URL, которые потребуется заново проиндексировать поисковому роботу Яндекса можно воспользоваться следующими функциями:
Выгрузив таблицы в Excel и сравнив с данными по поисковым посещениям Яндекс.Метрики или раздела «Поисковые запросы» в Яндекс.Вебмастер, можно быстро исправить ошибку и отправить нужный URL на переобход.
Для чего переобход страниц вебмастере Яндекс
Но а главное, что в сутки только разрешается отправить 10 запросов и робот обойдет куда по ссылки вы послали его, но вот в поиске он появится может сразу, или через какое то время. Здесь все будет зависит от самого контента, если он оригинальный, то это хорошо сделали и вы направили робота и он просто ваш материал просканировать и если кто скопирует и у него в поиске появится быстрей, то когда ваш появится, то он будет первоисточником.
Как найти все показано на изображение.
Если веб мастере не один сайт зарегистрирован, то выше вы увидите какой домен прописан и вам нужно обязательно выставить тот где вы писали или закачали материал и хотите отправить ссылку. Если поставите другой и пошлете с другого имени, то здесь не чего не получиться. Просто вас попросят выставить тот сайт кому эта ссылка принадлежит.
Что она быстро индексирует, здесь по всякому можно рассматривать, как уже говорилось, все зависит от самого сайта и его контента и он должен обязательно быть оригинальным. И только в таком случай вы увидите его в поиске, может сразу быстро робот выведет, или вы будете проверять и не найдете а через пару часов он появится и покажет время, когда был замечен материал, это основном в то примерно время когда вы отправили.
«Приоритетный переобход» Яндекса: зачем, для кого и как работает
В Яндекс.Вебмастере появился «Приоритетный переобход страниц». Так вы можете сообщить индексирующему роботу о тех страницах, которые требуют приоритетного обхода.
Зачем этот инструмент?
Например, нужно сделать так, чтобы текст в сниппетах был заменен на новый, уже обновленный на самой странице. Или нужно ускорить попадание в поиск новых страниц с только что поступившим товаром или новостью.
Также инструмент предоставляет возможность быстро вернуть выпавшие из поиска страницы из-за неправильной настройки сервера, ограничений в robots.txt или любой другой проблемы с доступностью сайта для индексирующего робота.
Как работает инструмент?
«Приоритетный переобход» вы найдете в новом Вебмастере в разделе «Инструменты». На данный момент можно запросить переобход до 10 страниц в день для каждого подтвержденного сайта. После подачи заявки вы увидите дин из трех статусов обработки заявки:
Хотите подробностей?
Ниже предлагаем запись Пятой Вебмастерской Яндекса. «Приоритетный переобход страниц» был анонсирован в рамках второго доклада.
Необходимость переобхода страниц в Яндекс вебмастере
Для того чтобы новость, пост в блоге или заполненная карточка с товаром начала работать и приносить трафик, необходимо, чтобы она была проиндексирована поисковыми системами (ПС) и попала в выдачу.
Для ускорения этого процесса и существует функция переобхода. Это как отправить напоминание роботу о том, что с ресурсом все в порядке и пора бы пустить его в работу.
Чем может быть вызвана необходимость переобхода
Этот инструмент применяется, когда в проекте появились какие-то изменения:
Причины медленной индексации
Это могут быть проблемы с дублями, ошибками (например, 404), неправильными ссылками. Также ресурс может быть закрыт от индексации для ПС. А еще проект может пострадать, если вы давно не выкладывали новый материал. Уделите внимание структуре сайта: когда от главной до последней страницы требуется более пяти кликов, это стопорит обход краулерами.
Как запустить в Yandex.webmaster
Решить эту проблему можно, запустив ручной переобход в Яндекс.Вебмастер.
Последовательная переиндексация
Переобход по Sitemap
Чтобы не возиться с каждой страницей отдельно, в случае если у вас большой сайт и имеется Sitemap, можно запустить переобход сразу всех адресов.
Важно! Страницы, которые отсутствуют в карте сайта, проиндексированы не будут.
Процедуру можно проводить не чаще раза в месяц, переобход занимает до семи дней.
Что делать, если появился статус «Ошибка»
После отправки ресурса на переиндексацию в графе «Статус» можно увидеть, что адрес находится в очереди или что переобход совершен — «Робот обошел». Однако бывает и такое, что выходит ошибка: краулер не смог посетить страницу. В этом случае необходимо проверить, доступна ли она.
Открываем в Яндекс.Вебмастер вкладку «Проверка ответа сервера», добавляем в поле «Опрашиваемый URL» пропущенный адрес и нажимаем «Проверить». 
Если все в порядке и страница доступна для робота, отправьте ее на переобход повторно. В противном случае устраняем ошибку (инструмент проверки подскажет, какую) и переходим к переиндексации.
Функция отслеживания статуса
Чтобы вовремя узнать о наличии ошибки и устранить ее, полезно воспользоваться отслеживанием. Для этого нажимаем на кнопку «Отслеживать» и настраиваем уведомления. 
Зависимость ранжирования от переобхода в Яндексе и Гугле
Напрямую переобход на позицию сайта в поисковой выдаче не влияет. Однако чем быстрее ресурс с качественным уникальным контентом, обросший хорошей ссылочной массой, будет проиндексирован, тем быстрее он попадет в ТОП.
Считается, что, если есть хороший Sitemap, то нет особых причин прибегать к инструменту переиндексации. В то же время, если вы столкнулись с ошибками страниц или попали под санкции или фильтры ПС и после устранения проблем хочется, чтобы качественный контент побыстрее был просмотрен краулерами и пользователи смогли увидеть его.
В таких случаях имеет смысл воспользоваться переобходом. А также это помогает избежать сложностей с авторским правом (если страница вора вашего уникального контента будет проиндексирована быстрее, то вы можете попасть под фильтры как человек, выложивший неуникальную статью или описание товара).
А вы пользуетесь инструментом переобхода? Делитесь опытом в комментариях!
Переиндексация страниц сайта в Яндексе и Гугле
Всегда после обновления старых текстов блога я делаю повторную переиндексацию страниц сайта в ручном режиме. Это позволяет максимально быстро предоставить поисковикам актуальную исправленную версию веб-страницы, не дожидаясь появления поискового робота. Для выполнения задачи можно использовать специальные функции панелей вебмастеров Яндекс и Google. В последней недавно поменялся принцип работы и интерфейс, поэтому решил дополнить первоначальную версию статьи.
По идее, ручной переобход страниц сайта кроме изменений информации о них и их содержимом в выдаче также должен обновить данные в кэше поисковиков. Думаю, метод также подходит и для возвращения случайно выпавших URL’ов проекта из-за ошибок сервера и др.
В моем блоге встречались разные механизмы индексации, например, использование адурилки поисковиков или установка Яндекс Пингер и т.п. Однако это больше касается первичного добавления в индекс, как, например, создание XML Sitemap. Для нашей же задачи были разработаны специальные инструменты в панели вебмастеров.
Переобход страниц в Яндекс.Вебмастер
Данная функция появилась в новом Яндекс Вебмастере чуть позже после релиза. Если вы еще не зарегистрированы в этом сервисе, обязательно советую это сделать — webmaster.yandex.ru. После подтверждения прав на свой вебсайт можете зайти в раздел «Индексирование» — «Переобход страниц».
Здесь в текстовом поле указываете ссылки, на которые хотите привлечь поискового робота. Раньше дневной лимит составлял 20шт на один проект, сейчас, как я понимаю, число зависит от показателя ИКС.
После нажатия «Отправить» внизу под формой отобразятся новые страницы для переиндексации в Яндексе. Всего у них есть 3 статуса:
После этого остается лишь ждать очередного апдейта.
Переиндексация страниц в Google
Чуть ниже рассмотрена старая версия данной процедуры, но с обновлением дизайна Google Search Console все немного изменилось.
Чтобы запросить индексирование страницы требуется:
Насколько я понимаю, в первом случае Google проверяет страницу, но не отправляет ее на индексацию, а позже робот Googlebot в общем порядке сам туда заглянет. По второй ссылке запрос попадает в так называемую «приоритетную очередь сканирования».
Кстати, судя по времени выполнения второй заявки, перед отправкой на переобход веб-страничка автоматически проходит такую же проверку, как предполагает первый вариант. Если вам она только и нужна, то сразу кликайте опцию «Запросить индексирование». В итоге увидите сообщение:
Если честно, по сравнению с прошлым алгоритмом тут одни сплошные минусы:
Прошлым методом можно было добавить в сутки где-то с 10-ток линков, и все это занимало не более минуты. Здесь, к сожалению, не так.
Переобход страниц в Google (старая версия)
Выполнение подобной задачи в Гугле аналогично Яндексу, хоть и включает в себя больше шагов. Ваш сайт также должен быть добавлен в панель вебмастера, но уже Google Search Console. Находите в инструментах раздел «Crawl» (Сканирование) — «Fetch as Google» (Посмотреть как Googlebot).
После этого отобразится всплывающее окно, где выбираете один из вариантов переобхода страницы Гуглом:
Разумеется при всем при этом переобход страниц в Яндекс.Вебмастере или Google Search Console не гарантирует того, что новая информация с вашего URL будет добавлена в индекс. Соблюдение алгоритмов и требований к контенту никто не отменял. По времени переиндексации — эти инструменты определенно ускоряют процесс, но это не значит, что он будет выполнен моментально. Во всем остальном — решение хорошо работает и позволяет нормальным проектам побыстрее обновить информацию в индексе поисковиков.
Если у вас есть что добавить по теме переиндексации страниц сайта, пишите в комментариях. Возможно, какие-то детали я пропустил.