Джон Мюллер об определении релевантности закрытых в robots.txt веб-страниц

Джон Мюллер об определении релевантности закрытых в robots.txt веб-страниц

От автора: Google определяет релевантность веб-страниц, заблокированных для сканирования в robots.txt, опираясь на результаты анализа источников, которые ссылаются на публикацию.

Отвечая на вопросы вебмастеров, Джон Мюллер рассказал, как Google оценивает релевантность контента веб-страниц, сканирование которых запрещено в robots.txt.

Ранее Джон упоминал, что Googlebot может индексировать подобные страницы только в том случае, если на них ссылаются другие публикации. Но как поисковик может оценивать релевантность заблокированных страниц запросу, введенному пользователю?

Мюллер отметил, что контент закрытых в robots.txt публикаций не доступен для сканирования. Поэтому чтобы определить релевантность такой веб-страницы, Googlebot опирается на результаты анализа доноров, которые ссылаются на нее.

Но заблокированный в robots.txt контент крайне редко попадают в поисковую выдачу. При ее формировании Google отдает предпочтение открытым для индексирования источникам.

JavaScript. Быстрый старт

Изучите основы JavaScript на практическом примере по созданию веб-приложения

Узнать подробнее

Источник: https://www.searchenginejournal.com

Анатомия прибыльного лендинг пейдж

Прямо сейчас посмотрите мастер-класс по лендингам!

Смотреть

Метки:

Похожие статьи:

Комментарии Вконтакте:

Комментарии Facebook:

Добавить комментарий