Специалисты Bing учат как скрывать сайты дубли от краулера

02-05-2012

Опираясь на то, что регулярно в сети появляется множество новых URL-адресов, с дублированным контентом, усложняющих работу поисковых платформы и снижающих релевантность выдачи. Бинг опубликовал в официальном блоге информацию о том, как удалять дублирующие страницы из индекса.

Рассмотрели два метода, применение атрибута выбора rel="canonical" и инструмента URL-нормализации. Второму, отдали предпочтение специалисты сервиса, ведь он располагает рядом преимуществ:
избавляет ресурс от постоянного индексирования с расширенными фильтрами;
автоматом распознает дублированные страницы на ресурсе и извещает администратора о них;
дает возможность выбрать веб-страницы, которые будет пропускать краулер поисковика. Найти его можно в средствах для веб-мастеров Bing.

использована публикация www.bing.com

Сайт под ключ