Сайт в Интернете может "видеться" по разным URL. Самый распространенный вид различных урлов - это адрес сайта с www и без www. К примеру, наш сайт доступен по двум разным URL: http://adlabs.ru/ и http://www.adlabs.ru/. С точки зрения поисковых систем, изначально эти два URL рассматриваются как два абсолютно различных сайта. Поэтому, если где-то в Интернете роботы поисковых систем встретят ссылки на наш сайт в обоих вариантах, они будут индексировать одно и то же содержимое как два разных сайта. И только потом, когда они начнут процесс удаления из своего индекса дубликатов сайтов, дублирующиеся URL исчезнут. Однако, в этот момент может произойти неприятность - поисковые системы оставят в своем индексе неправильные URL. И в этом случае сайт может существенно потерять свои позиции по тем или иным поисковым запросам. Чтобы этого не произошло, необходимо еще на начальном этапе работ решить эту проблему.

Для поисковой системы Яндекс проблему решить очень просто: в её формате файла robots.txt есть директива Host, которая позволяет в явном виде задать адрес главного зеркала сайта, и, таким образом, избежать повторного индексирования сайта по неосновным URL. Описание директивы

Для всех поисковых систем проблема решается посредством настройки 301-го редиректа по всем неправильным URL путем их "переброса" на правильные.