Мы могли бы кратко изложить в этом абзаце содержание всей главы, но это было
бы дублированием контента! А т.к. мы не хотим раздражать читателей, то будем краткими.
В идеальном случае каждый URL в Web-сайте должен указывать на уникальную
страницу. К сожалению, в реальности подобное бывает редко. Но нужно стараться
устранять как можно больше повторений. Следует избегать применения параметров в URL-адресах, которые не имеют существенного влияния на вывод информации. Но если так не получается (как в проблеме с трассовой навигацией), необходимо исключать URL-адреса, которые приводят к дублированию контента. Для этого в вашем арсенале имеются два проверенных средства: исключение с помощью файла robots.txt и исключение с помощью дескриптора meta.