Как уже было сказано, если поисковый механизм обнаруживает, что много различных URL-адресов Web-сайта содержат один и тот же контент, он может его вовсе не проиндексировать; в худшем случае, при интенсивном применении, он может расценить
сайт как источник спама и оштрафовать его.
К сожалению, многие Web-сайты "вынуждены" создавать дублированный контент — в силу технических соображений и бизнес-правил. Но зачастую для этих соображений и правил можно найти и лучшие решения. Концепции URL-адресов и дублированного контента тесно связаны. В этой и следующей главе будут рассмотрены технические
моменты, относящиеся к подмене и перенаправлению URL, а в главе 5 будет проведен анализ концепции дублирования контента.