Når du har en hjemmeside, vil du selvfølgelig gerne have at Google og de andre søgemaskiner, indexerer det hele. Desværre er de fleste CMS-systemer overivrige, og viser det samme indhold på flere måder.
Dette indlæg fortæller hvordan du kan udnytte robots.txt til at søgemaskineoptimere så du bliver synlig på den rigtige måde, uden duplicate kontent.