bliver jeg mere synlig i søgemaskinerne, hvis jeg har lagt en robots.txt-fil på mit website?
nej, er det korte svar. du bliver ikke mere synlig, his du lægger en robots.txt-fil på dit website.
robots.txt er en de facto standard, du kan bruge til at fortælle søgemaskinerne, hvilke websider fra dit website du ikke ønsker, at de crawler. det er en ekskluderingsstandard, ikke en inkluderingsstandard, og det giver ingen ekstra point at bruge den.
så brug kun robots.txt, hvis du faktisk har brug for at udelukke bestemte sider eller områder på dit website.
du kan læse mere om robots.txt her:
www.robotstxt.org