Google indexerar sidor trots robots.txt
Vad är det som bestämmer om man har både meta taggar och en robots.txt?
Har en wordpressblogg där jag har följande kodsnutt i header.php:
PHP-kod:
<?php if(is_single() || is_page() || is_home()) { ?>
<meta name="googlebot" content="index,noarchive,follow,noodp" />
<meta name="robots" content="all,index,follow" />
<meta name="msnbot" content="all,index,follow" />
<?php } else { ?>
<meta name="googlebot" content="noindex,noarchive,follow,noodp" />
<meta name="robots" content="noindex,follow" />
<meta name="msnbot" content="noindex,follow" />
<?php }?>
Samtidigt har jag en robots.txt som blockerar bl.a. alla feed och trackback-adresser. Trots det hamnar dessa sidor i Googles index. Jag misstänker att problemet är att jag använder båda varianterna.
Bloggen har adressen: httpx://vistatips.se
Skriver jag site:vistatips.se för att få upp alla indexerade sidor är dessa feed och trackback sidor med. Visserligen i supplemental results men ändå.
Någon som vet vad detta beror på?
