Funderar på om man måste skriva ut metataggen "robots" index, follow eller om man bara ska använda det vid noindex, nofollow?
Funderar på om man måste skriva ut metataggen "robots" index, follow eller om man bara ska använda det vid noindex, nofollow?
Här har du en bra sida med tips och tillvägagångssätt.
http://tools.seobook.com/robots-txt/
Och svaret är att det behöver du inte ange alls Google kommer hitta och indexera webbplatsen utan index, follow.
Redan 2007 påpekade Google det http://googlewebmastercentral.blogsp...-meta-tag.html
däremot om du inte vill indexera och länkarna skall följas så gäller noindex, nofollow.
Tror att det där med att ange index,follow är en mycket gammal kvarleva från slutet av 90-talet som hängt med sedan dess.