robots.txt

[Hansen]

Hej!

filen robots.txt som ligger på webservern

Rad 1: User-Agent: *
Rad 2: Allow: /
Rad 3: Sitemap: http://www.example.se/sitemap.xml



Google Webmaster Tools säger:

Analysera resultaten

Värde Resultat
Rad 1: ?User-Agent: * - Syntax kan inte tolkas
Rad 2: Allow: / - Ingen user-agent har angetts
Rad 3: Sitemap: http://www.example.se/sitemap.xml - Giltig hänvisning till webbplatskarta hittad



Det finns inget mellanrum eller "?" i robots.txt filen. Men ändå så säger Google det och resultatet blir "Syntax kan inte tolkas".

Vad kan detta bero på?

[tuben]

hmm...

Mitt tips är att du väljer att radera raderna:

Rad 1: User-Agent: *
Rad 2: Allow: /

Då du verkar önska att sökmotorerna skall indexera allt på webbplatsen.

Alternativ byter ut "User-Agent:" till "User-agent:" och testar.

[Tobias Nyholm]

Frågetecknet är där för att det finns rester av ett specialtecken. Tubens förslag att radera raden och skriva den igen kommer att fungera.