Resultat 1 till 14 av 14

robot.txt fråga

  1. #1
    Jacob Jarnvalls avatar
    Jacob Jarnvall Jacob Jarnvall är inte uppkopplad Kan SEO rätt bra
    Reg.datum
    apr 2007
    Inlägg
    167
    Hej!

    är inte säker på huruvida detta är rätt forum, annars skulle det uppskattas om det kunde flyttas rätt

    fråga 1. vad är fördelen/nackdelen att använda robotinstruktioner direkt i koden kontra att använda en robot.txt fil? example:

    <meta name="robots" content="index, follow" />
    <meta name="googlebot" content="index, follow" />

    fråga 2. Vad är skillnaden på att ge generella regler för alla robots och för googlebot? varför gör man det? (exemplet ovan är hämtat ifrån en större sites source code)

  2. #2
    webguides avatar
    webguide webguide är inte uppkopplad Behöver bekräfta sin e-postadress
    Reg.datum
    feb 2006
    Ort
    Stockholm
    Inlägg
    888
    Hmmm, de instruktioner du ger i dessa båda taggar är defaultvärden = du behöver inte ange dem. Om inget annats står i robots eller meta-robots så antar sökmotorerna att hela siten skall spindlas.
    Jag använder aldrig metataggarna för robots eller robots.txt om jag inte vill utesluta något...

  3. #3
    Jacob Jarnvalls avatar
    Jacob Jarnvall Jacob Jarnvall är inte uppkopplad Kan SEO rätt bra
    Reg.datum
    apr 2007
    Inlägg
    167
    Citat Ursprungligen postat av webguide
    Hmmm, de instruktioner du ger i dessa båda taggar är defaultvärden = du behöver inte ange dem. Om inget annats står i robots eller meta-robots så antar sökmotorerna att hela siten skall spindlas.
    Jag använder aldrig metataggarna för robots eller robots.txt om jag inte vill utesluta något...
    Tack för svaret! Men om jag har en admin panel inloggningssida som jag inte vill skall indexeras? hur bör jag göra då? använda meta-robots eller txt?

    Och skall jag inkludera både googlebot och robots?

  4. #4
    Joppedis avatar
    Joppedi Joppedi är inte uppkopplad Kan SEO rätt bra
    Reg.datum
    maj 2006
    Ort
    Skåne
    Inlägg
    36
    Jag utgår ifrån att alla sökmotorer läser robot.txt så det ska räcka med att ange vad man vill i den. Enklare att samla den infot på ett ställe.
    Du behöver inte ange googlebot separat om du inte vill att den ska bete sig på nåt annat sätt.

  5. #5
    Jacob Jarnvalls avatar
    Jacob Jarnvall Jacob Jarnvall är inte uppkopplad Kan SEO rätt bra
    Reg.datum
    apr 2007
    Inlägg
    167
    okay, men hur gör jag för att robotarna inte skall indexera t.ex. /adm?


    Använder jag samma koder för googlebot som för robotarna i övrigt?

  6. #6
    webguides avatar
    webguide webguide är inte uppkopplad Behöver bekräfta sin e-postadress
    Reg.datum
    feb 2006
    Ort
    Stockholm
    Inlägg
    888
    Citat Ursprungligen postat av jacobjs
    okay, men hur gör jag för att robotarna inte skall indexera t.ex. /adm?


    Använder jag samma koder för googlebot som för robotarna i övrigt?
    Ja.

  7. #7
    Jacob Jarnvalls avatar
    Jacob Jarnvall Jacob Jarnvall är inte uppkopplad Kan SEO rätt bra
    Reg.datum
    apr 2007
    Inlägg
    167
    Citat Ursprungligen postat av webguide
    Ja.

    Kanon! tack för all hjälp!

  8. #8
    Magnus-SEOs avatar
    Magnus-SEO Magnus-SEO är inte uppkopplad Kan SEO rätt bra
    Reg.datum
    maj 2006
    Ort
    Stockholm
    Inlägg
    227
    Säg åt Google att inte indexera katalogen /hidden/:

    User-agent: googlebot
    Disallow: /hidden/


    Säg åt alla sökspindlar att inte indexera en fil och en katalog:

    User-agent: *
    Disallow: /filnamn.html
    Disallow: /katalog/

  9. #9
    JonasHs avatar
    JonasH JonasH är inte uppkopplad SEO-proffs
    Reg.datum
    maj 2007
    Inlägg
    20
    Kanon!

  10. #10
    Masterminds avatar
    Mastermind Mastermind är inte uppkopplad Kan SEO rätt bra
    Reg.datum
    nov 2006
    Ort
    Mälardalen
    Inlägg
    92
    Skillnaden mellan att skapa en robots.txt fil och att skriva in en meta-tagg för robots är att meta-taggen är till för dem som inte kan skapa textfiler eller kataloger på sin server. Eller dem som av annat skäl vill exkludera en enda enskild sida, förstås.

  11. #11
    Christian Bolstads avatar
    Christian Bolstad Christian Bolstad är inte uppkopplad SEO-proffs
    Reg.datum
    dec 2006
    Ort
    Stockholm
    Inlägg
    133
    Citat Ursprungligen postat av Mastermind
    Skillnaden mellan att skapa en robots.txt fil och att skriva in en meta-tagg för robots är att meta-taggen är till för dem som inte kan skapa textfiler eller kataloger på sin server. Eller dem som av annat skäl vill exkludera en enda enskild sida, förstås.
    Något att tänka på:

    Det finns få saker som väcker folks uppmärksamhet mer än att hitta filer och kataloger listade i robots.txt. Om du har en sida som du vill hålla under radarn är det säkrast att använda metataggar - då måste det ju finnas en länk till sidan någonstans för att någon av misstag ska ramla över den.

  12. #12
    Reg.datum
    apr 2006
    Ort
    Stockholm
    Inlägg
    354
    Vill bara påpeka att robots.txt INTE är ett sätt för att skydda filer från obehöriga eller liknande. Sett ett antal sidor med meta noindex som egentligen borde vara skyddade med htaccess eller liknande...

  13. #13
    StePs avatar
    SteP SteP är inte uppkopplad Lär mig SEO
    Reg.datum
    jun 2007
    Inlägg
    25
    Behöver man sätta disallow på alla underkataloger i robots.txt om man har disallowed huvudkatalogen?

    Dvs.

    User-Agent: *
    Disallow: /min-katalog/

    Behöver man skriva:

    User-Agent: *
    Disallow: /min-katalog/
    Disallow: /min-katalog/min-katalog2/

    Eller räcker det med exempel 1 för att inte indexera underkatalogen min-katalog2?

  14. #14
    Christian Bolstads avatar
    Christian Bolstad Christian Bolstad är inte uppkopplad SEO-proffs
    Reg.datum
    dec 2006
    Ort
    Stockholm
    Inlägg
    133
    Det första exemplet räcker - se det som att det finns en osynlig asterisk efter
    katalognamnet.

    http://www.robotstxt.org/wc/faq.html är bra gruva för information i ämnet

Ämnesinformation

Användare som tittar på det här ämnet

Det är för närvarande 1 användare som tittar på det här ämnet. (0 medlemmar och 1 gäster)

Liknande ämnen

  1. Fråga om dynamiska databaser och nyckelord
    Av Jacob Jarnvall i forum Optimering
    Svar: 4
    Senaste inlägg: 2007-05-22, 12:32
  2. Google Toolbar för Firefox, fråga ang PR-stapeln
    Av seattlegrunge i forum PageRank
    Svar: 5
    Senaste inlägg: 2007-04-19, 00:48
  3. Rent hypotetisk fråga...
    Av Nisse i forum Länkbygge
    Svar: 4
    Senaste inlägg: 2007-01-25, 22:16
  4. Newbie har en fråga
    Av MrGa i forum Google
    Svar: 15
    Senaste inlägg: 2006-08-08, 10:13
  5. Fråga till de som jobbar mycket med PPC
    Av Bernt Johansson i forum Google AdWords
    Svar: 5
    Senaste inlägg: 2006-05-11, 09:50