Hej
Har stött på lite patrull när jag försöker blockera vissa sidor på min sida.
Har valt att använda robots.txt, men ser nu att en hel del sidor fortfarande indexeras fast med beskrivningen: "En beskrivning av det här resultatet är inte tillgänglig på grund av webbplatsens robots.txt".
Jag vill inte ha dem i SERP över huvud taget. Är det bara meta tagen robots som kan fixa detta?
Ska jag helt skrota min robots.txt och köra helt på meta för innehåll som ska blockeras.
Hur gör ni andra.
Mvh Magnus