Meta robots är en HTML-tagg i sidans head som talar om för Google och andra sökmotorer vad de får göra med just den sidan: indexera den eller inte, följa länkarna eller inte. Den syns aldrig för en besökare, men den avgör om sidan över huvud taget kan dyka upp i sökresultaten.
Tänk dig att du precis lanserat en kampanjsida som bara ska vara aktiv i två veckor, eller en tacksida efter ett formulär. Du vill inte att de ska konkurrera med dina riktiga sidor i Google. Det är precis sådana fall meta robots löser: med ett par ord i koden bestämmer du om en sida ska finnas i indexet eller hållas utanför, utan att ta bort själva sidan.
★ SNABBVERSIONEN
- Meta robots styr indexering och länkföljning per sida, direkt i HTML-koden.
- De vanligaste värdena är noindex och nofollow, samt standardvärdet index, follow.
- En sida måste vara krypbar för att Google ska hinna läsa din meta robots-tagg.
- Meta robots och robots.txt löser olika saker och ska inte blandas ihop.
- I WordPress sätter du oftast taggen via Yoast SEO eller Rank Math, inte i koden.
Vad en meta robots-tagg i Google faktiskt är
En meta robots-tagg är en så kallad meta-tagg, alltså en kodrad som ger sökmotorer instruktioner snarare än innehåll till läsaren. Den placeras i sidans <head> och listar dina direktiv som ett innehåll knutet till namnet robots.
Det fina är att taggen är riktad mot en enda sida. Robots.txt och en sitemap arbetar på sajtnivå, men meta robots ger dig kontroll sida för sida. Det är ett av de mer exakta verktygen i den tekniska SEO-lådan som börjar med hur Google hittar dina sidor, och det kräver ingen särskild plattform.
Taggen kan rikta sig till alla sökmotorer på en gång med name="robots", eller bara till Googles crawler med name="googlebot". Räkna med att de stora sökmotorerna respekterar dina direktiv och att en del mindre bottar struntar i dem.
Varför meta robots spelar roll för din SEO
Allt innehåll på din sajt hör inte hemma i Googles index. Interna sökresultat, filtrerade produktlistor, utskriftsversioner och tacksidor kan späda ut din synlighet om de hamnar i sökresultaten. Med meta robots håller du dem utanför utan att radera dem.
Det handlar också om hur Google fördelar sin tid på din sajt. När du styr bort tunn eller dubblerad content från indexet hjälper du sökmotorn att lägga kraften på de sidor som faktiskt ska ranka, vilket hänger tätt ihop med en genomtänkt innehållsstrategi för vilka sidor du vill ska synas.
- Du undviker att tunna sidor konkurrerar med dina viktiga sidor.
- Du slipper dubbletter som riskerar att förvirra Google.
- Du håller känsliga eller temporära sidor borta från sökresultaten.
- Du får finkornig kontroll utan att röra robots.txt.
NINJA-FAKTA
Saknar en sida helt en meta robots-tagg utgår Google från värdet index, follow. Standardläget är alltså att allt får indexeras och alla länkar följas, så du behöver bara agera när du vill avvika.
Vanliga värden och vad de betyder
Innehållet i taggen är en lista med ett eller flera direktiv, separerade med komma. Här är de du oftast stöter på.
- index - sidan får indexeras och visas i sökresultaten.
- noindex - sidan ska inte indexeras eller visas i sökresultaten.
- follow - länkarna på sidan får följas och föra vidare värde.
- nofollow - länkarna på sidan ska inte följas.
- noimageindex - bilderna på sidan ska inte indexeras.
- noarchive - Google ska inte spara en cachad kopia av sidan.
- nosnippet - inget textutdrag får visas i resultatet.
- none - en genväg som betyder samma sak som noindex, nofollow.
Hur kombinerar du flera värden?
Du kan stapla flera direktiv i samma tagg. En vanlig kombination är noindex, follow, som håller sidan utanför indexet men låter Google fortsätta vidare via länkarna. Det passar ofta för paginerade arkivsidor.
Krockar två direktiv vinner i regel det mest restriktiva. Anger du både index och noindex tolkar Google det som noindex för säkerhets skull, så undvik att råka skriva motstridiga värden.
Meta robots jämfört med robots.txt
Det här är förvirringen som ställer till mest i praktiken. Båda handlar om att styra sökmotorer, men de jobbar i olika steg och löser olika saker.
Robots.txt
- Ligger i roten på domänen som en enda fil.
- Styr om en sida får krypas över huvud taget.
- Gäller mönster av URL:er och hela kataloger.
- Hindrar inte alltid en sida från att indexeras.
Meta robots
- Ligger i varje enskild sidas HTML-head.
- Styr vad som får göras efter att sidan lästs.
- Gäller exakt den sida den sitter på.
- Är det säkra sättet att hålla en sida ur indexet.
VANLIG MISS
Den klassiska tabben är att blockera en sida i robots.txt och samtidigt sätta noindex på den. Eftersom Google då aldrig läser sidan ser den heller aldrig din noindex, och sidan kan ligga kvar i indexet med en tom beskrivning. Vill du ha bort en sida: låt den vara krypbar och använd noindex.
Så använder du meta robots i praktiken
Det mesta löser du utan att skriva en enda rad kod. I WordPress sköts taggen av ditt SEO-plugin, och på de flesta andra plattformar finns liknande inställningar inbyggda, något vi går igenom mer ingående i guiden för SEO på WordPress steg för steg. Så här går du från osäker till klar:
- Bestäm vilka sidor som inte hör hemma i sökresultaten.
- Kontrollera att de sidorna inte redan är blockerade i robots.txt.
- Sätt noindex på dem via ditt plugin eller i sidans head.
- Behåll follow om du vill att Google ska gå vidare via länkarna.
- Begär indexering på nytt i Google Search Console för att skynda på.
- Följ upp i Search Console att sidorna verkligen faller ur indexet.
Vissa sidtyper får nästan alltid noindex. För dem kan du gå igenom samma rutin i tur och ordning:
- Interna sökresultat och filtrerade varianter av en produktlista.
- Tack- och bekräftelsesidor efter formulär.
- Inloggnings- och kontosidor.
- Tunna tagg- och kategoriarkiv utan eget värde.
Vilka verktyg hjälper dig att se taggen?
- Yoast SEO - ger en enkel ruta per sida i WordPress för att välja noindex eller nofollow.
- Rank Math - liknande gränssnitt med globala regler för hela sajten.
- Google Search Console - visar vilka sidor som är utelämnade på grund av noindex.
- Screaming Frog - listar alla sidors meta robots-värden i en crawl.
- Webbläsarens källkod - högerklicka, välj Visa källkod och sök efter robots.
Flera av de här verktygen är gratis eller har en gratisnivå som räcker långt, och hur du kommer igång med Google Search Console från grunden är en bra start. Du behöver sällan betala för att få koll på din indexering.
En meta robots-tagg är billig att sätta och dyr att glömma. En enda felplacerad noindex på en viktig sida kan tysta den i Google helt.
Innan du sätter noindex
När meta robots inte räcker
Ibland vill du styra mer än vad meta robots klarar. Behöver du peka ut vilken av flera snarlika sidor som är originalet är en canonical-tagg rätt verktyg, inte noindex. Och vill du flytta en sida permanent är en omdirigering bättre än att bara dölja den.
- Använd canonical när du har dubbletter men vill behålla båda sidorna.
- Använd en 301-omdirigering när en sida flyttat för gott.
- Använd noindex när sidan ska finnas kvar men inte synas i Google.
Vill du gräva djupare i hur sökmotorn hittar och sparar dina sidor är begreppet indexering en bra fortsättning, och strukturerad data som beskriver innehållet för Google är ett närliggande spår värt att läsa på. Det hänger tätt ihop med hur dina meta robots-direktiv får effekt. Har du en knepig situation där flera signaler krockar är det ofta värt att kartlägga vad varje tagg faktiskt gör innan du ändrar, gärna med stöd av en konkurrentanalys av hur andra sajter hanterar samma sidor. Hör gärna av dig om du vill bolla ett konkret fall.
Vanliga frågor
Vad är skillnaden mellan meta robots och robots.txt?
Robots.txt ligger i roten på din sajt och styr om Google ens får krypa en sida. Meta robots ligger i HTML-koden på själva sidan och styr vad Google får göra efter att sidan lästs, till exempel om den får indexeras. En sida som blockeras i robots.txt läses aldrig, vilket gör att en noindex i meta robots inte hinner ses. Vill du verkligen hålla en sida ute ur sökresultaten ska du låta Google krypa den och använda noindex, inte blockera den i robots.txt.
Hur lägger jag till en meta robots-tagg i WordPress?
I WordPress behöver du sällan röra koden själv. Plugins som Yoast SEO och Rank Math ger dig en ruta per sida där du väljer noindex eller nofollow med några klick. För inställningar som ska gälla hela sajten, till exempel att tagg-arkiv inte ska indexeras, finns globala val i samma plugin. Vill du ändå styra en enstaka sida manuellt kan du lägga en meta robots-tagg i sidans head via en mall, men för de flesta räcker pluginets gränssnitt gott.
Betyder noindex att sidan tas bort från Google direkt?
Nej, det sker inte i samma sekund. Google måste först krypa om sidan och läsa den nya taggen innan sidan faller ur indexet. Hur snabbt det går beror på hur ofta Google besöker just den sidan, vilket kan vara allt från ett dygn till flera veckor. Vill du skynda på kan du begära indexering på nytt i Google Search Console. Tänk på att sidan måste vara krypbar, alltså inte blockerad i robots.txt, för att Google ska hinna se din noindex.
Vad gör nofollow i en meta robots-tagg?
Nofollow på sidnivå talar om för Google att inte följa någon av länkarna på sidan och att inte föra vidare länkvärde genom dem. Det skiljer sig från attributet rel=nofollow som sätts på en enskild länk. Använd nofollow på hela sidan med eftertanke, eftersom du då stänger av Googles väg vidare till alla sidor som länkarna pekar på. För de flesta sajter är det sällan rätt val, och du styr hellre enskilda länkar än hela sidan.
Relaterade termer
VILL DU FÖRSTÅ MER?
Undrar du hur det funkar i praktiken för just din sajt? Hör av dig.