Noindex

Noindex är en instruktion som säger åt Google och andra sökmotorer att inte visa en viss sida i sökresultaten. Sidan finns kvar, går att besöka och kan vara hur bra som helst, den ska bara inte dyka upp när någon söker. Det är ett av de mest missförstådda direktiven inom teknisk SEO, just för att det låter dramatiskt men i praktiken är ett vardagligt och ofta nyttigt verktyg som hör nära ihop med hur Googles indexering fungerar.

Tänk dig en tacksida efter ett formulär, en intern söksida eller en gammal kampanj som löpt ut. Sådana sidor har ingen plats i Googles index, men de behöver finnas på sajten. Då sätter du noindex på dem.

Vad noindex betyder för Googlebot

En noindex-tagg är ett direktiv riktat till sökmotorernas robotar. När Googlebot crawlar en sida och hittar instruktionen förstår den att sidan inte ska läggas in i, eller ska tas bort ur, indexet. Sidan kommer alltså inte att synas i SERPs, oavsett hur väl den matchar en sökfråga. Vill du förstå hur sidor normalt hamnar i sökregistret kan du läsa mer om vad indexering innebär.

Det är värt att skilja på två saker som ofta blandas ihop: crawling och indexering. Crawling är när Googlebot hämtar och läser sidan. Indexering är när Google sparar och kategoriserar den för att kunna visa den. Taggen stoppar steg två, inte steg ett. Roboten måste fortfarande få besöka sidan för att se den.

Om en sida redan finns i index och du lägger till direktivet, försvinner den vid nästa crawl. För en ofta uppdaterad startsida kan det gå snabbt, för en bortglömd undersida kan det dröja veckor. Besökare märker ingenting: någon som har länken, klickar från en annons eller följer en intern länk på sajten kommer in precis som vanligt, vilket gör att du fortfarande kan stötta den med din innehållsstrategi.

Så implementerar du noindex i praktiken

Det finns två huvudsakliga sätt att sätta taggen, och vilket du väljer beror på vad det är för slags sida eller fil.

• Meta robots-tagg: en rad i sidans head-sektion med värdet noindex. Standardmetoden för vanliga HTML-sidor.
• X-Robots-Tag noindex: ett direktiv i HTTP-headern, för filer utan head, till exempel PDF:er.

För den som inte vill röra koden finns oftast en enklare väg. I WordPress sköter ett SEO-plugin det åt dig med en kryssruta per sida, något vi går igenom mer i vår guide till SEO för WordPress. På andra plattformar finns liknande inställningar.

Meta robots i HTML

Meta robots-taggen läggs i sidans head och gäller bara den enskilda sidan. Eftersom den sitter i koden måste sidan returnera vanlig HTML för att den ska upptäckas, vilket är fallet för de flesta sidor en besökare ser. Detta är noindex-metoden som passar nästan allt redaktionellt innehåll, och samspelar väl med en genomtänkt plan för ditt innehåll.

X-Robots-Tag för filer

För resurser utan HTML-head, som bilder eller PDF:er, fungerar inte meta-taggen. Då anger du istället X-Robots-Tag noindex i HTTP-svaret från servern. Metoden är kraftfull eftersom den kan styras centralt och appliceras på många filer samtidigt, vilket också kan påverka sidans laddningstid och prestanda om resurserna är många.

Noindex i WordPress

Kör du WordPress behöver du sällan skriva kod alls. Ett SEO-plugin lägger till en inställning per inlägg och sida. Det gör det enkelt, men också lätt att råka noindexa fel sida, så dubbelkolla alltid resultatet efteråt. Vill du jobba mer grundligt med plattformen finns fler råd i guiden om SEO för WordPress.

När du bör använda noindex

Det här är ett riktat verktyg för sidor som inte hör hemma i sökresultaten, även om de behöver finnas kvar för besökare. Typiska kandidater:

• Tacksidor och bekräftelsesidor efter formulär eller köp
• Interna söksidor och filtrerade resultatlistor
• Inloggnings- och kontosidor
• Utgångna kampanjer du vill behålla men inte ranka
• Tunna taggsidor eller arkiv utan eget värde
• Testsidor och dubbletter i en utvecklingsmiljö
• Utskriftsversioner av artiklar

Det finns också fall där noindex är fel verktyg. Vill du samla värdet från flera liknande URL:er på en av dem, är en canonical oftast rätt val. Till skillnad från noindex behåller canonical sidan i index men pekar ut originalet. Vill du blockera en hel mapp från att ens crawlas, är robots.txt verktyget, med förbehållen nedan. Den som driver en sajt lokalt, till exempel med lokal SEO i Göteborg, möter ofta just den här typen av sidor som inte ska ranka. Samma mönster känner du igen om du jobbar med lokal SEO i andra städer, där tacksidor och filtrerade listor sällan hör hemma i sökresultaten.

• Noindex: sidan ska inte synas i sökresultaten alls.
• Canonical: sidan får finnas, men en annan URL är originalet.
• Robots.txt: stoppar crawling helt, men då läses heller ingen tagg.

Vanliga misstag med noindex-taggen

De flesta problem handlar inte om taggen i sig utan om att den hamnar fel. Här är fällorna vi ser oftast, och de hänger ofta ihop med hur väl du följer din innehållsstrategi över tid.

Den absolut vanligaste tabben är att blockera en sida i robots.txt och samtidigt sätta noindex. Det låter logiskt men är motsägelsefullt: om roboten inte får crawla sidan kan den heller aldrig läsa taggen. Sidan kan då ligga kvar i index utan beskrivning. Viktig poäng: låt Google crawla sidan om du vill att taggen ska få effekt, precis som du vill att rätt sidor ska komma med i Googles index.

Noindex är ett skalpell, inte en yxa. Använd det för enskilda sidor som inte ska synas, inte som ett trubbigt verktyg över stora delar av sajten.

Så kontrollerar och granskar du dina sidor

Att sätta taggen är bara halva jobbet. Du vill också se vilka sidor som faktiskt är noindex, så att inget viktigt smiter ut ur index av misstag. Flera av sätten är gratis, och de blir extra viktiga om du satsar på synlighet lokalt, till exempel genom lokal SEO i Stockholm eller lokal SEO i Umeå.

• Google Search Console: under indexeringsrapporten ser du sidor uteslutna på grund av noindex.
• Screaming Frog SEO Spider: crawlar hela sajten och listar robots-direktiv per URL.
• Webbläsarens källkod: öppna sidan och sök i koden efter ordet noindex.
• Övriga gratisverktyg: flera kostnadsfria onlineverktyg kan kontrollera en URL åt gången.

En enkel rutin är att en gång i kvartalet exportera en lista över alla sidor och deras index-status. Då fångar du avvikelser tidigt. Det här hör ihop med en sund innehållsstrategi och löpande innehållsarbete: ha bara med det som hör hemma i sökresultaten. Det lönar sig också att hålla koll på konkurrenternas sidor i en konkurrentanalys, så att du ser vilka sidtyper som faktiskt rankar i din nisch.

För att faktiskt ta bort en sida ur index, jobba i ordning:

1. Lägg till noindex via meta robots eller X-Robots-Tag på rätt URL.
2. Säkerställ att sidan inte är blockerad i robots.txt.
3. Begär ny crawling av URL:en i Google Search Console.
4. Vänta tills Googlebot har besökt sidan igen och bekräfta i indexeringsrapporten.

Noindex som del av din tekniska SEO

Rätt använd är taggen en del av god teknisk hygien. Genom att hålla tunna och irrelevanta sidor utanför index hjälper du Google att fokusera crawling och rankingvärde på de sidor som verkligen ska synas. Det är särskilt viktigt på större sajter där antalet sidor annars kan svälla okontrollerat, och det går hand i hand med att förbättra sidhastigheten så att de viktiga sidorna också laddar snabbt.

Tänk på noindex som en av flera knappar för hur sökmotorer ser din sajt, vid sidan av canonical, robots.txt och intern länkning. De löser olika problem, och styrkan ligger i att veta vilket verktyg som passar i vilket läge. Att bygga upp erfarenhet, expertis, auktoritet och trovärdighet på de sidor som faktiskt ska ranka spelar minst lika stor roll. Behöver du hjälp att reda ut vad som ska indexeras och inte, hör gärna av dig, men mycket går utmärkt att göra själv med gratisverktygen ovan.