Modul 2 · 2.4
Rapporten Page indexing och URL inspection
Modul 2: Search Console, Bing och IndexNow · Lästid: 13 minuter
Lärandemål: Efter den här lektionen kan du se i rapporten Page indexing vilka sidor som inte finns i indexet och varför, granska en enskild sida med URL inspection, och du vet vad Request indexing, Removals och Manual actions gör och inte gör.
Nyckelbegrepp: rapporten Page indexing, indexerad, inte indexerad, orsaker, Validate fix, URL inspection, Test live URL, Request indexing (kvot), användardeklarerad och Google-vald kanonisk URL, View tested page, Removals (tillfälligt), Manual actions, Security issues
Rapporten Page indexing
I lektion 1.3 läste du att inte varje sida kommer med i indexet. Rapporten Page indexing (i menyn under Indexing, Pages) visar hur det ser ut för din webbplats. Högst upp finns två siffror: indexerade och inte indexerade. Under dem finns tabellen "Why pages aren't indexed", med antalet sidor per orsak.
Först det viktigaste: målet är inte att allt ska indexeras. Google skriver själv att du ska se till att den kanoniska versionen av varje viktig sida finns i indexet, och att du inte ska förvänta dig hundra procent. En webbplats med taggar, filter, söksidor och varianter har alltid sidor som med rätta inte finns där. Frågan är alltså hela tiden: finns det en sida bland dem som faktiskt hör hemma i indexet?
Orsakerna på vanlig svenska
| Orsak i rapporten | Vad som händer | Allvarligt? |
|---|---|---|
| Server error (5xx) | Servern gav ett fel när Google kom | Ja, om det fortsätter. Kontakta ditt webbhotell |
| Redirect error | En vidarebefordran gick i en loop, var för lång eller trasig | Ja: rätta vidarebefordran (lektion 4.1) |
| Blocked by robots.txt | Robots.txt förbjuder Google att läsa sidan | Bara om sidan ska finnas med (lektion 3.3) |
| Excluded by 'noindex' tag | Sidan ber själv om att inte indexeras | Bara om det är av misstag |
| Soft 404 | Sidan ger status 200, men ser ut som "hittades inte" eller är nästan tom | Ja, om det är en riktig sida: gör den användbar eller ge en riktig 404 |
| Not found (404) | Sidan finns inte (längre) | Oftast inte. Men om länkar pekar dit: vidarebefordra |
| Blocked due to unauthorized request (401) / Blocked due to access forbidden (403) | Sidan kräver lösenord eller nekar Google | Bara om sidan ska vara offentlig |
| Page with redirect | Adressen vidarebefordrar till en annan adress | Nej, det är normalt; målet indexeras |
| Alternate page with proper canonical tag | Sidan pekar med en canonical på en annan sida | Nej, så ska det vara (lektion 3.5) |
| Duplicate without user-selected canonical | Google hittade en dubblett och valde själv | Kontrollera att Google valde rätt |
| Duplicate, Google chose different canonical than user | Du angav sida A, Google valde B | Undersök varför (lektion 3.5) |
| Discovered - currently not indexed | Google känner till adressen, men har inte crawlat sidan än | Normalt för en ny webbplats; ha tålamod och lägg till interna länkar |
| Crawled - currently not indexed | Google läste sidan, men tog inte (ännu) med den | Kontrollera om sidan verkligen tillför något (lektion 7.3) |
Dessutom finns det två varningar: Indexed, though blocked by robots.txt (Google tog med adressen utan att läsa innehållet, ofta för att länkar pekar dit) och Page indexed without content.
Klicka på en orsak för att se exempeladresser. Har du rättat något kan du välja Validate fix. Google kontrollerar då de kända adresserna med det problemet igen; enligt Google tar det oftast upp till ungefär två veckor. Klicka inte om och om igen: vänta tills valideringen har lyckats eller misslyckats. En rättning fungerar för övrigt även utan validering; Google ser den vid nästa crawlning.
URL inspection: en sida under lupp
Högst upp i Search Console finns ett sökfält. Klistra in en fullständig adress från din webbplats där så får du URL inspection. Först ser du vad Google har i indexet: "URL is on Google" eller "URL is not on Google", och under Page indexing bland annat:
- när Google senast crawlade sidan, och Crawled as (den mobila crawlern eller datorcrawlern);
- om robots.txt tillåter crawlning, och Indexing allowed? (finns det en noindex?);
- Page fetch: lyckades hämtningen?
- den användardeklarerade kanoniska URL:en (User-declared canonical, det du angav i din canonical) och den Google-valda kanoniska URL:en (Google-selected canonical, det Google valde).
Det här är läget i indexet, ingen livemätning. Har du nyss tagit bort en noindex så står den kvar här.
Test live URL
Med Test live URL hämtar Google sidan just nu. Så kontrollerar du en rättning direkt. Med View tested page ser du HTML-koden efter att JavaScript har körts, svarets huvudrader, meddelanden från konsolen och, vid ett lyckat test, en skärmbild. Där ser du om din titel, canonical eller strukturerade data verkligen finns när de läggs in med JavaScript.
Observera: ett lyckat livetest är inget löfte. Testet tittar inte på kvalitet, duplicerat innehåll eller valet av canonical.
Request indexing
Efter ett livetest kan du välja Request indexing. Google ställer då sidan i kö för crawlning. Tre saker att veta:
- Det finns en daglig kvot per egendom (property). För många sidor på en gång är en webbplatskarta rätt väg (lektion 2.2).
- Att begära samma sida flera gånger gör det inte snabbare.
- Det är ingen garanti: crawlningen kan ta dagar till veckor, och därefter avgör Google fortfarande om sidan tas med.
Använd det alltså för en ny viktig sida eller efter en rättning, inte som daglig rutin.
Du kan bara granska adresser i en egendom som du äger eller är användare av. Vill du titta på någon annans sida använder du offentliga verktyg som Rich Results Test (modul 5).
Tre andra rapporter att känna till
Removals. Med den tar du tillfälligt (ungefär sex månader) bort en sida från sökresultaten, till exempel om personuppgifter av misstag hamnat på nätet. Sidan finns kvar i indexet. Vill du få bort den permanent ska den ge en 404 eller 410, ligga bakom ett lösenord eller ha en noindex. Robots.txt fungerar inte för det: en blockerad sida kan Google inte läsa och ser därför inte heller din noindex.
Manual actions. En manuell åtgärd betyder att en medarbetare på Google har konstaterat att sidor bryter mot policyn för spam (lektion 8.2), till exempel genom dold text eller onaturliga länkar. De sidorna kan rankas lägre eller försvinna ur resultaten. Står det inget meddelande här är allt i sin ordning. Står det något: rätta det på alla sidor och skicka sedan in en begäran om omprövning.
Security issues. Här meddelar Google om din webbplats verkar hackad eller sprider skadlig programvara. Besökare kan då få se en varning. Det är akut: se WordPress-kursen och kursen Säker online för hur du åtgärdar det.
I praktiken: efter en ny webbplats
Lotte publicerade sin nya webbplats med AI Builder och glömde att webbplatsen fortfarande var inställd på "inte indexera". Efter en vecka ser hon i Page indexing att nästan allt står under "Blocked by robots.txt". Hon slår om reglaget och publicerar igen, granskar sin startsida, ser i livetestet att crawlning och indexering nu är tillåtna, och begär indexering för startsidan och sidan Bruidswerk (bröllopsblommor). För resten väntar hon på webbplatskartan. I WordPress finns samma fallgrop i kryssrutan "Be sökmotorer att inte indexera denna webbplats", i andra webbplatsbyggare under ett liknande namn.
Sammanfattning
- Page indexing visar indexerade och inte indexerade sidor med orsaken; allt behöver inte vara med.
- Läs varje orsak som en fråga: hör den här sidan hemma i indexet? Om ja, rätta och validera.
- URL inspection visar läget i indexet; Test live URL visar sidan just nu, även efter JavaScript.
- Request indexing har en kvot, hjälper inte om du upprepar det och garanterar ingenting.
- Removals är tillfälligt; Manual actions och Security issues ska vara tomma.
Quiz
Uppgift
Uppgift D2.4: Granska en sida. Välj en viktig sida på din webbplats (till exempel sidan med dina tjänster) och granska den i Search Console. Anteckna om den är indexerad, när den senast crawlades, vilken canonical du angav och vilken Google valde. Gör sedan ett livetest, öppna den testade sidan och kontrollera att titeln finns i HTML-koden. Titta till sist i Page indexing vilken orsak som förekommer oftast och om det finns sidor bland dem som borde finnas i indexet.
Uppgift D2.4: Granska en sida
Har du ingen egen webbplats eller inget eget företag? Gör uppgiften på papper eller hoppa över den. För certifikatet räknas bara slutprovet.
Exempel: /bruidswerk/ är indexerad, båda kanoniska adresserna är lika. Vanligaste orsaken: Sida med omdirigering (14), de gamla http-adresserna. De hör inte hemma i indexet.
Dina bockar och anteckningar sparas bara i den här webbläsaren; vi skickar dem ingenstans. Är du inloggad sparar vi i Mina kurser bara att du har gjort uppgiften.
Läs mer
- Google, rapporten Page indexing: https://support.google.com/webmasters/answer/7440203?hl=nl
- Google, verktyget URL inspection: https://support.google.com/webmasters/answer/9012289?hl=nl
- Google Search Central, be Google att crawla om webbadresser: https://developers.google.com/search/docs/crawling-indexing/ask-google-to-recrawl
- Google, verktyget Removals: https://support.google.com/webmasters/answer/9689846?hl=nl
- Google, rapporten Manual actions: https://support.google.com/webmasters/answer/9044175?hl=nl