Hvorfor Amethyst? Missionen bag Zero-Bloat Shopify-apps

Introduktion

At publicere en side betyder ikke, at søgemaskinerne vil indeksere den.

Dette er en af de mest frustrerende dele af SEO. Du opretter en side, tilføjer den til dit websted, sender den måske ind via Search Console og venter derefter. Dagene går. Nogle gange uger. Siden dukker stadig ikke op i Google.

Problemet er, at indeksering ikke er ét enkelt trin. En søgemaskine skal opdage URL'en, gennemgå (crawl) den, rendere den, forstå den, beslutte, om den er værd at gemme, og derefter beslutte, om den skal optræde i søgeresultaterne.

Hvis nogen del af denne proces bryder sammen, bliver siden muligvis ikke indekseret.

Denne guide forklarer de mest almindelige årsager til, at sider ikke bliver indekseret, hvordan du diagnosticerer problemet, og hvad du bør udbedre først.

Hvad betyder "ikke indekseret" egentlig?

En side er ikke indekseret, når en søgemaskine kender til URL'en, men ikke har tilføjet den til sit søgbare indeks, eller når den slet ikke har opdaget URL'en.

Der er forskellige situationer, der ofte bliver grupperet sammen:

• Søgemaskinen har ikke fundet URL'en.
• Søgemaskinen fandt URL'en, men gennemgik (crawl) den ikke.
• Søgemaskinen gennemgik URL'en, men valgte ikke at indeksere den.
• Siden var indekseret før, men blev senere fjernet.
• Siden er blokeret, omdirigeret, kanoniseret andetsteds eller markeret som noindex.

Hver situation kræver en forskellig løsning.

Gennemgang (Crawling) vs. indeksering

Gennemgang og indeksering er ikke det samme.

Gennemgang betyder, at en søgemaskine besøger en side og henter dens indhold.

Indeksering betyder, at søgemaskinen beslutter at gemme den side i sit indeks, så den potentielt kan optræde i søgeresultaterne.

En side kan blive gennemgået uden at blive indekseret. Det er almindeligt.

For eksempel kan Google gennemgå en side og beslutte:

• Indholdet er for tyndt.
• Siden duplikerer en anden URL.
• Canonical-tagget peger et andet sted hen.
• Siden tilføjer ikke nok værdi.
• Siden er blokeret fra indeksering.

Det er derfor, at indsendelse af en URL kun er en del af processen. Siden skal stadig være værd at indeksere.

Hvordan søgemaskiner opdager sider

Søgemaskiner kan opdage sider på flere måder:

• Interne links fra andre sider på dit websted
• XML-sitemaps
• Eksterne links fra andre websteder
• Manuel indsendelse via Search Console
• API'er og notifikationssystemer
• Gennemgang af kendte URL-mønstre

Hvis en side ikke er linket til nogen steder, ikke står i dit sitemap og ikke er indsendt, kan det tage meget længere tid at blive opdaget.

Opdagelse er den første forhindring. Kvalitet og teknisk parathed kommer derefter.

1. Siden er aldrig blevet opdaget

Nogle gange er problemet simpelt: Søgemaskinen ved ikke, at siden findes.

Dette sker ofte med:

• Nye websteder
• Nye blogindlæg
• Landingssider, der ikke er linket fra navigationen
• Produktsider, der ligger begravet dybt i et katalog
• Sider oprettet med JavaScript, men som ikke er inkluderet i sitemappet
• Forældreløse sider uden interne links

Sådan løser du det:

• Tilføj URL'en til dit XML-sitemap.
• Link til siden fra relevante eksisterende sider.
• Indsend URL'en via den relevante opdagelsesproces.
• Sørg for, at siden er inkluderet i din webstedsstruktur.

Hvis en side er vigtig, skal du ikke skjule den.

2. Siden er blokeret af robots.txt

robots.txt fortæller crawlere, hvilke dele af dit websted de ikke må få adgang til.

Hvis din side er blokeret af robots.txt, kan søgemaskiner muligvis ikke gennemgå den korrekt.

Eksempel:

User-agent: *
Disallow: /blog/

Dette ville blokere crawlere fra at få adgang til sider inde i /blog/.

Sådan løser du det:

• Tjek https://ditdomæne.dk/robots.txt.
• Sørg for, at vigtige sektioner ikke er blokerede.
• Test siden i Google Search Console.
• Fjern utilsigtede "disallow"-regler.

Brug ikke robots.txt til at styre indeksering, medmindre du forstår konsekvenserne. Hvis en side er blokeret for gennemgang, kan søgemaskiner muligvis ikke se vigtige indekseringssignaler på siden.

3. Siden har et noindex-tag

Et noindex-direktiv fortæller søgemaskiner, at de ikke må indeksere en side.

Det kan optræde som et meta-tag:

<meta name="robots" content="noindex">

Eller som en HTTP-header.

Dette er nyttigt til private, duplikerede, tynde eller lavværdi-sider. Men det er et alvorligt problem, hvis det optræder på en side, du gerne vil have indekseret.

Sådan løser du det:

• Inspicer sidens kildekode.
• Tjek indstillingerne for dit SEO-plugin.
• Tjek CMS-indstillingerne for synlighed af sider.
• Fjern noindex fra sider, der skal optræde i søgeresultater.

En side med noindex kan opdages og gennemgås, men den bør ikke indekseres.

4. Canonical-tags peger et andet sted hen

Et canonical-tag fortæller søgemaskiner, hvilken URL der er den foretrukne version af en side.

Eksempel:

<link rel="canonical" href="https://example.com/hovedside">

Hvis din side har et canonical-tag, der peger på en anden URL, kan søgemaskiner vælge at indeksere den kanoniske URL i stedet.

Dette er ikke altid forkert. Canonical-tags er nyttige til duplikerede eller lignende sider. Men hvis hver side peger på forsiden, eller hvis vigtige sider peger på den forkerte URL, kan indekseringen gå i stykker.

Sådan løser du det:

• Tjek canonical-tagget på siden.
• Sørg for, at det peger på den korrekte version.
• Undgå utilsigtede fejl med selv-henvisende canonical-tags.
• Kanoniser ikke unikke sider til urelaterede sider.

Hvis du vil have en side indekseret, har den normalt brug for et selv-henvisende canonical-tag.

5. Siden returnerer en fejlstatus

Søgemaskiner skal kunne få adgang til siden uden problemer.

Hvis URL'en returnerer en fejl, er indeksering usandsynlig.

Almindelige statusproblemer inkluderer:

• 404 ikke fundet
• 410 væk
• 500 serverfejl
• 503 utilgængelig
• Omdirigeringsløkker
• Blokerede ressourcer

Sådan løser du det:

• Tjek HTTP-statuskoden.
• Ret ødelagte stier.
• Løs serverfejl.
• Undgå omdirigeringskæder.
• Sørg for, at den endelige destination returnerer en 200-statuskode.

En side, der fejler teknisk, vil have svært ved at blive indekseret, selvom indholdet er godt.

6. Tyndt eller lavværdi-indhold

Nogle gange er siden teknisk fin, men indholdet er ikke stærkt nok.

En tynd side kan have:

• Meget lidt originalt indhold
• Generisk tekst
• Intet klart formål
• Ingen brugbare svar
• Ingen unik værdi
• Duplikerede producentbeskrivelser
• Tomme kategorisider

Søgemaskiner behøver ikke at indeksere hver side, de finder. Hvis en side tilføjer minimal værdi, kan den blive gennemgået, men ikke indekseret.

Sådan løser du det:

• Tilføj brugbar, original information.
• Besvar reelle bruger spørgsmål.
• Inkluder relevante eksempler.
• Forbedr interne links.
• Tilføj strukturerede sektioner.
• Fjern eller flet svage sider.

At indsende en tynd side oftere løser ikke problemet. Forbedr siden først.

7. Duplikeret indhold

Duplikeret indhold er en anden almindelig årsag til, at sider ikke bliver indekseret.

Hvis flere URL'er indeholder næsten det samme indhold, kan søgemaskiner vælge én og ignorere de andre.

Almindelige eksempler inkluderer:

• Produktvarianter
• Filtrerede samlingssider
• Printervenlige sider
• Lokationssider med næsten identisk tekst
• Kopierede leverandørbeskrivelser
• URL-parametre, der skaber dubletter

Sådan løser du det:

• Brug canonical-tags korrekt.
• Konsolider duplikerede sider.
• Tilføj unikt indhold, hvor sider skal stå for sig selv.
• Bloker eller marker lavværdi-parametersider med noindex, når det er passende.
• Forbedr intern linkning til den foretrukne version.

Duplikerede sider er ikke altid et strafspørgsmål. Ofte vælger søgemaskiner blot ikke at indeksere hver version.

8. Dårlig intern linkning

Interne links hjælper søgemaskiner med at opdage sider og forstå deres vigtighed.

Hvis en side har meget få interne links, der peger mod den, kan søgemaskiner behandle den som mindre vigtig.

Dette er især almindeligt ved:

• Gamle blogindlæg
• Landingssider
• Nye servicesider
• Dybe produktsider
• Sæsonbetonede sider
• Sider oprettet uden for hovednavigationen

Sådan løser du det:

• Link til siden fra relevante eksisterende sider.
• Tilføj links fra kategorisider eller hub-sider.
• Brug beskrivende ankertekst.
• Inkluder siden i brugbar navigation, hvor det er relevant.
• Link fra sider, der allerede er indekseret og præsterer godt.

Intern linkning er en af de simpleste måder at forbedre opdagelse på.

9. Forældreløse sider (Orphan pages)

En forældreløs side er en side uden interne links, der peger mod den.

Søgemaskiner kan stadig opdage forældreløse sider via sitemaps eller eksterne links, men de er sværere at forstå og prioritere.

Hvis en side er vigtig nok til at rangere, bør den normalt være forbundet til resten af dit websted.

Sådan løser du det:

• Find forældreløse sider ved hjælp af et crawl-værktøj eller en webstedsrevision.
• Tilføj interne links fra relevante sider.
• Inkluder vigtige sider i dit sitemap.
• Grupper relateret indhold i hubs.
• Fjern forældreløse sider, der ikke tjener noget formål.

En side uden interne links sender et svagt signal om vigtighed.

10. Svag webstedsautoritet

Nye websteder eller websteder med lav autoritet tager ofte længere tid om at få sider indekseret.

Søgemaskiner har begrænsede crawl-ressourcer. De har tendens til at gennemgå troværdige, aktive og autoritative websteder oftere.

Hvis dit websted er nyt, har få backlinks, en svag intern struktur eller meget lidt indholdshistorik, kan indekseringen være langsommere.

Sådan forbedrer du dette:

• Publicer brugbart indhold konsekvent.
• Opbyg interne links mellem relaterede sider.
• Optjen relevante eksterne links.
• Hold dit sitemap rent.
• Undgå at publicere store mængder af svagt indhold.

Autoritet handler ikke kun om links. Det handler også om tillid, brugbarhed og konsistens.

11. Problemer med crawl-budget

Crawl-budget er den mængde gennemgang, en søgemaskine er villig til at bruge på dit websted.

For små websteder er crawl-budget normalt ikke hovedproblemet. Men for store e-handelswebsteder, mapper, udgivere og programmatiske SEO-websteder kan det betyde noget.

Problemer med crawl-budget kan opstå, når søgemaskiner spilder tid på:

• Duplikerede URL'er
• Filtersider
• Søgeresultatsider
• Uendelige URL-parametre
• Omdirigeringskæder
• Ødelagte sider
• Tynde sider

Sådan løser du det:

• Ryd op i duplikerede URL-mønstre.
• Forbedr canonical-tags.
• Fjern lavværdi-URL'er fra sitemaps.
• Ret omdirigeringskæder.
• Bloker eller marker forsigtigt lavværdi-sektioner med noindex.
• Forbedr webstedets hastighed og serverpålidelighed.

Målet er at hjælpe crawlerne med at bruge mere tid på de sider, der betyder noget.

12. Problemer med JavaScript-rendering

Nogle sider er stærkt afhængige af JavaScript for at rendere indhold.

Søgemaskiner kan behandle JavaScript, men det kan være langsommere eller mere komplekst end at gennemgå normal HTML.

Hvis vigtigt indhold, links, titler eller strukturerede data kun optræder, efter at JavaScript er kørt, kan opdagelse og indeksering blive påvirket.

Sådan løser du det:

• Gør vigtigt indhold tilgængeligt i server-renderet HTML, hvor det er muligt.
• Tjek den renderede HTML.
• Test med Search Console URL-inspektion.
• Undgå at skjule essentielle links bag scripts.
• Sørg for, at strukturerede data er til stede og valide.

Hvis brugere og crawlere ikke kan se det samme vigtige indhold, kan indeksering blive upålidelig.

13. Nyligt publicerede sider

Nogle gange er der intet galt. Siden er bare ny.

Søgemaskiner indekserer ikke hver side øjeblikkeligt. Selv stærke sider kan tage tid om at dukke op.

Indekseringshastigheden afhænger af:

• Webstedsautoritet
• Interne links
• Sitemap-friskhed
• Gennemgangsfrekvens
• Sidekvalitet
• Teknisk sundhed
• Søgemaskinernes efterspørgsel

Sådan håndterer du dette:

• Sørg for, at siden kan gennemgås.
• Tilføj interne links.
• Inkluder den i sitemappet.
• Indsend den gennem din normale proces.
• Overvåg den over tid.

Lad være med at genindsende hvert par minutter. Løs reelle problemer først.

14. Soft 404-sider

En soft 404 opstår, når en side returnerer en 200-statuskode, men ligner en tom eller manglende side.

For eksempel:

• En produktside uden et produkt
• En kategoriside uden varer
• En tynd side, der siger, at indholdet ikke blev fundet
• En skabelonside med næsten ingen brugbar information

Søgemaskiner kan behandle disse sider som lavværdi eller manglende, selvom serveren siger, at de findes.

Sådan løser du det:

• Tilføj brugbart indhold.
• Returner en korrekt 404 eller 410 for fjernede sider.
• Omdiriger brugere til en relevant erstatning, hvor det er passende.
• Undgå at indeksere tomme skabeloner.

En side skal levere reel værdi, ikke blot returnere en succesfuld statuskode.

15. Søgemaskiner valgte simpelthen ikke at indeksere den

Dette er svaret, som ingen kan lide, men det er ofte sandt.

Søgemaskiner er ikke forpligtet til at indeksere hver eneste side, der kan gennemgås.

En side kan være teknisk valid og stadig ikke komme i indekset, hvis søgemaskinen beslutter, at den ikke er brugbar nok.

Dette kan ske, når:

• Emnet allerede er dækket bedre andetsteds.
• Siden tilføjer lidt unik værdi.
• Webstedet har mange lignende sider.
• Indholdet er generisk.
• Siden har svage interne links.
• Den overordnede kvalitet af webstedet er lav.

Sådan løser du det:

• Forbedr indholdet.
• Gør siden mere brugbar end konkurrerende resultater.
• Tilføj originale eksempler, data eller vejledning.
• Styrk interne links.
• Konsolider lignende sider.
• Opbyg tematisk autoritet omkring emnet.

Indeksering er ikke kun teknisk. Det er også redaktionelt.

Sådan diagnosticerer du indekseringsproblemer

En god indekseringsdiagnose følger en sekvens.

Start med opdagelse:

• Er URL'en i sitemappet?
• Er den internt linket?
• Er den blevet indsendt?
• Har Search Console opdaget den?

Tjek derefter teknisk adgang:

• Returnerer den 200?
• Er den blokeret af robots.txt?
• Har den et noindex-tag?
• Peger canonical-tagget et andet sted hen?
• Omdirigerer den?

Tjek derefter kvalitet:

• Er indholdet brugbart?
• Er det unikt?
• Besvarer det et reelt søgebehov?
• Er det bedre end konkurrerende sider?
• Har det nok intern støtte?

Overvåg derefter:

• Blev den gennemgået?
• Blev den indekseret?
• Opstod der eksponeringer?
• Opstod der klik?
• Ændrede rangeringerne sig efter rettelserne?

Denne proces er mere brugbar end blot at trykke på "send" igen.

En simpel tjekliste for indeksering

Før du indsender en URL, skal du tjekke:

• Siden returnerer 200.
• Siden er ikke blokeret af robots.txt.
• Siden har ikke noindex.
• Canonical peger på sig selv.
• Siden er inkluderet i sitemap.
• Siden har interne links.
• Titel og H1 er klare.
• Indholdet er brugbart og originalt.
• Strukturerede data er valide, hvor det er relevant.
• Siden indlæses korrekt på mobil.
• Vigtigt indhold er synligt i renderet HTML.
• Siden er ikke en dublet.

Hvis flere af disse fejler, skal du rette siden, før du forsøger at få den indekseret.

Sådan hjælper IndexStream

IndexStream er designet til at gøre indeksering mindre forvirrende og mere målbar.

I stedet for at behandle indeksering som en engangsindsendelse, giver det dig en arbejdsgang:

• Indsend URL'er.
• Log hvad der blev indsendt.
• Tjek om anmodninger blev accepteret.
• Auditér sidens parathed.
• Generér rettelseskort.
• Benchmarking af konkurrenter.
• Opret indholds-briefs.
• Overvåg Search Console og analysedata.
• Spor rettelser over tid.

Målet er ikke at garantere indeksering. Intet ansvarligt værktøj kan gøre det.

Målet er at hjælpe dig med at forstå, hvad der skete, hvad der blokerer for opdagelse, og hvad der skal rettes som det næste.

For relateret læsning, se Google Indexing API forklaret, Hvad er IndexNow? og Tjekliste til teknisk SEO.

Afsluttende tanker

Hvis en side ikke er indekseret, skal du ikke antage, at det eneste svar er at indsende den igen.

Start med at stille bedre spørgsmål:

• Er siden blevet opdaget?
• Kan den crawles?
• Er det tilladt at indeksere den?
• Er canonical-tagget korrekt?
• Er indholdet brugbart nok?
• Er den internt linket?
• Er den forskellig fra andre sider?

Indekseringsproblemer er ofte en blanding af opdagelse, teknisk kvalitet, indholdskvalitet og prioritering.

De stærkeste SEO-arbejdsgange sender ikke bare flere URL'er afsted. De hjælper dig med at beslutte, hvilke sider der er værd at indsende, hvad der skal rettes, og om rettelserne faktisk forbedrede synligheden.

Ofte stillede spørgsmål

Hvorfor er min side ikke indekseret?

Din side er muligvis ikke indekseret, fordi den ikke er blevet opdaget, er blokeret, indeholder noindex, peger på en anden canonical-URL, har tyndt indhold, duplikerer en anden side eller ikke opfylder søgemaskinernes kvalitetskrav.

Hvor lang tid tager indeksering?

Indeksering kan tage minutter, dage eller uger. Tiden afhænger af websitet, sidens kvalitet, crawl-efterspørgsel, interne links og søgemaskinernes beslutninger.

Garanterer indsendelse af en URL indeksering?

Nej. Indsendelse af en URL kan hjælpe med opdagelse, men søgemaskinerne beslutter stadig, om de vil crawle og indeksere den.

Kan en side crawles, men ikke indekseres?

Ja. En søgemaskine kan crawle en side og stadig beslutte ikke at indeksere den.

Stopper robots.txt indeksering?

robots.txt blokerer for crawling, ikke direkte for indeksering. Men hvis en side ikke kan crawles, kan søgemaskiner muligvis ikke se vigtige indekseringssignaler.

Hvad er en "orphan"-side?

En "orphan"-side (forældreløs side) er en side uden interne links, der peger på den. "Orphan"-sider er sværere for søgemaskiner at opdage og forstå.

Hvordan ved jeg, om Google har opdaget min side?

Brug Google Search Console URL-inspektion, sitemap-rapporter, serverlogs eller et indekseringsværktøj til at tjekke, om siden er blevet opdaget eller crawlet.