Waarom pagina's niet worden geïndexeerd

Inleiding

Het publiceren van een pagina betekent niet dat zoekmachines deze zullen indexeren.

Dit is een van de meest frustrerende onderdelen van SEO. Je maakt een pagina, voegt deze toe aan je site, dient hem misschien in bij Search Console, en wacht dan. Er gaan dagen voorbij. Soms weken. De pagina verschijnt nog steeds niet in Google.

Het probleem is dat indexering geen enkele stap is. Een zoekmachine moet de URL ontdekken, crawlen, renderen, begrijpen, beslissen of het de moeite waard is om op te slaan, en vervolgens bepalen of deze in de zoekresultaten moet verschijnen.

Als een deel van dat proces faalt, wordt de pagina mogelijk niet geïndexeerd.

Deze gids legt de meest voorkomende redenen uit waarom pagina's niet worden geïndexeerd, hoe je het probleem kunt diagnosticeren en wat je als eerste moet repareren.

Wat betekent "niet geïndexeerd" eigenlijk?

Een pagina is niet geïndexeerd wanneer een zoekmachine de URL wel kent, maar deze niet heeft toegevoegd aan zijn doorzoekbare index, of wanneer de URL helemaal niet is ontdekt.

Er zijn verschillende situaties die vaak op één hoop worden gegooid:

• De zoekmachine heeft de URL niet gevonden.
• De zoekmachine heeft de URL wel gevonden, maar niet gecrawld.
• De zoekmachine heeft de URL gecrawld, maar ervoor gekozen deze niet te indexeren.
• De pagina was voorheen wel geïndexeerd, maar is later verwijderd.
• De pagina is geblokkeerd, omgeleid, ergens anders als canoniek aangemerkt, of gemarkeerd met noindex.

Elke situatie vereist een andere oplossing.

Crawlen versus Indexeren

Crawlen en indexeren zijn niet hetzelfde.

Crawlen betekent dat een zoekmachine een pagina bezoekt en de inhoud ophaalt.

Indexeren betekent dat de zoekmachine besluit die pagina op te slaan in zijn index, zodat deze mogelijk in zoekresultaten kan verschijnen.

Een pagina kan gecrawld worden en toch niet geïndexeerd zijn. Dit komt veel voor.

Google kan bijvoorbeeld een pagina crawlen en besluiten:

• De inhoud is te mager.
• De pagina is een duplicaat van een andere URL.
• De canonical-tag wijst ergens anders heen.
• De pagina voegt onvoldoende waarde toe.
• De pagina is geblokkeerd voor indexering.

Daarom is het indienen van een URL slechts een deel van het proces. De pagina moet ook de moeite waard zijn om te indexeren.

Hoe zoekmachines pagina's ontdekken

Zoekmachines kunnen pagina's op verschillende manieren ontdekken:

• Interne links vanaf andere pagina's op je site
• XML-sitemaps
• Externe links van andere websites
• Handmatige indiening via Search Console
• API's en notificatiesystemen
• Het crawlen van bekende URL-patronen

Als een pagina nergens wordt gelinkt, niet in je sitemap staat en niet is ingediend, kan het veel langer duren voordat deze wordt ontdekt.

Ontdekking is de eerste hindernis. Kwaliteit en technische gereedheid komen daarna.

1. De pagina is nooit ontdekt

Soms is het probleem simpel: de zoekmachine weet niet dat de pagina bestaat.

Dit gebeurt vaak bij:

• Nieuwe websites
• Nieuwe blogposts
• Landingspagina's die niet vanuit de navigatie worden gelinkt
• Productpagina's die diep in een catalogus zijn begraven
• Pagina's die door JavaScript zijn gemaakt, maar niet in de sitemap zijn opgenomen
• Orphan pages (weespagina's) zonder interne links

Hoe je dit oplost:

• Voeg de URL toe aan je XML-sitemap.
• Link naar de pagina vanaf relevante bestaande pagina's.
• Dien de URL in via de juiste ontdekkingsprocedure.
• Zorg ervoor dat de pagina is opgenomen in je sitestructuur.

Als een pagina belangrijk is, verstop hem dan niet.

2. De pagina wordt geblokkeerd door robots.txt

robots.txt vertelt crawlers welke delen van je site ze niet mogen bezoeken.

Als je pagina wordt geblokkeerd door robots.txt, kunnen zoekmachines deze mogelijk niet correct crawlen.

Voorbeeld:

User-agent: *
Disallow: /blog/

Dit zou crawlers blokkeren om pagina's binnen /blog/ te openen.

Hoe je dit oplost:

• Controleer https://jouwdomein.nl/robots.txt.
• Zorg ervoor dat belangrijke secties niet worden geblokkeerd.
• Test de pagina in Google Search Console.
• Verwijder per ongeluk ingestelde disallow-regels.

Gebruik robots.txt niet om indexering te beheren tenzij je de gevolgen begrijpt. Als een pagina wordt geblokkeerd voor crawlen, kunnen zoekmachines mogelijk belangrijke indexeringssignalen op de pagina niet zien.

3. De pagina heeft een noindex-tag

Een noindex-instructie vertelt zoekmachines dat ze een pagina niet mogen indexeren.

Dit kan verschijnen als een metatag:

<meta name="robots" content="noindex">

Of als een HTTP-header.

Dit is nuttig voor privé-, dubbele, dunne of waardeloze pagina's. Maar het is een serieus probleem als het verschijnt op een pagina die je juist wel wilt laten indexeren.

Hoe je dit oplost:

• Inspecteer de broncode van de pagina.
• Controleer de instellingen van SEO-plugins.
• Controleer de zichtbaarheidsinstellingen in het CMS.
• Verwijder noindex van pagina's die in de zoekresultaten moeten verschijnen.

Een pagina met noindex kan worden ontdekt en gecrawld, maar hoort niet te worden geïndexeerd.

4. Canonical-tags wijzen ergens anders heen

Een canonical-tag vertelt zoekmachines welke URL de voorkeursversie van een pagina is.

Voorbeeld:

<link rel="canonical" href="https://example.com/hoofdpagina">

Als je pagina een canonical-tag heeft die naar een andere URL wijst, kunnen zoekmachines in plaats daarvan de canonical-URL indexeren.

Dit is niet altijd fout. Canonicals zijn nuttig voor dubbele of soortgelijke pagina's. Maar als elke pagina naar de homepage wijst, of als belangrijke pagina's naar de verkeerde URL wijzen, kan het indexeren misgaan.

Hoe je dit oplost:

• Controleer de canonical-tag op de pagina.
• Zorg ervoor dat deze naar de juiste versie wijst.
• Vermijd fouten met zelf-verwijzende canonicals.
• Geef unieke pagina's geen canonical die naar een ongerelateerde pagina wijst.

Als je wilt dat een pagina wordt geïndexeerd, heeft deze meestal een zelf-verwijzende canonical-tag nodig.

5. De pagina geeft een foutmelding

Zoekmachines moeten succesvol toegang kunnen krijgen tot de pagina.

Als de URL een foutmelding geeft, is indexering onwaarschijnlijk.

Veelvoorkomende statusproblemen zijn:

• 404 niet gevonden
• 410 verwijderd
• 500 serverfout
• 503 niet beschikbaar
• Redirect-lussen
• Geblokkeerde bronnen

Hoe je dit oplost:

• Controleer de HTTP-statuscode.
• Repareer kapotte paden.
• Los serverfouten op.
• Vermijd redirect-ketens.
• Zorg dat de uiteindelijke bestemming een 200-code geeft.

Een pagina die technisch faalt, zal moeite hebben om geïndexeerd te worden, zelfs als de inhoud goed is.

6. Mager of waardeloze inhoud

Soms is de pagina technisch in orde, maar is de inhoud niet sterk genoeg.

Een magere pagina kan het volgende bevatten:

• Zeer weinig originele inhoud
• Algemene teksten
• Geen duidelijk doel
• Geen nuttige antwoorden
• Geen unieke waarde
• Gekopieerde beschrijvingen van fabrikanten
• Lege categoriepagina's

Zoekmachines hoeven niet elke pagina die ze vinden te indexeren. Als een pagina weinig waarde toevoegt, kan deze wel worden gecrawld, maar niet geïndexeerd.

Hoe je dit oplost:

• Voeg nuttige originele informatie toe.
• Beantwoord echte vragen van gebruikers.
• Voeg relevante voorbeelden toe.
• Verbeter interne links.
• Voeg gestructureerde secties toe.
• Verwijder of voeg zwakke pagina's samen.

Het vaker indienen van een magere pagina lost het probleem niet op. Verbeter eerst de pagina.

7. Dubbele inhoud

Dubbele inhoud is een andere veelvoorkomende reden waarom pagina's niet worden geïndexeerd.

Als verschillende URL's bijna dezelfde inhoud bevatten, kunnen zoekmachines er één kiezen en de rest negeren.

Veelvoorkomende voorbeelden zijn:

• Productvarianten
• Gefilterde collectiepagina's
• Printvriendelijke pagina's
• Locatiepagina's met bijna identieke tekst
• Gekopieerde beschrijvingen van leveranciers
• URL-parameters die dubbelingen creëren

Hoe je dit oplost:

• Gebruik canonical-tags correct.
• Consolideer dubbele pagina's.
• Voeg unieke inhoud toe waar pagina's op zichzelf moeten staan.
• Blokkeer of geef noindex aan pagina's met parameters van lage waarde waar nodig.
• Verbeter de interne linkstructuur naar de voorkeursversie.

Dubbele pagina's zijn niet altijd een strafbaar issue. Vaak kiezen zoekmachines er simpelweg voor om niet elke versie te indexeren.

8. Slechte interne linkstructuur

Interne links helpen zoekmachines pagina's te ontdekken en hun belang te begrijpen.

Als een pagina heel weinig interne links naar zich toe heeft, kunnen zoekmachines deze als minder belangrijk beschouwen.

Dit komt vooral vaak voor bij:

• Oude blogposts
• Landingspagina's
• Nieuwe servicepagina's
• Diepliggende productpagina's
• Seizoensgebonden pagina's
• Pagina's die buiten de hoofdnavigatie zijn gemaakt

Hoe je dit oplost:

• Link naar de pagina vanaf relevante bestaande pagina's.
• Voeg links toe vanuit categorie- of hubpagina's.
• Gebruik beschrijvende anchorteksten.
• Neem de pagina waar nodig op in nuttige navigatiemenu's.
• Link vanaf pagina's die al geïndexeerd zijn en goed presteren.

Interne linkstructuur is een van de eenvoudigste manieren om ontdekking te verbeteren.

9. Orphan pages (weespagina's)

Een weespagina is een pagina waar geen enkele interne link naar toe wijst.

Zoekmachines kunnen weespagina's nog steeds ontdekken via sitemaps of externe links, maar ze zijn moeilijker te begrijpen en te prioriteren.

Als een pagina belangrijk genoeg is om te ranken, hoort deze normaal gesproken verbonden te zijn met de rest van je site.

Hoe je dit oplost:

• Vind weespagina's met een crawl-tool of site-audit.
• Voeg interne links toe vanaf relevante pagina's.
• Neem belangrijke pagina's op in je sitemap.
• Groepeer gerelateerde inhoud in hubs.
• Verwijder weespagina's die geen doel dienen.

Een pagina zonder interne links stuurt een zwak signaal uit over de belangrijkheid ervan.

10. Zwakke site-autoriteit

Nieuwe websites of websites met een lage autoriteit hebben vaak meer tijd nodig om pagina's geïndexeerd te krijgen.

Zoekmachines hebben beperkte crawl-middelen. Ze hebben de neiging om vertrouwde, actieve en autoritaire sites vaker te crawlen.

Als je site nieuw is, weinig backlinks heeft, een zwakke interne structuur heeft of heel weinig geschiedenis qua inhoud, kan indexering langzamer gaan.

Hoe je dit verbetert:

• Publiceer consistent nuttige inhoud.
• Bouw interne links tussen gerelateerde pagina's.
• Verdien relevante externe links.
• Houd je sitemap schoon.
• Vermijd het publiceren van grote hoeveelheden zwakke pagina's.

Autoriteit gaat niet alleen over links. Het gaat ook over vertrouwen, nut en consistentie.

11. Problemen met crawlbudget

Crawlbudget is de hoeveelheid tijd die een zoekmachine bereid is te besteden aan het crawlen van je site.

Voor kleine sites is het crawlbudget meestal niet het grootste probleem. Maar voor grote e-commercesites, mappen, uitgevers en sites met programmatische SEO kan het wel uitmaken.

Crawlbudgetproblemen kunnen ontstaan wanneer zoekmachines tijd verspillen aan:

• Dubbele URL's
• Filterpagina's
• Zoekresultatenpagina's
• Oneindige URL-parameters
• Redirect-ketens
• Kapotte pagina's
• Magere pagina's

Hoe je dit oplost:

• Ruim dubbele URL-patronen op.
• Verbeter canonical-tags.
• Verwijder URL's van lage waarde uit sitemaps.
• Los redirect-ketens op.
• Blokkeer of geef noindex aan secties met lage waarde op een zorgvuldige manier.
• Verbeter de snelheid van de site en de betrouwbaarheid van de server.

Het doel is om crawlers te helpen meer tijd te besteden aan de pagina's die er toe doen.

12. Problemen met JavaScript-rendering

Sommige pagina's vertrouwen zwaar op JavaScript om inhoud weer te geven.

Zoekmachines kunnen JavaScript verwerken, maar dit kan trager of complexer zijn dan het crawlen van normale HTML.

Als belangrijke inhoud, links, titels of gestructureerde data pas verschijnen nadat JavaScript is uitgevoerd, kunnen ontdekking en indexering worden beïnvloed.

Hoe je dit oplost:

• Maak belangrijke inhoud waar mogelijk beschikbaar in server-gerenderde HTML.
• Controleer de gerenderde HTML.
• Test met de URL-inspectietool in Search Console.
• Vermijd het verbergen van essentiële links achter scripts.
• Zorg dat gestructureerde data aanwezig en geldig is.

Als gebruikers en crawlers niet dezelfde belangrijke inhoud kunnen zien, kan indexering onbetrouwbaar worden.

13. Recent gepubliceerde pagina's

Soms is er niets mis. De pagina is gewoon nieuw.

Zoekmachines indexeren niet elke pagina direct. Zelfs sterke pagina's kunnen tijd nodig hebben om te verschijnen.

Indexeringssnelheid hangt af van:

• Site-autoriteit
• Interne links
• Versheid van de sitemap
• Crawl-frequentie
• Pagina-kwaliteit
• Technische gezondheid
• Vraag van zoekmachines

Hoe je hiermee omgaat:

• Zorg dat de pagina crawlbaar is.
• Voeg interne links toe.
• Neem de pagina op in de sitemap.
• Dien deze in via je normale workflow.
• Houd het na verloop van tijd in de gaten.

Blijf niet elke paar minuten opnieuw indienen. Los eerst de echte problemen op.

14. Soft 404-pagina's

Een soft 404 ontstaat wanneer een pagina een 200-statuscode geeft, maar eruitziet als een lege of ontbrekende pagina.

Bijvoorbeeld:

• Een productpagina zonder product
• Een categoriepagina zonder artikelen
• Een magere pagina die zegt dat de inhoud niet gevonden kan worden
• Een sjabloonpagina met bijna geen nuttige informatie

Zoekmachines kunnen deze pagina's als waardeloos of ontbrekend beschouwen, ook al zegt de server dat ze bestaan.

Hoe je dit oplost:

• Voeg nuttige inhoud toe.
• Geef een correcte 404- of 410-statuscode voor verwijderde pagina's.
• Stuur gebruikers indien passend door naar een relevante vervanging.
• Vermijd het indexeren van lege sjablonen.

Een pagina moet echte waarde bieden, niet alleen een succesvolle statuscode teruggeven.

15. Zoekmachines hebben er simpelweg voor gekozen deze niet te indexeren

Dit is het antwoord waar niemand van houdt, maar het is vaak wel de waarheid.

Zoekmachines zijn niet verplicht om elke crawlbare pagina te indexeren.

Een pagina kan technisch in orde zijn en toch niet in de index terechtkomen als de zoekmachine besluit dat deze niet nuttig genoeg is.

Dit kan gebeuren wanneer:

• Het onderwerp ergens anders al beter wordt behandeld.
• De pagina weinig unieke waarde toevoegt.
• De site veel soortgelijke pagina's heeft.
• De inhoud algemeen is.
• De pagina zwakke interne links heeft.
• De algehele sitekwaliteit laag is.

Hoe je dit oplost:

• Verbeter de inhoud.
• Maak de pagina nuttiger dan concurrerende resultaten.
• Voeg originele voorbeelden, data of begeleiding toe.
• Versterk interne links.
• Consolideer soortgelijke pagina's.
• Bouw topische autoriteit op rond het onderwerp.

Indexeren is niet alleen technisch. Het is ook redactioneel.

Hoe je indexeringsproblemen diagnosticeert

Een goede diagnose van indexeringsproblemen volgt een vaste volgorde.

Begin bij de ontdekking:

• Staat de URL in de sitemap?
• Is er intern naar gelinkt?
• Is de pagina ingediend?
• Heeft Search Console de pagina ontdekt?

Controleer daarna de technische toegang:

• Geeft de pagina een 200-statuscode?
• Wordt deze geblokkeerd door robots.txt?
• Bevat de pagina een noindex-tag?
• Wijst de canonical ergens anders heen?
• Wordt de pagina omgeleid?

Controleer daarna de kwaliteit:

• Is de inhoud nuttig?
• Is deze uniek?
• Beantwoordt het een echte zoekbehoefte?
• Is het beter dan concurrerende pagina's?
• Is er voldoende interne ondersteuning?

Houd het daarna in de gaten:

• Werd de pagina gecrawld?
• Werd deze geïndexeerd?
• Waren er impressies?
• Waren er klikken?
• Veranderden de rankings na de aanpassingen?

Dit proces is nuttiger dan simpelweg opnieuw op "indienen" drukken.

Een eenvoudige checklist voor indexering

Controleer het volgende voordat je een URL indient:

• Pagina geeft status 200 terug.
• Pagina wordt niet geblokkeerd door robots.txt.
• Pagina heeft geen noindex.
• Canonical verwijst naar zichzelf.
• Pagina is opgenomen in de sitemap.
• Pagina heeft interne links.
• Titel en H1 zijn duidelijk.
• Inhoud is nuttig en origineel.
• Gestructureerde data is waar relevant geldig.
• Pagina laadt correct op mobiel.
• Belangrijke inhoud is zichtbaar in gerenderde HTML.
• Pagina is geen duplicaat.

Als er hiervan verschillende mislukken, herstel dan de pagina voordat u probeert deze te laten indexeren.

Hoe IndexStream helpt

IndexStream is ontworpen om indexering minder verwarrend en beter traceerbaar te maken.

In plaats van indexering te behandelen als een eenmalige indiening, biedt het u een workflow:

• URL's indienen.
• Loggen wat er is ingediend.
• Controleren of aanvragen zijn geaccepteerd.
• Pagina-gereedheid auditen.
• Fix-kaarten genereren.
• Concurrenten benchmarken.
• Content briefs maken.
• Search Console- en analytics-gegevens monitoren.
• Correcties in de loop van de tijd volgen.

Het doel is niet om indexering te garanderen. Geen enkele verantwoorde tool kan dat.

Het doel is om u te helpen begrijpen wat er is gebeurd, wat ontdekking blokkeert en wat u vervolgens moet repareren.

Voor gerelateerde lectuur, zie Google Indexing API uitgelegd, Wat is IndexNow? en Technische SEO-checklist.

Laatste gedachten

Als een pagina niet is geïndexeerd, ga er dan niet vanuit dat de enige oplossing is om deze opnieuw in te dienen.

Begin met het stellen van betere vragen:

• Is de pagina ontdekt?
• Kan deze worden gecrawld?
• Mag de pagina worden geïndexeerd?
• Is de canonical correct?
• Is de inhoud nuttig genoeg?
• Is er intern naar gelinkt?
• Is deze anders dan andere pagina's?

Indexeringsproblemen zijn vaak een combinatie van ontdekking, technische kwaliteit, inhoudskwaliteit en prioritering.

De sterkste SEO-workflows pushen niet alleen meer URL's. Ze helpen u beslissen welke pagina's het waard zijn om in te dienen, wat moet worden gerepareerd en of de correcties de zichtbaarheid daadwerkelijk hebben verbeterd.

Veelgestelde vragen

Waarom is mijn pagina niet geïndexeerd?

Uw pagina is mogelijk niet geïndexeerd omdat deze niet is ontdekt, wordt geblokkeerd, een noindex bevat, naar een andere canonical URL verwijst, dunne inhoud heeft, een dubbele pagina is, of niet voldoet aan de kwaliteitsdrempels van zoekmachines.

Hoe lang duurt indexering?

Indexering kan minuten, dagen of weken duren. De timing hangt af van de site, paginakwaliteit, crawl-behoefte, interne links en beslissingen van zoekmachines.

Garantie voor indexering bij het indienen van een URL?

Nee. Het indienen van een URL kan helpen bij de ontdekking, maar zoekmachines beslissen zelf of ze deze crawlen en indexeren.

Kan een pagina wel gecrawld maar niet geïndexeerd worden?

Ja. Een zoekmachine kan een pagina crawlen en toch besluiten deze niet te indexeren.

Stopt robots.txt indexering?

robots.txt blokkeert het crawlen, niet direct het indexeren. Als een pagina echter niet kan worden gecrawld, kunnen zoekmachines mogelijk belangrijke indexeringssignalen niet zien.

Wat is een weespagina (orphan page)?

Een weespagina is een pagina waar geen interne links naartoe verwijzen. Weespagina's zijn moeilijker voor zoekmachines om te ontdekken en te begrijpen.

Hoe weet ik of Google mijn pagina heeft ontdekt?

Gebruik de URL-inspectietool in Google Search Console, sitemaprapporten, serverlogs of een tool voor indexeringsworkflows om te controleren of de pagina is ontdekt of gecrawld.