SEOInformatie.nl

Home / Website-indexering controleren: waarom staat een pagina niet in Google?

Website-indexering controleren: waarom staat een pagina niet in Google?

Onderzoek waarom webpagina’s niet worden geïndexeerd, interpreteer indexeringssignalen en gebruik Search Console voor gerichte controles.

Technische SEO

1.445 woorden · circa 7 minuten leestijd

Wat betekent indexering van een webpagina?

Indexering is het proces waarbij een zoekmachine informatie over een document verwerkt en opneemt in haar zoekindex. Die index vormt een verzameling gegevens waaruit de zoekmachine relevante resultaten kan selecteren. Wanneer een nieuwe pagina openbaar wordt gemaakt, bevindt zij zich niet automatisch in iedere zoekindex. De zoekmachine moet het adres eerst kunnen ontdekken en de inhoud op een geschikte manier kunnen verwerken.

Maak daarbij onderscheid tussen verschillende stappen. Ontdekking betekent dat een systeem een URL leert kennen, bijvoorbeeld via een link of sitemap. Crawlen is het opvragen van de beschikbare bron. Verwerking betreft onder andere het interpreteren van de inhoud en de technische signalen. Indexering is vervolgens een afzonderlijke beslissing. Een pagina die succesvol is opgehaald, hoeft dus nog niet als zelfstandige bestemming in de index terecht te komen.

Ook opname in een index betekent niet dat een pagina voor iedere gewenste zoekterm zichtbaar wordt. De selectie en rangschikking van resultaten zijn afhankelijk van de zoekvraag en andere omstandigheden. Wie een nieuwe website onderzoekt, moet daarom eerst vaststellen welke stap aandacht nodig heeft. Een probleem met de ontdekking vraagt een andere aanpak dan een pagina die wel geïndexeerd is maar weinig relevante vertoningen ontvangt.

Bepaal welke URL’s daadwerkelijk geïndexeerd moeten worden

Een website kan veel meer adressen aanbieden dan er zelfstandige zoekbestemmingen nodig zijn. Denk aan interne zoekresultaten, tijdelijke sorteerinstellingen, formulierstappen en technische gebruikersfuncties. Het is niet zinvol om iedere bereikbare route als een ontbrekend zoekresultaat te beschouwen. Begin met een lijst van pagina’s die een eigen openbare functie hebben.

Maak per paginatype duidelijk wat het verwachte resultaat is. Een redactionele handleiding hoort bijvoorbeeld zelfstandig bereikbaar te zijn en kan in aanmerking komen voor indexering. Een oude route die permanent naar een vervangend artikel verwijst, hoeft niet langer als afzonderlijke inhoudspagina te worden behandeld. Een afgeschermde beheerpagina heeft helemaal geen openbare zoekfunctie nodig.

Vergelijk deze lijst met de XML-sitemap. De sitemap helpt zoekmachines om gewenste bestemmingen te ontdekken, maar garandeert geen opname. Neem alleen definitieve adressen op die aansluiten bij de beoogde structuur. Controleer ook of belangrijke documenten via de normale navigatie bereikbaar zijn. Daarmee verklein je de kans dat de ontdekking van een belangrijk artikel afhankelijk blijft van één afzonderlijk bestand.

Leg de gewenste behandeling vast voordat je rapportages bekijkt. Een groot aantal uitgesloten URL’s hoeft immers niet problematisch te zijn wanneer die adressen bewust niet als afzonderlijke zoekbestemming worden aangeboden. De relevante vraag is welke belangrijke pagina’s ontbreken en waarom.

Controleer de URL-inspectie en beschikbare indexeringsrapporten

Voor een website die je beheert, biedt Google Search Console mogelijkheden om de geregistreerde status van individuele adressen te onderzoeken. Gebruik daarvoor een property die de betreffende URL omvat. Controleer de exacte schrijfwijze van het adres, inclusief protocol, host en eventuele relevante padsegmenten. Een andere URL-variant kan andere gegevens opleveren.

Bekijk de beschikbare informatie over de geïndexeerde versie en vergelijk waar passend met een live test. De twee vormen van informatie hebben een andere functie. De geregistreerde gegevens beschrijven hetgeen eerder door Google is verwerkt. Een live onderzoek kan aanwijzingen geven over de huidige bereikbaarheid en technische kenmerken. Een positieve live test bewijst niet dat een pagina inmiddels is geïndexeerd.

Gebruik het rapport over pagina-indexering om patronen binnen een grotere website te onderzoeken. Lees de uitleg bij de betreffende categorieën en controleer voorbeelden. Maak geen automatische wijziging aan alle adressen met dezelfde melding voordat duidelijk is welke functie zij hebben. Een groep alternatieve URL’s kan bijvoorbeeld terecht niet zelfstandig worden opgenomen.

Houd rekening met vertraging in de verwerking en rapportage van gegevens. Wanneer een fout zojuist is hersteld, hoeft die wijziging nog niet direct zichtbaar te zijn in eerder verzamelde informatie. Noteer wanneer de correctie plaatsvond en welke actuele controle is uitgevoerd. Beoordeel daarna of verdere opvolging nodig is.

Onderzoek technische blokkades voordat je inhoud gaat herschrijven

Controleer eerst of de openbare URL de verwachte HTTP-respons levert. Een pagina die onbedoeld een 404, 403 of serverfout teruggeeft, heeft een ander probleem dan een normaal bereikbare pagina. Test ook de uiteindelijke bestemming wanneer het verzoek wordt omgeleid. De gids over HTTP-statuscodes helpt bij het interpreteren van de ontvangen respons.

Bekijk vervolgens de robots-meta-instructies en eventuele X-Robots-Tag-headers. Een noindex-instructie kan ervoor zorgen dat een ondersteunende zoekmachine de pagina niet in de index opneemt. Controleer of die instelling bewust is gekozen. Een ontwikkelomgeving kan bijvoorbeeld een tijdelijke uitsluiting bevatten die bij het publiceren per ongeluk is blijven staan.

Lees ook de toepasselijke robots.txt-regels. Een crawlverbod en een indexeringsinstructie zijn verschillende mechanismen. Wanneer een crawler een pagina niet mag ophalen, kan diegene de op de pagina aangeboden noindex-instructie doorgaans niet verwerken. Gebruik de robots.txt-handleiding om het gewenste gedrag afzonderlijk vast te stellen.

Onderzoek ten slotte de canonical. Een verwijzing naar een andere versie kan bewust aangeven dat de huidige URL niet als zelfstandige voorkeursbestemming bedoeld is. Wanneer de canonical onterecht naar een andere pagina verwijst, moet de onderliggende generator worden gecontroleerd. Met de indexeerbaarheidscheck kun je een aantal van deze technische signalen bekijken. De tool beschikt niet over de zoekindex zelf en kan dus niet vaststellen of Google een pagina daadwerkelijk heeft opgenomen.

Beoordeel de inhoud en het onderscheid tussen afzonderlijke pagina’s

Wanneer de technische voorwaarden in orde lijken, is het verstandig de functie van de pagina nader te beoordelen. Welke vraag beantwoordt deze bestemming? Is de informatie beschikbaar zonder onnodig ingewikkelde handelingen? Komt de zichtbare inhoud overeen met de titel en de verwachtingen die vanuit andere onderdelen van de website worden gewekt?

Vergelijk de pagina met andere documenten binnen dezelfde website. Misschien bestaan er meerdere adressen die vrijwel identieke informatie aanbieden. Een zoekmachine kan in zo’n geval een andere versie selecteren dan de beheerder verwacht. Het oplossen van die situatie gaat verder dan het toevoegen van een willekeurige hoeveelheid nieuwe tekst. Onderzoek welke bestemming de meest logische hoofdversie vormt en of andere pagina’s een eigen functie kunnen behouden.

Controleer ook de volledigheid van de informatie. Een artikel dat alleen een korte algemene introductie bevat terwijl het een complete handleiding aankondigt, kan een inhoudelijke verbetering nodig hebben. Een productpagina met ontbrekende essentiële gegevens kan onvoldoende bruikbaar zijn voor potentiële klanten. Geef prioriteit aan informatie die helpt bij de werkelijke gebruikersvraag.

Vermijd de aanname dat een specifiek minimumaantal woorden opname in een index garandeert. Een korte definitie kan voldoende zijn wanneer zij een eenvoudige vraag duidelijk beantwoordt. Een complexe technische handleiding vraagt meestal meer uitleg. De kwaliteit van een zelfstandige zoekbestemming wordt niet alleen bepaald door de lengte van de tekst.

Verbeter de ontdekking en houd de publicatiegegevens consistent

Onderzoek hoe een zoekrobot en een gewone bezoeker de pagina kunnen bereiken. Een nieuwe handleiding kan bijvoorbeeld worden opgenomen in een passende categorie, worden genoemd in gerelateerde artikelen en worden toegevoegd aan de sitemap. Zorg dat de links daadwerkelijk naar het definitieve adres leiden.

Controleer of een website nieuwe pagina’s via een betrouwbare publicatieroutine aanbiedt. Een tijdelijk concept hoort niet al in openbare overzichten te verschijnen. Na goedkeuring moet de bestemming daarentegen zonder speciale sessie of beheerrechten toegankelijk zijn. Laat de sitemap en interne navigatie dezelfde publicatiestatus gebruiken.

Wanneer een belangrijke pagina nieuw is of na een correctie opnieuw moet worden beoordeeld, kan een beschikbare indexeringsaanvraag in Search Console een passende aanvullende stap zijn. Die aanvraag is geen toezegging dat het document binnen een bepaalde termijn wordt opgenomen. Herhaaldelijk hetzelfde adres aanmelden is geen vervanging voor het oplossen van een onderliggend probleem.

Controleer ook of er structurele problemen zijn met gedeelde templates. Wanneer honderden nieuwe artikelen niet worden ontdekt doordat de categoriepagina hun links niet toont, is aanpassing van de categorie-opbouw waarschijnlijk nuttiger dan het afzonderlijk aanmelden van ieder artikel. Zoek naar oplossingen die de normale publicatiestroom verbeteren.

Maak een opvolgplan voor belangrijke niet-geïndexeerde pagina’s

Leg per onderzochte URL de gewenste status, geregistreerde zoekmachinestatus en actuele technische bevindingen vast. Beschrijf welke oorzaak is bevestigd en welke verklaring nog onzeker is. Bepaal vervolgens welk werk nodig is om de bestemming te verbeteren. Een incorrecte statuscode kan direct worden hersteld, terwijl een inhoudelijk probleem een zorgvuldig redactioneel onderzoek vraagt.

Controleer na een wijziging eerst de live website. Test de statuscode, zichtbare hoofdinhoud, canonical en normale interne verwijzingen. Wanneer de bestemming in de sitemap hoort te staan, verifieer dan dat het adres daar correct wordt aangeboden. Bewaar de datum van de wijziging om latere rapportgegevens in de juiste context te kunnen plaatsen.

Bekijk na voldoende verwerkingstijd opnieuw de beschikbare indexeringsinformatie. Maak onderscheid tussen een opgeloste technische fout en de beslissing van een zoekmachine om een document daadwerkelijk op te nemen. Een pagina kan technisch verbeterd zijn zonder onmiddellijk in zoekresultaten te verschijnen. Beoordeel later ook de relevante zoekimpressies en klikken wanneer deze beschikbaar worden.

Neem deze controle op in het periodieke SEO-auditstappenplan. Daarmee kun je nieuwe problemen sneller herkennen en voorkom je dat normale uitsluitingen telkens als fouten worden gerapporteerd. Het doel is een logisch en betrouwbaar openbaar aanbod, niet de opname van ieder denkbaar adres.

Direct toepassen

Indexeerbaarheidscheck

Controleer HTTP-status, canonical en robots-instructies.

Start Indexeerbaarheidscheck →

Verder lezen in dit onderwerp

Technische SEO: complete handleiding voor je website →

XML-sitemap maken: volledige uitleg en controle →

Robots.txt: complete handleiding voor crawlregels →