Wat is indexeren?
Indexeren is het proces waarbij een zoekmachine een pagina analyseert en opslaat in zijn index, de database waaruit de zoekresultaten worden samengesteld. Een pagina die niet geïndexeerd is, kan niet in de zoekresultaten verschijnen.
Indexeren is de tweede stap in hoe Google werkt. Eerst crawlt Googlebot een pagina: hij haalt de pagina op. Daarna beoordeelt Google de inhoud en beslist of de pagina in de index komt. Pas dan volgt het bepalen van de positie in de zoekresultaten. Crawlen en indexeren worden vaak door elkaar gehaald, maar het verschil doet ertoe. Een pagina kan prima gecrawld zijn en toch buiten de index blijven. Google zegt zelf dat indexatie niet gegarandeerd is en dat niet elke verwerkte pagina wordt opgenomen.
Waarom pagina’s van een webshop niet in de index komen
Bij webshops ligt het probleem zelden bij te weinig pagina’s, maar bij te veel. Filters, sorteringen, paginering en productvarianten leveren al snel duizenden URL’s op die bijna dezelfde inhoud tonen. Google groepeert zulke pagina’s en kiest er één als canonieke versie. De rest wordt niet als hoofdversie getoond. Daarnaast zijn er een paar vaste oorzaken die we in vrijwel elke audit tegenkomen.
Oorzaak | Wat je in Search Console ziet | Wat je doet |
|---|---|---|
Noindex in de robots-metatag | De pagina is uitgesloten vanwege noindex | Controleer of de tag bewust is geplaatst. Na een migratie of livegang blijft hij vaak per ongeluk staan. |
Dubbele of bijna-dubbele inhoud | Google heeft een andere canonieke pagina gekozen | Stel een canonical in naar de hoofdversie en schrijf unieke teksten voor pagina’s die moeten ranken. |
Dunne of weinig waardevolle inhoud | De pagina is gecrawld maar niet geïndexeerd | Voeg inhoud toe die de pagina nuttig maakt, of voeg vergelijkbare pagina’s samen. |
Blokkade in robots.txt | De pagina is geblokkeerd door robots.txt | Robots.txt regelt het crawlen, niet de indexatie. Wil je een pagina uit de index houden, gebruik dan noindex. |
Geen interne links | De pagina wordt laat of niet ontdekt | Link vanuit categorieën en navigatie en neem de URL op in je XML-sitemap. |
Een veelgemaakte fout is een pagina tegelijk blokkeren in robots.txt en een noindex geven. Als Googlebot de pagina niet mag ophalen, ziet hij de noindex ook niet. Een geblokkeerde URL kan daardoor toch in de index belanden, zonder beschrijving, als andere pagina’s ernaar linken.
Zo stuur je als webshop de indexatie
Het doel is niet zoveel mogelijk pagina’s in de index, maar de juiste. Bepaal eerst welke paginatypes moeten ranken: categorieën, subcategorieën, productpagina’s en informatieve content. Winkelwagen, account, interne zoekresultaten en de meeste filtercombinaties horen er niet in. Werk daarna deze stappen af:
Open in Google Search Console het rapport over pagina-indexering en bekijk per reden welke URL’s niet zijn geïndexeerd. Filter op je sitemap, dan zie je meteen of het om belangrijke pagina’s gaat.
Controleer losse pagina’s met de URL-inspectietool. Die laat zien of Google de pagina kent, welke canonical Google heeft gekozen en of indexering is toegestaan.
Los eerst de oorzaak op en vraag daarna pas opnieuw indexering aan. Een verzoek indienen zonder iets aan de pagina te veranderen, helpt zelden.
Houd je XML-sitemap schoon: alleen canonieke URL’s met een 200-statuscode die geïndexeerd mogen worden.
Kies bij filters een duidelijke lijn. Filters waarop echt wordt gezocht, zoals merk plus categorie, richt je in als volwaardige landingspagina met een eigen tekst en title. De overige combinaties houd je buiten de index. Doe dat niet half. Een filterpagina met een canonical naar de categorie, maar wel een eigen title en links vanuit het menu, geeft Google tegenstrijdige signalen.
Uitverkochte producten zijn de tweede valkuil. Haal een tijdelijk uitverkocht product niet uit de index, maar toon een alternatief of een melding wanneer het weer leverbaar is. Komt een product definitief niet terug, verwijs dan met een 301-redirect naar de meest vergelijkbare pagina.
Hoe je de rapporten leest, staat in ons artikel over Google Search Console. Wil je weten welke pagina’s van jouw webshop Google mist of juist onnodig opneemt? Bekijk dan onze aanpak voor zoekmachine-optimalisatie.
Veelgestelde vragen
Hoe lang duurt het voordat Google een nieuwe pagina indexeert?
Dat varieert van enkele dagen tot een paar weken. Pagina’s met goede interne links en een plek in de sitemap worden doorgaans sneller ontdekt. Een verzoek via de URL-inspectietool kan helpen, maar is geen garantie.
Hoe controleer ik of een pagina geïndexeerd is?
Gebruik de URL-inspectietool in Google Search Console. Een zoekopdracht met site: gevolgd door de URL geeft een indicatie, maar is minder betrouwbaar.
Moet elke pagina van mijn webshop geïndexeerd worden?
Nee. Pagina’s zonder zoekwaarde, zoals de winkelwagen, het klantaccount en interne zoekresultaten, houd je bewust buiten de index. Zo richt Google zich op de pagina’s die bezoekers en omzet opleveren.
Wat is het verschil tussen noindex en een canonical?
Met noindex vraag je Google de pagina niet op te nemen. Een canonical geeft aan welke van meerdere vergelijkbare pagina’s de hoofdversie is, maar Google mag daarvan afwijken.
Bronnen
Eefje van der Pasch
Junior online marketeer
