Begrippenlijst · Crawlen & indexeren

Indexeren

Ook wel: indexering, indexing

Definitie

Indexeren is het opslaan en analyseren van een gecrawlde pagina in de zoekindex. Alleen geïndexeerde pagina's kunnen in Google verschijnen, en Google indexeert lang niet alles wat het crawlt.

Wat is indexeren?

Indexeren is de stap waarin een zoekmachine een gecrawlde en gerenderde pagina analyseert en opslaat. Google bepaalt dan waar de pagina over gaat, welke URL de canonieke versie is en of de pagina überhaupt een plek in de index verdient.

Die laatste beslissing is de kern. Google indexeert niet automatisch alles. Pagina's die te veel lijken op andere pagina's, weinig unieke inhoud hebben of technisch afgeschermd zijn, vallen af.

Waarom het ertoe doet voor webshops

Een productpagina die niet geïndexeerd is, levert nul organische omzet op. Hoe goed de tekst ook is. Bij webshops zie je in Search Console vaak grote aantallen URL's met de status "Gevonden - momenteel niet geïndexeerd" of "Gecrawld - momenteel niet geïndexeerd".

De eerste status betekent: Google kent de URL, maar heeft hem nog niet opgehaald. Vaak een signaal dat de site te veel URL's aanbiedt voor de aandacht die Google eraan wil besteden. De tweede status betekent: Google heeft de pagina bekeken en besloten hem (nog) niet op te nemen. Dat wijst meestal op dunne of dubbele content, zoals productpagina's met alleen een leveranciersomschrijving.

Het doel is dus niet zo veel mogelijk pagina's in de index. Het doel is dat de juiste pagina's erin staan: categorieën, producten en content waar je op wilt verkopen.

Kijk ook naar de reden "Alternatieve pagina met correcte canonieke tag". Die ziet er alarmerend uit, maar betekent meestal dat je canonicals werken: Google heeft de variant gezien en indexeert de hoofdversie. Zorgwekkender is "Duplicaat, Google heeft een andere canonieke pagina gekozen dan de gebruiker". Dan negeert Google je eigen keuze, vaak omdat interne links en sitemap een andere URL aanwijzen dan je canonical.

Zo stuur je indexering in Magento en Shopify

Je stuurt indexering met een paar middelen: noindex (pagina niet opnemen), canonical tags (welke variant de hoofdversie is), je XML-sitemap (welke URL's je belangrijk vindt) en interne links (welke pagina's gewicht krijgen).

In Magento stel je de standaard robots-meta in via Content > Design > Configuration, en canonicals voor categorieën en producten onder Stores > Configuration > Catalog > Catalog > Search Engine Optimization. Let op: de "indexers" in Magento (bin/magento indexer:reindex) hebben niets met Google te maken. Dat zijn interne database-indexen.

Shopify zet automatisch canonicals en een sitemap neer. Noindex voor specifieke templates of pagina's regel je in het thema, bijvoorbeeld met een conditionele meta robots-tag in theme.liquid.

Veelgemaakte fouten

Noindex combineren met een robots.txt-blokkade, waardoor Google de noindex nooit ziet. Een sitemap vol URL's die redirecten, 404 geven of een canonical naar een andere URL hebben. En na een migratie vergeten dat de oude noindex-instelling van de staging-omgeving nog op productie staat.

Indexering controleren in Search Console

Search Console > Indexering > Pagina's
  "Gevonden - momenteel niet geïndexeerd"  -> crawl-/prioriteitsprobleem
  "Gecrawld - momenteel niet geïndexeerd"  -> kwaliteit/duplicatie
  "Alternatieve pagina met correcte canonieke tag" -> meestal prima

Verder lezen

Veelgestelde vragen

Hoe lang duurt het voordat een nieuwe productpagina geïndexeerd is?+

Dat varieert van uren tot weken. Een interne link vanaf een vaak gecrawlde pagina, zoals de categorie of homepage, en opname in de sitemap versnellen het.

Moet elke pagina van mijn webshop geïndexeerd worden?+

Nee. Filtercombinaties, interne zoekresultaten, account- en winkelwagenpagina's horen meestal niet in de index. Alleen pagina's waarop je gevonden wilt worden.

Meer begrippen over crawlen & indexeren

Liever dat iemand het voor je uitzoekt?

Wij controleren je webshop op deze punten en voeren de fixes zelf door in Magento, Shopify of Laravel. Je praat direct met het team dat het bouwt.