Een site met honderden pagina’s, artikelen die elke week worden gepubliceerd, en toch blijven sommige URL’s wekenlang onvindbaar op Google. We controleren de interne linkstructuur, herpubliceren artikelen, maar het probleem blijft bestaan. In de meeste gevallen is de XML-sitemap ofwel afwezig, ofwel verkeerd geconfigureerd, en dat is het eerste bestand dat moet worden gecontroleerd.
XML-sitemap en crawlbudget: wat er aan de serverzijde speelt
Wanneer Googlebot op een site aankomt, heeft het geen onbeperkte tijd om de pagina’s te verkennen. Deze toegewezen tijd, vaak het crawlbudget genoemd, hangt af van de grootte van de site, de frequentie van updates en de serverrespons.
Verder lezen : Beheers de kunst van het plaatsen van een container: gids voor een succesvolle plaatsing
Een goed gebouwde XML-sitemap helpt om de robot naar de echt belangrijke pagina’s te leiden. Hierin worden de canonieke URL’s vermeld, de URL’s die we geïndexeerd willen zien, met uitsluiting van filterpagina’s, interne zoekresultaten of geconfigureerde campagne-URL’s. Google heeft in zijn Search Central-documentatie bevestigd dat de sitemap een ontdekkingsoverzicht blijft, geen indexeringsopdracht. Het verschil is belangrijk.
Op een site met veel inhoud zien we dat zonder sitemap sommige diepe secties nooit worden gecrawld. Het bestand fungeert als een routekaart: het dwingt geen doorgang af, maar geeft de bestaande wegen aan. Om beter te begrijpen hoe dit bestand past in een globale strategie, kunnen we de sitemap-pagina van Pimp Your Biz bekijken, die de concrete implementatie ervan in detail beschrijft.
Aanvullende lectuur : Wat is de gemiddelde tijd voor een halve marathon op basis van leeftijd en geslacht?
Consistentie tussen sitemap en canonieke tags: een veelvoorkomende valstrik
Een van de meest voorkomende problemen, dat zelden wordt besproken, betreft de tegenstrijdigheid tussen de URL’s die in de sitemap zijn verklaard en die aangegeven door de canonieke tags. Wanneer de sitemap een geconfigureerde URL toont terwijl de canonieke tag naar een schone versie verwijst, ontvangt Google een tegenstrijdig signaal.
Concreet zien we dit scenario op e-commerce sites die sorteer- of paginering-URL’s genereren. De sitemap bevat al deze varianten, soms duizenden, terwijl alleen de hoofdcategoriepagina’s geïndexeerd zouden moeten worden.
De recente Google-documentatie benadrukt dit punt: de URL’s die in de sitemap staan, moeten overeenkomen met de gewenste canonieke URL’s. Met andere woorden, de sitemap weerspiegelt de architectuur die u aanvaardt, niet die welke het CMS standaard genereert. Op WordPress produceren de meeste SEO-plugins een automatische sitemap die soms auteurspagina’s, tagarchieven of bijlagen bevat. Deze moeten handmatig worden uitgesloten.
Controles uit te voeren op een bestaande sitemap
- Vergelijk elke URL in de sitemap met de canonieke tag van de bijbehorende pagina: elke afwijking is een negatief signaal voor de crawl
- Verwijder uit de sitemap de URL’s die een 404-code, een 301-omleiding of een noindex-status retourneren
- Controleer of de interne zoek-URL’s, de gefilterde resultaatpagina’s en de campagne-URL’s (met UTM-parameters) niet in het bestand staan
- Zorg ervoor dat de sitemap is verklaard in het robots.txt-bestand via de Sitemap: instructie
Sitemap en interne linkstructuur: twee complementaire, geen vervangbare tools
Soms wordt gezegd dat de sitemap een goede interne linkstructuur vervangt. Google herinnert ons er expliciet aan dat dit niet het geval is. De sitemap compenseert geen gebrekkige linkarchitectuur.
Een interne link draagt PageRank over, plaatst de pagina in een thematische context en biedt de bezoeker een navigatiepad. De sitemap doet geen van deze dingen. Het geeft alleen het bestaan van een URL aan de robots aan.
In de praktijk variëren de reacties hierover: sommige goed gelinkte sites functioneren perfect zonder sitemap, terwijl andere, met een diepe structuur of massaal gepubliceerde inhoud, niet zonder kunnen. De pragmatische regel: als uw site meer dan een paar tientallen pagina’s heeft of regelmatig inhoud publiceert, biedt de sitemap een extra beveiligingslaag voor het ontdekken van nieuwe URL’s.
HTML-sitemap voor gebruikersnavigatie: een onderschatte aanvulling
De XML-sitemap is gericht op robots. De HTML-sitemap is daarentegen gericht op bezoekers. Vaak wordt deze over het hoofd gezien, terwijl hij twee concrete functies vervult.
De eerste: een overzicht van de site-structuur bieden aan gebruikers die niet vinden wat ze zoeken via het hoofdmenu. Op een institutionele site of een informatieportaal verlaagt een HTML-sitemap het bouncepercentage door een laatste navigatiemogelijkheid voor de uitgang te bieden.
De tweede: extra toegangspunten voor zoekmachines bieden naar diepe pagina’s, via klassieke HTML-links. Dit is geen duplicaat van de XML-sitemap. Beide formaten vullen elkaar aan omdat ze zich richten op verschillende doelgroepen met verschillende mechanismen.
Wanneer de HTML-sitemap rendabel wordt
Voor een site met minder dan twintig pagina’s voegt een HTML-sitemap niet veel toe. Het navigatiemenu is voldoende. Zodra de site echter meerdere categorieën, subsecties of een actieve blog aanbiedt, wordt de thematisch gestructureerde HTML-pagina een nuttige snelkoppeling.
Op sites met veel redactionele inhoud wordt deze pagina doorgaans in de footer gelinkt, toegankelijk vanaf elke pagina. De footer blijft de meest logische locatie voor een link naar de sitemap, omdat het de hoofd navigatie niet verstoort en tegelijkertijd altijd toegankelijk is.
Indienen en onderhouden van uw sitemap: operationele fouten
Een sitemap eenmaal genereren en deze vergeten is een veelvoorkomende fout. Het bestand moet evolueren met de site. Elke nieuwe gepubliceerde pagina, elke verwijderde of omgeleide URL moet worden weerspiegeld in de sitemap.
- Dien de sitemap in via Google Search Console en controleer regelmatig het dekkingsrapport om indexeringsfouten met betrekking tot het bestand op te sporen
- Configureer een automatische generatie van de sitemap (via een plugin of het CMS) in plaats van handmatige updates, die vaak vergeten worden
- Beperk de bestandsgrootte: Google accepteert tot 50.000 URL’s per sitemap, maar een te groot bestand met nutteloze URL’s verwatert de prioriteit van strategische pagina’s
De XML-sitemap is geen magische SEO-hulpmiddel. Het is een communicatiemiddel met de robots, dat werkt zolang het consistent is met de rest van de technische architectuur van de site. Een schoon, bijgewerkt bestand, afgestemd op de canonieke tags en verklaard in het robots.txt-bestand, dekt de meeste behoeften. De rest hangt af van de interne linkstructuur en de kwaliteit van de inhoud.