Een sitemap is een bestand, meestal in XML-formaat, dat de URL’s van een website opsomt om deze aan de robots van zoekmachines door te geven. De primaire rol ervan is om het bestaan van pagina’s aan te geven, niet om hun verkenning of indexering af te dwingen. Dit onderscheid verandert de manier waarop het wordt ontworpen en gebruikt.
XML Sitemap: een ontdekkingssignaal, geen garantie voor indexering
Google verduidelijkt dit in zijn documentatie: een sitemap dient om URL’s aan te geven, maar het dwingt noch de crawl, noch de indexering af. De robots beslissen vervolgens, op basis van hun eigen criteria, welke pagina’s het waard zijn om verkend en aan de index toegevoegd te worden.
Zie ook : Praktische tips voor het effectief vastzetten van de trommel van een wasmachine thuis
Deze nuance heeft praktische gevolgen. Het toevoegen van honderden pagina’s met een 404-fout, omleidingen of gemarkeerd als noindex in een sitemap levert niets positiefs op. De huidige beste praktijk is om alleen canonieke, indexeerbare URL’s die een code 200 retourneren op te nemen.
Een slecht gefilterde sitemap stuurt ruis naar de robots. In plaats van de ontdekking van uw strategische inhoud te versnellen, verdoezelt het de aandacht van de crawler in nutteloze pagina’s. In de praktijk komt elke URL die is opgenomen op de sitemappagina van Excargot overeen met een daadwerkelijk toegankelijke pagina, wat dit principe van voorafgaande filtering goed illustreert.
Lees ook : De beste oplossingen voor het kiezen van een effectieve lichtblokker voor ramen
Crawlbudget en diepe pagina’s: wanneer de sitemap echt nuttig wordt
Voor een vitrinewebsite van vijf pagina’s die met elkaar zijn verbonden via een menu, voegt de sitemap bijna niets toe. De robots vinden zelf de interne links en verkennen alles in enkele seconden.
De sitemap komt volledig tot zijn recht in specifieke gevallen:
- Grote e-commercecatalogi waar sommige productpagina’s diep verborgen zijn met meerdere klikken vanaf de homepage, zonder directe link vanuit de hoofd navigatie.
- Redactionele archieven of technische documentatie, waar oude inhoud geleidelijk hun interne links verliest door herontwerpen.
- Dynamisch gegenereerde inhoud (gefilterde zoekpagina’s, gepersonaliseerde resultatenpagina’s) die in geen enkel vast menu verschijnt.
In deze situaties compenseert de sitemap de tekortkomingen van de interne linkstructuur. Pagina’s die intern weinig zijn gelinkt, hebben soms geen andere manier om door een robot ontdekt te worden. De sitemap biedt hen een directe toegangspunt.
Het is geen comforttool, het is een vangnet voor inhoud die niet door de klassieke navigatiestructuur wordt gedekt.
Een sitemap indienen in 2025: het einde van de ping en de alternatieven
Jarenlang konden webmasters Google op de hoogte stellen van een update van hun sitemap via een HTTP-ping. Google heeft deze ping-methode in 2023 gedevalueerd. De twee aanbevolen manieren zijn nu de indiening via Google Search Console en de verklaring van de URL van de sitemap in het robots.txt bestand.
De verklaring in robots.txt is de eenvoudigste. Het enige wat je hoeft te doen is een regel toe te voegen zoals:
Sitemap: https://www.exemple.com/sitemap.xml
Elke robot die het robots.txt-bestand raadpleegt (en de grote meerderheid doet dit als eerste) ontdekt automatisch de locatie van de sitemap. Geen handmatige notificatie nodig, geen account in een zoekmachineconsole nodig.
Google Search Console blijft nuttig om de status van de verwerking van de sitemap te volgen: hoeveel URL’s zijn ingediend, hoeveel zijn geïndexeerd, en vooral welke fouten de robot is tegengekomen tijdens de verkenning.
XML Sitemap en HTML Sitemap: twee bestanden, twee verschillende functies
De XML sitemap is gericht op robots. De HTML sitemap is gericht op menselijke bezoekers. Het verwarren van de twee leidt tot inefficiënte ontwerpp keuzes.
Een HTML sitemap is een pagina van de site, toegankelijk vanaf de voettekst of het menu, die de structuur in de vorm van een lijst van klikbare links presenteert. Voor bezoekers die een specifieke pagina zoeken zonder de interne zoekmachine te gebruiken, biedt deze pagina een overzicht van de structuur van de site.
De XML sitemap vervangt geen goede interne linkstructuur of een coherente site-architectuur. Een site die uitsluitend op zijn XML sitemap vertrouwt om zijn pagina’s toegankelijk te maken, heeft een structureel probleem, geen probleem met de sitemap.
De twee formaten vullen elkaar aan. De XML helpt robots om de site in kaart te brengen. De HTML helpt bezoekers zich te oriënteren wanneer de hoofd navigatie niet voldoende is.
Filteren van je sitemap: de URL’s die je moet uitsluiten
Alle URL’s van een site in de sitemap opnemen is een veelgemaakte fout. Sommige pagina’s hebben geen plaats in dit bestand:
- Pagina’s met een noindex-tag of een canonical-directive die naar een andere URL verwijst.
- Pagina’s die zijn beveiligd met een wachtwoord of gereserveerd voor een ledenruimte.
- Pagina’s met interne zoekresultaten of combinatiefilters die duizenden URL’s genereren zonder unieke inhoud.
- URL’s met een 301-omleiding of die een 404-code retourneren.
Een schone sitemap bevat alleen de pagina’s die de site geïndexeerd wil zien. Deze discipline van filtering vergemakkelijkt het werk van de robots en verbetert de leesbaarheid van rapporten in de monitoringtools.
Op grote sites vereenvoudigt het splitsen in meerdere sitemap-bestanden (één per sectie, één per type inhoud) het onderhoud en maakt het mogelijk snel te identificeren welk deel van de site problemen vertoont tijdens de verkenning.
De sitemap blijft een discreet technisch hulpmiddel, maar de impact ervan hangt volledig af van de kwaliteit van wat erin wordt geplaatst. Een goed gefilterd bestand, verklaard in robots.txt en gecontroleerd in Search Console, dekt de volledige behoeften voor de meeste websites.