Gevonden – momenteel niet geïndexeerd

Gecrawld maar niet geïndexeerd in Google Search Console

In Google Search Console is “Gecrawld – momenteel niet geïndexeerd” een term die aangeeft dat Google een specifieke URL heeft ontdekt en gecrawld, maar de betreffende pagina wordt momenteel niet in de zoekresultaten weergegeven.

Dit kan verschillende oorzaken hebben, en het begrijpen van deze oorzaken is essentieel voor het effectief beheren van de online zichtbaarheid van een website.

Wat betekent gecrawld maar niet geïndexeerd?

Google maakt gebruik van ‘crawlers’ of ‘spiders’ om nieuwe en bijgewerkte pagina’s op het web te ontdekken. Wanneer Google een pagina crawlt, leest het de inhoud van de pagina en analyseert het deze om de relevantie voor verschillende zoekopdrachten te bepalen. Een pagina die gecrawld maar niet geïndexeerd is, is een die Google heeft onderzocht, maar heeft besloten niet op te nemen in de zoekresultaten.

Waarom is een pagina of bericht niet geïndexeerd?

Er zijn verschillende redenen waarom een pagina mogelijk niet wordt geïndexeerd, waaronder:

• Tijdelijke vertraging: Het kan zijn dat er een tijdelijke vertraging is in het indexeren van de pagina.
• Noindex-tag: De pagina kan zijn uitgesloten van indexering door de aanwezigheid van een noindex-tag, ingesteld via SEO-plugins zoals Yoast SEO of RankMath.
• Robots.txt-bestand: Een robots.txt-bestand kan bepaalde pagina’s uitsluiten van indexering.
• Gebrek aan kwaliteitsinhoud: Een pagina met duplicaat, dunne, of irrelevante inhoud kan ook niet worden geïndexeerd.

Hoe indexeer je een pagina?

Om een pagina te laten indexeren, moeten webmasters de volgende stappen ondernemen:

1. Controleer de inhoud: Zorg ervoor dat de pagina relevante, unieke, en hoogwaardige inhoud bevat.
2. Verwijder beperkingen: Verwijder eventuele noindex-tags of uitsluitingsregels in het robots.txt-bestand die Google’s toegang tot de pagina kunnen belemmeren.
3. Voeg de URL toe aan Google Search Console: Na het optimaliseren van de pagina voor indexering, kan de URL worden ingediend via de URL-inspectietool in Google Search Console voor hercrawling.
4. Bouw kwaliteitslinks op: Het bouwen van backlinks naar de pagina kan ook helpen om de zichtbaarheid en indexering te verbeteren.

Een goed begrip van het proces van crawling en indexering is cruciaal voor het optimaliseren van de zichtbaarheid van een website in de zoekresultaten van Google. Door te zorgen voor hoogwaardige inhoud, het elimineren van indexering beperkingen, en het regelmatig indienen van pagina’s voor hercrawling, kunnen webmasters ervoor zorgen dat hun pagina’s effectief worden geïndexeerd en weergegeven in zoekresultaten.

Tips

• Houdt Google Search Console in de gaten: Regelmatig controleren van de Google Search Console kan vroegtijdige detectie van indexatieproblemen mogelijk maken.
• Voer een SEO-Audit uit: Een regelmatige SEO-audit van een website kan helpen om potentiële problemen met indexering en andere SEO-problemen te identificeren en op te lossen.
• Maak gebruik van sitemaps: Een sitemap kan helpen om het crawlen en indexeren van pagina’s door Google te vergemakkelijken.

Een soft 404-fout in Google Search Console is een foutmelding die verschijnt wanneer een webpagina op jouw site geen of weinig inhoud heeft, maar nog steeds een 200 statuscode retourneert (wat aangeeft dat het een succesvolle HTTP-request is).

Dit gebeurt vaak wanneer een webpagina is verwijderd of verplaatst, maar de server nog steeds een 200 statuscode retourneert in plaats van een 404-foutcode. De 404-foutcode zou aangeven aan Google dat de pagina niet langer beschikbaar is, terwijl de 200 statuscode suggereert dat de pagina nog steeds actief en geldig is.

Soft 404 en rankings

Soft 404-fouten kunnen een negatief effect hebben op de zoekmachine rankings van jouw website, omdat ze zoekmachines in de war kunnen brengen en leiden tot een slechte gebruikerservaring. Om dit probleem op te lossen, moet je de getroffen pagina’s identificeren en deze ofwel doorverwijzen naar relevante pagina’s op jouw site met een 301 redirect of alternatieve inhoud op de pagina’s bieden.

Zodra je de nodige wijzigingen hebt aangebracht, kun je de URL-inspectietool in Google Search Console gebruiken om te controleren of de Soft 404-fouten zijn opgelost.

Geblokkeerd wegens verboden toegang (403)

Een “Geblokkeerd wegens verboden toegang (403)” melding is een HTTP-statuscode die optreedt wanneer de server een verzoek van de client begrijpt maar dit weigert uit te voeren. Deze weigering kan te wijten zijn aan ontbrekende of incorrecte authenticatie of autorisatie.

Context van Google Search Console

In de context van Google Search Console wijst een 403-melding erop dat Googlebot, de webcrawler van Google, geen toegang kan krijgen tot een specifieke pagina op een website. Dit gebeurt wanneer de pagina of website beveiligingsinstellingen of serverinstellingen heeft die de toegang beperken of blokkeren.

Oorzaken

Er zijn verscheidene redenen waarom een pagina ontoegankelijk kan zijn voor Googlebot, zoals:

1. Onjuiste machtigingen: Als de machtigingen van een pagina niet correct zijn ingesteld, kan dit Googlebot verhinderen toegang te krijgen.
2. Foutief geconfigureerd .htaccess-bestand: Een onjuist geconfigureerd .htaccess-bestand kan de toegang van Googlebot tot de pagina blokkeren.
3. Beveiligingsplugins: Sommige beveiligingsplugins zoals WordFence kunnen de toegang voor Googlebot beperken of blokkeren.

Oplossingen

Om de 403-melding op te lossen en ervoor te zorgen dat Googlebot toegang heeft tot jouw pagina’s, volg de onderstaande stappen:

1. Controleer serverlogboeken en beveiligingsinstellingen: Door de serverlogboeken en beveiligingsinstellingen van jouw website na te kijken, kun je identificeren wat de toegang blokkeert en de nodige aanpassingen maken.
2. Gebruik “Ophalen als Google” tool: De “Ophalen als Google”-tool in Google Search Console toont hoe Googlebot jouw pagina’s ziet en helpt bij het identificeren en oplossen van eventuele toegangsproblemen.
3. Raadpleeg documentatie en support: Raadpleeg de documentatie van jouw beveiligingsplugin en hosting provider of neem contact op met hun supportafdeling als je hulp nodig hebt bij het configureren van de instellingen.
4. Controleer robots.txt-bestand: Een robots.txt-bestand dat Googlebot verhindert jouw site te crawlen, kan ook een 403-fout veroorzaken. Zorg ervoor dat jouw robots.txt-bestand Googlebot toestaat jouw site te bezoeken.

Het oplossen van 403-fouten is cruciaal voor de zichtbaarheid van jouw website in de zoekresultaten van Google. Een website die niet correct kan worden gecrawld en geïndexeerd, zal niet optimaal presteren in zoekmachines, wat kan leiden tot een vermindering van organisch verkeer en verlies van potentiële klanten of gebruikers.

Dubbele pagina’s en het belang van een gebruiker-geselecteerde canonieke versie

Een fenomeen waar websitebeheerders vaak mee te maken krijgen is de “dubbele pagina zonder door de gebruiker geselecteerde canonieke versie”. Dit verwijst naar het voorkomen van twee of meer pagina’s op een website die zeer vergelijkbaar of zelfs identiek zijn, zonder dat er een aangeduide voorkeursversie, ofwel “canonieke” versie, bestaat.

Dit kan verwarrend zijn voor zoekmachines, wat leidt tot onzekerheid over welke versie getoond moet worden in de zoekresultaten.

Impact op SEO

Het is belangrijk om dubbele pagina’s te verwijderen, aangezien deze significant de SEO-prestaties van de site kunnen hinderen. Google en andere zoekmachines kunnen problemen ondervinden bij het identificeren van de relevante pagina om weer te geven en mogelijk beide pagina’s een lagere ranking geven.

Hieronder zijn meer gedetailleerde maatregelen beschreven om dit probleem op te lossen.

Oplossingen

1. Canonical tags gebruiken: Voeg een canonical tag toe aan de head-sectie van de duplicaatpagina’s. Deze tag wijst zoekmachines erop welke versie als de canonieke versie beschouwd moet worden, en helpt bij het voorkomen van verwarring omtrent dubbele content.
2. 301-redirect instellen: Wanneer een dubbele pagina overbodig is, is het raadzaam om een 301-redirect in te stellen. Dit leidt zowel bezoekers als zoekmachines om naar de voorkeursversie, wat helpt in het verminderen van duplicatie.
3. Consistentie in interne links: Het is van belang om consistent te zijn met interne links, zorg ervoor dat deze altijd verwijzen naar de canonieke versie van de pagina. Dit biedt helderheid aan zoekmachines over welke versie prioriteit heeft en helpt in het consolideren van de paginawaarde, zoals PageRank, naar de canonieke versie.
4. Sitemap optimalisatie: Enkel de canonieke versie van de pagina zou opgenomen moeten zijn in de XML-sitemap, om zoekmachines te assisteren bij het indexeren van de correcte versie.
5. Minimalisatie van URL-parameters: URL-parameters, vaak gebruikt bij het sorteren of filteren van producten op e-commerce websites, kunnen soms dubbele pagina’s genereren. Het minimaliseren van deze parameters of het configureren van de parameterbehandeling via de Google Search Console kan de duidelijkheid voor zoekmachines verbeteren. FacetWP is een fantastische filterplugin die hier uit zichzelf al rekening mee houdt.

Aandachtspunten

• Monitoring van indexering: Regelmatige controle van hoe pagina’s worden geïndexeerd door zoekmachines kan bijdragen aan het vroegtijdig identificeren en oplossen van problemen met dubbele content. Je kunt dit snel bekijken in Google Search Console.
• Content diversificatie: Probeer de inhoud op elke pagina zo uniek mogelijk te maken. Dit vermindert de kans op duplicatie en verhoogt de waarde van elke individuele pagina.
• Duidelijke structuur: Een heldere en logische site-structuur verbetert de gebruikerservaring en maakt het eenvoudiger voor zoekmachines om de site te crawlen en te indexeren.

Het efficiënt managen van dubbele pagina’s door het selecteren van een canonieke versie is essentieel voor het handhaven van de integriteit en de SEO-prestaties van een website. Door consequent te zijn in het gebruik van canonical tags, redirects en interne links, en door aandacht te besteden aan de sitemap en URL-parameters, kan een website optimaler functioneren en een hogere zichtbaarheid bereiken in zoekmachineresultaten.

De “Serverfout (5xx)” melding in Google Search Console (GSC) verwijst naar een situatie waarin de server van jouw website een fout heeft veroorzaakt bij het verwerken van een verzoek van Googlebot. Dit betekent dat Googlebot problemen ondervindt bij het crawlen en indexeren van de betreffende pagina’s op de website vanwege serverproblemen.

Verschillende serverfouten

5xx-fouten zijn serverfouten die kunnen ontstaan door verschillende problemen, zoals overbelasting van de server, problemen met serverconfiguratie, of technische problemen met de server zelf.

Om serverfouten (5xx) op te lossen, kun je de volgende stappen ondernemen:

1. Controleer de logs van je server en van de WordPress website: Analyseer de serverlogs om de oorzaak van de fouten te identificeren. Zoek naar foutmeldingen of patronen die kunnen wijzen op specifieke problemen met de serverconfiguratie of de websitecode.
2. Neem contact op met je hostingprovider: Als je problemen ondervindt met de server, is het verstandig om contact op te nemen met de hostingprovider. Zij kunnen je mogelijk verder helpen bij het identificeren van de oorzaak van de fout en het implementeren van de juiste oplossing.
3. Optimaliseer servercapaciteit en -prestaties: Overbelasting van de server kan 5xx-fouten veroorzaken, vooral als er veel verkeer of crawlers tegelijkertijd de website bezoeken. Optimaliseer je servercapaciteit door het gebruik van caching, content delivery networks (CDN’s) en het verbeteren van de algehele prestaties van de WordPress website.
4. Controleer serverconfiguratie: Fouten in de serverconfiguratie, zoals verkeerd ingestelde .htaccess-bestanden of onjuiste URL-omleidingen, kunnen ook 5xx-fouten veroorzaken. Controleer de configuratiebestanden om ervoor te zorgen dat alles correct is ingesteld.
5. Herstel code- of scriptproblemen: Soms kunnen problemen in de code van uw website, zoals PHP-scripts, serverfouten veroorzaken. Controleer uw code op fouten en los eventuele problemen op om de stabiliteit van uw server te verbeteren.

Na het oplossen van de serverfouten (5xx), is het belangrijk om de wijzigingen te controleren en te testen om te verzekeren dat de problemen ook echt zijn verholpen.

Gebruik Google Search Console om een nieuwe crawl aan te vragen, zodat Googlebot de pagina’s opnieuw kan bezoeken en testen of de problemen opgelost zijn. Dit kan wel enige tijd duren, de scan is niet meteen klaar.

Omleidingsmeldingen in Google Search Console

De melding “Pagina met omleiding” binnen Google Search Console (GSC) informeert webbeheerders dat een bepaalde pagina op hun website een omleiding bevat. Omleidingen zijn essentiële instructies die bezoekers en zoekmachines doorsturen van de ene URL naar een andere. Dit gebeurt voornamelijk wanneer de inhoud van een pagina is verplaatst of wanneer de URL-structuur van een website is aangepast.

Belang van omleidingen

Omleidingen zijn cruciaal om de gebruikerservaring en de SEO-ranking van een website te behouden. Een correct ingestelde omleiding zorgt ervoor dat bezoekers niet op een 404-foutpagina belanden en behoudt de paginaranking en linkwaarde, wat bijdraagt aan de algemene zichtbaarheid van de website in zoekmachines.

Soorten omleidingen

Binnen WordPress zijn er verschillende soorten omleidingen beschikbaar. De twee meest voorkomende zijn:

1. 301-omleiding (permanente omleiding): Deze informeert dat de oorspronkelijke pagina permanent naar een nieuwe URL is verplaatst. Dit is de meest SEO-vriendelijke omleiding, daar het de meeste linkwaarde naar de nieuwe pagina doorstuurt.
2. 302-omleiding (tijdelijke omleiding): Deze meldt dat de oorspronkelijke pagina tijdelijk naar een nieuwe URL is verplaatst en is ideaal voor situaties waar de inhoud tijdelijk is verplaatst, zoals tijdens onderhoud of een promotie.

Actie ondernemen

Bij het ontvangen van een “Pagina met omleiding”-melding in GSC, is het van cruciaal belang om te controleren of de omleiding gewenst is. Indien ongewenst, moet deze zo snel mogelijk worden opgelost om SEO-problemen te voorkomen.

Hoe problemen oplossen?

1. Controleer de soort omleiding: Ga na of de gebruikte omleiding het juiste type is. Als een pagina bijvoorbeeld permanent is verplaatst, gebruik dan een 301-omleiding in plaats van een 302.
2. Onderzoek de URL’s: Zorg ervoor dat zowel de originele als de nieuwe URL correct zijn en dat de nieuwe URL de beoogde pagina weergeeft.
3. Verifieer in GSC: Na het aanbrengen van wijzigingen, verifieer in Google Search Console dat de problemen zijn opgelost door de betreffende pagina opnieuw te laten indexeren.

Een “Pagina met omleiding”-melding in Google Search Console is een belangrijke waarschuwing voor websitebeheerders. Het correct oplossen van deze meldingen is van belang om een optimale gebruikerservaring en SEO-prestaties te handhaven.

De melding “Alternatieve pagina met correcte canonieke tag” in Google Search Console (GSC) verwijst naar situaties waarin Google een pagina op je website heeft geïdentificeerd die als alternatieve versie van een andere pagina wordt beschouwd, en waarbij de canonieke tag correct is ingesteld.

Google Search Console melding

De canonieke tag is een HTML-element dat wordt gebruikt om zoekmachines te informeren welke versie van een webpagina de voorkeursversie (of de “canonieke” versie) is, vooral wanneer er meerdere versies van dezelfde pagina bestaan. Dit kan bijvoorbeeld gebeuren bij duplicate content of bij het tonen van dezelfde inhoud op verschillende URL’s.

Door de canonieke tag te gebruiken, kun je voorkomen dat zoekmachines deze pagina’s als afzonderlijke en unieke inhoud behandelen, wat kan leiden tot problemen met de posities in de zoekmachines.

Alternatieve pagina met correcte canonieke tag

De melding “Alternatieve pagina met correcte canonieke tag” in GSC betekent dat je de canonieke tag correct heeft ingesteld en dat Google begrijpt welke versie van de pagina moet worden geïndexeerd en weergegeven in de zoekresultaten.

In dit geval hoeft u waarschijnlijk geen actie te ondernemen, aangezien de melding aangeeft dat je de canonieke tag op de juiste manier hebt geïmplementeerd.

De canonieke tag

Het correct implementeren van de canonieke tag op je WordPress website is cruciaal voor een effectieve zoekmachineoptimalisatie (SEO). Het helpt zoekmachines te begrijpen welke versie van je inhoud de voorkeur heeft en voorkomt dat ze meerdere, vergelijkbare pagina’s indexeren. Hier zijn enkele voordelen van het gebruik van de canonieke tag:

1. Voorkomt duplicate content problemen: Door dezelfde inhoud op verschillende URL’s te hebben, kunnen zoekmachines in de war raken over welke versie ze moeten indexeren en rangschikken. Het gebruik van de canonieke tag lost dit probleem op door duidelijk aan te geven welke versie van de pagina als de “hoofd” versie moet worden beschouwd.
2. Bespaart crawl budget: Zoekmachines hebben een beperkt aantal pagina’s dat ze kunnen crawlen op een website. Door gebruik te maken van canonieke tags, kunnen zoekmachines hun tijd efficiënter besteden aan het crawlen van unieke en waardevolle inhoud in plaats van duplicate content.
3. Helpt bij het behouden van linkwaarde: Wanneer meerdere versies van een pagina backlinks van andere websites ontvangen, kan dit de linkwaarde verdelen en de algehele SEO-prestaties van de pagina verminderen. De canonieke tag zorgt ervoor dat alle linkwaarde wordt doorgestuurd naar de voorkeursversie, waardoor de algehele SEO-prestaties van die pagina verbeteren.
4. Verbeterde gebruikerservaring: Het gebruik van de canonieke tag zorgt ervoor dat zoekmachines de juiste versie van een pagina tonen in de zoekresultaten. Dit helpt gebruikers om de meest relevante en up-to-date inhoud te vinden, wat op zijn beurt de gebruikerservaring op je website verbetert.

Hoe canonieke tag implementeren?

Het implementeren van de canonieke tag is eenvoudig en kan worden gedaan door het volgende HTML-element toe te voegen aan de head-sectie van uw webpagina:

<link rel="canonical" href="https://www.voorbeeld.com/voorkeurspagina" />

Zorg ervoor dat je de URL vervangt door de URL van de voorkeursversie van een pagina. Als je meerdere talen of regio’s op een website hebt met bijvoorbeeld WPML, kun je ook hreflang-tags gebruiken in combinatie met de canonieke tag om zoekmachines te helpen de juiste taal- of regioversie van de pagina te tonen. Uiteraard kun je ook de Yoast plugin of de RankMath plugin gebruiken om dit correct in te stellen.

Uitsluiting door noindex tag: wat betekent dit?

De melding “Uitgesloten door tag noindex” die kun je zien in de Google Search Console van je website, het is een informatieve boodschap van Google die vaak ook via e-mail verstuurd wordt naar de eigenaar van de property.

De melding houdt in dat een bepaalde pagina van een website uitgesloten is van indexering door Google. Dit komt door de implementatie van een ‘noindex’ tag, hetzij in de HTML-code van de pagina, hetzij in de HTTP-headers. Het kan ook zijn dat een SEO plugin als RankMath bijvoorbeeld meegeeft dat een pagina niet geïndexeerd moet worden.

Noindex tag Google Search Console

De ‘noindex’ tag fungeert als een instructie voor zoekmachines zoals Google. Deze tag geeft aan dat de pagina in kwestie niet opgenomen moet worden in de zoekresultaten van de zoekmachine. Het toepassen van een ‘noindex’ tag kan erg nuttig zijn voor pagina’s die privé-informatie bevatten of specifiek ontworpen zijn voor bepaalde gebruikersgroepen, en dus niet openbaar getoond moeten worden via zoekmachines.

Waarom uitgesloten door noindex tag?

Er zijn diverse scenario’s waarin de ‘noindex’ tag van pas kan komen. Bijvoorbeeld voor tijdelijke promotiepagina’s die na een bepaalde periode niet meer relevant zijn, of voor interne documenten en informatie die alleen voor medewerkers bestemd zijn. Ook kunnen forums of discussiepagina’s die gevoelige of privé-inhoud kunnen hebben, gebruikmaken van de ‘noindex’ tag om de privacy van gebruikers te beschermen.

Het verwijderen van de noindex tag

Wanneer je merkt dat de “Uitgesloten door tag noindex melding” verschijnt en dit niet jouw bedoeling was, is het noodzakelijk om actie te ondernemen. De ‘noindex’ tag dient verwijderd te worden uit de HTML-code of de HTTP-headers van de desbetreffende pagina. Vaak is dit dus met de Yoast of RankMath plugin.

Na het verwijderen van deze tag, zal Google, tijdens de eerstvolgende crawl, de pagina weer opnieuw indexeren. Hierdoor krijgt de pagina de kans om weer te verschijnen in de zoekresultaten. Eventueel kun je dit proces proberen te versnellen door de pagina handmatig in te dienen in Google Search Console.

Impact noindex tag op SEO

Het is belangrijk om te weten dat een onjuist gebruik van de ‘noindex’ tag je website’s zichtbaarheid in zoekmachines kan beïnvloeden, wat de SEO (zoekmachineoptimalisatie) negatief kan beïnvloeden. Het is dus cruciaal om attent te zijn bij het implementeren van deze tag en zeker te zijn dat het alleen toegepast wordt op pagina’s die u daadwerkelijk wilt uitsluiten van indexering.

De “Uitgesloten door tag noindex melding” in Google Search Console is een belangrijk stukje gratis hulp om te begrijpen welke pagina’s van de website zijn uitgesloten van indexering door Google.

Het correct gebruiken en beheren van de ‘noindex’ tag is belangrijk voor het handhaven van de online zichtbaarheid en privacy van een website of webshop, en zorgvuldigheid is geboden om onbedoelde uitsluiting van belangrijke pagina’s te voorkomen.