U heeft een dienstenpagina geschreven, hij staat online, maar in Google is hij nergens te vinden. Ook niet als u letterlijk een zin uit de tekst tussen aanhalingstekens opzoekt. Dat een pagina niet geïndexeerd wordt, heeft in de meeste gevallen een technische oorzaak die u zelf kunt vinden en vaak ook zelf kunt wegnemen.
Deze lijst loopt van de controles die het vaakst iets opleveren naar de zeldzamere gevallen. Werk hem in volgorde af; u bent er meestal binnen de eerste vijf punten uit.
Eerst vaststellen wat er aan de hand is
Twee tests geven u binnen een minuut richting.
- Zoek in Google op site: gevolgd door het volledige adres van uw pagina. Komt er niets, dan staat hij inderdaad niet in de index.
- Gebruik de URL-inspectie in Search Console. Plak het adres en lees wat er staat. Google vertelt daar zelf of hij de pagina heeft bekeken, of hij hem mocht bekijken en waarom hij hem eventueel heeft overgeslagen.
Die tweede stap is onmisbaar en scheelt uren gokwerk. Heeft u nog geen toegang tot Search Console, regel dat dan eerst; hoe dat gaat, leest u in de handleiding voor het koppelen van Search Console.
Let ook op het verschil tussen niet gevonden en niet geïndexeerd. Een pagina die wel is bekeken maar niet opgenomen, is een inhoudelijk oordeel. Een pagina die nooit is bekeken, is een technisch probleem.
De twaalf controles
1. Staat er een noindex-instructie op? Dit is de meest voorkomende oorzaak van allemaal. Kijk in de instellingen van uw SEO-plugin bij de pagina zelf, en controleer of de instelling voor het hele contenttype niet op verbergen staat.
2. Staat de zoekmachine-instelling van WordPress goed? Onder Instellingen en dan Lezen zit een vinkje dat zoekmachines vraagt de site te negeren. Dat vinkje wordt bij het bouwen van een site aangezet en daarna vergeten; wat er dan precies gebeurt, staat in het artikel over dat ene vinkje.
3. Blokkeert robots.txt de pagina? Roep uw domein op met /robots.txt erachter. Staat daar een regel die uw map of adres uitsluit, dan mag Google niet eens kijken.
4. Is de pagina wel gepubliceerd? Klinkt flauw, maar concept, privé en wachten-op-review komen allemaal voor. Controleer ook of de publicatiedatum niet per ongeluk in de toekomst ligt.
5. Staat er een canonieke verwijzing naar een andere pagina? Dan zegt u zelf tegen Google dat een ander adres de echte is. Dit gebeurt vaak ongemerkt bij gedupliceerde pagina’s of bij een verkeerd ingestelde sjabloon.
6. Wordt de pagina doorgestuurd? Roep het adres op en kijk of het in de adresbalk verandert. Een doorverwijzing naar een andere pagina betekent dat deze niet zelfstandig bestaat.
7. Staat de pagina in uw sitemap? Open het sitemapbestand van uw SEO-plugin en zoek het adres op. Ontbreekt het, dan is dat een aanwijzing dat er verderop in de instellingen iets uitstaat.
8. Is de pagina intern gelinkt? Een pagina die vanaf geen enkele andere pagina bereikbaar is, wordt zelden gevonden en nog zeldener belangrijk gevonden. Zet hem in een menu of verwijs er vanuit een verwante pagina naartoe.
9. Kan Google de pagina laden zonder JavaScript? Bij sites die alles via scripts opbouwen, ziet een crawler soms een lege pagina. Bekijk de broncode: staat uw tekst er niet in, dan is dat het probleem.
10. Is de pagina snel genoeg bereikbaar? Een server die er zes seconden over doet, wordt minder vaak bezocht. Zeker bij grote sites bepaalt dat direct hoeveel pagina’s er per bezoek worden opgehaald.
11. Is de inhoud te dun of te veel gelijk aan een andere pagina? Twintig locatiepagina’s die alleen in de plaatsnaam verschillen, worden gezien als één pagina. Google kiest er dan één en negeert de rest.
12. Is de site nieuw? Een nieuw domein heeft vaak enkele weken nodig voordat pagina’s structureel worden opgenomen. Geduld is dan de enige juiste maatregel.
Wat u doet als alles technisch klopt
Blijft de pagina buiten de index terwijl er geen blokkade is, dan meldt Search Console meestal iets in de trant van gecrawld maar momenteel niet geïndexeerd. Dat is geen fout maar een oordeel: de pagina is bekeken en niet de moeite waard bevonden.
Dan helpt techniek niet meer. Wat wel helpt: de pagina inhoudelijk substantiëler maken, hem koppelen aan pagina’s die het wél goed doen, en zorgen dat hij een vraag beantwoordt die anders nergens op uw site staat. Een pagina die alleen bestaat om een zoekwoord af te dekken, wordt tegenwoordig gewoon overgeslagen.
Vraag daarna één keer handmatig om indexering. Meer dan één keer heeft geen effect; het staat in de wachtrij en herhalen zet u niet vooruit.
Twee valkuilen bij het oplossen
De eerste is haast. Na het wegnemen van een blokkade duurt het dagen tot weken voordat de pagina alsnog verschijnt. In die tussentijd nog eens het adres wijzigen of de pagina verplaatsen, zet u weer terug bij nul.
De tweede is het aanmelden van alles tegelijk. Wie honderden adressen handmatig indient, krijgt daar geen voorrang mee en verliest het overzicht over wat wel en niet gelukt is. Kies de vijf pagina’s die zakelijk het belangrijkst zijn en volg die.
Een keukenzaak uit Overijssel had een complete nieuwe productlijn online staan die na drie maanden nog nergens verscheen. De oorzaak stond in punt drie van deze lijst: bij de lancering was in robots.txt een regel blijven staan die de hele productmap uitsloot. Twee weken na het weghalen stonden alle pagina’s erin.
Houd het simpel
Voor de meeste sites geldt: zorg dat elke pagina die u belangrijk vindt vanuit het menu of vanuit een andere pagina bereikbaar is, dat er geen blokkade op staat en dat hij in de sitemap voorkomt. Dat is negentig procent van het werk. De rest is inhoud.
Loopt u vast bij punten waar u geen zicht op heeft, zoals verwijzingen in de broncode of blokkades op serverniveau, dan is een technisch onderzoek naar wat crawlers op uw site tegenkomen sneller dan zelf blijven zoeken. Bij WebMaintor loopt zo’n controle standaard mee bij een site die net is opgeleverd of verhuisd.
Uw volgende stap is concreet: plak het adres van de pagina in de URL-inspectie van Search Console en lees wat daar staat. Dat ene scherm vertelt u in welke van de twaalf punten hierboven u moet zijn.
