Een interessante vraag vandaag van een forumlid op de Google Webmaster Help forums
Het forumlid CO_Webm vraagt zichzelf het volgende af: Wijzigingen op webpagina nog niet door Google ontdekt

Waarom indexeert Google mijn website of webpagina niet meer!

Waarom zijn de wijzigingen op mijn site nog niet geïndexeerd door Google?

2 weken geleden heb ik een zin toegevoegd op één van mijn webpagina’s.
Ik wil graag dat deze zin ook door Google wordt gevonden en in de zoekresultaten zichtbaar is.

Hoe kan het zo zijn dat Google de bewuste pagina nog niet opnieuw heeft gecrawled?
Waarom is die zin (wijziging aan de webpagina) nog niet vindbaar in Google?

Toen de website was gemaakt, duurde het maar één dag voordat de hele website in de zoekresultaten van Google te vinden was.
De <title> tag is ook niet geupdate door Google. Hoe kan dat en hoe los ik dit probleem op?

Pagina waar het om gaat: http://www.clausoptiek.be/Contact/Adres-en-route.aspx

Wanneer komt Google mijn website wijzigingen oppikken?

Mijn antwoord is als volgt:

Vreemd om te zien dat Google nog niet is langsgekomen.

De beste manier om ervoor te zorgen dan Google sneller wijzigingen op je webpagina of website ontdekt,
is meer links krijgen en een XML sitemap toevoegen. Zorg voor meer links naar de pagina en Google zal sneller
en vaker wijzigingen ontdekken. Ik zie dat je al een sitemap hebt gemaakt. Mooi!

Krijg meer links

Zorg ervoor dat andere websites meer naar jouw website of webpagina gaan linken.
Hoe meer links je naar je site toekrijgt, des te sneller Google weer langskomt.
En daarbij speelt kwaliteit overigens een grotere rol dan kwantiteit.
Een linkje vanaf CNN.com is bijvoorbeeld een vrij hoge kwaliteits link. De links vanaf belangrijke websites hebben dus
grotere impact. Verhoog de Pagerank van je website. Zorg ervoor dat iedereen weet dat je bestaat!

Daarnaast kun je allerlei acties andere ondernemen om dit probleem tegen te gaan.

Maak een sitemap aan en verstuur het naar Google

Maak een sitemap.xml aan voor je site op www.xml-sitemaps.com en upload deze via de Google webmastertools naar Google:
http://www.google.nl/webmastertools Met een XML sitemap hebben zoekmachines een eenvoudige manier voor handen
om nieuwe en bestaande URL’s te crawlen en de wijzigingsfrequentie in de gaten te houden (hoe vaak wordt een pagina vernieuwd)

Het aanmaken en versturen van een XML sitemap is één van de beste manieren om Google op de hoogte te houden van recente wijzigingen aan webpagina’s of websites. Bijna garantie voor succes blijkt uit mijn ervaring.

Maar onthoud dat Google nooit kan garanderen dat ze de sitemap.xml daadwerkelijk gebruiken bij het crawlingsproces!

Lees ook: Sitemap aanmaken voor website

Sitemaps zijn de beste manier om Google informatie over uw site aan te bieden, zoals hoe vaak pagina’s worden bijgewerkt, de laatste keer dat elke pagina is gewijzigd, en de relatieve prioriteit van pagina’s op uw site. Meer informatie over het maken en verzenden van sitemaps.

Plaats de link naar de betreffende pagina dichterbij de homepage

Googlebot (de zoekrobot die websites doorzoekt) komt het vaakst langs op de homepage van een website,
aangezien die normaal de meeste links bezit. Hoe meer links, hoe vaker het bezoek van Google.
Hoe makkelijker de link voor Googlebot te bereiken is (aantal stappen vanaf de homepage), des te  sneller Google zal langskomen.
Zorg ervoor dat er een link vanaf de homepage wordt geplaatst naar de locatie waar Googlebot vaker langs moet komen.

Update je content regelmatig

Een andere, goedwerkende methode om Googlebot vaker op de website te krijgen, is het bijwerken van je content.
In dit geval blijkt dat dus niet te werken (in deze specifieke situatie), maar probeer ook eens op de gehele website (het hele domein)
regelmatig nieuwe, verse inhoud toe te voegen. Het enige wat je nu hebt toegevoegd is een kleine zin. Prima, maar blijkbaar niet voldoende voor Google. Voeg meer informatie toe. Voor Google een goede reden om sneller en vaker langs te komen.
Ze zijn zo nieuwsgierig naar datgene wat jij te vertellen hebt. Maak je content interessant. Maak het belangrijk.
Is er wel een goede reden voor Googlebot om je pagina opnieuw te crawlen?

Verder: Regelmatig je teksten aanvullen en  bijwerken dus!

Het starten van een blog helpt hier ook goed bij. Vanaf het blog link je dan naar de pagina’s in je website.

Gewoon afwachten tot Google weer langskomt

Hoewel het vervelend is om aan te horen, is het wel zo dat Google uiteindelijk vanzelf weer langskomt. Ooit. Op een dag.
Versnel dit proces door meer links te krijgen, maar rustig afwachten is ook een optie.
Is de link wel technisch bereikbaar voor Googlebot? Wees daar zeker van, indien Google de link niet kan bereiken, zal Google
niet op de pagina kunnen komen. Andere vragen die je jezelf kunt stellen:

- Is er wel voldoende activiteit op deze webpagina of website?
- Linken andere websites wel naar mijn webpagina of website?
- Hoe vaak worden de teksten bijgewerkt? Aangevuld?
- Hoe actief is deze website in social media? Wordt de URL vaak genoemd?
- Is mijn pagina wel goed bereikbaar voor Googlebot (gebruik Fetch as Googlebot in webmastertools)
- Heb ik de richtlijnen voor webmasters overtreden?

Controleer je robots.txt bestand goed

Met dit bestand geef je Google aan welke pagina’s ze wel mogen crawlen en tot welke pagina’s je de crawler geen toegang verleent.
Type nu even het domein van je website in (URL van je website) en voeg er robots.txt aan toe (achteraan). Wat zie je precies staan?
Allow: / staat voor toegang (een groen stoplicht voor Googlebot)
Disallow: / staat voor geen toegang (een rood stoplicht, Google krijgt de instructie om de pagina niet (meer) te crawlen!)

Je webmaster kan helpen bij het oplossen van problemen met robots.txt bestanden.

Zorg voor unieke inhoud op de webpagina’s

Teksten die ergens anders op het web te vinden zijn, zullen niet altijd door Google vindbaar worden gemaakt.
Google heeft een hekel aan dubbele inhoud. Zorg ervoor dat de inhoud op al je pagina’s uniek is en nergens anders
op het hele web (of binnen je eigen site) voorkomt. Zorg voor unieke informatie. Daarnaast, zorg je het best voor voldoende informatie. Er moet natuurlijk wel iets te vinden zijn voor Googlebot.

Handel niet in strijd met de Google richtlijnen

Een veel voorkomende reden dat pagina’s niet langer door Google worden geïndexeerd
is schending van de webmasterrichtlijnen van Google. Dat betekent dat je iets hebt gedaan wat niet is toegestaan
volgens Google’s regels.

Denk bijvoorbeeld aan het kopen van links, het verbergen van webteksten, teksten kopiëren van andere sites (dubbele inhoud),
verborgen links, misleidende tekst, pagina’s zonder unieke content, dubbele inhoud, en zo zijn er nog een heleboel
andere redenen. Maak jezelf bekend met de Google richtlijnen en zorg dat je je daar aan houdt.

Controleer de crawlfouten in Google webmastertools

Als Google al een tijd niet is langsgeweest, kunnen crawlfouten ook een mogelijke oorzaak zijn.
Meld je site aan bij Google webmastertools en verhelp de aanwezige crawlfouten met 301 redirects.
Zorg dat je site geen 404-pagina’s bevat (foutpagina’s). Je hele website moet goed bereikbaar zijn!

Controleer de metatags

Bekijk de metatags van de pagina waar het probleem zich bevindt. Bevat de <meta name=”"> metatag misschien
een noindex of nofollow? Hiermee geef je aan dat Googlebot de pagina niet in de zoekresultaten mag tonen
of de aanwezige links niet mag volgen. Ook hiermee kun je Googlebot per abuis de toegang ontzeggen.

Verbeter je interne linkstructuur

Zorg ervoor dat meerdere pagina’s een link bevatten naar de betreffende probleempagina.
Zowel via het navigatiemenu, als middenin de content. De boel moet goed aan mekaar gelinkt zijn.
De robot volgt die links constant. Jouw taak als webmaster is ervoor zorgen dat de zoekrobot
de link niet over het hoofd kan zien tijdens de crawlprocedure. Maak het zichtbaar.

Dit zijn wat redenen waarbij het mis kan gaan bij het crawlen en indexeren van je website of webpagina’s.
Een aantal belangrijke tips. Loop dit lijstje na en stel vragen als je er niet uitkomt.

Mijn advies aan het forumlid CO_Webm

Verstuur als eerste een XML sitemap naar Google toe (wel eerst even aanmaken).
Zoals ik nu zie, heb je dat al gedaan. Prima. Probeer nu eens een nieuwe sitemap aan te maken en nogmaals te verzenden
via de webmastertools. Proces opnieuw doorlopen.

Plaats een link in de footer van je website naar de betreffende pagina die niet meer door Google wordt bezocht.
Hiermee vergroot je de kans dat Google de link kan vinden (de link sneller tegenkomt).

Zorg ervoor dat meer websites naar je gaan linken. Zorg voor meer verwijzingen naar je website.
Meld je bedrijf ook aan bij online bedrijvengidsen. Plaats daar eventueel een directe verwijzing naar je contact/adres -pagina.

Voeg wat meer informatie toe aan de adrespagina (een alinea volstaat).
Dit is voor Google een extra reden om de pagina te crawlen.

Op dit moment staat er dermate weinig informatie op je pagina: http://www.clausoptiek.be/Contact/Adres-en-route.aspx
- dat Google de pagina misschien niet interessant genoeg vindt. Zorg dat Google een reden heeft om de pagina vaker te crawlen.
Misschien een tekstuele routebeschrijving voor fiets, auto, openbaar vervoer toevoegen? Maak je content interessant!
Of wat meer informatie over de omgeving van de fysieke locatie? Brainstorm: wat is nog meer handig om op deze pagina te plaatsen?

Dit zijn alvast een aantal stappen die je kan nemen om het probleem op te lossen.
Overigens – het starten van een blog is een goede manier om je berichten en updates veel sneller in de lucht te krijgen.
Google komt, vooral op WordPress blogs, vrij snel langs om nieuwe informatie te indexeren (soms zelfs binnen 1 seconde!).

Update

Gelukkig is Google op 3 december 2011 weer langsgekomen om de betreffende webpagina te crawlen en te indexeren.
Het probleem is dus opgelost – zonder voor zover bekend – bepaalde acties te ondernemen.

Succes, als je vragen hebt hoor ik het graag!

Heb je ook een tip voor dit forumlid, plaats dan hieronder een reactie bij.

Zoekmachine Specialist maakt sites van bedrijven beter vindbaar op Google

Veel gestelde vragen

Hoe komt mijn website op Google?
Zorg ervoor dat Google weet dat uw site bestaat. Meld uw website aan bij Google en verstuur een sitemap.
Hier is een artikel met wat tips om uw website op Google te krijgen. Stel vragen via de reactieformulieren als u problemen ondervindt.

Wanneer komt Google weer langs?
Googlebot bezoekt uw website regelmatig. Indien u dit proces wilt versnellen
is het van groot belang dat u uw website of blog vaak aanvult. Nieuwe informatie toevoegen.
Hoe hoger de updatefrequentie, des te sneller Google weer langskomt.

Het aantal links naar uw site speelt ook een belangrijke rol.
Als er veel andere websites naar uw website verwijzen, dan zal
Google denken dat uw site belangrijk en interessant is. De robot komt vervolgens steeds vaker langs
om uw webpagina’s te crawlen.

Gerelateerde berichten:

• Geen gerelateerde berichten gevonden