Een URL toevoegen aan Google, dan toch?
3
August
Het is één van die vragen die zo vaak gesteld worden, dat ze een SEO’er tot pure wanhoop kunnen drijven. Hoe voeg ik een URL / pagina / website toe aan Google?
Het antwoord erop is eenvoudig. Zo werkt(te) het niet!
Werkte? Inderdaad, want sinds vandaag is daar verandering in gekomen, maar daarover zo meteen meer. Eerst even de 2 huidige methodes opsommen.
Optie 1: spontaan laten spideren
Nadat je een nieuwe pagina online geplaatst hebt, kan je geduldig de zoekmachine spiders hun werk laten doen en je pagina spontaan laten vinden.
Hoe snel ze deze pagina vinden, hangt af van een aantal factoren:
- Autoriteit van je website
- Hoe vaak komt er nieuwe content op je website
- Interne linking
- Externe linking
Heb je bijvoorbeeld een nieuwe website, met geen enkele externe backlink, dan zou je website via deze manier nooit geïndexeerd worden door éénder welke zoekmachine. Geen optie voor een nieuwe website dus.
Gelukkig is dit in de meeste gevallen geen probleem en worden je nieuwe pagina’s spontaan gevonden, door één of andere interne link die gevolgd wordt. Op voorwaarde dat je site architectuur goed in elkaar zit, tenminste.
Wat ook nog wel eens lijkt te helpen, is om je URL te tweeten. Binnen enkele seconden zit je website overladen van de spiders, wat er in bepaalde gevallen toe kan leiden dat je nieuwe content geïndexeerd wordt. Dit is uiteraard geen goede manier om 10-tallen nieuwe pagina’s te laten indexeren, maar meer geschikt voor pakweg een nieuwe blogpost.
Optie 2:XML sitemap uploaden
Een andere optie, voor de minder geduldige mensen onder ons (inclusief ondergetekende), is het uploaden van een XML sitemap in Google (of Bing) Webmaster Tools. Via deze manier kan je aan de zoekmachines laten weten welke nieuwe pagina’s er allemaal te crawlen zijn. Indien deze voldoende en kwalitatieve content bevatten, zullen deze dan ook worden opgenomen in de index van Google of Bing.
Er zijn nog wel een aantal trucjes en best practices als het om XML sitemaps gaat, maar dat houd ik voor in een volgende blogpost.
En wat is er dan nu precies nieuw?
Wel, je kent misschien al de “fetch as googlebot” optie in Google Webmaster Tools. Hiermee kon je de URL van een pagina ingeven, waarna Google je de output toonde, zoals die door zijn (of is het haar?) ogen te zien valt. Vergelijk het met de text-only versie van je gecachede pagina’s.
Google heeft vandaag echter een update aan deze functionaliteit aangebracht. Het is nu namelijk zo dat wanneer je een URL succesvol laat ophalen, je de optie krijg om deze toe te voegen aan de index (en dus mogelijk ook zoekresultaten) van Google. Uiteraard is dit geen garantie, je pagina moet nog steeds aan de nodige voorwaarden voldoen (unieke content bvb.).
In sommige gevallen kan dit echter wel handig zijn. Snel je nieuwe blogpost laten indexeren of een oudere pagina die is aangepast, maar slechts zelden gespiderd wordt opnieuw submitten.. Ik kan alvast wel enkele leuke mogelijkheden bedenken.
Je bent nog een belangrijke manier vergeten: Ping.
Via xml-rpc kan je automatiseren dat bij iedere update Google gewaarschuwd wordt. Meer info: http://www.google.com/help/blogsearch/pinging_API.html
Dit zit (uiteraard) standaard ingebouwd in Fork: http://www.fork-cms.be .
Er zit wel een limiet op het aantal pagina’s dat je kan fetchen (50) en laten indexeren (10).
@Davy: klopt inderdaad. Ik vraag me nog af hoe vaak die teller wordt teruggedraaid.
Bij het laten indexeren was het bij mij eigenlijk onbeperkt (los van de 50 fetches).
Er was wel een limiet op het laten indexeren van “pagina + gelinkte pagina’s”. Daar stond een grens van 10 stuks op.
Het lijkt er dus op dat je met deze functionaliteit de keuze hebt om de spider echt enkel die ene pagina te laten ophalen of ook nog eens doorheen de rest van je website te sturen.
@Bart: goede aanvulling. Ik wist van het bestaan af, maar had het niet beschouwd als een handmatige actie die je kon uitvoeren (zoals de andere voorbeelden uit de post).
But it does the trick en nog een automatisch ook, dus enkel maar aan te moedigen!
Ik kan iedereen het gebruik van XML-sitemaps aanraden. Uit ervaring kan ik vertellen dat Google snel (binnen enkele uren) reageert met crawlen en indexeren na het uploaden van een XML sitemap.
Ideaal als je een nieuwe website hebt opgezet of een bestaande website drastisch hebt aangepakt.
Je webpagina’s worden dan snel doorzocht door Googlebot, zodat nieuwe pagina’s dezelfde dag nog in de index staan.
Of je koppelt gewoon je RSS feed aan google’s feedburner en binnen een paar uur vliegt het verkeer van alle mogelijke zoekmachines je site binnen…
Laat feedburner ook direct naar je aangekoppelde facebook bedrijfspagina het nieuws doorposten en vergeet ook zeker je twitter via deze weg niet te automatiseren…
Deze combo van publicatie verzekerd je in ieder geval van ca. 70 spiderbezoeken binnen de 1e 30 seconden na het publiceren van je post
Suc6
Groet,
Peter Lunk
coffeeshopnews.nl
Leuk geschreven stuk. Ik ga straks maar even wat testen met de nieuwe functionaliteiten binnen het Hulpprogramma voor Webmasters!
Groet Arne
Gewoon veel posten zonder pingen werkt nog het beste.
Uiteraard! Veel en goede content doet wonderen naar crawlen en indexeren toe.
Zoals bij de mensen hé, verandering van spijs doet eten…