Webmarketing Tools

 Abonneer je op de webfeed van deze website.


Deepcrawl Google
Altijd weer een spannend moment voor webmasters...
Google is op dit moment bezig met een 'Deep crawl' van mijn websites (dus ook vele andere websites). Dit is de voorbode van een update in de Google-index. Nieuw gevonden pagina's zullen dan binnen enkele dagen te vinden zijn m.b.v. Google. Google 'crawlt' hierbij alleen de bestaande pagina's en de nieuw gevonden links op de pagina's die tijdens de vorige crawl zijn gevonden. De nieuwste pagina's zullen dus niet altijd worden geindexeerd.

Wat is een Deep-crawl?
Tijdens een Deep-crawl doorloopt de spider van Google alle links naar interne pagina's van een website. Het aantal niveaus diep dat de crawler gaat en de frequenty waarop een pagina opnieuw wordt 'gecrawld' is sterk afhankelijk van het Pagerank-getal van de relevante pagina's. Websites worden doorgaans tegelijkertijd ge-deepcrawld (vergeet dit werkwoord maar :)). De kans is dus groot dat dit op dit moment ook bij jouw website gebeurt.

Als je beschikking hebt tot de log-bestanden van de webserver kun je de spider herkennen aan de volgende 'browser':

Googlebot/2.1+(+http://www.google.com/bot.html)

Gepubliceerd op zaterdag, januari 22, 2005   [0 reacties]


0 Reacties:



Een reactie plaatsen