Wat is Google Bot?

De webcrawlsoftware die door Google wordt gebruikt om webpagina’s voor zijn zoekmachine te ontdekken en te indexeren. Googlebot surft systematisch op het World Wide Web en volgt links tussen pagina’s om nieuwe en bijgewerkte inhoud te vinden. Het analyseert de inhoud, structuur en relaties van pagina’s met andere pagina’s, waardoor Google relevante resultaten kan rangschikken en weergeven in zoekopdrachten. Website-eigenaren kunnen de toegang van Googlebot tot hun sites beheren via robots.txt bestanden en andere richtlijnen. Ook wel bekend als de Google spider of Google web crawler.