hvordan fungerer googlebot?
googlebot fungerer ved at softwaren tilgår sider på internettet og “scanner” deres indhold. måden hvorpå googlebot finder frem til sider at scanne, er primært ved at følge links på de sider, den tilgår.

udover at følge links på sider, der crawles, benytter googlebot også sitemaps til at finde nye sider, der skal crawles. 