Prosessen der søkemotorroboter (bots) besøker nettsider for å oppdage og laste ned innhold. Det er første steg før en side kan vises i søkeresultatene.
Googleboten kravler nettsiden din ved å følge lenker fra side til side, laste ned innholdet og sende det videre til indeksering.