Prosessen der søkemotorroboter (bots) besøker nettsider for å oppdage og laste ned innhold. Første steg før en side kan vises i søkeresultatene.
Googleboten kravler nettsiden din ved å følge lenker fra side til side, laste ned innholdet og sende det videre til indeksering.