Googlebot er Googles webcrawler. Den besøker nettsider, følger lenker, leser sider og sender sidedata til Google. Deretter bruker Google disse dataene til å bygge og oppdatere søkeindeksen sin.

Uten Googlebot kan ikke Google finne siden din. Så siden din kan ikke rangeres i Google Søk.

Hva er Googlebot?

Googlebot er en programvarerobot fra Google. Folk kaller den også en crawler, spider eller bot.

Den beveger seg fra en side til en annen gjennom lenker. Den leser innholdet på hver side. Deretter sender den innholdet til Googles servere. Googlebot sjekker nettsteder over tid. Dette hjelper Google med å legge merke til nye sider, oppdatert innhold eller fjernede sider.

Google bruker denne informasjonen til å bestemme hvilke sider som hører hjemme i Søk.

Typer Googlebot

Google bruker forskjellige robotsøkeprogrammer for forskjellige oppgaver. Googlebot Smartphone ser på sider som en mobilbruker. Google bruker denne robotsøkeprogrammet for mobil først indeksering. Dette betyr at Google ser på mobilversjonen av siden din først.

Googlebot Desktop sjekker sider fra en skrivebordsvisning.

Google har også spesielle robotsøkeprogrammer for bilder, videoer og nyhetsinnhold.

Disse inkluderer:

  • Googlebot bilde
  • Googlebot video
  • Googlebot nyheter

Hver robotsøkeprogram hjelper Google med å forstå en annen innholdstype.

Hvordan fungerer Googlebot?

Googlebot fungerer i noen få enkle trinn.

  1. Den oppdager sider

Googlebot finner sider gjennom lenker. Hvis for eksempel én side lenker til en annen side, kan Googlebot følge den lenken.

Den kan også finne sider gjennom XML nettsidekart. Du kan sende inn et nettsideskart i Google Search Console. Hvis en side ikke har noen lenker og ingen nettsideskartoppføring, kan det hende at Googlebot ikke finner den.

  1. Den gjennomsøker sider

Etter at Googlebot finner en side, besøker den siden. Deretter leser den innholdet, lenkene, bildene, koden og sidestrukturen.

Dette hjelper Google å forstå hva siden dekker.

  1. Den sender data til Google

Googlebot sender sideinformasjon til Googles systemer. Deretter bestemmer Google om siden skal legges inn i søkeindeksen.

Google må gjennomsøke en side før den kan rangeres.

  1. Den følger gjennomsøkingsregler

Nettsideseiere kan veilede Googlebot med en robots.txt fil. Denne filen forteller Googlebot hvilke deler av et nettside den kan gjennomsøke og hvilke deler den bør unngå.

Du kan også bruke en meta robots tag på en side. Denne taggen kan fortelle Google at den ikke skal indeksere den siden.

Så robots.txt kontrollerer gjennomsøkingen. Meta robots kontrollerer indekseringen.

  1. Den håndterer JavaScript

Googlebot kan lese JavaScript innhold. Men JavaScript sider kan ta lengre tid for Googlebot å behandle. Så Google kan bruke lengre tid på å behandle JavaScript innhold enn enkelt HTML innhold.

For SEO, sørg for at hovedinnholdet ditt er lett å se for Googlebot.

Hvorfor Googlebot er viktig for SEO

Googlebot starter SEO prosessen. Før Google kan rangere en side, må Googlebot finne den.

Før Google kan forstå en side, må Googlebot få tilgang til den. Så teknisk SEO hjelper Googlebot med å gjøre jobben sin.

Store nettsider må også administrere gjennomsøkingsbudsjetter. Gjennomsøkingsbudsjett betyr antall sider Googlebot er villig til å gjennomsøke på et nettsted i løpet av en viss tid.

Et sterkt nettsted bør ha:

  • Sider som laster raskt
  • Tydelige interne lenker
  • Et rent XML nettstedskart
  • Ingen ødelagte lenker
  • Ingen gjennomsøkingsblokkeringer på viktige sider
  • Mobilvennlig design
  • Tydelig sidestruktur
  • Nyttig innhold

Når Googlebot kan gjennomsøke nettstedet ditt med letthet, kan Google forstå sidene dine bedre.