Robots directives — Styring af crawling og indeksering

Robots directives er instruktioner til søgemaskiner om, hvad de må gøre med en bestemt side. Ikke kun om de må indeksere den — men også hvor meget de må vise, om de må gemme en kopi, og om de må følge links videre.

De fleste SEO-professionelle kender noindex og nofollow. Resten af direktiverne er mindst lige så nyttige.

---

De to implementeringsmetoder

Robots directives kan implementeres på to måder:

Meta robots tag (HTML head)

<meta name="robots" content="noindex, nofollow">

Gælder for alle søgemaskiner. For at målrette en specifik crawler bruges crawlerens navn i stedet for “robots”:

<meta name="googlebot" content="noindex">
<meta name="bingbot" content="noarchive">

X-Robots-Tag (HTTP header)

X-Robots-Tag: noindex, nofollow

Effekten er identisk med meta robots-tagget, men kan bruges på ikke-HTML-filer (PDF, billeder, video). Sættes i serverens svar-header.

---

Komplet oversigt over robots directives

index / noindex

<meta name="robots" content="noindex">

noindex — Siden indekseres ikke og vises ikke i søgeresultater. Standard er index.

---

follow / nofollow

<meta name="robots" content="nofollow">

nofollow — Googlebot følger ikke links på siden. Standard er follow. Bemærk: dette gælder for alle links på siden, ikke individuelle links (brug rel="nofollow" på enkelt-links).

---

noarchive

<meta name="robots" content="noarchive">

Google viser ikke et “Cached”-link i søgeresultater og gemmer ikke en kopi af siden. Nyttigt til sider med dynamisk eller tidssensitivt indhold.

---

nosnippet

<meta name="robots" content="nosnippet">

Google viser ingen tekstuddrag (snippet) under sidetitlen i søgeresultater. Billeder fra siden bruges heller ikke som thumbnail i resultater.

---

max-snippet

<meta name="robots" content="max-snippet:150">

Begrænser snippet-længden til det angivne antal tegn. max-snippet:-1 tillader snippet af ubegrænset længde (standard-adfærd).

---

max-image-preview

<meta name="robots" content="max-image-preview:large">

Styrer den maksimale størrelse af et billede-preview i søgeresultater. Tre værdier:

• none — intet billedpreview
• standard — standard preview-størrelse
• large — stort preview (anbefalet for artikler med billeder)

---

noimageindex

<meta name="robots" content="noimageindex">

Billeder på siden indekseres ikke i Google Billeder. Nyttigt for sider med licensbelagte billeder.

---

nocache

<meta name="robots" content="nocache">

Ækvivalent med noarchive — Bing og ældre søgemaskiner brugte dette direktiv. Google ignorerer nocache og bruger noarchive.

---

Kombination af direktiver

Direktiverne kan kombineres frit med komma:

<meta name="robots" content="noindex, nofollow">
<meta name="robots" content="max-snippet:200, max-image-preview:large">
<meta name="robots" content="noarchive, noimageindex">

Vigtigt: Modstridende direktiver kombineres ikke forudsigeligt. Sæt ikke index og noindex på samme side.

---

Robots directives vs robots.txt

	Robots directives (meta/header)	Robots.txt
Scope	Side-niveau	URL-mønster/mappe-niveau
Blokerer crawling	Nej	Ja
Blokerer indeksering	Ja (noindex)	Nej
Kræver crawl	Ja — siden skal crawles for at direktivet ses	Nej
Bruges til	Finkornet kontrol af indeks og SERP-visning	Forhindring af crawling

Den kritiske pointe: robots.txt blokerer crawling, men forhindrer ikke indeksering. Meta robots noindex forhindrer indeksering, men kræver at siden crawles. Brug dem aldrig på samme side til modsatrettede formål.

---

Ofte stillede spørgsmål

Kan jeg have to meta robots-tags på samme side? Teknisk set ja, men det frarådes. Google vil konsolidere de mest restriktive direktiver fra alle meta robots-tags på siden.

Gælder X-Robots-Tag på billeder? Ja. Det er faktisk den eneste måde at sætte robots directives på billeder og andre ikke-HTML-ressourcer.

Hvad sker der, hvis robots.txt blokerer crawling og meta robots siger noindex? Google crawler ikke siden og ser aldrig noindex-direktivet. Siden kan stadig indekseres baseret på eksterne links. Dette er en hyppig fejl — se den dedikerede artikel om noindex.

Sidst opdateret: marts 2026. Denne artikel er en del af Stegger.dk’s SEO-ordbog.