WebCrawler
WebCrawler (1994) var den første søgemaskine til at indeksere alt sideindhold — ikke blot titler og URL'er. En teknisk milepæl der lagde grunden for moderne tekstsøgning.
WebCrawler var den første søgemaskine til at indeksere alt sideindhold — ikke blot titler og URL’er — lanceret i april 1994 af Brian Pinkerton som studenterprojekt ved University of Washington. Det var en teknisk milepæl der fundamentalt ændrede hvad søgning betød, og som indirekte skabte grundlaget for keyword stuffing som SEO-taktik.
I april 1994 lancerede Brian Pinkerton — studerende på University of Washington — en søgemaskine der ændrede hvad søgning egentlig betød.
Alle søgemaskiner før WebCrawler, inklusiv de tidlige websøgemaskiner, indexerede primært titler, URL’er og korte metadata.
WebCrawler indexerede al tekst på en webside.
Det lyder simpelt nu. I 1994 var det en tektonisk ændring.
Hvad full-text indexering betød
Før WebCrawler søgte du i hvad siden hed.
Med WebCrawler søgte du i hvad siden indeholdt.
Det betød at en side om “fuglekasse-bygning” ville dukke op, selvom ordet ikke stod i titlen — blot fordi det stod i teksten. Pludselig var søgningen langt mere nyttig.
WebCrawler indexerede en relativt lille del af nettet i 1994 — det var en studenterprojekt med begrænsede serverressourcer. Men princippet var rigtigt.
Vækst og opkøb
WebCrawler voksede hurtigt i popularitet. I 1995 blev den opkøbt af AOL — på det tidspunkt en af de dominerende internetudbydere i USA.
AOL brugte WebCrawler som søgeteknologi bag deres portal. Da AOL og andre portaler tabte terræn til Google, faldt WebCrawler tilsvarende.
WebCrawler har skiftet ejer adskillige gange og eksisterer i 2026 kun som en forældet portal uden reel søgefunktion.
WebCrawler i SEO-historisk kontekst
WebCrawler er et vigtigt punkt i SEO-historien fordi full-text indexering skabte et nyt problem:
Hvis alt sideindhold indexeres, kan man manipulere rangeringen ved at gentage søgeord.
Keyword-stuffing som SEO-taktik var et direkte svar på WebCrawlers og AltaVistas full-text indexering. Du kan ikke fylde et filnavn med søgeord. Men du kan fylde en webside.
Det problem, som WebCrawler og AltaVista skabte, var det problem Google løste med PageRank.
Se AltaVista og de tidlige søgeværktøjer for den fulde sammenhæng.
Sidst opdateret: marts 2026. Denne artikel er en del af Stegger.dk’s SEO-ordbog. → Denne artikel er en del af Oversigt over søgemaskiner.
Andre artikler i samme emne
Ofte stillede spørgsmål
- Hvornår blev WebCrawler lanceret?
- WebCrawler blev lanceret i april 1994 af Brian Pinkerton som student-projekt ved University of Washington. Det var den første offentligt tilgængelige søgemaskine der indexerede fuldt sideindhold.
- Hvad var WebCrawlers tekniske nyskabelse?
- Alle søgemaskiner før WebCrawler — Archie, Gopher's Veronica, de tidlige websøgemaskiner — indexerede kun titler, filnavne eller korte beskrivelser. WebCrawler indexerede al tekst på en webside. Det betød at brugeren kunne søge i det faktiske indhold, ikke blot metadata.
- Hvad skete der med WebCrawler efter opkøbet af AOL?
- WebCrawler voksede hurtigt i popularitet og blev i 1995 opkøbt af AOL — en af de dominerende internetudbydere i USA. AOL brugte WebCrawler som søgeteknologi bag sin portal. Da AOL og andre portaler tabte terræn til Google, faldt WebCrawlers relevans tilsvarende. WebCrawler har skiftet ejer adskillige gange og eksisterer i 2026 kun som forældet portal.
- Hvordan bidrog WebCrawler til SEO's oprindelse?
- Full-text indexering skabte et nyt problem: da alt sideindhold indekseres, kan man manipulere rangeringen ved at gentage søgeord — keyword stuffing. Det var et direkte svar på WebCrawlers og AltaVistas indekseringsmodel. Problemet med ren keyword-matching drev behovet for Googles link-baserede tilgang. WebCrawlers teknologi er således et af grundelementerne i SEO-disciplinens oprindelse.
- Hvorfor er Brian Pinkerton vigtig i søgningens historie?
- Brian Pinkerton byggede WebCrawler som et student-projekt — ikke som kommercielt foretagende. Det illustrerer at mange af internettets grundlæggende teknologier opstod i universitets-kontekster, finansieret af forskning snarere end kapitalinvestering. Pinkerton solgte WebCrawler til AOL i 1995 og forlod siden søgemaskine-feltet.