Spindel (internet)

En spindel är ett datorprogram som automatiskt hämtar webbsidor från webben och hittar nya sidor att hämta genom att följa hyperlänkarna i sidorna vidare. Spindlar används exempelvis av sökmotorer som Google för att skapa och hålla uppdaterat sitt index över innehållet på webben. Dessa spindlar söker igenom allt på de webbsidor de hittar till. Om inte domänen i fråga innehåller en special textfil som ger vissa kommandon åt dessa spindlar. Denna fil brukar kallas robots.txt och kan utesluta delar eller hela hemsidor.

Foto av författare
Skribent: Bo Lilja
Uppdaterades:
Så finansieras sidanVi kan komma att erhålla ersättning från annonörer via affiliatelänkar.

Om en spindel inte hittar något kan det bero på att filen robots.txt inte tillåter spindeln att indexera sidan, eller att spindeln inte kan hitta till sidan på grund av brist på hyperlänkar.

Läs mer om:
World Wide Web
Webbanalys

Några bra tips innan du läser vidare

Avanzas logga

Gratis courtage för konton med upp till 50.000 kr

Ny svensk utmanare till Avanza & Nordnet. Erbjuder ISK & 0 kr i courtage på all aktiehandel fram till 2025*

Courtage är avgiften för aktiehandel.

Levler är en ny svensk utmanare till Avanza & Nordnet som just nu erbjuder courtagefri aktiehandel på svenska börsen.

Erbjudandet om courtagefri aktiehandel gäller fram till den 31 mars 2025. Denna kampanj gäller för handel på samtliga listor på Nasdaq Stockholm, med undantag för First North.

Öppna konto snabbt & enkelt med BankID.

Courtagefri aktiehandel utan begränsning på kontoinnehav.

25% rabatt på fondavgiften jämfört med t.ex. Avanza.

ISK och Aktiefondkontot hos Levler omfattas av insättningsgarantin.

Denna artikel omfattas av Creative Commons Erkännande-Dela Lika-licens;

Den använder sig av material från Wikipedia.

Som vi nämnde tidigare...

Avanzas logga

Gratis courtage för konton med upp till 50.000 kr

Ny svensk utmanare till Avanza & Nordnet. Erbjuder ISK & 0 kr i courtage på all aktiehandel fram till 2025

Courtage är avgiften för aktiehandel.

Lämna en kommentar