En 'programvaruspindel' är ett obemannat program som drivs av en sökmotor som surfar på nätet precis som du skulle. När den besöker varje webbplats registrerar den (sparar på hårddisken) alla orden på varje webbplats och noterar varje länk till andra webbplatser. Det 'klickar' sedan på en länk, och av går det för att läsa, indexera och lagra en annan webbplats.
Programvaruspindeln läser och indexerar ofta hela texten på varje webbplats som den besöker i huvuddatabasen för sökmotorn den arbetar för. Nyligen har många motorer som AltaVista börjat indexera bara upp till ett visst antal sidor på en webbplats, ofta cirka 500 totalt, och sedan stoppa. Tydligen beror det på att webben har blivit så stor att det är omöjligt att indexera allt. Hur många sidor spindeln kommer att indexera är inte helt förutsägbart. Därför är det en bra idé att specifikt skicka in varje viktig sida på din webbplats som du vill indexeras, till exempel de som innehåller viktiga sökord.
En programvaruspindel är som en elektronisk bibliotekarie som skär ut innehållsförteckningen för varje bok i varje bibliotek i världen, sorterar dem i ett gigantiskt huvudindex och sedan bygger en elektronisk bibliografi som lagrar information om vilka texter som refererar till andra texter. Vissa programvaruspindlar kan indexera mer än en miljon dokument om dagen! Det är viktigt att förstå att sökmotors spindlar bara gör två saker:
- De indexerar text.
- De följer länkar.
Vid en nyligen genomförd Search Engine Strategies-konferens på SearchEngineWatch.com gjorde en av gästtalarna, Shari Thurow från Grantastic Designs, denna poäng och upprepade den flera gånger för att illustrera dess betydelse: 'Sökmotorer indexerar text och följer länkar. De indexerar text och de följer länkar. Det är allt de gör. '
Hennes poäng är viktig och central för att förstå typen av sökmotors spindlar. Om texten på din webbplats finns i en grafik kan sökmotorerna inte indexera den. Om alla dina viktiga nyckelord som du hoppas kunna uppnå rankning ingår i grafiken, inte i HTML-texten, kommer din webbplats inte att uppnå rankning. Kom ihåg att sökmotorer inte indexerar bilder eller läser bilder, de indexerar text och följer länkar. Det är allt. Om du inte har någon text på din synliga sida kommer ingen mängd sökord i ditt nyckelordmetatag att hjälpa dig att uppnå rankning.
Vad spindeln ser på din webbplats kommer att avgöra hur din webbplats listas i sitt index. Sökmotorer bestämmer webbplatsens relevans baserat på ett komplext poängsystem som sökmotorerna försöker hålla hemligt. Detta system lägger till eller subtraherar poäng baserat på sådana saker som hur många gånger nyckelordet dök upp på sidan, var på sidan det visades och hur många ord som hittades totalt. De sidor som uppnår flest poäng returneras högst upp i sökresultaten; resten är begravda längst ner, aldrig att hitta.
När en programvaruspindel besöker din webbplats noterar den alla länkar på din sida till andra webbplatser. I alla sökmotors stora databas registreras alla länkar mellan webbplatser. Sökmotorn vet vilka webbplatser du har länkat till, och ännu viktigare, vilka som är länkade till dig. Många motorer använder till och med antalet länkar till din webbplats som en indikation på popularitet och kommer sedan att öka din ranking baserat på denna faktor.
Upphovsrätt © 2000 iProspect.com
