Una 'aranya de programari' és un programa no tripulat operat per un motor de cerca que navega per la web tal com ho faria. A mesura que visita cada lloc web, registra (desa al disc dur) totes les paraules de cada lloc i anota cada enllaç a altres llocs. A continuació, fa 'clic' en un enllaç i es llegeix, indexa i emmagatzema un altre lloc web.
L’aranya de programari sol llegir i indexar tot el text de cada lloc web que visita a la base de dades principal del motor de cerca per al qual treballa. Recentment, molts motors, com ara AltaVista, han començat a indexar només fins a un nombre determinat de pàgines d’un lloc, sovint unes 500 en total, i després s’aturen. Pel que sembla, això es deu al fet que el web s’ha fet tan gran que no és factible indexar-ho tot. No es pot predir quantes pàgines indexarà l'aranya. Per tant, és una bona idea enviar específicament cada pàgina important del vostre lloc que vulgueu indexar, com ara aquelles que continguin paraules clau importants.
Una aranya de programari és com un bibliotecari electrònic que retalla la taula de continguts de cada llibre de totes les biblioteques del món, les classifica en un índex mestre gegantí i, a continuació, crea una bibliografia electrònica que emmagatzema informació sobre els textos que fan referència a altres textos. Algunes aranyes de programari poden indexar més d’un milió de documents al dia. És important entendre que les aranyes dels motors de cerca fan només dues coses:
- Indexen text.
- Segueixen enllaços.
En una conferència recent de SearchEngine Strategies, presentada per SearchEngineWatch.com, un dels ponents convidats, Shari Thurow de Grantastic Designs, va fer aquest punt i ho va repetir diverses vegades per il·lustrar la seva importància: 'Els motors de cerca indexen el text i segueixen els enllaços. Indexen text i segueixen enllaços. Això és tot el que fan.
El seu punt és important i central per entendre la naturalesa de les aranyes dels motors de cerca. Si el text del vostre lloc web es troba dins d'un gràfic, els motors de cerca no el poden indexar. Si totes les vostres paraules clau importants per a les quals voleu assolir la classificació s’inclouen als gràfics, no al text HTML, el vostre lloc no assolirà la classificació. Recordeu que els motors de cerca no indexen imatges ni llegeixen imatges, indexen text i segueixen enllaços. Això és tot. Si no teniu cap text a la pàgina visible, cap quantitat de paraules clau del vostre metetiqueta no us ajudarà a assolir la classificació.
El que veu l'aranya al vostre lloc determinarà com apareix el vostre lloc al seu índex. Els motors de cerca determinen la rellevància d’un lloc basant-se en un sistema de puntuació complex que els motors de cerca intenten mantenir en secret. Aquest sistema suma o resta punts basats en coses com el nombre de vegades que la paraula clau va aparèixer a la pàgina, on va aparèixer a la pàgina i el nombre total de paraules que es van trobar. Les pàgines que aconsegueixen més punts es tornen a la part superior dels resultats de la cerca; la resta estan enterrats a la part inferior, per no trobar-los mai.
Quan un programari aranya visita el vostre lloc, observa els enllaços de la vostra pàgina a altres llocs. A la vasta base de dades de qualsevol motor de cerca es registren tots els enllaços entre llocs. El motor de cerca sap a quins llocs heu enllaçat i, més important, a quins enllaços a vosaltres. Molts motors fins i tot utilitzaran el nombre d’enllaços al vostre lloc com a indicació de popularitat i, a continuació, augmentaran la vostra classificació en funció d’aquest factor.
Copyright © 2000 iProspect.com
