„Softwarový pavouk“ je bezpilotní program provozovaný vyhledávačem, který surfuje po webu stejně jako vy. Při návštěvě každého webu zaznamenává (ukládá na svůj pevný disk) všechna slova na každém webu a zaznamenává každý odkaz na jiné weby. Potom „klikne“ na odkaz a vypne se čtení, indexování a uložení jiného webu.
Softwarový pavouk často čte a indexuje celý text každého webu, který navštíví, do hlavní databáze vyhledávače, pro který pracuje. Mnoho motorů, jako je AltaVista, začalo v poslední době indexovat pouze určitý počet stránek webu, často celkem asi 500, a poté se zastavilo. Je to zřejmě proto, že se web stal tak velkým, že je nemožné vše indexovat. Kolik stránek bude pavouk indexovat, není zcela předvídatelné. Proto je vhodné konkrétně odeslat každou důležitou stránku na vašem webu, kterou chcete indexovat, například ty, které obsahují důležitá klíčová slova.
Softwarový pavouk je jako elektronický knihovník, který vystřihne obsah každé knihy v každé knihovně na světě, roztřídí je do obrovského hlavního rejstříku a poté vytvoří elektronickou bibliografii, která ukládá informace o tom, které texty odkazují na jiné texty. Někteří softwaroví pavouci mohou indexovat více než milion dokumentů denně! Je důležité si uvědomit, že pavouci vyhledávačů dělají jen dvě věci:
- Indexují text.
- Sledují odkazy.
Na nedávné konferenci Strategie vyhledávacích strategií pořádané serverem SearchEngineWatch.com jeden z hostujících řečníků, Shari Thurow z Grantastic Designs, uvedl tento bod a několikrát ho zopakoval, aby ilustroval jeho význam: „Vyhledávače indexují text a sledují odkazy. Indexují text a sledují odkazy. To je vše, co dělají. “
Její myšlenka je důležitá a ústřední pro pochopení podstaty pavouků vyhledávačů. Pokud je text vašeho webu obsažen v grafice, nemohou jej vyhledávače indexovat. Pokud jsou všechna vaše důležitá klíčová slova, pro která doufáte, že získáte hodnocení, obsažena v grafice, nikoli v textu HTML, váš web hodnocení nedosáhne. Pamatujte, že vyhledávače neindexují obrázky ani nečtou obrázky, indexují text a sledují odkazy. To je vše. Pokud na viditelné stránce nemáte žádný text, žádné množství klíčových slov v metaznačce klíčových slov vám nepomůže dosáhnout hodnocení.
To, co pavouk uvidí na vašem webu, určí, jak bude váš web uveden v jeho indexu. Vyhledávače určují relevanci webu na základě komplexního systému hodnocení, který se snaží udržet v tajnosti. Tento systém přidává nebo odečítá body podle toho, kolikrát se klíčové slovo objevilo na stránce, kde se na stránce objevilo a kolik celkových slov bylo nalezeno. Stránky, které dosáhnou nejvíce bodů, jsou vráceny v horní části výsledků hledání; zbytek je pohřben na dně, nikdy ho nenajdete.
Když softwarový pavouk navštíví váš web, zaznamená všechny odkazy na vaší stránce na jiné weby. V rozsáhlé databázi kteréhokoli vyhledávače jsou zaznamenány všechny odkazy mezi weby. Vyhledávač ví, na které stránky jste odkazovali, a co je důležitější, na které stránky odkazují. Mnoho vyhledávačů dokonce použije počet odkazů na váš web jako známku popularity a poté na základě tohoto faktoru zvýší vaše hodnocení.
Copyright © 2000 iProspect.com
