Hvað er leitarvél kónguló?

Leitarvél köngulær, stundum kölluð crawlers, eru notuð af Internet leitarvélum til að safna upplýsingum um vefsvæði og einstakra vefsíður. Leitarvélar þarf upplýsingar frá öllum stöðum og síður; annars þeir myndu ekki vita hvaða síður til að sýna til að bregðast við a leita fyrirspurn eða við það að hafa forgang.

Leitarvél köngulær skríða í gegnum internetið og búa biðraðir af vefsíðum til að rannsaka frekar. Sem sérstakur Web síðuna fær undir kónguló, kónguló lesa í gegnum alla texta, tengla, meta tags (meta tags eru sérstaklega sniðin lykilorðin sett í vefsíðu á þann hátt sem ætlað fyrir kónguló að finna og nota) og kóða . Using þessar upplýsingar, kónguló veitir upplýsingar til the leita vél. The kónguló safnar þá frekari upplýsingar með því að fylgja tengla á vefsíðu sem gefur það betri safn upplýsinga um þessar síður. Þetta er ástæðan fyrir því að hafa tengla á vefsíðu þinni - og jafnvel betra, öðrum vefsíðum hlekkur til þín -. Er svo gagnlegt að fá vefsíðu þína stofna við leitarvélar

köngulær hafa fjórar helstu stillingar að afla upplýsinga. Ein tegund af kónguló er einungis notað til að búa til biðraðir af vefsíðum til að leita eftir öðrum köngulær. Þetta kónguló, að vinna í "val" ham, er að forgangsraða hvaða síður að fara í gegnum og stöðva til sjá ef eldri útgáfa af síðu hefur þegar verið sótt. Annað háttur er kónguló hannað sérstaklega til að fara yfir síður sem þegar hafa verið skrið með kónguló. Þessi háttur er kallað "aftur umgengni." Sumir leitarvélar eru áhyggjur af því að síða hefur verið of rækilega skríða með öðrum köngulær, svo þeir nota kónguló ham heitir "kurteisi", sem takmarkar skríða overworked síður. Loks "parallelization" leyfir kónguló til að samræma gagnasöfnun viðleitni sína með öðrum leitarvél köngulær sem eru að skríða yfir sömu síðu.